个人中心
gpt4 book ai didi

Python实现批量检测HTTP服务的状态

转载 作者：qq735679552 更新时间：2022-09-27 22:32:09 25 4
gpt4 key购买 nike

CFSDN坚持开源创造价值，我们致力于搭建一个资源共享平台，让每一个IT人在这里找到属于你的精彩世界.

这篇CFSDN的博客文章Python实现批量检测HTTP服务的状态由作者收集整理，如果你对这篇文章有兴趣，记得点赞哟.

用Python实现批量测试一组url的可用性（可以包括HTTP状态、响应时间等）并统计出现不可用情况的次数和频率等.

类似的，这样的脚本可以判断某个服务的可用性，以及在众多的服务提供者中选择最优的.

需求以及脚本实现的功能如下:

  1. 默认情况下，执行脚本会检测一组url的可用性。
  2. 如果可用，返回从脚本所在的机器到HTTP服务器所消耗的时间和内容等信息。
  3. 如果url不可用，则记录并提示用户，并显示不可用发生的时间。
  4. 默认情况下，允许最大的错误次数是200，数目可以自定义，如果达到允许的最大错误次数，则在输出信息的最后，根据每一个url做出错误统计。
  5. 如果用户手动停止脚本，则需要在输出信息的最后，根据每一个url做出错误统计。

脚本中涉及的一些技巧:

  1. 使用gevent并发处理多个HTTP请求，多个请求之间无须等待响应（gevent还有很多使用技巧，可再自行学习）；
  2. 使用signal模块捕获信号，如果捕获到则处理并退出，避免主进程接收到KeyboardInterrupt直接退出但无法处理的问题；
  3. 注意留意脚本中关于统计次数方面的小技巧；

脚本运行效果图（ 如果图片看不清楚，请选择“在新标签页中打开图片” ）如下:

Python实现批量检测HTTP服务的状态

脚本如下:

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
#!/usr/bin/python
# encoding: utf-8
# -*- coding: utf8 -*-
"""
Created by PyCharm.
File:    LinuxBashShellScriptForOps:testNoHttpResponseException,testHttpHostAvailability.py
User:    Guodong
Create Date:  2016/10/26
Create Time:  12:09
 
Function:
  test Http Host Availability
 
Some helpful message:
  For CentOS: yum -y install python-devel python-pip; pip install gevent
  For Ubuntu: apt-get -y install python-dev python-pip; pip install gevent
  For Windows: pip install gevent
  """
import signal
import time
import sys
# execute some operations concurrently using python
from gevent import monkey
 
monkey.patch_all()
import gevent
import urllib2
 
hosts = [ 'https://webpush.wx2.qq.com/cgi-bin/mmwebwx-bin/synccheck' ,
    'https://webpush.wx.qq.com/cgi-bin/mmwebwx-bin/synccheck' , ]
 
errorStopCounts = 200
 
quit_flag = False
statistics = dict ()
 
 
def changeQuit_flag(signum, frame):
  del signum, frame
  global quit_flag
  quit_flag = True
  print "Canceled task on their own by the user."
 
 
def testNoHttpResponseException(url):
  tryFlag = True
  global quit_flag
  errorCounts = 0
  tryCounts = 0
  global statistics
  globalStartTime = time.time()
  while tryFlag:
   if not quit_flag:
    tryCounts + = 1
    print ( 'GET: %s' % url)
    try :
     startTime = time.time()
     resp = urllib2.urlopen(url) # using module 'request' will be better, request will return header info..
     endTime = time.time()
     data = resp.read()
     responseTime = endTime - startTime
     print '%d bytes received from %s. response time is: %s' % ( len (data), url, responseTime)
     print "data received from %s at %d try is: %s" % (url, tryCounts, data)
     gevent.sleep( 2 )
    except urllib2.HTTPError as e:
     errorCounts + = 1
     statistics[url] = errorCounts
     currentTime = time.strftime( '%Y-%m-%d %H:%M:%S' , time.localtime())
     print "HTTPError occurred, %s, and this is %d times(total) occurs on %s at %s." % (
      e, statistics[url], url, currentTime)
 
     if errorCounts > = errorStopCounts:
      globalEndTime = time.time()
      tryFlag = False
   else :
    globalEndTime = time.time()
    break
 
  for url in statistics:
   print "Total error counts is %d on %s" % (statistics[url], url)
   hosts.remove(url)
  for url in hosts:
   print "Total error counts is 0 on %s" % url
  globalUsedTime = globalEndTime - globalStartTime
  print "Total time use is %s" % globalUsedTime
  sys.exit( 0 )
 
 
try :
  # Even if the user cancelled the task,
  # it also can statistics the number of errors and the consumption of time for each host.
  signal.signal(signal.SIGINT, changeQuit_flag)
 
  gevent.joinall([gevent.spawn(testNoHttpResponseException, host) for host in hosts])
except KeyboardInterrupt:
  # Note: this line can NOT be reached, because signal has been captured!
  print "Canceled task on their own by the user."
  sys.exit( 0 )

  。

最后此篇关于Python实现批量检测HTTP服务的状态的文章就讲到这里了,如果你想了解更多关于Python实现批量检测HTTP服务的状态的内容请搜索CFSDN的文章或继续浏览相关文章，希望大家以后支持我的博客！ 。

25 4 0
文章推荐： Python中断言Assertion的一些改进方案
文章推荐： 利用Python实现颜色色值转换的小工具
文章推荐： python解决网站的反爬虫策略总结
文章推荐： Python控制多进程与多线程并发数总结
qq735679552
个人简介

我是一名优秀的程序员,十分优秀！

滴滴打车优惠券免费领取
滴滴打车优惠券
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com