跳至主要内容

python 之 Thread(线程)

http://python101.pythonlibrary.org/chapter21_thread.html
https://www.tutorialspoint.com/python3/python_multithreading.htm

  1. # Python 3 version
  2.  
  3. import os
  4. import urllib.request
  5.  
  6. from threading import Thread
  7.  
  8. class DownloadThread(Thread):
  9.     """
  10.    A threading example that can download a file
  11.    """
  12.  
  13.     def __init__(self, url, name):
  14.         """Initialize the thread"""
  15.         Thread.__init__(self)
  16.         self.name = name
  17.         self.url = url
  18.  
  19.     def run(self):
  20.         """Run the thread"""
  21.         handle = urllib.request.urlopen(self.url)
  22.         fname = os.path.basename(self.url)
  23.         with open(fname, "wb") as f_handler:
  24.             while True:
  25.                 chunk = handle.read(1024)
  26.                 if not chunk:
  27.                     break
  28.                 f_handler.write(chunk)
  29.         msg = "%s has finished downloading %s!" % (self.name,
  30.                                                    self.url)
  31.         print(msg)
  32.  
  33. def main(urls):
  34.     """
  35.    Run the program
  36.    """
  37.     for item, url in enumerate(urls):
  38.         name = "Thread %s" % (item+1)
  39.         thread = DownloadThread(url, name)
  40.         thread.start()
  41.  
  42. if __name__ == "__main__":
  43.     urls = ["http://www.irs.gov/pub/irs-pdf/f1040.pdf",
  44.             "http://www.irs.gov/pub/irs-pdf/f1040a.pdf",
  45.             "http://www.irs.gov/pub/irs-pdf/f1040ez.pdf",
  46.             "http://www.irs.gov/pub/irs-pdf/f1040es.pdf",
  47.             "http://www.irs.gov/pub/irs-pdf/f1040sb.pdf"]
  48.     main(urls)
  49. -------------------------------------------------------------
  50. import os
  51. import threading
  52. import urllib.request
  53.  
  54. from queue import Queue
  55.  
  56. class Downloader(threading.Thread):
  57.     """Threaded File Downloader"""
  58.  
  59.     def __init__(self, queue):
  60.         """Initialize the thread"""
  61.         threading.Thread.__init__(self)
  62.         self.queue = queue
  63.  
  64.     def run(self):
  65.         """Run the thread"""
  66.         while True:
  67.             # gets the url from the queue
  68.             url = self.queue.get()
  69.  
  70.             # download the file
  71.             self.download_file(url)
  72.  
  73.             # send a signal to the queue that the job is done
  74.             self.queue.task_done()
  75.  
  76.     def download_file(self, url):
  77.         """Download the file"""
  78.         handle = urllib.request.urlopen(url)
  79.         fname = os.path.basename(url)
  80.         with open(fname, "wb") as f:
  81.             while True:
  82.                 chunk = handle.read(1024)
  83.                 if not chunkbreak
  84.                 f.write(chunk)
  85.  
  86. def main(urls):
  87.     """
  88.    Run the program
  89.    """
  90.     queue = Queue()
  91.  
  92.     # create a thread pool and give them a queue
  93.     for i in range(5):
  94.         t = Downloader(queue)
  95.         t.setDaemon(True)
  96.         t.start()
  97.  
  98.     # give the queue some data
  99.     for url in urls:
  100.         queue.put(url)
  101.  
  102.     # wait for the queue to finish
  103.     queue.join()
  104.  
  105. if __name__ == "__main__":
  106.     urls = ["http://www.irs.gov/pub/irs-pdf/f1040.pdf",
  107.             "http://www.irs.gov/pub/irs-pdf/f1040a.pdf",
  108.             "http://www.irs.gov/pub/irs-pdf/f1040ez.pdf",
  109.             "http://www.irs.gov/pub/irs-pdf/f1040es.pdf",
  110.             "http://www.irs.gov/pub/irs-pdf/f1040sb.pdf"]
  111.     main(urls)






评论

此博客中的热门博文

学习地址

清华大学计算机系课程攻略 https://github.com/PKUanonym/REKCARC-TSC-UHT 浙江大学课程攻略共享计划 https://github.com/QSCTech/zju-icicles https://home.unicode.org/ 世界上的每个人都应该能够在手机和电脑上使用自己的语言。 http://codecanyon.net   初次看到这个网站,小伙伴们表示都惊呆了。原来代码也可以放在网上卖的?!! 很多coder上传了各种代码,每个代码都明码标价。看了下销售排行,有的19刀的卖了3万多份,额di神啊。可以看到代码的演示效果,真的很漂亮。代码以php、wordpress主题、Javascript、css为主,偏前台。 https://www.lintcode.com/ 算法学习网站,上去每天刷两道算法题,走遍天下都不怕。 https://www.codecademy.com/ 包含在线编程练习和课程视频 https://www.reddit.com/ 包含有趣的编程挑战题,即使不会写,也可以查看他人的解决方法。 https://ideone.com/ 在线编译器,可运行,可查看代码示例。 http://it-ebooks.info/ 大型电子图书馆,可即时免费下载书籍。 刷题 https://github.com/jackfrued/Python-100-Days https://github.com/kenwoodjw/python_interview_question 面试问题 https://github.com/kenwoodjw/python_interview_question https://www.journaldev.com/15490/python-interview-questions#python-interpreter HTTP 身份验证 https://developer.mozilla.org/zh-CN/docs/Web/HTTP/Authentication RESTful 架构详解 https://www.runoob.com/w3cnote/restful-architecture.html https://www.rosettacode.org/wiki/Rosetta_C...

MechanicalSoup

用于自动与网站交互的 Python 库。 MechanicalSoup 自动存储和发送 cookie,跟踪重定向,并且可以跟踪链接和提交表单。 它不执行 JavaScript。 https://github.com/MechanicalSoup/MechanicalSoup https://mechanicalsoup.readthedocs.io/en/stable/index.html https://realpython.com/python-web-scraping-practical-introduction/ pip show Mechanicalsoup 找到模块的安装位置 https://stackoverflow.com/questions/54352162/download-file-with-mechanicalsoup # Install dependencies # pip install requests # pip install BeautifulSoup4 # pip install MechanicalSoup # Import libraries import mechanicalsoup import urllib.request import requests from bs4 import BeautifulSoup import re # Create a browser object that can collect cookies browser = mechanicalsoup.StatefulBrowser() browser.open("https://www.ons.gov.uk/economy/grossdomesticproductgdp/timeseries/l2kq/qna") browser.download_link(link_text=".xls",file="D:/ONS_Data.xls" )

安装和卸载软件(msi\exe)

如何判断一个软件是64位的还是32位的? 情况1、 未安装--右键安装程序查看属性,兼容性,勾选兼容模式查看最低适配是vista的是64位,反之32位, 不太准确 情况2、 已安装--运行软件,64位操作系统打开任务管理器看进程后缀名,带*32就是32位,反之64位 https://www.joci.net/xxbk/126251/ FileMon 和 Regmon 不再可供下载。从Windows 2000 SP4,Windows XP SP2,Windows Server 2003 SP1和Windows Vista开始的Windows版本上,它们已被 Process Monitor 取代 https://adamtheautomator.com/procmon/ Process Monitor 是Windows的高级监视工具,它显示实时文件系统,注册表和进程/线程活动。 它结合了两个旧的Sysinternals实用程序 Filemon 和  Regmon的功能 ,并添加了广泛的增强功能列表,包括丰富的和非破坏性的过滤,全面的事件属性(例如会话ID和用户名),可靠的过程信息,带有集成符号的完整线程堆栈支持每个操作,同时记录到文件等。 它独特的强大功能将使Process Monitor成为您的系统故障排除和恶意软件搜索工具包中的核心实用程序。 https://wikileaks.org/ciav7p1/cms/page_42991626.html HKLM\Software\Microsoft\Cryptography\MachineGuid Machine GUID/Cryptography GUID---该密钥通常用作机器的唯一标识符。它也已用于将两台计算机链接在一起-在某些情况下,计算机GUID是与设备(MP3播放器等)一起传递的。 Machine GUID不是唯一 https://docs.microsoft.com/zh-cn/windows/win32/properties/props-system-identity-uniqueid?redirectedfrom=MSDN UniqueID才是唯一 注册表 是存储系统和应用程序的设置信息 打开注册表的方式很简单:cmd中输入regedit 卸载路径只有一个 已安装32位的程序,如果是系统是32位...