text组件显示延迟问题

python黑帽

用tk做了个爬图片的爬虫，本来是下载一张就显示一张图片的链接，但是现在点击开始下载后程序就会无响应，然后等下载完了才把信息一下都显示出来
，进过debug发现是下载函数那里有问题，但是不知道是什么问题，反正没有那句的话显示其他信息就是同步的，贴上代码让各位大神看看

1. import urllib.request
   
2. import re
   
3. import os
   
4. import urllib.parse
   
5. import requests
   
6. from tkinter import *
   
7. os.mkdir('E:/search_picture/')
   
8. root=Tk()
   
9. screen=Text(root,height=4,width=110)
   
10. screen.pack()
    
11. screen.insert(INSERT,"输入查找关键词:")
    
12. screen2=Text(root,height=8,width=110)
    
13. screen2.pack()
    
14. 
    
15. def run():
    
16.         count = 1
    
17.         key=screen.get(1.0,END)
    
18.         key=key.split(':')[1]
    
19. 
    
20.         root_url = 'http://image.baidu.com/search/flip?tn=baiduimage&ie=utf-8&word=%s&pn=0&gsm=500000064' % (
    
21.         str(urllib.parse.quote(key)) + '%e5%a3%81%e7%ba%b8')
    
22. 
    
23.         picture_url = []
    
24.         html = requests.get(root_url).text
    
25.         picture_url = re.findall('"objURL":"(.*?)",', html, re.S)
    
26. 
    
27.         path = 'E:/search_picture/%d.jpg' % count
    
28.         for url in picture_url:
    
29.             try:
    
30.                 #经过debug发现是下面这句代码的问题，但是不知道什么问题，反正没有下面这句显示其他东西就是正常的
    
31.                 urllib.request.urlretrieve(url, path)
    
32.                 screen2.insert(INSERT,'正在下载第%d张:%s\n' % (count, url))
    
33.                 count = count + 1
    
34.                 path = 'E:/search_picture/%d.jpg' % count
    
35.             except:
    
36.                 screen2.insert(INSERT,'当前图片链接不可用\n')
    
37.         screen2.insert(INSERT,'下载完成，%d张图片保存在E盘search_picture文件夹\n'%count)
    
38. 
    
39. bot=Button(root,text='开始下载',command=run)
    
40. bot.pack()
    
41. mainloop()
    
42. 
    

复制代码

感谢SixPy的帮助，问题已解决，贴上代码

1. import urllib.request
   
2. import re
   
3. import os
   
4. import urllib.parse
   
5. import requests
   
6. from tkinter import *
   
7. import threading
   
8. os.mkdir('E:/search_picture/')
   
9. root=Tk()
   
10. screen=Text(root,height=4,width=110)
    
11. screen.pack()
    
12. screen.insert(INSERT,"输入查找关键词:")
    
13. screen2=Text(root,height=8,width=110)
    
14. screen2.pack()
    
15. def down(urls):
    
16.     count = 1
    
17.     for url in urls:
    
18.         try:
    
19.             path = 'E:/search_picture/%d.jpg' % count
    
20.             urllib.request.urlretrieve(url,path)
    
21.             screen2.insert(INSERT,"正在下载第%d张：%s\n"%(count,url))
    
22.             count = count+1
    
23.         except:
    
24.             screen2.insert(INSERT,"当前图片链接不可用\n")
    
25. def run():
    
26.         count = 1
    
27.         key=screen.get(1.0,END)
    
28.         key=key.split(':')[1]
    
29. 
    
30.         root_url = 'http://image.baidu.com/search/flip?tn=baiduimage&ie=utf-8&word=%s&pn=0&gsm=500000064' % (
    
31.         str(urllib.parse.quote(key)) + '%e5%a3%81%e7%ba%b8')
    
32. 
    
33.         picture_url = []
    
34.         html = requests.get(root_url).text
    
35.         picture_url = re.findall('"objURL":"(.*?)",', html, re.S)
    
36. 
    
37.         p = threading.Thread(target=down,args=(picture_url,))
    
38.         p.start()
    
39. 
    
40. bot=Button(root,text='开始下载',command=run)
    
41. bot.pack()
    
42. mainloop()

复制代码

SixPy

改为非阻塞的多线程下载

把下载功能用一个线程来完成

python黑帽

SixPy 发表于 2016-7-20 09:53
改为非阻塞的多线程下载

把下载功能用一个线程来完成

额。。不是很理解，不过先自己鼓捣一下

python黑帽

SixPy 发表于 2016-7-20 09:53
改为非阻塞的多线程下载

把下载功能用一个线程来完成

按照你的建议（其实不是很理解）改了一下代码变成这样，还是不行，你的做法具体应该怎么搞？可否详细说明？

python黑帽

SixPy 发表于 2016-7-20 09:53
改为非阻塞的多线程下载

把下载功能用一个线程来完成

这是代码http://paste.ubuntu.com/20259243/

轻描淡写’

SixPy

python黑帽 发表于 2016-7-21 10:07
这是代码http://paste.ubuntu.com/20259243/

把 down() 放到线程中执行，并插入文本到 text
注意用 lock

python黑帽

SixPy 发表于 2016-7-21 12:36
把 down() 放到线程中执行，并插入文本到 text
注意用 lock

感谢，问题已解决。只是仍然不明白为什么放在线程里面就可以解决延迟，不都是等图片下载完后才进行插入文本么，为什么会出现延迟现象呢？

SixPy

python黑帽 发表于 2016-7-21 16:36
感谢，问题已解决。只是仍然不明白为什么放在线程里面就可以解决延迟，不都是等图片下载完后才进行插入文 ...

解决了就把代码贴出来啊~

urllib 是阻塞式IO，当前 进程 会一直等它下载完成才恢复执行。所有你看到文本都是在完成后同时显示出来。
把每张图片用一个线程来下载，就不要等那么久了~

python黑帽

SixPy 发表于 2016-7-21 16:46
解决了就把代码贴出来啊~

urllib 是阻塞式IO，当前 进程 会一直等它下载完成才恢复执行。所有你看到文 ...

代码已贴，感谢解答

SixPy

多线程下载图片，以及 界面互动~
http://bbs.fishc.com/thread-74052-1-1.html
(出处: 鱼C论坛)

keda_zz

支持，不错的爬虫脚本，都可以使用，赞！