分享自己写的养眼美图爬虫~

冷笑寒风

前一段时间学习了urllib模块 ，手痒痒写了一个养眼的美图爬虫，主要是爬取美图网站的妹子图，并且摘取标题为图片名称，由于发现网站是由发图日期排序的 所以保存在了以跟新时间命名的文件夹，以备以后长期的定时更新妹子图片 不过这个真的是懒得写了 ，新手分享，寻求鼓励呦~

创建文件夹

import urllib.request
import re
import os
path = os.getcwd()

request = urllib.request.urlopen('http://www.zdt8.com/new/')
req = request.read().decode('utf-8')
q = re.compile ('http://pic1.zdt8.com/p/\d*?-\d*?-\d*?/\w*?.jpg')

f_name = re.compile ('alt=".*?"')
f_name_list =f_name.findall(req)
f_name_list.remove (f_name_list[0])
m = q.findall(req)
big_pic_url = re.compile ('http://www.zdt8.com/meitu/\w*?.html')
all_url = big_pic_url.findall (req)
def fun (urllist,num):
   
   
    w = []
    for url2 in urllist:
        w.append(url2[8:])
        print (w[0][23:33])
        
    print ('第%d张o(*￣▽￣*)o'%(num))
   
        
    return w
   
def get_bigpic(url_list):
    q= []
    a= 1
    for url in url_list:
        
        
        
        request = urllib.request.urlopen(url)
        req1 = request.read().decode('utf-8')
        big_p_url = re.compile ('lazysrc=http://pic1.zdt8.com/p/\d*?-\d*?-\d*?/\w*?.jpg')
        
        url = big_p_url.findall(req1)
        
        
        q.extend(fun(url,a))
        a+=1
   
   
        
   
    return q
   
q1 = get_bigpic(all_url)

os.makedirs (path+'\\'+m[0][28:33])

os.chdir (path+'\\'+m[0][28:33])


def a (url_list,name):
    a=0
    print('*********************正在保存到本地******************************')
    for url in url_list:
        




        response = urllib.request.Request (url)
        rs = urllib.request .urlopen (response)
        f = open(name[a][5:-1]+'.jpg','wb')
        f.write(rs.read())
        f.close()
        a= a+1
    print('保存成功')
      
a(q1,f_name_list)

石小龙

来学习了

石小龙

怎么用啊，小白不清楚，能说的详细点吗

xlxl

hao dongxi

石小龙

哦哦，会用了，直接复制粘贴到PYthon中，保存再运行

n9vakin

23333

panda小正太

不错噢~

xiaobu

可以啊

yjyj9527

学习学习

nku新手

学习学习

小寇子

joahnn07

huifu huifu

五行缺五行

不错不错，支持~

浅笑无痕111

学习学习。。。

gopythoner

6666666666

我与戈多

厉害了，舅服你

我要做爬虫

学习

cq123456a

DDDDDDDDDDDDDDDDDDDDDDDDDDDDDDDD

wltyd

看看

lqq802877

999