使用Python抓取模板之家的CSS模板

作者:hebedich 时间:2022-04-09 18:35:52 

Python版本是2.7.9,在win8上测试成功,就是抓取有点慢,本来想用多线程的,有事就罢了。模板之家的网站上的url参数与页数不匹配,懒得去做分析了,就自己改代码中的url吧。大神勿喷!


#!/usr/bin/env python
# -*- coding: utf-8 -*-
# by ustcwq
# 2015-03-15
 
import urllib,urllib2,os,time
from bs4 import BeautifulSoup
 
start = time.clock()
path = os.getcwd()+u'/模板之家抓取的模板/'
if not os.path.isdir(path):
    os.mkdir(path)
 
url = "http://www.cssmoban.com/cssthemes/index_80.shtml"    # 源网站中的index后面数字怎么编排的?
theme_url ='http://www.cssmoban.com/cssthemes/'
response = urllib2.urlopen(url)
soup = BeautifulSoup(response)
result = soup.select('p[class="title"] a')
print result
 
for item in result:
    link = item['href']
    # down_name = item.text   # 文件名称
    new_url = theme_url+link.split('/')[-1]
    response = urllib2.urlopen(new_url)
    soup = BeautifulSoup(response)
    result = soup.select('.btn a')
    down_url = result[1]['href']    # 文件链接
 
    local = path+time.strftime('%Y%m%d%H%M%S',time.localtime(time.time()))+'.zip'
    urllib.urlretrieve(down_url, local) # 远程保存函数
 
end = time.clock()
print u'模板抓取完成!'
print u'一共用时:',end-start,u'秒'

使用Python抓取模板之家的CSS模板

使用Python抓取模板之家的CSS模板

以上所述就是本文的全部内容了,希望大家能够喜欢。

标签:Python,抓取,模板
0
投稿

猜你喜欢

  • python的pytest框架之命令行参数详解(下)

    2021-04-19 17:23:48
  • Python实战之画哆啦A梦(超详细步骤)

    2021-05-16 14:36:47
  • Vue+Django项目部署详解

    2024-04-30 10:20:16
  • Python 安装 virturalenv 虚拟环境的教程详解

    2021-04-04 18:27:30
  • pytest实现多进程与多线程运行超好用的插件

    2023-03-23 15:56:23
  • Python中新式类与经典类的区别详析

    2022-02-04 05:11:16
  • 如何通过shell脚本自动生成vue文件详解

    2024-05-22 10:28:35
  • 人脸识别具体案例(李智恩)

    2023-05-18 22:32:55
  • asp三天学好ADO对象之第三天

    2008-10-09 12:53:00
  • python根据照片获取地理位置及泄露防御

    2022-03-23 11:16:54
  • Python实现带参数的用户验证功能装饰器示例

    2023-05-15 01:34:05
  • 基于layPage插件实现两种分页方式浅析

    2024-05-28 15:40:53
  • Python pymongo模块用法示例

    2022-05-23 20:00:21
  • Python解析CDD文件的代码详解

    2021-07-04 23:10:19
  • MySQL范围查询优化的场景实例详解

    2024-01-17 01:11:12
  • Python使用Kubernetes API访问集群

    2023-09-23 05:35:31
  • 链接的提示及打开方式

    2008-07-29 13:09:00
  • Python漏洞验证程序Poc利用入门到实战编写

    2022-05-08 00:00:31
  • Python实现获取汉字偏旁部首的方法示例【测试可用】

    2022-10-26 16:42:16
  • Python中的exec、eval使用实例

    2022-07-05 21:01:41
  • asp之家 网络编程 m.aspxhome.com