python制作最美应用的爬虫

安卓最美应用页面爬虫，爬虫很简单，设计的东西到挺多的
文件操作
正则表达式
字符串替换等等

import requests
import re
url = "http://zuimeia.com"
r = requests.get('http://zuimeia.com/community/app/hot/?platform=2')
pattern = re.compile(r'')
urlList = pattern.findall(r.content)

def requestsUrl(url):
 r = requests.get(url)
 title = re.findall(r'"app-title">
(.*?)
',r.content)
 #print title
 category = re.findall(r'(.*?)',r.content)
 #print category

 describe = re.findall(r'
(.*?)
',r.content)
 #print type(describe[0])
 strdescribe = srtReplace(describe[0])
 #print strdescribe

 downloadUrl = re.findall(r'', '
', '
', '
', '
', '
', '
', '
', '','','', '
', '





', '', '', '', '',
     '', '','','', '']
 for eachListReplace in listReplace:
  string = string.replace(str(eachListReplace),'\n')

 string = string.replace('\n\n','')
 return string

def categornFinal(category):
 categoryFinal =''
 for eachCategory in category:
  categoryFinal = categoryFinal+str(eachCategory)+'-->'
 return categoryFinal

def urlReplace(url):
 url = url.replace('&', '&')
 return url

requestsUrl("http://zuimeia.com/community/app/27369/?platform=2")
for eachUrl in urlList:
 eachUrl = url+eachUrl
 content = requestsUrl(eachUrl)
 categoryFinal =''

 title = content[0][0]
 category = categornFinal(content[1])
 strdescribe = content[2]
 downloadUrl = urlReplace(content[3][0])

 with open('c:/wqa.txt', 'a+') as fd:
  fd.write('title:'+title+'\n'+'category:'+category+'\n'+'strdescribe:'+strdescribe+'\n'+'downloadUrl:'+downloadUrl+'\n\n\n-----------------------------------------------------------------------------------------------------------------------------\n\n\n')
声明：本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系[e-mail]核实处理。

相关文章
相关视频



一文了解Python中如何使用query()进行优...


python fabric实现远程操作和部署示例


探究python中open函数的使用


Python实现多线程下载文件的代码实例


python制作最美应用的爬虫




接口与抽象类01


类的composer自动加载机制


composer原理与常用命令03


composer原理与常用命令02




网友评论
文明上网理性发言，请遵守 新闻评论服务协议
我要评论






立即提交



专题推荐


独孤九贱-php全栈开发教程
全栈  170W+
主讲：Peter-Zhu  轻松幽默、简短易学，非常适合PHP学习入门


玉女心经-web前端开发教程
入门  80W+
主讲：灭绝师太  由浅入深、明快简洁，非常适合前端学习入门


天龙八部-实战开发教程
实战  120W+
主讲：西门大官人 思路清晰、严谨规范，适合有一定web编程基础学习