Skip to content

Latest commit

 

History

History
48 lines (43 loc) · 2.14 KB

README.md

File metadata and controls

48 lines (43 loc) · 2.14 KB

crawl_web_info

#一:答题王辅助:

主要功能:知乎答题王等答题游戏的基本辅助原理实现,非全自动,正确率不保证100%

#二:scrapy_bqb:

主要功能:scrapy框架入门级应用,使用该框架爬取表情党网的表情包数据并下# 载到本地

#三:微信跳一跳辅助:

主要功能:半自动实现微信跳一跳

注意:需要提前安装adb驱动,并且打开手机usb调试模式

#四:爬取mzitu

主要功能:爬取mzitu网站的图片并保存到本地

#五:auto_12306:

主要功能:突破12306反爬机制,爬取车票信息

#六:爬取电影天堂链接:

主要功能:爬取电影天堂的资源链接并保存到本地文件以及保存# 到数据库中,也可以调用迅雷实现自动下载

#七:爬取知乎信息:

主要功能:模拟浏览器请求知乎并爬取知乎粉丝信息,然后保存到本地文件

#八:爬取百度图片:

主要功能:分页打包百度图片到并保存到本地

#九:爬取淘宝商品信息:

主要功能:分页获取淘宝的商品信息写入Excel表格中并且入库,最后使用可视化# 工具展示出来

#十:爬取网易云音乐评论:

主要功能:爬取音乐《我们》的评论并展示

#十一:爬取斗图啦网站图片

主要功能:爬取斗图啦网站的表情包

#十二:爬取Bing壁纸

主要功能:爬取Bing的每日壁纸并且设置为自己电脑的桌面壁纸(Ubuntu下使用)

#十三:获取IT之家新闻: #十四:下载知乎视频资源

主要功能:下载知乎中的视频资源

#十五:爬取电影评论写入Excel

主要功能:爬取指定电影的评论并且写入Excel表格

#十六:爬取微信公众号文章

主要功能:通过自己的公众号获取指定的公众号的文章

#十七:爬取携程信息

主要功能:爬取携程酒店信息

#十八:爬取QQ空间说说

主要功能:爬取指定好友的说说信息

#十九:python导入导出数据库数据

主要功能:python实现mysql和excel文件间数据交互

#二十:获取拉勾网数据并分析

主要功能:使用Python获取拉勾网招聘信息并分析展示