Skip to content

爬虫脚本,目前支持抓取懂车帝车品牌、车型,汽车图片等; 简书30热搜、简书刷评论;拉勾教育专栏文章;mm131图片;影视资源站视频抓取。

Notifications You must be signed in to change notification settings

liujp2015/crawler

 
 

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

39 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

Crawler

有感而发写的爬虫脚本。欢迎 start 和 提 issues 呀

目录

  • dongchedi 抓取懂车帝下所有汽车品牌、汽车类型、汽车图片。并支持下载。

  • jianshu 抓取简述30日热搜文章数据,存入mysql,用作数据可视化。在特定文章下刷一些评论。

  • lagou 抓取拉勾教育专栏文章&视频(必须是已付费的)

  • mm131 抓取xinggan分类下的所有图片。支持并行下载。

  • movie 从一些资源站搜索并抓取影视的下载连接,部分支持在线观看。目前收录15个资源站。

结果展示

iShot2021-08-07 10.47.48.png

l2Tu6S.jpg

About

爬虫脚本,目前支持抓取懂车帝车品牌、车型,汽车图片等; 简书30热搜、简书刷评论;拉勾教育专栏文章;mm131图片;影视资源站视频抓取。

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages

  • Python 97.8%
  • Shell 2.2%