Skip to content

Latest commit

 

History

20 Commits

Folders and files

NameName
Last commit message
Last commit date
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

spider_works-项目简介

一站式爬取多个平台的数据,可自动清洗整理成需要的格式

业余时间,摸鱼开发,时快时慢见谅

目前支持的平台:

  • 微博 (博文)
  • 知乎 (文章)

即将新增:

  • 微信公众号
  • 雪球
  • 小红书
  • ...

spider_works-example_config.ini 配置说明

项目 参数 说明
weibo cookie 你的cookie
weibo spider_account_list 爬取账号列表
weibo time_sleep 间隔时间 不设置为默认
weibo page_num 爬取页码数
weibo destination 目标

About

一站式爬取多个平台的数据,可自动清洗整理成需要的格式 目前支持的平台:微博 后期新增:微信,知乎,雪球,小红书 等

Resources

Stars

12 stars

Watchers

1 watching

Forks

Releases

Packages

Contributors

Languages