lejvn Goto Github PK

apikit

APIKit：Discovery, Scan and Audit APIs Toolkit All In One.

baidu-music-spider

百度mp3全站爬虫

baiduyunspider

百度云网盘搜索引擎，包含爬虫 & 网站

bilibili-user

🍥 Bilibili 用户爬虫

chatbot-ui

An open source ChatGPT UI.

chatgpt-for-translation

Use Python and ChatGPT for translation. 利用Python和ChatGPT完成翻译。

chatgpt-web

用 Express 和 Vue3 搭建的 ChatGPT 演示网页

chatgpt_academic

科研工作专用ChatGPT拓展，特别优化学术Paper润色体验，支持自定义快捷按钮，支持自定义函数插件，支持markdown代码块表格显示，Tex公式双显示，新增Python/C++项目剖析/自译解功能，PDF/LaTex论文翻译/总结功能，兼容ChatGLM等本地模型

chatpaper

Use ChatGPT to summarize the arXiv papers. 全流程加速科研，利用chatgpt进行论文总结+润色+审稿+审稿回复

cnkispider

**知网爬虫

distribute_crawler

使用scrapy,redis, mongodb,graphite实现的一个分布式网络爬虫,底层存储mongodb集群,分布式使用redis实现,爬虫状态显示使用graphite实现

doubanspider

豆瓣读书的爬虫

findtrip

机票爬虫（去哪儿和携程网）。flight tickets multiple webspider.(scrapy + selenium + phantomjs + mongodb)

heapdump_tool

heapdump敏感信息查询工具，例如查找 spring heapdump中的密码明文，AK,SK等

js-forward

前端参数加密渗透测试通用解决方案

lianjiaspider

链家爬虫

media-source-extract

MediaSource 视频提取教程

music-163

爬取网易云音乐所有歌曲的评论数

n_m3u8dl-cli

[.NET] m3u8 downloader 开源的命令行m3u8/HLS/dash下载器，支持普通AES-128-CBC解密，多线程，自定义请求头等. 支持简体中文,繁体中文和英文. English Supported.

proxy_pool

Python爬虫代理IP池(proxy pool)

qq-groups-spider

QQ Groups Spider（QQ 群爬虫）

qqspider

QQ空间爬虫（日志、说说、个人信息）

scrapy_jingdong

用scrapy写的京东爬虫

sinaspider

新浪微博爬虫（Scrapy、Redis）

spider

社交数据爬虫

spider_hao123

python爬虫 全球网址URL滚动提取

stockholm

一个股票数据（沪深）爬虫和选股策略测试框架

taskmatrix

tbcrawler

淘宝天猫 商品 爬虫

teach-anything

Teach any questions in seconds (by OpenAI)