clericpy / newspaper Goto Github PK

列出所有可能内容源, 写出收录和不收录原因, 放入 readme

功能: 过滤只保留想要的源, 去掉不想要的源

1. 看看使用二进制转16进制, 还是base64来传参
2. 看看怎么建索引性能比较好
3. 使用什么方式来绑定订阅关系, cookie, Session, LocalStorage, 浏览器指纹, 第三方帐号
4. 创建订阅分组, 即 Group 独立命名作为短链, 实际映射到多个内容源

https://annual2019.pycourses.com/

添加 Features 栏目, 带上编辑评语
支持 RSS

考虑是否提供小编 token 使站长以外的人也可以提供评语.
WARNING: 但是如果支持了类似评论的功能, 可能会有 UGC 法务风险

1. 想好是前端实现还是后端实现
2. 目的是重复标题的合并, 添加一个多链接的 UI
3. 对每次 post 的结果合并, 还是对前端显示出来的全部文章一起做合并

http://weekly.pychina.org/issue/index.html

https://weekly.codetengu.com/issues

https://github.com/ClericPy/uniparser

通用请求 downloader 可以用 requests 已有接口 + json 来配置
但是解析页面的需要重新设计
简单的说:
通过编写 json 配置文件, 按照定制 schema 输出结果

目的是修改更简单, 合并 PR 更容易

知乎专栏不更
https://juejin.im/user/57b26118a341310060fa74da/posts?sort=newest

404

https://medium.com/tag/python

timeout spiders(13):
['1. Ned Batchelder', '2. The Mouse Vs. The Python', '3. Julien Danjou', '4. Python Weekly', '5. Awesome Python Newsletter', '6. 稀土掘金', '7. miguelgrinberg', '8. Brett Cannon', '9. Python部落', '10. Hacker News', '11. 编程派', '12. InfoQ', '13. Python之美']

挂代理.............