wdevin / weibo_spider Goto Github PK

在search_spider 的start_search.py里，对微博网页request后text部分没有微博的内容

您好！在运行search_start.py时，一直连接mysql不成功，出现报错：pymysql.err.OperationalError: (1045, "Access denied for user 'root'@'localhost' (using password: NO)").并且在更换解密方式后仍然未解决，想问问有什么解决方案吗？

您好，想问一下MySQL要怎么处理呢？需要先创建一个名“weibo”的database，然后在里面添加名为“keyword_weibo”的表并增加相关"wb_*"字段吗？

某个小时没搜到结果会继续搜索下一个小时吧？为什么每次大概爬取20个小时就会自动结束任务呢？同时每一行“以上数据提交至数据库成功！”前面都有一行“list index out of range”

最后的报错是：
Traceback (most recent call last):
File "search_start.py", line 114, in
fetch_pages(keyword, hour_all[i][0], hour_all[i][1])
File "search_start.py", line 73, in fetch_pages
if (str(soup.select_one('.card-wrap').select_one('p').text).startswith('抱歉')): # 此次搜索条件的判断，如果没有相关搜索结果！退出...
AttributeError: 'NoneType' object has no attribute 'select_one'
这是什么原因呢?