samelltiger / baidu_qx Goto Github PK

请问运行scrapy crawl city_rank -o city_rank.csv之后出现无法识别scrapy命令是为什么呢？

比如说 北京-上海 之间的流动，会出现

'city_name': '北京',
 'inOrOUt_city': '上海',
 'inOrout': 'move_out',

和

'city_name': '上海',
 'inOrOUt_city': '北京',
 'inOrout': 'move_in',

这种吗？
（按道理这个应该算是重复吧）

作者你好，非常感谢您的分享，百度迁徙新开了一个城内出行强度的页面，这部分可以爬取吗，我没有学过爬虫，但是现在需要这部分的数据，不知道如何下手。

运行scrapy crawl city_rank -o city_rank.csv之后遇到了json的报错，现在还在搜索解决办法，希望大佬可以指点一下

请问我在anaconda prompt中得到的中文不是乱码，但是输出到excel里面后中文就变成乱码了。请问修改一下哪里的encoding可以解决这个问题呢？谢谢！

DEBUG: Scraped from <200 http://huiyan.baidu.com/migration/cityrank.jsonp?dt=city&id=130700&type=move_in&date=20200101>
{'city_name': '张家口市',
'date': '20200101',
'inOrOUt_city': '三亚市',
'inOrout': 'move_in',
'inOrout_city_province_name': '海南省',
'value': 0.02}