240 发简信
IP属地:上海
  • 你好,请问一下,那个游记为了提高加载速度,会分步加载,比如找到一个游记,向下滑动,快到底部的时候会通过js再获取下面的数据,我发现每个游记会这样请求好几次,发现请求的链接有一个随机数参数(我可能不理解其中的规则),一直解决不了。导致现在只能爬取到一半的的游记信息。请问你爬取页面的时候遇到过这种问题吗???

    马蜂窝台湾全网游记爬取

    一个同学要做毕业设计,需要马蜂窝网上关于台湾省的全部点评游记,正好很久没写这种小爬虫了,来练练手。马蜂窝的游记可以在两个地方找到,一个是直接在首页上:http://www.m...