700字范文,内容丰富有趣,生活中的好帮手!
700字范文 > js爬取今日头条头条号的文章

js爬取今日头条头条号的文章

时间:2019-10-04 19:22:01

相关推荐

js爬取今日头条头条号的文章

首先,验证今日头条的接口是否支持jsonp,在接口地址的参数中添加callback=call

/pgc/ma/?page_type=1&count=10&version=2&platform=pc&media_id=52155491628&max_behot_time=0&as=A1A578A48B28B39&cp=584B080BD3899E1&callback=call

访问接口,返回的数据为:call(...)的形式

由此判断接口支持jsonp,那么接下来就好办了,可以使用jsonp访问接口,然后从返回数据中提取出所需要的数据。

js代码:

vartime=0;varas_param;varcp_param;$(function(){varparam=getParam();as_param=param.as;cp_param=param.cp;getWeare();});functiongetWeare(){$.ajax({url:"/pgc/ma/?page_type=1&count=10&version=2&platform=pc&media_id=52155491628&max_behot_time="+time+"&as="+as_param+"&cp="+cp_param+"&callback=tt",type:'get',dataType:'jsonp',jsonp:'tt'});}functiontt(data){vartarray=[];if(data.has_more==1){varadata=data.data;for(vari=0;i<adata.length;i++){vartmap={};vartitle=adata[i].title;varlink=adata[i].source_url;tmap['title']=title;tmap['url']=TT+link;tarray.push(tmap);}}}

上面代码中的getParam方法在《Java爬虫爬取今日头条文章,统计生成图表》这篇文章的源码js中。

以上内容为作者原创,转载请注明出处!

本内容不代表本网观点和政治立场,如有侵犯你的权益请联系我们处理。
网友评论
网友评论仅供其表达个人看法,并不表明网站立场。