`
lucklrj
  • 浏览: 24622 次
  • 性别: Icon_minigender_1
  • 来自: 成都
社区版块
存档分类
最新评论

js采集:新浪微博标签采集

阅读更多
第一步加载js
/*加载jq*/
var _doc=document.getElementsByTagName('head')[0];
var script=document.createElement('script');  
script.setAttribute('type','text/javascript');  
script.setAttribute('src','http://lib.sinaapp.com/js/jquery/1.7.2/jquery.min.js');  
_doc.appendChild(script); 


第二步
var tags=[];
var run=1;
function get_tags(){
	console.log("start:"+run);
	console.log("tag num:"+tags.length);
	$.get("http://account.weibo.com/set/aj/tagsuggest?__rnd=1384928386600",{},function(data){
	    for(var i in data['data']){
	        tags.push(data['data'][i]['tag']);
	    }
	    run++;
	    if(run<500){
	    	setTimeout(get_tags,300);
	    }
	},"json");	
}


第3步
console.log(tags.join(","))

新浪的标签大概有700多个,采集下来需要去重
分享到:
评论

相关推荐

    ubk_weiboSpider:新浪微博模拟登陆2015

    ##新浪微博模拟登陆DEMO详细步骤查看src/main/java/com/unbank/weibo/login/WeiboLoginByHttpClinet.java即可###第一步:访问 使得Cookie 里包含login_sid_t ,TC_Ugrow_G0###第二步:获取servertime ,pcid,pubkey...

    Python-爬取新浪微博信息

    **Python-爬取新浪微博信息** 在信息技术领域,网络爬虫是一种自动提取网页数据的程序,它们可以帮助我们收集、分析大量的互联网信息。在这个项目中,我们将专注于使用Python来爬取新浪微博的数据,尤其是账户下的...

    sina-weibo-crawler:新浪微博爬虫

    本项目实为实验室微博数据分析中的数据采集模块(针对), 可以采集指定用户的微博, 关注, 粉丝, 也可以采集指定消息的转发和评论. 网络上已经出现了很多的微博crawler, 如, . 再次发明了轮子, 囧, 记得帮主说过一句话:...

    新浪微博网络爬虫.rar

    【标题】:“新浪微博网络爬虫.rar”提示我们这个压缩包包含了一个用于抓取新浪微博数据的爬虫程序。网络爬虫,又称网页蜘蛛或网络机器人,是自动浏览互联网并抓取信息的一种程序。在社交媒体平台如新浪微博上,爬虫...

    Python-新浪微博指数微指数采集包括综合指数移动端指数PC端指数

    【Python-新浪微博指数微指数采集包括综合指数移动端指数PC端指数】 在当今大数据时代,社交媒体数据分析成为企业、研究者和营销人员关注的重点。新浪微博作为中国最大的社交媒体平台之一,其提供的微指数服务能够...

    基于Python和Selenium的新浪微博数据访问.zip

    Selenium是一个开源的Web自动化测试框架,它可以模拟真实用户的浏览器行为,包括点击、滚动、填写表单等,因此特别适合处理JavaScript渲染的网页内容,如新浪微博。Selenium支持多种浏览器驱动,如ChromeDriver、...

    微博抓取用户ID,可直接以用户身份做操作

    利用这个程式以登录微博并模拟操作,我在这里写了获取微博ID。当然你也可以获取其他东西。感谢使用。该文件主要提供思路

    百度搜索、贴吧、微博等关键词采集-易语言

    标题中的“百度搜索、贴吧、微博等关键词采集-易语言”指的是使用易语言这一编程工具进行数据采集,特别是从百度搜索引擎、百度贴吧以及新浪微博这些热门平台抓取与特定关键词相关的信息。易语言是一种中文编程语言...

    YiiPiN社会化电商分享系统 v1.3.zip

    (增强)后台增加新浪微博、QQ登录验证META设置 (新增)淘宝商品采集增加店铺搜索采集功能,不受API权限限制,并结合好店展示 (增强)后台淘宝客采集增加总成交量限制条件 (增强)后台淘宝客采集增加记录商品...

    小刀娱乐网源码2018版 v4.17.rar

    模板、扫码打赏插件、手机版与电脑版智能管理插件、屏蔽复制与鼠标右键插件、老y文章系统数据迁移至天人工具、OK3W文章系统数据迁移至天人工具、...内容阅读权限插件、QQ登录插件、新浪微博登录插件、微信登录插件等等...

    .net开源的综合开发框架wojilu框架.zip

    支持静态资源(css/js/图片)和动态页面的分离(通过二级域名分离);支持网址无后缀名(或 html 等其他任意后缀名),支持符合 SEO 的良好 url 风格;默认使用依赖注入容器和 AOP 容器,轻松支持二次扩展开发。丰富的缓存...

    我记录网站综合系统 1.9.rar

    我记录网站综合系统集成了“SNS/门户/CMS/论坛/博客/相册/微博/群组/瀑布流/下载/WIKI”等应用程序的互联网产品,为互联网创业提供一站式解决方案。 “我记录”这套软件总共包括 两个部分: 一个.net平台下的...

    响应式图文资料列表系统(带手机)

    可自动采集(高级插件),搜索引擎主动推送(高级插件),定时发布(高级插件),以及安装其他大量免费插件与模板。主要功能介绍:程序前台有首页、列表页、内容页、会员登录、会员注册、会员个人中心、会员积分体系...

    人才招聘系统全新支持APP客户端、微信招聘、互动问答、智能搜索、会员积分、短信、地图找工作、WAP手机频道等

    7、 新增在后台维护新浪微博关注、腾讯微博关注地址。 8、 后台可查询到由手机客户端注册的个人会员。 网软志成人才招聘系统人才网站模板具备的功能: 1、全新支持地图找工作、地图搜索功能,求职者可以搜索...

    网软志成人才招聘系统全新支持个人客户端和企业客户端、全新手机触屏版功能多,界面好、微信招聘、互动问答、智能搜索 会员积分、地图找工作等

    7、新增在后台维护新浪微博关注、腾讯微博关注地址。 8、后台可查询到由手机客户端注册的个人会员。 网软志成人才招聘网站系统具备的功能: 1、全新支持地图找工作、地图搜索功能,求职者可以搜索城市商圈和地标...

    史上最好传智播客就业班.net培训教程60G 不下会后悔

    站内搜索、栏目管理、视频播放(完全模仿优酷视频页面)、焦点图、静态页面生成(新浪、搜狐等大型网站普遍采用的技术)、文章管理、无刷新评论、评论的无刷新分页、敏感词过滤、用户管理、友情链接管理、缓存管理、...

    网软志成人才招聘管理系统支持APP手机客户

    7、 新增在后台维护新浪微博关注、腾讯微博关注地址。 8、 后台可查询到由手机客户端注册的个人会员。 网软志成人才招聘系统人才网站模板具备的功能: 1、全新支持地图找工作、地图搜索功能,求职者可以搜索城市...

Global site tag (gtag.js) - Google Analytics