有啥比较好的网络信息采集软件推荐

题主搜出来的这个结果确实比较惨,目前市场上主流的采集软件一个都没搜出来。
主要是因为现在大家都不叫网络信息采集软件,你如果搜网络爬虫软件或者采集器,那么基本上国内的采集软件你都能看到了。现在国内的采集软件都很成熟,你大可以放心试用。

利益相关:我们后羿采集器是一款面向小白用户的智能采集软件,导出数据到本地和数据库没有限制,不要钱不要积分

■网友
我来推荐一下前嗅的ForeSpider数据采集软件,完全是可视化操作,如果有通过可视化采集不到的内容,都可以通过简单几行代码,就可以实现。除了采集数据,还有这个软件内部集成了数据挖掘功能,通过一个采集模板,就可以挖掘全网的内容。在数据采集入库的同时,它和前嗅的ForeAna数据分析系统相连,对数据进行深度的大数据分析。 如果网站过于复杂,反爬虫措施比较多,一般的爬虫软件就用不了了,但是可以用ForeSpider内部自带的爬虫脚本语言系统,简单几行代码就可以采集到高难度的网站。比如国家自然基金会网站、全国企业信息公示系统等,最高难度的网站都没有问题。 最主要的是他采集速度非常快,我之前用笔记本采集的,一天就几百万条,用别的采集软件,用服务器采,一天才100多万条。 所以建议你可以先下载个免费版试试,免费版不限制功能,没有到期时间。用的好了他还有很多高级版本。

■网友
Web Scraping工具专门用于从网站中提取信息。它们也被称为网络收集工具或Web数据提取工具。
推荐5个比较好用的海外网络收集工具1. http://Import.iohttp://Import.io提供了一个构建器,可以通过从特定网页导入数据并将数据导出到CSV来形成你自己的数据集。您可以在几分钟内轻松抓取数千个网页,而无需编写任何代码,并根据你的要求构建1000多个API。
2. http://Webhose.iohttp://Webhose.io通过爬行数千个在线资源,提供对实时和结构化数据的直接访问。Web scraper支持以240多种语言提取Web数据,并以各种格式保存输出数据,包括XML,JSON和RSS。
3. http://Dexi.io(以前称为CloudScrape)CloudScrape支持从任何网站收集数据,无需像Webhose那样下载。它提供了一个基于浏览器的编辑器来设置爬虫并实时提取数据。你可以将收集的数据保存在 Google云端硬盘和http://Box.net 等云平台上,也可以导出为CSV或JSON。
4. ScrapinghubScrapinghub是一个基于云的数据提取工具,可帮助数千名开发人员获取有价值的数据。Scrapinghub使用Crawlera,一种智能代理旋转器,支持绕过机器人对策,轻松抓取巨大或受机器人保护的站点。
5. ParseHubParseHub用于抓取单个和多个网站,支持JavaScript,AJAX,会话,cookie和重定向。该应用程序使用机器学习技术识别 Web上最复杂的文档,并根据所需的数据格式生成输出文件。
你还可以关注我的微信公众号:youdaoyunnet
文章发自:
提取在线数据的9个最佳网页抓取工具 - 运营有道

■网友
识微商情监测系统:
1.关键词/网站定向采集
有些时候一些舆情的多发区往往只集中在某些活跃量比较大的网站,或者只对某个领域有关注需求,并不需要对全网的舆情进行采集。这个时候用户就可以利用舆情采集系统,如识微商情的关键词/网站定向采集功能,将关键词与行业、领域等标签自由组合、灵活设置,或者将需要重点采集的网站一一列举出来,就可以帮助用户进行精准的舆情采集,免于重复相似信息的干扰,从而有针对性的对这类舆情进行管理和处置。
2.全网全媒体采集
在互联网上每天都会产生大量的舆情信息,作为舆情管理工作人员,其实并不能准确的判断哪些渠道就一定是舆情多发的重灾区或者某些渠道就一定不会爆发舆情,因此,为了提高舆情采集工作的全面性,对网络舆情信息进行全网全媒体采集就很关键。借助识微商情户只需通过设置一个简单的订阅主题,就可以随时查看自身所关心的全网新闻、微博和自媒体文章等。


推荐阅读