1、日志采集工具flume,这款软件免费,能够在系统里面采集用户的行为数据比如用户的浏览行为、用户的关注行为、用户的购买行为等数据。这款软件不仅仅采集小数据还能采集大数据,缺点就是这款软件bug还在完善。2、分布式流数据采集软件Kafka,这款软件可以采集实时数据,安装学习和使用都非常简单上述缺点是:如果你不是软件、大数据方面的专业人员会有点麻烦。
回复除特别注明原创外,本站所有文章或图片均不是物联卡官网原创,如侵犯您的利益或版权,请联系我们将立即处理;本文地址https://blog.21863.cn/wulianka/ymyncjrjxtlmsjdgjbydhzbyqdnz.html
1、日志采集工具flume,这款软件免费,能够在系统里面采集用户的行为数据比如用户的浏览行为、用户的关注行为、用户的购买行为等数据。这款软件不仅仅采集小数据还能采集大数据,缺点就是这款软件bug还在完善。
2、分布式流数据采集软件Kafka,这款软件可以采集实时数据,安装学习和使用都非常简单
上述缺点是:如果你不是软件、大数据方面的专业人员会有点麻烦。
版权按归芝斯士回厂下答网站或原权作者所有
描述的不够具体,那个软件里的数据,什么结构的。不同情况可能用的都不一样。
首先使用抓包工具看一下app的协议有没有加密,如果没有加密就能采集。抓包工具网上搜搜就有,采集数据的话,使用的是前嗅的ForeSpider数据采集软件,网上也有很多的教程。操作简单,有免费版,你可以尝试一下。
现有采集软件很多,建议要明确你的需求,各家采集软件的侧重不同。可分为两类:重点采集论坛新闻的通用型的采集器第一种会便宜一些,第二种会贵一些。价格区间在100至1000左右。除非是企业用,可能价格会更高。免费的也有,但功能会有缺失,或者不完善,还是看你的需求,是否可以满足。个人建议:选择适合你自己的付费采集器,因为采集器最重要的是升级和采集规则配置的支持,没有服务是很痛苦的。如果你懂技术,推荐soukey采摘,这是唯一一款开源的采集器,功能已经很完善了。不过还是有不方便的地方,好像最近也没有最新的版本。推荐几款:网络矿工 操作简单,性价比好,采集能力较强火车头 操作略微复杂,功能完善,采集能力较强网络神采 老款软件,但现在好像不如以前了三人行 狂人
据我了解 kettle 作为抽数据工具,是开源的Java编写的ETL工具,可以在windows linux unix系统运行,简单易用,功能强大且稳定,免费开源可视化。
当然有!但你要便宜点或不要钱=想得美.
软件要什么样的都有,但是钱不够的话质量和售后不好保证呀。
就好像买个救生衣,拼多多的,你带去远洋船上头备用。
剩下的你自己拿捏。
转载或者引用点本文内机节容请重即注明来源于芝士回答
Kettle是一款国外开源的ETL工具,纯java编写,可以在Windows、Linux、Unix上运行,数据抽取高效稳定
这一般都是定制的,你连被采集的软件和需要采集的数据在哪里都没说,鬼知道有没有这样的软件。