返回公众号历史文章目录

文章 / 公众号历史文章

【案例分享】AI加持下,数据分析非结构化分析可以这么玩

在去年,笔者曾经给客户订制过知识星球的数据采集工具,今年IMA流行后,陆续有几位网友也来求同款。 『RPA技术模拟人工操作作品』知识星球文件及内容批量采集 最新的一个需求是想类似知识星球文章采集工具那样,可以采集其他网页的内容,当然需求方是金融从业者,他提出的采集网页是雪球网的关注信息瀑布流。 最后

在去年,笔者曾经给客户订制过知识星球的数据采集工具,今年IMA流行后,陆续有几位网友也来求同款。

『RPA技术模拟人工操作作品』知识星球文件及内容批量采集

最新的一个需求是想类似知识星球文章采集工具那样,可以采集其他网页的内容,当然需求方是金融从业者,他提出的采集网页是雪球网的关注信息瀑布流。

公众号文章插图

最后笔者使用了影刀RPA,做了定制的交付,效果还不错。

公众号文章插图

可以按每个作者的切片,将它落地为html和pdf文件,当然也可以markdown格式。

公众号文章插图

在影刀RPA里,可以用交互的方式,让用户可以根据不同场景需求,设置参数,如翻页数量、延时,下载文件夹等,体验还是很不错。

公众号文章插图

本篇需求看似简单,真正实现起来,过程很多坑洼,互联网大厂的数据搬运,都没有容易的事,有兴趣了解更多的,可随时私信笔者。

在和客户沟通过程中得知,AI时代,阅读瀑布流的观点信息时,只要投喂给AI足够的信息源,再针对自己感兴趣的话题来提问,比起自己来刷一堆信息流要简单快捷得多,当然AI工具要足够强悍才好用,例如使用google的NoteBookLLM,就比腾讯的IMA要好得多。

这也打开了数据分析的一个思路,过往只能用来分析结构化的数据,现如今,可以分析非结构化的数据,并且使用本地知识库来提问AI,可以得到更精准的信息,最后将信息源切片的颗粒度足够细,AI回答问题后,可以能过引用源的方式,快速定位到原文,再辅助人工复核,大大提升了信息的非结构化信息加工、分析、总结的能力。

例如在这些股市的行业里,通过采集新鲜的观点类数据,让AI快速分析出人群的情绪,和量化交易这种理性分析来说,多了一个不错的情绪分析的维度来作决策依据,别人恐惧我贪婪,让AI帮忙更好感知到市场的恐惧情绪及程度。

最后,若有同款需求或任何类似的定制化需求,欢迎联系笔者(微信190262897),给您高质量和高性价比的成果交付。