您的位置:
首页
>
农业专利
>
详情页
一种基于storm流计算框架的食品安全网络舆情分析方法
- 专利权人:
- 广州大学
- 发明人:
- 吴羽,黄文恺,林炽杰
- 申请号:
- CN201710957248.0
- 公开号:
- CN107832344A
- 申请日:
- 2017.10.16
- 申请国别(地区):
- 中国
- 年份:
- 2018
- 代理人:
- 裘晖`林梅繁
- 摘要:
- 本发明为基于storm流计算框架的食品安全网络舆情分析方法,对网络媒体资源进行网络爬虫,获取有关食品安全网页的url,下载相应的网页数据进行分析后保存到Hbase数据库中;Spout节点从数据库读取数据放入网络拓扑结构,随机分发给第一层Bolt节点;第一层Bolt节点获取数据后对文本数据进行向量化,进行分词和计算该词汇的权重;对第一层Bolt节点向量化后的文本数据进行文本聚类,将同一类的发送到相同的Bolt节点中;对同一类的文本数据作进一步处理生成事件,提取事件中舆情信息,据此计算出文本分类的舆情倾向度。本发明通过对网络舆情进行分析以实现对食品安全的监控,利用storm分布式流计算框架,提高了数据处理的效率,解决了以往时效性较差的缺点。
- 来源网站:
- 中国工程科技知识中心
- 来源网址:
- http://www.ckcest.cn/home/