您的位置: 首页 > 农业专利 > 详情页

一种基于storm流计算框架的食品安全网络舆情分析方法
专利权人:
广州大学
发明人:
吴羽,黄文恺,林炽杰
申请号:
CN201710957248.0
公开号:
CN107832344A
申请日:
2017.10.16
申请国别(地区):
中国
年份:
2018
代理人:
裘晖`林梅繁
摘要:
本发明为基于storm流计算框架的食品安全网络舆情分析方法,对网络媒体资源进行网络爬虫,获取有关食品安全网页的url,下载相应的网页数据进行分析后保存到Hbase数据库中;Spout节点从数据库读取数据放入网络拓扑结构,随机分发给第一层Bolt节点;第一层Bolt节点获取数据后对文本数据进行向量化,进行分词和计算该词汇的权重;对第一层Bolt节点向量化后的文本数据进行文本聚类,将同一类的发送到相同的Bolt节点中;对同一类的文本数据作进一步处理生成事件,提取事件中舆情信息,据此计算出文本分类的舆情倾向度。本发明通过对网络舆情进行分析以实现对食品安全的监控,利用storm分布式流计算框架,提高了数据处理的效率,解决了以往时效性较差的缺点。
来源网站:
中国工程科技知识中心
来源网址:
http://www.ckcest.cn/home/

意 见 箱

匿名:登录

个人用户登录

找回密码

第三方账号登录

忘记密码

个人用户注册

必须为有效邮箱
6~16位数字与字母组合
6~16位数字与字母组合
请输入正确的手机号码

信息补充