余辉
- 作品数:3 被引量:12H指数:2
- 供职机构:中国科学院大学更多>>
- 发文基金:国家自然科学基金国家高技术研究发展计划国家科技支撑计划更多>>
- 相关领域:自动化与计算机技术更多>>
- 微博舆情的Hadoop存储和管理平台设计与实现被引量:5
- 2017年
- 随着Internet技术的迅速发展,网络舆情监控系统正在得到广泛应用。网络舆情监控系统的数据量也急速膨胀,如何高效地存储和管理这些海量的非结构或半结构化数据成为网络舆情系统研发中的挑战课题。传统的关系数据库和分布式计算等数据处理的方式也越来越不能适应日益增长网络大数据。针对微博数据的特点建立了一种面向微博舆情应用的Hadoop存储平台的多层体系架构,并采用列数据库设计多种微博结构化数据的表结构,以及表之间的关系模型。测试结果表明,设计的存储管理平台具有检索响应速度快、可扩展性好等特点。
- 余辉黄永峰胡萍
- 关键词:舆情分析HADOOPHBASE云计算
- 基于NOSQL的微博图数据管理存储平台设计与实现被引量:2
- 2017年
- 近年来,以微博为代表的在线社交网络得到迅速普及和发展。这些规模庞大,内部关联复杂的图结构数据给传统数据库的存储管理带来了挑战。论文详细分析微博社交网络数据结构特点,结合上层应用需求对数据存储模型进行设计,实现了一套基于NoSQL的微博数据管理存储平台。该平台设计为RAW数据存储、图模型映射、NewSQL转换三层,较好地解决海量微博图数据存储的可扩展性和实时、易用性问题。通过实验对平台入库、查询性能进行了评估,验证了其在实际中的有效可行性。
- 包从开黄永峰廖旺坚余辉
- 关键词:NOSQL
- 跨媒体多源网络舆情分析系统设计与实现被引量:5
- 2014年
- 在当前"大众麦克风"时代,网络舆情分析是关系到国家安全和社会稳定的重要技术,论文针对目前网络舆情分析系统存在着信息源单一等问题,提出了一种跨媒体多源的网络舆情分析系统架构,并对舆情分析软件的层次结构进行设计,对系统的核心算法进行了实现。该系统目前已部署在中国教育与科研网络中进行试运行。
- 余辉黄永峰
- 关键词:网络舆情跨媒体WEB检索信息安全