张殿超
- 作品数：8 被引量：17H指数：1
- 供职机构：南京邮电大学更多>>
- 发文基金：江苏省自然科学基金国家自然科学基金教育部重点实验室开放基金更多>>
- 相关领域：自动化与计算机技术更多>>
- 大数据平台计算架构及其应用研究
- 近年来，云计算、物联网、移动互联网等新兴技术的发展与应用，使人类快速进入大数据时代。随着大数据的到来，分布式数据处理技术不断被提出，业界涌现了各式各样的分布式大数据处理框架，从最初的Hadoop及其生态系统，到基于内存计...
- 张殿超
- 一种大数据中流计算平台下的点对点流媒体实时监测方法
- 本发明是给出一种大数据中流计算平台下的点对点流媒体实时监测方法。分布式架构为Hadoop系统，点对点流媒体指的是Flash？P2P数据。我们所提出的方法主要用于快速提取Flash？P2P流量数据,从中再提取出隐含的、未知...
- 季一木蒋晨晨王汝传谈杰谈海宇袁永阁张殿超朗贤波张永潘
- 面向流数据的决策树分类算法并行化被引量：16
- 2017年
- 随着云计算、物联网等技术的兴起,流数据作为一种新型的大数据形态广泛存在于电信、互联网、金融等领域.与传统静态数据相比,大数据环境下的流数据具有快速、连续和随时间变化等特点.同时数据流的隐含分布变化会带来概念漂移问题.为了适应大数据环境下流数据分类算法的要求,必须对传统的静态离线数据分类算法进行改进,提出基于分布式计算平台Storm的P-HT并行化算法.算法在满足Storm流处理平台要求基础上,通过滑动窗口机制、替代子树机制和并行化处理,提高了算法的灵活性和通用性,并且能良好地适应数据流的概念漂移.最后通过实验验证该算法的有效性和高效性,结果表明在与传统C4.5算法相比精度没有降低的情况下,改进的P-HT算法具有更大的吞吐量和更快的处理速度.
- 季一木张永潘郎贤波张殿超王汝传
- 关键词：流数据C4.5算法
- 基于Storm的CVFDT在CDN运维预测中的算法
- 本发明公开了基于Storm的CVFDT在CDN运维预测中的算法，主要用于CDN运维领域，通过对Storm拓扑进行相应建模，对高强度的应用下的磁盘或者刀片服务器出现故障的可能性进行预判。从而提高用户感受，提升服务质量。同时...
- 季一木郎贤波王汝传谈海宇岳栋张殿超张永潘
- 基于Storm的CVFDT在CDN运维预测中的方法
- 本发明公开了基于Storm的CVFDT在CDN运维预测中的方法，主要用于CDN运维领域，通过对Storm拓扑进行相应建模，对高强度的应用下的磁盘或者刀片服务器出现故障的可能性进行预判。从而提高用户感受，提升服务质量。同时...
- 季一木郎贤波王汝传谈海宇岳栋张殿超张永潘
- 文献传递
- 一种大数据中流计算平台下的点对点流媒体实时监测方法
- 本发明是给出一种大数据中流计算平台下的点对点流媒体实时监测方法。分布式架构为Hadoop系统，点对点流媒体指的是Flash P2P数据。我们所提出的方法主要用于快速提取Flash P2P流量数据,从中再提取出隐含的、未知...
- 季一木蒋晨晨王汝传谈杰谈海宇袁永阁张殿超朗贤波张永潘
- 文献传递
- SHELL:一种面向流数据的实时基数估计算法
- 2017年
- 基数计算在流数据查询优化、网络安全、数据压缩等领域具有重要的应用价值。现有的基于概率统计原理的基数估计算法需要通过扫描历史静态数据才能进行基数统计,由于流数据具有持续、快速和实时等特点,不可能先持久化再处理分析,因而传统的基数估计算法无法直接应用在大数据流处理中。通过研究Spark、Storm实时分布式流处理机制和传统基数估计算法,设计和实现了实时的流数据基数估计算法SHELL(Streaming HypErLogLog),实验表明,SHELL在保证精确度不降低的情况下,单位滑动时间窗口内处理的消息量达到6.0×10~5~6.8×10~5,满足实时性处理的要求。
- 刘尚东张殿超尧海昌姚橹叶青季一木王汝传
- 关键词：流数据
- 基于Storm的决策树分类CVFDT并行化算法
- 本发明公开一种基于Storm的决策树分类CVFDT并行化算法，用于高效快速的获取实时流数据,从中提取出隐含的、未知的、潜在的和有用的信息，进行商用。通过Spout产生数据源，通过Bolt对数据进行传递和分析处理，最终构建...
- 季一木张永潘王汝传谈海宇岳栋张殿超郎贤波
- 文献传递
