胡维
- 作品数:16 被引量:19H指数:3
- 供职机构:国防科学技术大学更多>>
- 发文基金:国家自然科学基金国家高技术研究发展计划更多>>
- 相关领域:自动化与计算机技术电子电信更多>>
- ZFS在基于HDFS的近线存储系统中性能分析与实现被引量:1
- 2014年
- 通过将云计算技术应用于近线存储领域,设计实现了基于Hadoop分布式文件系统(Hadoop distributed file system,HDFS)的海量近线存储系统,用以扩展TH-1A超级计算机在线存储系统空间,提高系统利用率.该系统采用胖存储节点(大型的存储服务器)构建基于HDFS的近线存储集群,通过ZFS文件系统来解决HDFS存在的低效和空间利用率低的问题,采用双副本冗余、虚拟存储、动态管理等方法优化存储服务器存储和管理效率,提高了近线存储系统性能.实验结果表明,与传统HDFS集群存储系统相比,该系统在可靠性、经济性及灵活性上均具有一定的优势.
- 刘言青刘光明董文睿胡维
- 关键词:近线存储HDFS存储池
- E级超级计算机故障预测的数据采集方法被引量:6
- 2016年
- 面向未来E级超级计算机,提出用于故障预测的数据采集框架,能够全面采集与计算结点故障相关的状态数据。采用自适应多层分组数据汇集方法,有效解决随着系统规模增长数据汇集过程开销过大的问题。在TH-1A超级计算机上的实现和测试表明,该数据采集框架具有开销小、扩展性好的优点,能够满足未来大规模系统故障预测数据采集的需求。
- 胡维蒋艳凰刘光明董文睿崔新武
- 关键词:超级计算机故障预测数据采集方法数据汇集
- 多准则赋权排序与C-SVM相结合的特征选择算法被引量:6
- 2018年
- 数据挖掘中所获取的数据维数多,常常导致数据存储所需容量大,知识挖掘所需时间长,预测正确率不高等问题,特征选择是解决上述问题的重要方法之一。针对现有特征选择算法最佳特征个数难以确定及分类准确率有待进一步提高等问题,提出一种同时考虑相关性和冗余度的多准则赋权排序的算法(m CRC),m CRC结合两种准则同时对特征进行排序,并利用C-SVM对按重要性降序排好的特征采用顺序前向浮动搜索得出最佳特征子集。实验结果表明,m CRC算法与单独基于互信息或类别可分性赋权排序的特征选择方法相比能在更短的时间内获得分类性能更好的最佳特征子集,为快速并高效地对数据集进行挖掘提供了有力保障。
- 孙勤孙勤蒋艳凰胡维张毅
- 基于网络服务的高性能计算机能耗管理研究
- 当前,各大超级计算中心和数据中心都面临着巨大的能耗问题。为了降低高性能计算机系统在实际使用过程中的能耗,本文分析了TH-1A高性能计算机系统在网络服务模式下的负载特性及规律,并提出了一种基于工作负载规律的混合节能策略MP...
- 黄金礼刘光明胡维
- 关键词:资源管理能耗管理
- 文献传递
- 面向超级计算机的故障预测和容错关键技术研究
- 大规模科学计算需求的不断增长推动着超级计算机系统快速发展。随着系统规模的增大,其组成部件不断增加、软硬件结构日益复杂、工作模式快速变化,超级计算机系统平均无故障时间越来越短,可靠性问题日益突出。现有容错技术由于效率不高,...
- 胡维
- 关键词:故障预测主动容错容错模型可靠性超级计算机
- 基于智能预警和自修复的高可靠磁盘阵列关键技术研究
- 随着高性能计算和数据中心存储规模的飞速增长,以磁盘为基础的存储系统可靠性已成为影响整个计算机系统可靠性和可用性的关键因素之一。而现有提高存储可靠性的方法,还存在对故障磁盘的容错能力不高、系统修复过程中对用户服务质量降低、...
- 胡维
- 关键词:决策树分类数据迁移
- 基于智能预警的自恢复存储系统研究
- 为提高磁盘阵列存储的可靠性,设计了基于智能预警的自恢复存储系统.在对磁盘SMART信息实时监测采集的基础上,利用机器学习方法对磁盘故障进行预测.对于预警磁盘,采取以数据为中心的自修复迁移保护策略,结果表明自恢复系统使存储...
- 胡维刘光明李琼刘欣
- 关键词:智能预警
- 文献传递
- 基于在线学习的超级计算机结点故障主动容错方法
- 本发明公开了一种基于在线学习的超级计算机结点故障主动容错方法,目的是解决系统级检查点方法存在容错开销大的缺陷。技术方案是对于构建的超级计算机系统,服务结点收集新的故障结点的历史状态数据,利用这些数据对结点故障行为进行集中...
- 蒋艳凰卢宇彤赵强利周恩强董勇胡维孙勤
- 文献传递
- 面向存储级并行的处理器性能分析模型
- 外部存储器访问延迟对处理器的性能影响越来越大,存储级并行技术可以显著的减少长延迟外部存储器访问对处理器性能的影响,目前这方面的研究尚缺乏有效的系统性能分析模型和方法.本文结合排队论,从多核处理器的单个核出发,建立了一个面...
- 刘德峰谢伦国胡维
- 关键词:性能分析存储级并行微处理器多核处理器
- 基于智能预警的自恢复存储系统研究
- 2011年
- 为提高磁盘阵列存储的可靠性,设计了基于智能预警的自恢复存储系统.在对磁盘SMART信息实时监测采集的基础上,利用机器学习方法对磁盘故障进行预测.对于预警磁盘,采取以数据为中心的自修复迁移保护策略,结果表明自恢复系统使存储可靠性有显著提高,并实现对用户透明,提高了系统的可用性.
- 胡维刘光明李琼刘欣
- 关键词:智能预警