周园春
- 作品数:253 被引量:639H指数:13
- 供职机构:中国科学院计算机网络信息中心更多>>
- 发文基金:国家自然科学基金国家高技术研究发展计划中国科学院战略性先导科技专项更多>>
- 相关领域:自动化与计算机技术文化科学生物学经济管理更多>>
- 一种面向大数据的深度学习方法及系统
- 本发明提供一种面向大数据的深度学习方法及系统,该系统包括大数据引擎Spark、Protobuf工具、轻量级数据存储LMDB、Caffe深度学习Solver和MPI通信库;所述大数据引擎Spark将待处理数据进行数据处理;...
- 李亮沈志宏周园春黎建辉张海明杜园园朱小杰崔文娟
- 文献传递
- 一种集群系统应用软件快速部署方法
- 本发明公开了一种集群系统应用软件快速部署方法,本方法为:1)在主节点上创建一包括主节点文件系统的共享目录,并在共享目录中为其他节点分别建立一专属文件目录;2)修改共享目录下的系统初始化文件,使节点初始化时实现其独享专有文...
- 薛正华黎建辉周园春沈庚张洋
- 一种基于二次追溯的进口冷链食品追溯方法和系统
- 本发明涉及一种基于二次追溯的进口冷链食品追溯方法和系统。该方法的步骤包括:接收用户的查询请求;根据所述查询请求中的检验检疫证单号、批次号进行第一次追溯,获得所述进口冷链食品的食品追溯信息;根据所述食品追溯信息中的食品标识...
- 刘佳王姝郭志斌王丽娟夏晓蕾周园春
- 文献传递
- 一种基于次级属性的非结构化数据信息查询方法及系统
- 本发明公开了一种基于次级属性的非结构化数据信息查询方法及系统。本方法为:1)对于一目标数据库,将该目标数据库中每条记录的非结构化数据作为对应记录的一级属性;2)提取每个一级属性中的内在信息作为该一级属性的次级属性;3)对...
- 沈志宏赵子豪周园春
- 文献传递
- 国际生物数据共享服务体系运行模式研究
- 2024年
- 【目的】通过对国际生物数据共享服务体系以及国内科学数据共享服务体系的运行模式进行调研,从协作运行模式、相关政策支持、资助保障支持、运营管理支撑、基础设施支撑、规范标准支撑、工具技术支撑方面进行深入分析。【方法】采用网络调研和文献分析法,对数据共享体系的文献资料进行检索和分析。【结果】各国在生物数据共享方面的布局不同。欧美等发达国家较早建立较为完善的管理体系,形成了良好的生物数据生态环境。美国、日本等国家的生物数据中心采用集中模式,实现资源的集中管理和监控;而瑞士采用联合协作模式,由多个团体协作管理运行,但保持团队独立性。我国亟需加快生物数据共享体系的建设,当前在科学数据共享服务系统的建立中进行了积极探索,并已形成了有效的管理模式。【结论】通过对现有运行模式的调研,考虑到我国生物数据资源分布情况、研究医疗机构的特点以及生物数据安全等多种因素,认为在建设国家生物数据共享体系的过程中,可以采用“中心和节点的联合协作模式”,加强核心节点建设,提供基础支撑,构建互联互通的生物数据共享网络。在服务体系上,可以结合联合协作的运营模式,推动节点基础设施、技术服务、领域方向等多方面的合作,促进生物医学研究的创新发展。
- 汪嘉葭孟珍王诚瑞林青慧陈昕吴朋民赵静宜王学志周园春
- 关键词:生物数据共享服务体系数据中心数据共享
- 基于ORC元数据的Hive Join查询Reducer负载均衡方法被引量:3
- 2018年
- 负载不均衡问题位列影响大规模MapReduce集群性能因素的首位,而Hive join查询非常容易触发该问题。通用解决方案是基于中间键值对的key频率分布设计能够实现负载均衡的key划分算法。现有工作估算key频率分布时依赖于对map的输出进行监控采样,使得通信开销较大并显著延后了shuffle的启动。针对Hive join查询,提出了基于ORC元数据的key频率分布估计方法和相应的负载均衡key划分方法。该方法具有计算量小、通信开销小、不影响现有shuffle机制的优点。通过基准测试证明了该方法在key频率分布估算效率上的巨大提升及相应的key划分方法对Hive join查询性能的提升。
- 王华进黎建辉沈志宏周园春
- 关键词:负载均衡MAPREDUCEJOINREDUCERORC
- 开放科学监测体系国际经验及启示
- 2024年
- 【目的】随着开放科学政策、实践深入推进,开放科学监测体系作为反馈机制在开放科学治理体系中越来越重要。【方法】本文以主导模式、监测指标和监测实施为分析框架,通过网络调研、文献调研等方法对欧盟委员会的Open Science Monitor、开放获取基础设施OpenAIRE的OpenAIRE Monitor、美国科学公共图书馆(PLOS)的Open Science Indicators进行系统分析。【结果】总体上,不同主导模式下,监测体系的内在逻辑和资源体系差异较大,不同监测体系的监测指标和组织实施各具特色,但都非常关注开放获取政策落实和FAIR原则的实施,不同监测体系的结果能够在不同层次、不同程度上反映开放科学目标的实现情况。【结论】建议借鉴国外开放科学监测体系的实践,统筹协调开放科学政策,以基础性平台建设为抓手,加快推进多层次开放科学监测体系建设以及国际合作,为持续推进开放科学实践贡献中国方案。
- 赵静宜陈昕周园春
- 关键词:指标体系
- 可定制的移动数据采集系统
- 本实用新型属于电子信息技术领域,具体涉及一种可定制的移动数据采集系统。可定制的移动数据采集系统,包括后台数据库、定制系统、安装在移动设备上的数据采集系统及安装在个人电脑上的数据同步系统,所述移动设备和个人电脑连接。该系统...
- 阎保平黎建辉周园春黄志一常青玲沈志宏刘磊
- 文献传递
- 一种大数据ETL任务的调度方法
- 本发明提供一种大数据ETL任务的调度方法,涉及大数据、流水线、任务调度技术领域,主要对用户编排的多个ETL任务按照层次进行组织,根据组织的层次及顺序对ETL任务进行调度并执行,由此可将ETL任务以层次化方式进行组织并调度...
- 朱小杰沈志宏杜一周园春
- 文献传递
- 一种大规模RDF数据关联路径发现方法
- 本发明公开了一种大规模RDF数据关联路径发现方法。本方法为:1)抽取RDF数据库中的RDF关联数据并以<主语>、<谓语>、<宾语>形式缓存;2)对主语和宾语分别分配一id,生成主语id...
- 高玥黎建辉周园春侯艳飞韩岳岐