王聪
- 作品数:14 被引量:15H指数:2
- 供职机构:中国科学院高能物理研究所更多>>
- 发文基金:国家自然科学基金更多>>
- 相关领域:自动化与计算机技术更多>>
- 一种基于高能物理事例的数据管理与传输方法
- 本发明公开了一种基于高能物理事例的数据管理与传输方法,其步骤包括:设置一主站点和若干分站点;在每一分站点上设置一数据传输客户端,在主站点上设置一数据传输服务端;定期将事例数据存储到主站点,以及从事例数据中提取事例特征数据...
- 王聪程耀东李海波徐琪程振京胡庆宝
- 文献传递
- 多核平台上的BESⅢ离线数据并行处理
- 2015年
- 基于已完成重大升级改造的北京正负电子对撞机(BEPCII)和北京谱仪(BESIII)的数据分析工作正在全面展开。作为数据分析的基础和关键的BESIII离线物理软件,它的性能决定着数据分析的进度和结果。针对BESIII实验物理数据的并行计算处理,在多核CPU硬件结构基础上,采用多进程编程技术进而实现文件级别的多进程BESIII离线数据并行处理。性能测试表明多进程并行处理可以减少资源消耗而且能够有效地提高数据分析的运算速度,从而为BESIII实验早出快出高质量的物理成果奠定坚实的基础。
- 王聪程耀东阚文枭杜然徐琪陈刚
- 关键词:多进程节点调度
- 一种共享虚拟资源池份额调度方法及系统
- 本发明公开了一种共享虚拟资源池份额调度方法及系统。本方法为:对每个业务应用分别进行实时监测,获得每个业务应用运行状况以及当前运行的虚拟机资源总数;其中,所述业务应用运行状况包括业务应用当前运行的作业数量以及排队等待运行的...
- 李海波程耀东程振京胡庆宝王聪徐琪
- 文献传递
- 高能物理事例级数据管理与传输系统的研究被引量:3
- 2018年
- 高能物理实验不断的进步与发展产生了PB乃至EB级的数据,这些数据的采集、存储、传输与共享、分析与管理都面临着极大的问题与挑战。为了应对这些挑战,设计和实现了面向事例的数据管理系统,有效解决事例数据处理效率低以及分站点资源利用率低的问题。设计了一个基于Nosql数据库的事例索引系统,通过事例数据特征抽取,选取物理学家最感兴趣的属性作为索引,存储在数据库中,并采用倒排索引技术,提高事例数据检索的效率。针对事例数据进行缓存优化,减少数据转化和存储开销。提出数据跨域传输方案,充分利用网络带宽,降低分站点处理数据的延迟。系统进行了相关验证,实验结果表明,事例级的索引技术能够显著提高事例数据的检索效率,数据传输系统的网络带宽也可以利用到百分之九十以上。
- 王聪徐琪徐琪陈刚
- 关键词:高能物理数据管理数据传输
- 一种共享虚拟资源池份额调度方法及系统
- 本发明公开了一种共享虚拟资源池份额调度方法及系统。本方法为:对每个业务应用分别进行实时监测,获得每个业务应用运行状况以及当前运行的虚拟机资源总数;其中,所述业务应用运行状况包括业务应用当前运行的作业数量以及排队等待运行的...
- 李海波程耀东程振京胡庆宝王聪徐琪
- 文献传递
- 基于桌面网格技术的高能物理计算系统被引量:2
- 2016年
- 针对传统的集群计算资源无法满足高能物理计算中对于海量数据处理的需求,基于桌面网格技术提出一种新型高能物理计算系统。该系统通过虚拟化技术,实现高能物理计算在桌面网格上的应用部署,并且设计镜像元数据服务进行远程镜像库管理。根据高能物理计算的特点,实现以DIRAC,BOINC,3G-bridge为基础的新型桌面高能物理计算系统。系统以BOINC计算服务为基本框架,3G-bridge处理作业请求,DIRAC提交计算作业。测试与分析结果表明,该系统能对高能物理作业提供稳定高效的计算服务,计算结果可靠,具有高可扩展性。
- 阚文枭王聪徐琪杜然Andrei Tsaregorodtsevt陈刚
- 关键词:桌面网格
- 一种基于访问特征的高能物理文件存储方法
- 本发明公开了一种基于访问特征的高能物理文件存储方法,其步骤包括:设置多种数据类别,每一类别数据设置一对应的数据放置策略;对于每一类别数据,分别从存储系统中选取多个数据文件及其访问记录,同一数据文件对应提取M条访问记录;对...
- 程振京徐琪王聪程耀东汪璐李海波胡庆宝
- 文献传递
- 一种基于高能物理事例的数据管理与传输方法
- 本发明公开了一种基于高能物理事例的数据管理与传输方法,其步骤包括:设置一主站点和若干分站点;在每一分站点上设置一数据传输客户端,在主站点上设置一数据传输服务端;定期将事例数据存储到主站点,以及从事例数据中提取事例特征数据...
- 王聪程耀东李海波徐琪程振京胡庆宝
- 文献传递
- 基于媒体大数据的智能服务平台技术研究
- 2015年
- 媒体行业产生了大量的数据,包括媒资数据、用户信息,互动行为等,需要使用大数据技术进行分析和处理,以促进媒体产业升级转型。本文主要从行业背景,系统架构,关键技术,应用案例等方面阐述了基于媒体大数据的智能服务平台,对该平台的应用推广和成果进行介绍。
- 程耀东周旭王聪
- 关键词:数据采集海量数据存储数据挖掘
- 一种跨站点的高能物理数据访问方法及系统
- 本发明公开了一种跨站点的高能物理数据访问方法及系统。本方法为:在每一子站点上设置一元数据服务单元MetaD,各子站点的MetaD分别定期与主站点进行元数据同步更新并为每一元数据对应的文件开辟一物理空间;子站点的缓存模块C...
- 徐琪程耀东李海波王聪程振京胡庆宝
- 文献传递