全部 标题 作者
关键词 摘要

OALib Journal期刊
ISSN: 2333-9721
费用:99美元

查看量下载量

相关文章

更多...
科学通报  2015 

科学研究大数据挑战

DOI: 10.1360/N972014-00855, PP. 439-444

Keywords: 大科学装置,大数据,高能物理,信息化,数据存储,网格计算,云计算

Full-Text   Cite this paper   Add to My Lib

Abstract:

现代科学研究的一个重要模式就是大科学项目,其特点是大科学装置和合作,并产生海量的科研数据.数据密集型的大科学项目对数据的采集、存储、分发和处理有着巨大的需求.本文以大科学项目为案例讨论了科研大数据在数据采集、处理、存储以及网络等方面的挑战,以及相应的应对方法.其中,国际上的高能物理实验每年产生数十拍字节(PB)的数据,这些数据需要妥善地记录和保存下来,并高效地分发到世界各地进行分析处理.高能物理学家基于网格技术合作建立了大数据处理的WLCG网格平台,该平台成功地支持了大型强子对撞机实验数据的处理和分析,同时也支持了其他大科学项目,取得很好的效果.另外,为了解决对数据的高效存储和访问,新的存储技术和网络技术,如软件定义网络和云存储等,被开发应用到科学大数据中.最后还介绍了云计算技术在科研大数据中的应用.

References

[1]  1 Sidoti A. The ATLAS trigger system: Performance and evolution, nuclear instruments and methods in physics research section A: Accelerators, spectrometers, detectors and associated equipment. In: Proceedings of the 12th Pisa Meeting on Advanced Detectors, La Biodola, 2012, 718: 251-252
[2]  2 Huang Q L, Zhu S J, Cheng Y D, et al. The design and development of GRASS file reservation system (in Chinese). Nucl Electron Detect Technol, 2011, 31:969-972 [黄秋兰, 朱随江, 程耀东, 等. GRASS 文件预留系统的设计与实现. 核电子学与探测技术, 2011, 31: 969-
[3]  3 Wang L, Shi J Y, Cheng Y D. A BES cluster storage system based on Lustre (in Chinese). Nucl Electron & Detect Technol. 2010,30: 1574-1578 [汪璐, 石京燕, 程耀东. 基于Lustre的BES集群存储系统. 核电子学与探测技术, 2010, 30: 1574-
[4]  4 Hernandez F, Wu W, Du R, et al. Mucura: Your personal file repository in the cloud. J Phys Conf Ser, 2012, 396: 032056

Full-Text

Contact Us

[email protected]

QQ:3279437679

WhatsApp +8615387084133