In most High Performance Computing (HPC) projects nowadays, there is a lot of data obtained from different sources, depending on the project's objectives. Some of that data is very huge in terms of size, so copying such data sometimes is an unrealistic goal. On the other hand, science requires data used for different purposes to remain unaltered, so different groups of researchers can reproduce results, discuss theories, and validate each other. In this paper, we present a novel approach to help research groups to validate data integrity on such distributed repositories using Blockchain. Originally developed for cryptographic currencies, Blockchain has demonstrated a versatile range of uses. Our proposal ensures 1) secure access to data management, 2) easy validation of data integrity, and 3) an easy way to add new records to the dataset with the same robust integrity policy. A prototype was developed and tested using a subset of a public dataset from a real scientific collaboration, the Latin American Giant Observatory (LAGO) Project.


翻译:在当今大多数高性能计算(HPC)项目中,根据项目目标,会从不同来源获取大量数据。其中部分数据体量极为庞大,复制此类数据有时是不切实际的目标。另一方面,科学要求用于不同目的的数据保持不可篡改,以便不同研究团队能够复现结果、讨论理论并相互验证。本文提出一种创新方法,利用区块链帮助研究团队验证此类分布式存储库中的数据完整性。区块链最初为加密货币而开发,现已展现出广泛的应用潜力。我们的方案确保:1)数据管理的安全访问;2)数据完整性的便捷验证;3)以同样稳健的完整性策略向数据集添加新记录的简易途径。我们使用来自真实科学合作项目——拉丁美洲巨型天文台(LAGO)项目的公共数据子集,开发并测试了原型系统。

0
下载
关闭预览

相关内容

数据科学平台:特征、技术及趋势
专知会员服务
46+阅读 · 2022年4月17日
专知会员服务
66+阅读 · 2021年1月25日
经济学中的数据科学,Data Science in Economics,附22页pdf
专知会员服务
36+阅读 · 2020年4月1日
【硬核书】数据科学,282页pdf
专知
26+阅读 · 2022年11月29日
【干货书】数据科学手册,456页pdf
专知
15+阅读 · 2021年4月28日
最全数据科学学习资源:Python、线性代数、机器学习...
人工智能头条
12+阅读 · 2018年5月14日
【资源】史上最全数据集汇总
七月在线实验室
18+阅读 · 2018年4月24日
不要担心没数据!史上最全数据集网站汇总
国家自然科学基金
1+阅读 · 2017年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
8+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
Arxiv
0+阅读 · 2月9日
Arxiv
0+阅读 · 1月13日
VIP会员
相关基金
国家自然科学基金
1+阅读 · 2017年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
8+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员