作为开发标准框架以使科学家更轻松地在其工作中使用“大数据”集的重大合作工作的一部分，美国国家标准技术研究院(NIST)正在发布NIST大数据互操作性草案以征询公众意见框架。

　　大数据基础文件的七卷出版将作为美国对国际标准界的投入。

　　大数据是用来描述网络，数字化，充满传感器，信息驱动的世界中大量数据的术语。大数据收集的度量单位是万亿字节(TB)和数千万亿字节(PB)。数据范围包括从社交媒体收集的文本，图像和音频，再到物理实验的输出，每秒可传输4000万次数据点。新技术正在不断发展，以利用数据的快速增长。

　　商业，学术和政府领导人之间达成广泛共识，即有效利用大数据具有激发创新，推动商业发展和推动进步的潜力。巨大的数据资源的可用性具有回答以前无法解决的问题的潜力。诸如以下的问题：我们如何可靠地及早发现潜在的大流行病并进行干预?我们可以在合成之前就预测新材料的性能吗?在防范网络安全威胁时，我们如何扭转攻击者相对于防御者的当前优势?

　　但是，关于大数据淹没传统方法的能力也达成了广泛共识。数据量，速度和复杂性的增长速度超过了数据分析，管理，传输等方面的科学技术进步。

　　在有关大数据的一些重要基本问题上缺乏共识，这使潜在用户感到困惑，阻碍了进度。定义大数据解决方案的属性是什么?大数据与迄今为止我们遇到的传统数据环境和相关应用程序有何不同?大数据系统如何集成到我们当前的数据系统中?加快部署强大的大数据解决方案需要解决哪些主要的科学，技术和标准化挑战?

　　NIST表示：“ NIST的大数据目标之一是开发一种与供应商无关的，与技术和基础架构无关的参考架构，以使数据科学家能够为其给定的数据源执行分析处理，而不必担心底层的计算环境。”数字数据顾问Wo Chang。

　　为此，NIST与来自世界各地的行业，学术界和政府的成员组成了NIST大数据公共工作组(NBD-PWG)。工作组已经制定了共识定义，分类法，数据安全性和隐私保护的关键要求，拟议的参考体系结构和标准路线图。