大数据计算体系的三个基本层次,大数据计算三个基础层次

首页 > 影视动漫 > 作者:YD1662023-10-26 05:43:53

一、大数据的三个层次和核心解读

(一)三个层次和核心

我们将大数据分为三个层次。一是容量很大的数据,比如两个仓库都堆满了很多书,甲仓库的书全是大学二年级数学教材,乙仓库的为大学各类教材及其提升学生综合能力的各类图书,两仓库都满足了“大”的要求;二是大容量且有用的数据,比如对大学教学来说,肯定上述甲仓库的书几乎没用,而乙能满足这一要求;三是从中挖掘核心数据的强大能力,这个很考水平。所以,大数据不能简单地理解为数据多,其核心是数据挖掘。挖掘数据则要涉及到云计算。这种如云般运算的能力与强度,实际上就是考验科技与研发人员的“认知”水准。

——摘自《新未来简史》一书

大数据计算体系的三个基本层次,大数据计算三个基础层次(1)

(二)对核心的解读

所谓数据挖掘(与传统定义有点不同),就通过对海量数据的交换、选择、整合和分析,发现新的知识,创造新的价值,带来"大知识"、"大科技"、"大利润"和"大发展"。

也就是,将海量数据最大化的、集约型的、多头性地运用于企业、社会、生活等等的各个方面,以创造最大的价值。

二、大数据的范围与深度认识

(一)范围认知

如今通过物联网(或互联网)感知到的被人们称之为“大数据”的数据(主要指人类信息交换、信息存储、信息处理三方面能力大幅提升后,人与人、人与物之间所制造的数据),相对于万物在同一时刻所释放的所有数据来说,仅仅只是微不足道的“微数据”而已。(摘自《新未来简史》一书)

大数据计算体系的三个基本层次,大数据计算三个基础层次(2)

(二)深度认知

如今概念的“大数据”依然是很表面的数据,比如说“你挥挥手,几个简单的动作是‘表数据’,物联网能感知;而挥手动作之下,深入到分子、细胞与组织内,数以亿计的‘宏数据’不能被感知。‘表数据’构筑起如今的大数据概念,在此基础之上的物联网、算法与人工智能等,能量非常有限”。

上述文字摘自《新未来简史》一书,是该书提出的“未来12大定律或理论”之一,即“宏表数据理论”。

(三)与人工智能(AI)、物联网的关系

1、与AI的关系

比如AI中的“深度学习”(机器学习的内容之一),实际上是个老话题,如今很时髦的原因,主要是因为信息技术的发展让搜集“大数据”成为可能,机器训练有了足够多的样本。诸如阿尔法狗的棋步算法、洛天依的声音合成,以及无人驾驶、人脸识别、网页搜索等等高级应用中用到的神秘兮兮的“深度学习”“增强学习”,乃至最具潜力的“对抗学习”及其对应的“深度神经网络”“卷积神经网络”“对抗神经网络”等 都与大数据有关。(摘自《新未来简史》一书

大数据计算体系的三个基本层次,大数据计算三个基础层次(3)

2、与物联网的关系(进一步解读与AI的关系)

物联网主要通过各种设备(比如RFID,传感器,二维码等)的接口将现实世界的物体连接到互联网上,或者使它们互相连接,以实现信息的传递和处理。

而且,由于物联网可连接大量不同的设备及装置(家用、生活、监测等各类电器和设备),嵌入在各个产品中的传感器(sensor)便会不断地将新数据上传至云端。这些新的数据以后可以被人工智能处理和分析,以生成所需要的信息并继续积累知识。

大数据计算体系的三个基本层次,大数据计算三个基础层次(4)

综上:

1、正是得益于大数据和云计算的支持,互联网才正在向物联网扩展,并进一步升级至体验更佳、解放生产力的人工智能时代。

2、对于人工智能而言,物联网(IoT)其实肩负了一个至关重要的任务:资料收集和传递。

栏目热文

文档排行

本站推荐

Copyright © 2018 - 2021 www.yd166.com., All Rights Reserved.