数据的哲学，数据从哪里来，到哪里去

avril024

《数据时代2025》这篇报告的题目很有意思：两个副标题，第一个是说，数据的重要性将演化为“性命攸关的”（Life-Critical）。第二个副标题是说，不要过分集中关注在“大数据”上，要关注“数据的大”。而这两点，正是整篇报告最关注的的两个重点：数据的重要性和数据量的激增。
说到这里，可能很多朋友都要说，唉，这都是老生常谈了。身在IT领域，现在还有人不知道数据的重要性吗？而数据量的增长对于IT管理，特别是存储领域，也不是什么新闻了。刚开始我也是这么以为的，但是读完整篇报告，还是有了一些新收获。
我们先说一说数据的大。2025年全球产生的数据量将达到163ZB。这个数字是刚刚过去的2016年全球产生数据总量的10倍。
这么多的数据从哪里来？报告中把数据来源分成了三个部分：核心（即企业数据中心和企业云的数据），边缘（核心数据中心外的其它企业系统），终端（PC、手机、传感器、照相机、智能汽车等）。
终端占比目前虽然很大，未来却会逐年下降。换句话说，企业数据的增长速度甚至比刚才提到的10倍增长速率还要更快。这可能与我们的直觉并不相符。但是，仔细想一想还是很合理的。首先，虽然大量的终端设备（如手机）还在不停地产生数据，但是这些数据不重要的部分会被随时删掉，而重要的部分会上传到各种云中，由某个企业或者云变成企业数据进行存储。另外，大数据分析在企业的应用会逐渐加速，而这些应用利用数据产生新的数据，使得企业数据量迅速增加。
另外，还有一个有趣的现象是，企业的边缘产生的数据速度远超过核心数据中心。究其原因，还是因为数据分析的需要。数据越来越多来自于移动数据，需要分析本地的数据，而且要求越来越实时快速。这样，分散在各地的机器就比大型数据中心集中处理更有优势。举例来说，各种针对所在位置的服务，其数据必须是实时分析的结果，这样的话把系统分布在全国各地，可能就比一个巨型数据中心效果好很多。而这，也是这些年来软件定义存储带来的好处，不论数据实际位置，都方便进行管理，而也可以随需动态进行迁移。利用FreeStor的存储抽象化功能，不论任何厂商，任何架构，任何介质，任何地点，甚至任何公有云和私有云，都可以把所有的存储资源打通并进行统一管理。只有这样的管理架构才能应对未来如洪水般涌来的数据的挑战。而用户在架构设计、设备采购、介质选择以及向公有云迁移的策略和实施上，将获得无以伦比的自由度和弹性。
再来看一看我们这些存储行业的人最关心的问题，这么多数据，到底要存放在哪里呢？
这些数据会更多存放在企业里。娱乐数据会迅速减少（因为蓝光和DVD会大面积被视频点播所取代），PC也会明显下降，虽然移动终端的数据量会迅速上升，但是从比例上来看，更多的数据份额会被企业吃掉。最终到2025年，企业数据会占到所有数据存储量的50%以上。这相对于2016年只有大约30%的份额来说，是一个巨大的提升。所以，虽然过去这一年全球的企业级存储市场处于停滞甚至萎缩的状态，未来企业对于存储的需求还是巨大的。当然，未来的企业存储不一定还是以今天主流的存储阵列的形式而存在。
报告认为，数据量的增长速度会远超过存储设备本身能力的增长。所有的存储设备，甚至整个存储架构都需要不断扩容和升级，而不能指望硬盘和存储阵列本身存储能力的提升。因此，未来几年企业的存储架构会比今天更加复杂。
再来看看存储介质的变化。
光学介质和磁带会进一步萎缩，闪存会高速发展，但是直到2025年，硬盘还会占据大约一半的市场份额。但是请注意一点，图中的统计是以容量（byte）为单位，而不是以销售额为单位的。存储相同容量的硬盘可能是闪存的几倍，如果这个趋势保持不变，那么从销售额的角度来看，到2025年，闪存可能会是硬盘存储的好几倍。
总结一下前面的这些分析。
1、到2025年这未来几年，数据量会激增10倍；
2、企业产生和存储的数据量增长会比这个速度还要高；
3、为了应对数据量的增长，企业存储会比今天更加复杂；
4、企业核心数据中心以外的边缘数据中心将是数据增长的重要来源；
5、闪存存储设备未来会高速发展成为比硬盘存储设备大得多的市场。
企业存储需求日益复杂，而且随着业务需求和存储技术的不断变化，企业存储在制定策略时必然要面对越来越多的不确定性。比如：
1、今天的存储采购要支持的业务系统，未来几年很可能会变成私有云或者干脆上公有云；
2、今天的存储采购只需要100块磁盘的配置，但是随着业务发展，很可能要变成上千块磁盘的规模；
3、今天的闪存还很贵所以只能小范围应用，随着闪存价格和容量的改进，未来几年要大面积更换介质；
4、今天的数据存储都集中在核心数据中心，但是未来因为数据分析的需要，可能要在全国建设几十上百个小型数据中心或者专用系统。