大数据的发展如果从现在去看的话,可以说是一发不可收拾,势头、体量、高度,都可以说是空前的,所以很多人说这是大数据的时代。下面我们来盘一盘这段我认为很有意思的发展史:
数据的发展主要聚焦在近30年内(再往前我也讲不了了),看看上面这张图,大家应该能看出些许端倪,毫不夸张地说,互联网这么多年的发展,仿佛就是为了把数据推向时代的浪尖。上世纪90年代初,随着雅虎、网易、搜狐、腾讯、阿里巴巴等互联公司的陆续成立,中国互联网的时代正式拉开了序幕,互联网的发展推进了计算机、信息化的飞速发展,开始慢慢打破了由于信息不对称导致的行业和地域的壁垒,在这个阶段,互联网已经展现了它的优越性和未来的前景,但由于大家对它太陌生(和当时的教育程度也有一定的关系)、当时互联网的成本也相对较高,所以互联网开局阶段的普及并不是那么迅猛。2000年到2009年,互联网一路高歌猛进,聊天、交友、博客、购物、支付等一步步带动着互联网经济的发展,随之而来的是一大批互联网巨头的相继上市,上网成为了一种时尚,大学的计算机相关专业也成了炙手可热的专业,时代开始需要互联网、需要互联网人才,09年,阿里举办了第一届双十一,也为这个10年画上了一个圆满的句号。2010年开始,随着智能手机的普及,互联网又以一种新的形态继续大放异彩:移动互联网时代正式开始。2013年,棱镜门事件将互联网安全问题彻底放大,去IOE的概念被提出,计算、存储、网络等设备迎来了一波国产化的改造,IaaS、PaaS、SaaS等云计算服务的浪潮也被掀起,企业对底层平台的需求日益变大,慢慢让数据这次词也出现在大家的视野里。互联网的发展、企业的信息化建设,产生了大量的数据,这些数据躺在冰冷的磁盘里该何去何从?这个时候,大数据,它来了,大数据所带来的价值和互联网不一样,它是非常快速地所被大家所认知的(这一点,不得不感谢智能手机应用),一时间,各种关于大数据的概念、会议、政策都如潮水般涌来。2019年,被称为数据中台元年,大数据以数据中台的形式支撑企业数字化建设也迎来了爆发期,终于在2021年,十四五规划中明确提出“加快数字化发展,建设数据中国”,数字化的战略位势和建设内容都有了前所未有的提高,这无疑是对数据价值的空前肯定,时代选择了数据。
当我们再从现在倒推这30年的发展,不难发现,其实每个发展历程,都在帮助数据展现它的价值,从MB到PB、EB,从离线到实时,从在线化到智能化,数据的发展,是时代的选择、是历史的必然、是顺势而为。
数据中台的概念其实很早之前就被提出来了,为什么业界的大佬们要辛辛苦苦包装出这样一个不前不后的概念出来呢,这里面有技术的演进、商业模式的转变、资本的推动等等,这里我们就不去细究了。
先来看看行业内的大佬对数据中台的定义:
我认为数据中台最初的目的是想颠覆以往的数据体系。注意这句话里面的几个关键词:“想”、“颠覆”、“体系”。首先,为什么说“想”,因为就目前而言,数据中台远远还没有达到它预期的目标,大部分企业目前对数据中台也保持着观望、简单尝试的态度,数据中台能否真正帮助企业实现数字化转型,目前还缺乏非常有说服力的案例;其次,“颠覆”是为了推翻、从头再来,这意味需企业要大刀阔斧地重新建设自己的数据体系,这对于企业的决策是有非常大的挑战的;最后,“体系”一词,是对数据中台的定义,关于数据中台的定义,行业里面没有统一的答案,每家数据中台供应商都有着自己的一套定义,但可以确定的是,数据中台不是单纯的产品,不是简单的数仓,也不是一套方法论,它是一套完整的数据体系。
我心目中建设数据中台需要包含这几个方面:
数据中台是一套全新的数据体系,是对企业数据能力的赋能,它更加强调数据的全域、标准、智能、安全、可复用。
现在企业对于数据的需求绝不仅仅是简单的存储、计算,数据作为企业宝贵的资产,更需要能够可见、可用、可控,通过数据服务、驱动业务的发展,这才是数据的价值体现。数据中台就很好的契合了这些点。
企业在数据建设、数字化转型的路上存在着各种各样、甚至完全不一样的问题,每个企业的现状也不一样,想用一套标准产品、系统去解决这些问题是不现实的,所以,我们需要数据中台,可以说,数据中台是对企业全方位的数据赋能,能够帮助企业自身具备数字化转型的软、硬件条件。