消除数据孤岛,摆脱企业大数据困境
创始人
2025-01-09 10:30:34
0

 

[[126114]]

在2013年大数据全球技术峰会上电子科技大学教授周涛教授提出了大数据发展的三个阶段。

大数据1.0:企业利用自身数据对业务进行优化。比如老板要看的各种报表,各种CRM系统,这属于数据使用的最初阶段,当然也有企业不用数据。

大数据2.0:企业利用外部数据对业务进行优化。比如银行评估信用体系还会用到互联网行为记录,今日头条的推荐还会用到微博的数据。在互联网横行的这个时代,到处都在谈跨界,大数据的一个重要特性就是消除行业的壁垒,用数据连接各行各业。当前已出现数据交易,数据交换等各种商业现象。

大数据3.0:当数据交易,数据交换规模扩大化,相关法律法规趋于健全,处理分析数据的工具更丰富,企业都可以将内部数据包装成产品对外进行服务。比如百度上线的API STORE 就是数据交易的一种方式,上面有各种天气数据、金融数据、地理数据,按照使用频率进行付费。只是现在提供这些服务都是当前使用大数据比较前沿的企业,这个是有平民化趋势的,只要你有与众不同的价值数据就能变现。

个人比较认同这个大数据发展的趋势,大数据3.0时代实际上就是消除企业间的数据孤岛,让各式各样的数据可以协同发挥价值。搞清楚大数据未来发展方向,我们再来谈谈目前大部分企业面临的大数据困境--数据孤岛。

企业发展到一定阶段,出现多个事业部,每个事业部都有各自数据,事业部之间的数据往往都各自存储,各自定义。每个事业部的数据就像一个个孤岛一样无法(或者极其困难)和企业内部的其他数据进行连接互动。

我们把数据孤岛拆分成两类:物理孤岛和逻辑孤岛。

物理孤岛:数据物理上的孤立,各自存储,各自维护。这样就会出现重复造轮和资源浪费。每个事业部都需要维护一套存储系统,各个事业部申请的机器资源都是富足的,每个事业部都各自配备一个专门的负责人。每个事业部都把数据采集、存储这个活当成是一个累赘、苦活、脏活,因为他们的kpi不在这边。当需要进行跨业务的数据合作时,往往要进行大量的数据迁移、拷贝,大部分的人力资源都耗费在数据准备阶段。

逻辑孤岛:数据逻辑上的孤立,每个事业部都有自己的数据规范,站在各自角度对数据的理解和定义,往往会出现相同的业务id、用户id有不同的定义。当需要进行跨业务的数据合作时,往往会发现沟通成本极高。

企业内部的这种孤岛现象是普遍的存在的,特别对一些集团化企业孤岛效应更是明显。未来大数据的发展是要消除各行业的数据孤岛现象,创造出各种渠道、模式让数据协作的更好。不管从大时代的角度,还是从发挥自身数据的价值角度,我们都需要去积极改变这种孤岛现状。

消除物理孤岛:统一采集、集中存储、开放计算。

消除逻辑孤岛:制定数据规范、定义数据标准、建设维护元数据。

让数据:易采集、易存储、易理解、易处理、有价值!

我们将在后续的文章中介绍如何具体实战,消除企业内部的数据孤岛现象。

 

 

相关内容

热门资讯

PHP新手之PHP入门 PHP是一种易于学习和使用的服务器端脚本语言。只需要很少的编程知识你就能使用PHP建立一个真正交互的...
网络中立的未来 网络中立性是什... 《牛津词典》中对“网络中立”的解释是“电信运营商应秉持的一种原则,即不考虑来源地提供所有内容和应用的...
各种千兆交换机的数据接口类型详... 千兆交换机有很多值得学习的地方,这里我们主要介绍各种千兆交换机的数据接口类型,作为局域网的主要连接设...
粉嫩如何诠释霸道 东芝M805... “霸道粉”是个什么玩意东芝M805拿过来的时候,笔者扑哧笑了,不是笑这款笔记本,而是笑这款产品的颜色...
什么是大数据安全 什么是大数据... 在《为什么需要大数据安全分析》一文中,我们已经阐述了一个重要观点,即:安全要素信息呈现出大数据的特征...
如何利用交换机和端口设置来管理... 在网络管理中,总是有些人让管理员头疼。下面我们就将介绍一下一个网管员利用交换机以及端口设置等来进行D...
全面诠释网络负载均衡 负载均衡的出现大大缓解了服务器的压力,更是有效的利用了资源,提高了效率。那么我们现在来说一下网络负载...
如何允许远程连接到MySQL数... [[277004]]【51CTO.com快译】默认情况下,MySQL服务器仅侦听来自localhos...
30分钟搞定iOS自定义相机 最近公司的项目中用到了相机,由于不用系统的相机,UI给的相机切图,必须自定义才可以。就花时间简单研究...
Intel将Moblin社区控... 本周二,非营利机构Linux基金会宣布,他们将担负起Moblin社区的管理工作,而这之前,Mobli...