前 言

前 言

如何引入大数据思维、构建大数据项目以及应用大数据战略

我在思考“企业、政府、公共机构如何引入大数据思维”这一难题的过程中写成了本书。谈论“大数据”的人很多,但一提到实际应用,大部分人都置身云里雾里,摸不着头脑。对“大数据”的赞美之词并不会为想引入、构建大数据项目的人提供任何帮助。即使阅读相关书籍并向那些具有大数据项目构建经验的人请教,也会感到一头雾水,茫然不知所措。随着学习的深入,人们会感到“大数据”整体概念越来越难。

“大数据”整体概念为什么有难度

因为“大数据”的基本概念本身就具有一定难度,它具有多种形态,是多种专业领域的大数据技术与各种IT 技术相融合的典型代表。由于“大数据”概念涵盖多种专业领域,即使是我们所说的“大数据专家”也只能从某个视角对其进行评价,而无法兼顾所有领域。因此,人们看到的“大数据”往往侧重某一领域。

何为“大数据”

首先,“大数据”概念始于IT 行业,它发端于分布式系统(Hadoop)、NoSQL 等技术。但即使如此,只从IT 层面谈论“大数据”概念仍然存在着一定局限性,IT 只是用于存储、处理大数据的一种技术而已。那么,融合于IT 的“大数据”技术是什么呢?大数据不仅具备庞大的数据信息量,而且生成速度非常快,数据种类繁多,比如未经处理的图像、视频、位置信息和文本等。

“大数据”概念包含什么内容

根据自身包含的内容不同,“大数据”的具体概念也各不相同。依据不同行业,“大数据”可以划分为金融、物流、通信、制造和公共事业等种类,也可以依据数据来源(如智能手机、传感器和日志等)进行划分。比如,从汽车传感器获取的数据与从工厂测量设备获取的传感数据是不同的。同样,根据格式、属性、领域和来源等的不同,分析大数据的方法也多种多样。

但更重要的是引入大数据思维的目的,即我们想通过大数据分析获得什么。当然,大数据分析的目标也是非常多样的。

哪些大数据项目适合自己的企业

对于如此多样且瞬息万变的大数据概念,若只从一个领域谈论,那么无论采用何种方式,我们看到的也不过是冰山一角。若采用常规存取方法引入大数据,或者照搬他人的做法,只会招致失败,因为他人采用的数据与我们企业自身拥有的数据存在巨大差异。因此,在种类如此繁多的大数据概念中,必须找到只适合自己或自身企业的大数据。

如上所述,大数据概念的多样性也意味着获取大数据的人非常多样化。企业的情况也是一样,它们会根据自身背景与目的获取大数据。因此,想引入大数据项目的企业必须进行沟通和理解,为达成不同访问者的不同目的而努力。这也是“大数据”思维的基本常识。

如何获取大数据

目前,想要引入大数据项目的企业在成立工作小组后,通常会将其纳入IT 部门,其他相关部门则几乎不会提供帮助。如果IT 部门负责大数据工作组的工作,其他部门会积极配合吗?他们相互间能够很好地沟通理解吗?每个企业在沟通上都会出现这样的问题,这些问题会导致企业大数据战略的失败。

大数据战略可以应用在何处

这是实施大数据战略时一定会产生的疑问。在我访问的数百家企业中,每当谈论“大数据”战略时,企业负责人总是会提出相同的问题:

“要将大数据战略引入我们企业的哪些部门呢?”

为什么所有企业都会问这个问题呢?其实这个问题应该由企业在职员工回答,但他们的回答都很一致:

“我对大数据战略一无所知,怎么会知道要把它应用在哪里呢?”

话虽如此,但IT 组不懂业务,业务组不懂IT 技术,那究竟应该如何解决这个问题呢?这是所有要引入大数据项目的企业都要面对的问题。只有解决了这个问题,才能开始实施大数据战略。这个问题也困扰了我很长时间,所以我将在书中为大家展示解决这一难题的方法——大数据课题实施方法。

如何推进大数据项目的实施

即使企业历经周折成功启动了大数据项目,其中的风险也并未因此而消除。由于“大数据”概念涵盖多个专业领域,实施时必然要由多个领域的人员共同进行,那么问题在哪里呢?显而易见,不同领域的人在相互沟通和理解的过程中会产生诸多问题。大数据项目的实施要经过哪些过程与阶段才能达到预期目标呢?这也是我一直关注的问题。我曾经在大数据项目实施过程中见证了太多的错误计划与推进过程,以这些经验为基础,我总结出了书中提出的大数据项目构建方法。

如何灵活应用大数据分析结果?

开展大数据项目后还有最后一个陷阱,就是分析大数据后得到的结果没有应用于实际业务,而仅用作参考。此时,我们应该重新思考引入大数据思维的目标。为什么要耗费资源构建大数据系统,又要克服困难进行大数据分析呢?难道只是为了将大数据分析结果交给企业管理层,并听他们说“谢谢,我会参考的”吗?大数据终究只是大数据,实际决策时还是要依靠管理者的经验与直觉,而我们引入大数据思维的目的就是“依据数据进行科学决策”。如果只想将大数据当作决策时的参考,那为什么要引入大数据思维呢?从根本上讲,这种出发点就是错误的。要想解决这个问题,必须改变企业的决策文化。否则,几年之后就会意识到这样的大数据系统毫无意义。

希望可以为解决大数据项目实施中的难题提供一些指导

有人将“大数据”称为“21 世纪的石油”,我觉得这是非常好的比喻。但要想获得这样的效果,企业必须克服数不尽的难关。谨以此书献给那些即将踏上“大数据”这一艰难旅程的朋友,他们将要经历的艰辛于我而言仍然历历在目。作为过来人,我希望将我遇到的诸多困难提前与大家分享。希望各位在遥远而充满艰辛的旅途中不要放弃或误入歧途,顺利征服“大数据”这座高山,我在此为你们加油鼓劲。

目录

  • 前 言
  • 本书读者
  • 第1 章 IT 趋势与数字商务
  • 第2章 从实例分析入手的有趣的大数据分析
  • 第3章 分析广泛应用的社交媒体
  • 第4章 引入大数据项目时的常见问题
  • 第5章 大数据方案选择方法
  • 第6章 具有竞争力的大数据分析
  • 第7章 大数据技术与IT技术
  • 第8章 大数据项目构建方法
  • 附录 通过行业大会了解大数据技术发展趋势
  • 后记