第二节 逆流的挑战

大数据的商业化应用是以大数据的顺利采集为前提的，然而相比于欧美发达国家，中国的大数据采集过程相对不那么顺利。如果你想做大数据的商业化应用，那么有些挑战需要提前让你知道。

一、呼唤政策的“金钟罩”

从我国的数据开放相关政策来看，内容偏向宏观，实践操作性不强。相关政策均强调了要开发利用信息资源、促进信息资源产业发展、培养信息资源人才，但均较少具体的任务目标以及落实对接等实际操作细节，使得政策在具体实施过程中随意性较大。另外，信息的采集、开放、共享、开发是一个系统的过程，在我国的政策设计中，大数据所涉及的环节散落到了不同的政策中，对于信息资源在开放共享过程中的产权界定、主客体权利义务界定等配套制度的制定上也有所欠缺，对网络环境中的信息资源发布流动更较少涉及。同时，政策实施过程也缺乏有效的反馈机制，导致政策实施过程中存在的问题很少能及时地纠正和改进，致使政策在实施过程中后劲不足。

从国外经验来看，构筑完整的政策体系是数据开放的成功经验之一。而我国目前还较少涉及原始数据和数据库的开放。大数据的商业化应用，急需从政策层面支持数据公开的“金钟罩”。

二、定制心理的“铁布衫”

万物互联时代，设备连接和数据规模都达到了前所未有的程度，不仅手机、计算机、电视等传统信息化设备连入网络，家用电器、公共基础设施、工厂机械设备等也逐步成为互联网的端点，远超出传统网络安全防御边界的范围：云计算虽然提高了IT资源使用效率，但其动态虚拟化管理方式、强大的计算与存储能力也引发了新的安全问题，给安全管理体系带来巨大冲击。

然而，我国目前并没有专门的信息安全法和个人信息保护法，仅在有关法律中有所体现，尚存局限性。

《中华人民共和国政府信息公开条例》规定：经权利人统一公开或者行政机关认为不公开可能对公共利益造成重大影响的涉及国家商业秘密、个人隐私的政府信息，可以予以公开。但该条例中未能对国家秘密、商业秘密、个人隐私等做详细的界定。

《中华人民共和国著作权法》所保护的范围是文学、艺术和科学领域内具有独创性并能以某种有形形式复制的智力成果。然而现实中有些数据不具有著作权保护所要求的独创性条件，而我国相关法则也没有对该问题做进一步规定。

《信息网络传播权保护条例》规定：除法律、行政法规另有规定外，任何组织或者个人将他人的作品、表演、录音录像制品通过信息网络向公众提供，应当取得权利人许可，并支付报酬。然而对于公开信息的去向并没有明确规定，也没有明确规定信息公开的传播、复制、改变等权利更迭问题的解决办法。

综合来看，法律保护的个人隐私主要体现为“个人可识别信息”，但随着技术的推进，以往非可识别的数据完全有可能变为可识别的数据，造成保护范围模糊；而以往建立在“目的明确、事先同意、使用限制”等原则下的个人信息保护制度，在大数据场景下变得越来越难以操作。我国个人信息保护、数据跨境流动等方面的法律法规仍需进一步配套健全，这成为制约大数据产业健康发展的重要因素之一，大数据的商业化需要保护公开信息的公众心理“铁布衫”。

P20-21

后记 大数据预见未来

大数据就如同一艘时空飞船，穿越时空隧道，引领我们发现谜题，探索未知。一个又一个新的发现、新的创造、新的改变，在大数据的海洋中被挖掘出来。在未来，大数据应用的发展从快速膨胀阶段进入到理性发展和落地应用阶段，在面临诸多挑战的同时，其前景也极其广阔。

大数据接受挑战

从个人出行到企业服务，从能源生产到工业制造，大数据正快速与各领域结合，焕发出勃勃生机。“大数据”看上去很美，但对大多数人来说依然是雾里看花。抽象的数据通过底层技术成为现实中的应用产品，助力各个行业发展的同时，也带来了一些挑战。

大数据应用挑战之一：数据孤岛制约企业决策

当今，“以数据来驱动企业生产发展”已得到越来越多企业领导者的认同。数据作为企业的战略性资源，让企业领导者做出更加优化的决策，在激烈的竞争中获取更丰厚的利润。

企业级大数据面临的最大问题是数据孤岛和碎片化现象严重。尤其是在大型企业内部，数据散落在不同的部门，数据仓库不同，数据技术也可能不同。若不能打通企业内部数据，大数据应用如同纸上谈兵。只有通过数据之间的关联和整合，将各部门的数据进行连接互动，并且实现技术和工具共享，才能更好地发挥企业大数据的价值。

以往企业对数据资产的重视度不够，对数据生成和处理不规范，缺少数据清洗和去噪的步骤，甚至数据在上报时就出现很多不合理、不规范的情况。这些原因导致企业数据不准确、有缺失、质量差、可用性低，对大数据应用造成极大制约。所以，对于每时每刻都在产生的庞大数据，企业只有重视对数据的预处理，消除孤岛效应，保证数据的完整和联通，明确对数据的需求，才能从可用性高的大数据中提取有价值的信息，助力企业领导层做出正确决策。

大数据应用挑战之二：数据处理是薄弱环节

大数据产业链主要包括数据产生与聚集层、数据组织与管理层、数据分析与挖掘层以及大数据应用与服务层。数据组织与管理涉及虚拟化、数据安全、分布式文件系统、数据库、数据仓库、数据转换工具等软件销售与租赁；支撑数据组织与管理的存储设备、服务器、一体机等IT基础设施硬件的生产、销售与租赁；支撑数据组织与管理的平台规划咨询、系统集成、云存储等服务。

数据组织与管理实际就是处理数据，数据处理是日前整个大数据产业链的薄弱环节。大数据蕴藏的价值虽然巨大，价值密度却很低，需要对海量的数据进行挖掘分析才能得到真正有用的信息。但在数据挖掘分析之前，必须进行数据处理，其目的是从大量的、杂乱无章的、难以理解的数据中抽取出对某些特定的人群来说是有价值、有意义的数据，包括数据清洗，即过滤掉不完整的、错误的、重复的等不符合要求的数据，然后进行数据装载、查询、展现等。在这一过程中，如果数据源质量不佳或者代码不严谨，都会导致数据失真，误导决策。

为了充分实现数据资源的业务价值，企业往往通过一个数据平台／集成平台来进行数据质量控制，找出并修正隐藏的数据瑕疵，随时随地交付及时、可信的各种类型数据。

大数据应用挑战之三：数字时代的安全隐忧

大数据应用在带来巨大社会价值和商业利益的同时，受到利益驱使，也必然面临极大的风险。如果某一大数据产生的价值足以左右公司的发展，那么其所带来的安全隐患就是一个公司层面价值的角力。

一方面，大量的数据汇总涉及企业运营数据、客户信息、个人的隐私和各种行为的详细记录，对数据的合法抓取和使用需要法律保障。另一方面，在中国对于信息产权的界定不清晰，缺乏对信息的所有权、使用权和收益权的规定，这就导致了无法形成一个健全的信息资源市场，无法真正发挥市场在信息资源方面的优化配置作用。这就需要通过法律手段，对信息资源产权进行界定，以便公众理解哪些个人信息是可以获取的，获取的这些信息怎样使用以及个人是否允许这种使用。

在大数据时代，国家层面亟待完善对个人信息的法律保护；企业经营者应在保护数据安全和客户隐私方面积极制定相应的管理制度和办法，并加强数据中心的数据库软硬件建设和监管水平。

大数据应用挑战之四：人才匮乏成发展瓶颈

根据美国一家数据分析公司的发布“2015年数据科学状况”报告显示，在过去四年，全球数据科学家人数翻了2倍。而在麦肯锡的一份报告中显示，到2018年，仅美国就会面临14～19万数据分析专业技术人才以及150万数据分析管理人才缺口。需要“大数据”技能的岗位空缺呈现高速增长，其覆盖的方向有数据分析师、算法工程师、系统开发工程师、数据挖掘师、数据可视化设计师、数据后台开发工程师以及数据解决方案销售人员等。为满足企业数据系统化的需要，已有越来越多的企业将设置一个战略领导角色——首席数据官(Chief Data Officer，简称CDO)提上日程。CDO可以解决企业在数据利用上的难题以及为企业高层提供决策支持，但此职位应在模式成熟以后再设置。不仅如此，我们可以预见在大数据整理过程中，会有更多新兴角色的出现。

大数据的搜索和分析对复合型人才需求量大，也就是说大数据人才是需要掌握计算机软件技术，并具备数学、统计学等方面知识以及所应用领域专业知识的全才。在美国，已首创大数据专业，此专业合并了计算机、运筹统计学和金融学课程。

面对我国数据人才“求贤若渴”的现状，企业不仅需要大力招聘贤才，还要积极投入数据人员的教育和培训工作。企业可通过与高校联合培养人才，或与专业的大数据公司合作，或专门组建数据科学家团队，以解用人之急。

大数据驱动未来

大数据依存于各行业，形成大数据应用的广度与深度。从经济和产业发展的维度来看，中国经济社会的高速稳定发展，给大数据应用奠定了得天独厚的优势。

大数据应用趋势之一：大数据+全产业链

大数据的核心价值在于分析。利用数据分析，我们能够总结经验、发现规律、预测趋势、辅助决策，通过充分挖掘和释放海量数据资源中蕴含的巨大商机，推动大数据与各行各业的深度耦合、交叉创新。各大企业要想在这场变革中继续生存下去，唯有适应大数据，积极投身大数据。

在未来几年，大数据应用范围将覆盖全产业，应用技术和方法更加成熟，大数据应用市场规模将保持高速稳定的增长态势。当前拉动经济的“三驾马车”都显疲态，无论是互联网背景的企业，还是传统企业，都处于“深度焦虑”状态。随着互联网、移动互联网和大数据成为中国经济新一轮快速发展的关键推动力，信息消费成为拉动内需的新引擎，而找准大数据与传统产业的契合点，是提升运营效率和结构效率、推动产业升级转型的关键。因此，各产业都将深入挖掘大数据的价值，研究大数据的应用，可以说，大数据的全面深度渗透将有力地促进产业格局重构。

随着大数据应用技术的进步，一些缺乏互联网基因的传统企业也开始意识到大数据的应用前景，大有后发赶超之势。尤其在2015年5月，经李克强总理签批，国务院正式印发了《中国制造2025》，部署全面推进实施制造强国战略。这必将使以“互联网+制造业”为亮点的“工业4．0”迎来一轮发展大潮。“工业4．0”的概念强调工业化和智能化融合发展道路，我国一些制造业发达的地区开始率先借鉴。制造业或成为传统产业在大数据应用上实现后发赶超的先例，医疗、能源、化工、交通、零售等行业甚至文化领域，都在以大数据为发展契机，加速与信息技术的深度融合。在DT时代，传统行业的转型重构已刻不容缓。

大数据应用趋势之二：大数据应用激发信息技术革新

对大数据应用的需求激发了信息技术的革新。大数据是信息技术发展到一定阶段的产物，所以产业大数据除了具备产业特征外，与技术的相关性也极强。大数据处理关键技术一般包括：大数据采集、大数据预处理、大数据存储及管理、大数据分析及挖掘、大数据展现和应用(大数据检索、大数据可视化、大数据应用、大数据安全等)。近年来，数据存储技术、处理技术、分析技术等在不断创新和完善。随着大数据应用市场的发展，后期将刺激更广泛的技术革新，如：大数据的去冗降噪技术、新型的大数据表示方法、高效率低成本的大数据存储技术、非结构化和半结构化数据的高效处理技术，当然也包括适合不同环境的大数据挖掘分析工具。

因此，随着产业大数据应用需求的提升，技术革新的步伐将进一步加快，而这些技术的发展又将促进大数据在各产业领域的应用，成为产业大数据应用的助推器。可以预见，在不久的将来，计算机系统的数据分析和数据挖掘功能，最终会替代人脑假想与推测。一些看起来毫不相关的领域会由数据连接，数据将展现出前所未有的能量。

大数据应用趋势之三：大数据产业政策环境逐步优化

美国、日本、法国、韩国、澳大利亚等大数据先行国家均启动了推动大数据产业发展的政策改革，并把大数据产业发展提升为国家战略并大力支持；再进行配套政策重构，通过人才培养、资金保障、产业扶持，加强大数据研究，优化其发展环境，抢占大数据产业发展的制高点，使其成为推动国民经济社会发展的新手段。鉴于大数据已成为促进现代社会经济发展的关键因素，中国各级政府也纷纷制定相关政策来推动大数据产业深入发展。

2014年3月5日，李克强总理在十二届全国人大二次会议上做政府工作报告时说，“要设立新兴产业创业创新平台，在新一代移动通信、集成电路、大数据、先进制造、新能源、新材料等方面赶超先进，引领未来产业发展。”这是“大数据”首次进入政府工作报告中。特别是在2015年8月，国务院发布的《促进大数据发展行动纲要》里面明确提出要全面推进我国大数据的发展和应用。在五中全会的“十三五”规划建议中，更是首次提出了推行国家大数据战略。这足以见得大数据产业更将得到国家层面的全力支持，市场政策将逐步趋于完善，产业大数据应用政策环境将得到进一步优化。

2015年，是剧变的一年。全球化竞争格局日益凸显，中国经济结构面临转型，创业创新热潮风起云涌，大数据带给时代种种冲击。2016年，是融合与释放的一年。各国政府、机构和企业都意识到，大数据时代，缺少数据资源，无以谈产业；缺少数据思维，无以言未来。从国家发展战略到企业管理提升，大数据时代的机遇和挑战已不言而喻。正是在时代浪潮的推动下，大数据领域资本与技术蜂拥而至，思想舆论迅速传播……

在这样一个数据化、信息化时代，更需要有价值的思考与提炼；在这样一个多元价值观交互、信息碎片化传播的舆论环境中，更需要全局视野和系统思维。犹如每个个体不可能独立存活于世，数据也无法独立体现价值，大数据时代需要的不仅仅是“为我所用”，而是融者为王。掌握大数据、服务于大数据产业的企业或机构更需要统合思维、共同发展。

唯有此，才能让中国各个领域真正运用数据，真正让数据助力中国经济发展。正如里尔克所说：“未来走到我们中间，为了能在它发生之前很久就先行改变我们。”谁能够在面对未来时先行改变，谁就能对剧变无畏，做时代的王者。

前言 一切产业数据

第一部分 “大数据+”引爆商业变革

 第一章 浪潮之巅，大数据

第一节 大数据面纱揭晓

第二节 大数据厚积薄发

第三节 大数据浪潮排山倒海

第四节 大数据挖掘价值巨大

 第二章 走在商业化的路上

第一节 思维的革命

第二节 逆流的挑战

第三节 时代的机遇

第二部分 大数据爆发之时：已变革的18个领域

 第三章 大数据+医疗：用数据处方，治医疗顽疾

第一节 三大因素助力“大数据+医疗”发展

第二节 精准医疗：大数据打造微观医疗新时代

第三节 医药供给侧改革：大数据开创医药研发新模式

第四节 商业健康保险：大数据撬动健康保险新契机

第五节 案例分析：大数据破基因之谜

 第四章 大数据+商业零售：大数据告诉你， 谁是下一个阿里巴巴

第一节 精准营销、店铺管理和忠诚度管理是零售业永恒的话题

第二节 精准营销：把准消费者的“脉”

第三节 店铺管理：为顾客提供全方位服务体验

第四节 忠诚度管理：用大数据俘获用户的心

第五节 案例分析：ZARA用大数据“秒懂”顾客所需

 第五章 大数据+电信：聚焦商业模式探索

第一节 网络规划：大数据助推资源配置优化

第二节 市场管理：大数据支撑决策方式精准

第三节 运营管理：大数据引发管理模式再造

第四节 案例分析：“沃指数”让海量数据资产变现

 第六章 大数据+农业：数据细雨，滋润沃土

第一节 配方农业：因地种植，按需施肥

第二节 供需监测：动态预警，调控产销

第三节 信息追溯：透明可控，食之无忧

第四节 案例分析：大数据打造渤海粮仓传奇

 第七章 大数据+交通：智慧交通发展新引擎

第一节 大数据解交通困局

第二节 大数据提升高速公路运营管理

第三节 出租车GPS轨迹数据挖掘思路

第四节 “公交神器”玩转大数据

第五节 案例分析：高德交通——智能出行，解决拥堵

 第八章 大数据+汽车：未来汽车进化论

第一节 大数据让汽车行业“动力强劲”

第二节 大数据+车联网：体验全方位的视觉盛宴

第三节 大数据+无人驾驶：汽车也有自己的智慧

第四节 大数据+汽车研发：效率和质量的“双驱动”

第五节 案例分析：修车宝——用大数据颠覆传统汽车维修

 第九章 大数据+物流：数据驱动，护航物流

第一节 物流供应链风险管理：提供安全运营保障

第二节 物流配送路线优化案：提升物流运输效率

第三节 大数据路由分单：精准分拣

第四节 案例分析：菜鸟网络率先垂范

 第十章 大数据+金融：创新金融，惠普大众

第一节 大数据+银行：重塑风控模式

第二节 大数据+保险：定制用户产品

第三节 大数据+投资：指导投资收益

第四节 案例分析：信用卡用户背后的价值

 第十一章 大数据+智慧城市：搭数据快车，建智慧之城

第一节 大数据与智慧城市之辩

第二节 城市规划：开启全民规划时代

第三节 政府治理：治理变革必然之路

第四节 政府舆情监测：精准研判，科学决策

第五节 案例分析：大数据推进政府治理能力

 第十二章 大数据+安监：数据之眼，防微杜渐

第一节 安监新形势下蕴藏的新商机

第二节 基于大数据的安监预警体系

第三节 安监大数据筑智慧应急平台

第四节 案例分析：大华股份——智慧安监的领跑者

 第十三章 大数据+电力：电力智能化的发动机

第一节 精细化电力：迎来智能电力生产里程碑

第二节 精准化调度：电网“高速路”的“指挥官”

第三节 智能需求侧管理：电力最后一公里的“感知术”

第四节 案例分析：中国电谷“智能电网第一极”

 第十四章 大数据+环保：拨开云雾见青天

第一节 政府开启“大数据+环境治理”新篇章

第二节 污染源监管：企业污染排放“预警器”

第三节 智能环卫监管：大数据助力环卫革新

第四节 案例分析：智慧环卫云改变城市新气象

 第十五章 大数据+教育：发现每一个学生的成长

第一节 大数据催生教育新形态

第二节 个性化学习评价：大数据打造教育评价新工具

第三节 慕课教育：穿越时空的教育资源对接

第四节 案例分析：学堂在线——高等教育的“私人定制”

 第十六章 大数据+媒体：促进传媒行业转型

第一节 广电媒体运营管理提升

第二节 平面媒体数据资源优化

第三节 新媒体营销方式大变革

第四节 案例分析：传媒数据资产增值之路

 第十七章 大数据+影视：开启影视行业的理性思维模式

第一节 大数据与影视行业激情碰撞

第二节 大数据让影视投资价值评估尽在掌握

第三节 大数据推波助澜，网络自制节 目“扬帆起航”

第四节 电影营销的盲目宣传时代已逝

第五节 案例分析：大数据与电影艺术相遇之《小时代》系列

 第十八章 大数据+体育：开启体育产业的美好时代

第一节 大数据思维加快体育产业创新

第二节 大数据升级体育赛事播放新玩法

第三节 大数据嗨翻体育迷

第四节 大数据“算”出致胜秘诀

第五节 案例分析：大数据与高尔夫球手的“训练革命”

 第十九章 大数据+航空：航空产业飞向新高度

第一节 大数据掘金航空产业

第二节 精细服务：大数据时代下的智慧旅游

第三节 安全飞行：大数据保障下的航空安全

第四节 案例分析:“飞常准”——查航班，先知晓

 第二十章 大数据+智能家居：构筑“知心小屋”

第一节 大数据+家庭娱乐系统：打造个性化居家生活

第二节 家电智能控制：数据营造舒适生活体验

第三节 大数据安防：“万无一失”的“防御之网”

第四节 案例分析：海尔U-home——全新生活方式专家

后记 大数据预见未来

一切产业皆数据

人类社会的进步和历次产业革命的发生都与科技创新息息相关，蒸汽机、电话、互联网技术均属此列。这些里程碑式的科技创新在体现先进性的同时，还展现出一个共同特点：契合时代发展的需要。思考当代科技，大数据恰恰迎合了当今社会发展的需要。早在2009年，互联网巨头谷歌公司利用大数据分析成功预测到甲型H1N1流感在美国的爆发，由此，大数据闯入了公众视野。在此后的短短数年里，这场数据风暴使整个商业领域重新洗牌，大数据已然成为关键的生产要素，这场以大数据为标志的第四次工业革命正在加速到来。

海量数据的采集、积累、分析和利用革新了人们对各行业的认识和策略选择。人们通过充分挖掘数据要素的价值，极大地促进了生产效率的提高。亚马逊的前首席科学家安德烈亚斯维真德（Andreas Weigend）指出：“数据是新的石油。”IBM首席执行官罗睿兰认为：“数据将成为一切行业当中决定胜负的根本因素，最终数据将成为人类至关重要的自然资源。”大数据的价值堪比黄金、石油，但又不像它们那样稀缺。大数据是人类活动产生的资源，取之不尽，用之不竭！时时刻刻都有超出想象的数据产生，借助计算机日新月异的发展和日趋降低的存储成本，数据的获取和积累将变得更加容易。预计到2020年，全球数据使用量将达到约400亿TB，这些数据涵盖经济社会发展的各个领域，在这座巨大的金库里蕴藏着无限商机。

2012年3月，美国白宫科技政策办公室发布《大数据研究和发展计划》，率先将大数据提升到国家战略的高度。2014—2015年，大数据已14次成为我国国务院会议的“座上客”，特别是在2015年8月，国务院发布的《促进大数据发展行动纲要》里面明确提出要全面推进我国大数据的发展和应用。在“十三五”规划建议中，更是首次提出了推行国家大数据战略。在政策的积极引领下，大数据已经成为推动经济发展的新引擎。

在我国，大数据的应用已经渗透到农业、零售、通信、金融、物流等多个产业并发挥了关键作用，在带来经济效益的同时也带来了巨大的社会效益。举例来说，作为农业大国，农业建设历来都是我国的一号工程，可上千年来我国并没有摆脱“靠天吃饭”的命运。有了大数据之后，通过分析全国气象数据，可以推断明年哪些地区可能会有洪涝灾害、泥石流，哪些地区的农业可能有减产的风险等，进而有理有据地指导农业实现精益生产。

在数据的商业海洋里，早有大批掘金者在其中摸爬滚打。这些大数据先行应用者的实践无不证明了数据驱动下的商业策略才是在竞争中取胜的关键，谁掌握了大数据技术，谁就拥有了未来的市场。

本书涵盖了大数据领域最新技术实践和最热门的行业应用，深入垂直行业，探讨企业大数据实践之道，详细分析18个行业的商业价值、面临挑战、解决之道和发展之势。

在DT（Data Technology）时代，大数据所到之处，即会触发全产业链的创新和变革。无论是企业还是个人，不仅需要在剧变中笃定信念，更需要采用科学的方式——使用大数据打开通往未来的通道！

编者

2016年1月

在DT(Data Technology)时代，大数据思维所到之处，即会触发全产业链的创新和变革。无论是企业还是个人，不仅需要在剧变中笃定信念，更需要可掌控的、科学的依据——大数据为人类打开了未来的通道！

王叁寿主编的《大数据商业应用场景》以大数据产业的发展特点与趋势变化作为铺垫，以典型行业的商业应用为主线进行逐一分析和举例，为读者详细解析18个行业大数据的应用之道，为探索企业大数据实践提供参考。

在DT时代，大数据思维所到之处，即会触发全产业链的创新、跨界、变革。无论是企业还是个人，不仅需要在剧变中信念笃定，更需要可掌控的、科学的依据——大数据来为人类打开未来的通道！王叁寿主编的《大数据商业应用场景》以大数据产业的发展、特点与趋势作为铺垫，以18个典型行业的具体商业应用为主线进行逐一的描述、分析、举例，探索企业大数据实践之道。