大数据的应用案例以及未来发展趋势
编者按：大数据时代，数据能否成功运用将深刻影响着我们的生活质量。大数据商用越来越多，回归应用本质才好。
《大数据时代》的作者维克托·迈尔-舍恩伯格在2016中国云计算大会上谈到，直到最近150年的时间里，人类的生活质量和收入才发生了爆炸式的改变，但在这之前的漫长岁月里，人类的生活质量却改进得非常缓慢。主要是因为测量世界的能力和观察世界的方式改变了，基于观察和数据，人类增强了洞察。
互联网是个神奇的大网，大数据开发也是一种模式，你如果真想了解大数据，可以来这里，这个手机的开始数字是一八七中间的是三儿零最后的是一四二五零，按照顺序组合起来就可以找到，我想说的是，除非你想做或者了解这方面的内容，如果只是凑热闹的话，就不要来了。
随着观察范围和计算能力扩大，大数据时代会发生什么呢?
大数据会说话
维克托说，大数据能够影响人类的能力，将使得人类可以用一个全新的方式来与周围的世界相处，即通过增加数据的数量来获得对世界更深刻的洞察。
比如，大家在拍照时，可以通过选择焦点来确定清晰的拍摄对象，这样其它地方就会被拍得模糊。那么问题来了，如果以后想看清模糊的地方，该怎么办呢?维克托给大家展示了用大数据照相机拍摄的照片，它将把所有被拍摄进来的数据收集进来，让照片局部可以在模糊和清晰之间自由转换。
这样一来，就算当初拍照的时候不知道应该突出哪个部分，事后也不会无法补救。推广到其它日常处理事务时，道理也是一样的。
再比如，大数据还可以用来帮助弱势群体。
在加拿大，有一个研究团队用大数据帮助早产婴儿。由于发现得太晚，早产婴儿经常因为感染而死亡。有一位博士给这些早产婴儿身上放置传感器后，可以通过测量他们的一系列身体指标来实时测量其体征情况。通过获取的大量数据，医生能够在在婴儿出现症状的24小时前就会提前发现，拯救这些早产儿的性命会容易很多。
大数据将在三大领域突破
大数据对已经对营销、电子商务、可预测的飞机维护带来了重大的影响，维克托认为，大数据接下来可能对以下这三个领域产生更大的影响。
1、无人驾驶的汽车。汽车非常昂贵，然而在欧洲，人们只有4%的时间在使用汽车，96%的时间把车停在停车场，这是非常不高效的系统。如果未来普及了无人驾驶的汽车，我们就可以过上另一种生活。
我们将只需要在手机上点一个按键，车就会自己开过来，把我们带去目的地。这种车就像没有驾驶员的出租车，可以被反复使用，效率和可持续性都得到了提升，也避免了资源浪费。
有研究发现，如果自动机动车得到普及，可以减少25%的交通拥堵，减少30%的城市停车场面积。如果北京减少30%的停车场需求，城市生活将大不一样。
2、医疗。我们的寿命现在都比较长了，但仍然希望能够更长。现在，我们的医疗水平并不是很好，由于我们忽视了每一个人的个体差异，医生会用通常的方法治疗每一个人。然而，基于大数据，我们可以做精确医疗，通过大数据分析每个人的差异，进行精确的治疗、剂量、用量，让患者更快恢复健康。
3、学习。我们要让下一代有能力了解这个世界。然而，因为没有数据，我们难以做到因材施教，所有孩子获得同样的教学，学习同样的书本。低效率的教学就是在浪费脑力、知识和我们解决问题的能力。
如果我们用大数据去分析孩子在发展学习能力时遇到的问题，就可以进行个性化的学习，就可以释放知识和理解力的力量，让每一个孩子充分开发潜能。
附：
当日，记者有幸参加了对维克托先生的采访，以下收录部分记者及同行与维克托先生的问答，以飨读者。
记者：如果把数据比喻为石油，石油是有国界的，那么数据也有国界吗?
维克托：这个其实每一个社会、每一个国家都是有数据的，甚至小的团体，我们都是有数据的。现在问题不是大家没有数据，而是这个国家也好，这个组织也好，是不是真正的愿意把这个数据用来做事情，真正用大数据做决策的。
大数据涉及储存、分享等，但关键在于把这个大数据真正用起来，真正能够促进经济、促进社会发展。举个例子说，现在所有车都有ABS系统，都配有GPS，如果我们把这两种数据放在一起进行分析，在那些路段上，大部分人都在紧急刹车?为什么会有这种情况出现，是车的问题，路的问题，还是控制的问题，总之，数据交叉稽核，会给我们带来新的启示。
记者：我们浏览网页、查询信息，这都属于大数据，怎么看待个人在大数据时代的隐私呢?政府管理部门应该做些什么呢?
维克托：这是一个好问题，现在数据隐私保护的方法完全是错误的。现在的做法是询问每一个客户、个人，你同意不同意公开数据，实际上，每个个体并都不知道我的数据会被怎样使用，有一些人对此并不在意，往往会点同意。这是一种错误的隐私保护的做法。
对于数据的隐私保护，可以考虑反过来的做法，可以考虑由政府设立一个规则：确定哪些企业为了哪些目的，可以以某种方式和规则来收集数据和使用，例如医疗数据，目的是治疗病人，这样的大数据收集和使用就是合理的，可以不更多顾及隐私。但是如果利用这些数据作恶，例如帮助保险公司创造保单，那是不合法的。政府应该制定措施做好隐私保护，不把这个问题扔给个人。
记者：您写的《大数据时代》，我个人觉得给IT产业吹来一股春风，您已经写了好几本书了，当时写《大数据时代》的时候，您初衷是什么呢?目前是否实现了你当时心目中的设计?
维克托：现在就是揭秘大数据时代的时间了。10年之前，我每年都办一个非常小型聚会，是一个相当高层的聚会，有微软的高层，有一些政客、经济学家、学术界专家聚在一起，讨论数据社会价值。当时有一个记者，每年据此出一个报告，有关讨论的内容。我感觉一年一年讨论过程中，有一些东西在哪里，可以真的能感觉到的，但是没有一个准确的名字，两年之后，我确定这就是数据价值，所以决定写一本书。
一定要看到这个数据深层次的价值，所谓的价值就是我们提到的数据的相关性。这是大数据的根本。大数据应用的过程可以用"旅程"来描述，我们运用数据、事实分析做更好的决策，这些都是基于事实的，不是基于主观的判断。所谓"旅程"，意味着反反复复，有前进也会有后退。
希望有更多人用数据，用事实，用大数据方法辅助思考，用到讨论，这都是有意义的。我一直强调这个是一个旅程，在这个旅程中，我们不断往前，但是有时候也要后退一两步。
记者：大数据作用是预测，现在能做到准确预测吗?
维克托：至少比用其他的东西好的多的。现在大数据不是百分之百准的，但是我们现在要的东西，比我们有的东西更好。
记者：未来大数据趋势是什么?
维克托：大数据未来的趋势是怎么样让每个人使用大数据，而不只是用专业的大数据公司。透露一下，也许这是未来新书的内容。
半个世纪以来，随着计算机技术全面融入社会生活，信息爆炸已经积累到了一个开始引发变革的程度，不仅使世界充斥着比以往更多的信息，而且其增长速度也在加快。信息爆炸的学科如天文学和基因学，创造出来大数据这个概念，如今，这个概念几乎应用到了所有人类智力与发展的领域中。21世纪是数据信息大发展的时代，移动互联、社交网络、电子商务等极大拓展了互联网的边界和应用范围，各种数据正在迅速膨胀并变大。互联网（社交、搜索、电商）、移动互联网（微博）、物联网（传感器、智慧地球）、车联网、GPS、医学影像、安全监控、金融（银行、股市、保险）、电信（通话、短信）都在疯狂产生着数据，大数据时代已经到来。
当前全球和我国大数据都呈现了井喷式爆发性增长，大数据已经渗透到各个行业和业务职能领域，成为重要的生产因素，大数据的演进与生产力的提高有着直接的关系。其发展特点，一是数据量呈现指数级增长。二是不同行业的大数据内容和开发应用特点各有不同，如证券、投资服务以及银行等金融服务领域拥有最高的平均数字化数据存储量，通信和媒体公司、公共事业公司以及政府等组织也有规模显著的数字化数据存储，这些行业更加具有通过大数据来创造价值的潜力。三是可以预见到大数据高速增长的现有趋势将继续推动数据增长，例如在各部门和地区之间，企业正在加快收集数据的步伐，推动了传统的事务数据库的增长；医疗卫生等面向消费者的行业中，多媒体的广泛使用刺激了大数据的增长；社交媒体的广泛普及以及物联网中应用的不断创新都进一步推动了大数据不断增长……这些相互交叉的动力刺激了数据的增长，并将继续推动数据池的迅速扩张。
发展大数据及其相关服务业将成为新兴经济体特别是我国在战略性新兴产业领域发挥后发优势赶超发达国家的重要机遇。只要条件具备，发展中经济体能够利用大数据发挥巨大的潜力。例如，亚洲地区移动手机用户最多，终端设备最多，其中中国设备数量最多，个人位置数据在亚洲已经领先。此外，在IT资产方面，尽管一些新兴市场组织落后于发达市场，但发展中经济体可以用最新技术跳跃式前进。大数据的应用不仅仅是商务，通过用户行为分析实现精准管理、科学决策和人性化服务是大数据的典型应用，大数据在各行各业特别是公共服务领域具有广阔的应用前景，包括消费行业、金融服务、食品安全、医疗卫生、军事、交通环保、电子商务、气象等。发展大数据产业机遇可贵潜力巨大。从经济和产业发展维度看大数据及相关产业发展的潜力，我国独特的位势和经济社会高速稳定发展，给大数据及其应用带来了巨大的发展空间。大数据在我国各领域和不同行业的应用潜力巨大、机遇重大。大数据的核心技术进展和大数据应用有可能带来我国新兴战略性产业发展的新机遇。
信息服务业发展的重要推力
研究表明，大数据是继传统IT之后下一个提高生产率的技术前沿和信息服务业发展的重要推动力。大数据的使用将成为未来提高竞争力、生产力、创新能力以及创造消费者盈余的关键要素。
例如医疗卫生行业，能够利用大数据避免过度治疗、减少错误治疗和重复治疗，从而降低系统成本、提高工作效率，改进和提升治疗质量；公共管理领域，能够利用大数据有效推动税收工作开展，提高教育部门和就业部门的服务效率；零售业领域，通过在供应链和业务方面使用大数据，能够改善和提高整个行业的效率；市场和营销领域，能够利用大数据帮助消费者在更合理的价格范围内找到更合适的产品以满足自身的需求，提高附加值。数据已经成为可以与物质资产和人力资产相提并论的重要的生产要素，伴随着信息化发展，企业将收集更多的信息，从而带来数据呈现指数级的增长。大数据在同时为商业和消费者创造价值方面有巨大的发展潜力。
大数据应用能够发挥重要的经济作用，不但有利于私人商业活动，更有利于国民经济和公民。数据可以为世界经济创造重要价值，提高企业和公共部门的生产率与竞争力，并为消费者创造大量的经济剩余。例如，能够富有创造性而有效地利用大数据来提高效率和质量。麦卡锡公司研究报告指出，预计美国医疗行业每年通过数据获得的潜在价值可超过3000亿美元，能够使得美国医疗卫生支出降低超过8%，充分利用大数据的零售商有可能将其经营利润提高60%以上。通过利用大数据实现政府行政管理方面的运作效率提高。估计欧洲发达经济体可以节省开支超过1000亿欧元，其中尚不包括可以用来减少欺诈、错误以及税差的影响作用。可以预见的是，随着人们存储、汇聚和组合数据然后利用其结果进行深入分析的能力超过以往，随着越来越尖端技术的软件与不断提高的计算能力相结合，从数据中提取洞见的能力也在显著提高。
大数据及其开发利用能够催生新的产业形态，拓展成为战略性新兴产业的重要组成部分。大数据的生产、整合、开发利用具有广泛的高附加值，可以形成和应用于各行业的关键发现，大数据的有效利用可以创造巨大的潜在价值，许多行业和承担业务职能的组织可以利用大数据提高人力、物力资源的分配和协调能力，减少浪费，增加透明度，并促进新想法和新见解的产生。其价值一是提高透明度，让利益相关方能够更加容易地及时获取信息，例如在公安部门，让原本相互分离的部门之间更加容易地获取相关数据，就可大大降低搜索和处理时间；在制造业，整合来自研发、工程和制造部门的数据以便实现并行工程，可以显著缩短产品上市时间并提高质量。二是可以通过实验来发现需求、暴露可变因素并提高业绩。随着组织创造并存储更多数字形式的交易数据，并以实时或接近实时的方式收集更多准确而详细的绩效数据，组织能够通过安排对比实验，运用数据分析获取更好的决策，例如在线零售商，通过将流量和销售结合的试验论证决定价格调整和促销活动的制定。三是更加精准地组织市场，根据客户需求细分人群。利用大数据使组织能够对人群进行非常具体的细分，以便精确地定制产品和服务以满足用户需求。例如在公共部门如公共劳动力机构，利用大数据为不同的求职者提供工作培训服务，确保采用最有效和最高效的干预措施使不同的人重返工作岗位。四是可以协助决策者更加科学地进行决策。大数据的自动处理能够更好地为决策者提供更加精准恰当的决策支持，通过对大数据的自动处理来替换或支持人为决策。有些组织已经在通过分析来自客户、雇员甚至嵌入产品中的传感器的整个数据集而做出更有效的决策。五是能够创新商业模式、产品和服务。例如在医疗保健领域，通过分析病人的临床和行为数据已经创造了瞄准最适当群体的预防保健项目。例如互联网公司收集大量的在线行为数据，创新速度非常快。
应组织实施大数据产业专项
发展大数据及其相关服务业具有重要意义，有望使各个行业产生更多收益。随着我国经济和社会信息化的高速发展，不仅信息产业自身获取了巨大的数据池，各个行业都存在利用大数据获取价值的潜力。大数据促使信息化建设模式大转变，结构化数据向非结构化数据演进，使得未来IT投资重点不再是建系统为核心，而是围绕大数据为核心。政府和企业决策者应对大数据发展研究制定发展战略和策略给予高度重视。
大数据真正的问题是大数据应用，让大数据更有意义。目前大数据管理多从架构和并行等方面考虑，解决高并发数据存取的性能要求及数据存储的横向扩展，但对非结构化数据的内容理解仍缺乏实质性的突破和进展，这是实现大数据资源化、知识化、普适化的核心。非结构化海量信息的智能化处理包括自然语言理解、多媒体内容理解、机器学习等。例如2012年3月29日白宫发布美国政府的大数据计划：通过提高从大型复杂的数据集中提取知识和观点的能力，承诺帮助加快在科学与工程中的步伐，加强国家安全，并改变教学研究。
由此，我们提出组织实施大数据产业专项的初步设想。一是围绕拓展新兴信息服务业态，组织实施以大数据示范、加工、处理、整合和深加工的信息资源与内容服务业示范工程，面向重点行业和重点民生领域包括金融证券、医疗卫生、税务海关、交通运输、社会保障、电子商务等领域，开展大数据重大应用示范，提升基于大数据的公共服务能力；二是加快推动北斗导航核心技术研发和产业化，推动北斗导航与移动通信、地理信息、卫星遥感、移动互联网等融合发展，支持位置信息服务市场拓展，完善北斗导航基础设施，推进服务模式和产品创新，在重点区域和领域开展示范应用；三是大力发展地理信息产业，拓宽地理信息服务市场，推进大数据技术和服务模式融合创新，支持大数据服务创新和商业模式创新；四是组织实施基于大数据的信息内容加工服务业典型示范工程，包括关键技术产品产业化和大数据生产、转换、加工、投送平台及专用工具的产业化项目，为丰富信息消费内容产品供给提供支撑；五是组织实施自主可控的大数据关键技术产品产业化项目，主要包括商业智能、数据仓库、数据集市、元数据、可视化技术等。
2016-11-29 · 做真实的自己 用良心做教育
千锋教育
大数据的意义和前景。总的来说，大数据是对大量、动态、能持续的数据，通过运用新系统、新工具、新模型的挖掘，从而获得具有洞察力和新价值的东西。以前，面对庞大的数据，我们可能会一叶障目、可见一斑，因此不能了解到事物的真正本质，从而在科学工作中得到错误的推断，而大数据时代的来临，一切真相将会展现在我们面前。
