大数据:预测集体行为的新工具

2017-03-21 01:25  来源:数据观

  大数据预测集体行为的新工具

  ——访美国华盛顿州立大学经济学院副教授严佳

  信息数据化后,具有很强的积累性,信息成为一种生产要素。那么,数据在推进企业的战略管理、产品定价、用户挖掘等方面能够发挥怎样的商业价值?未来的大数据技术又将如何发展?带着这些疑问,记者专访了美国华盛顿州立大学经济学院副教授严佳。

  【人物名片】严佳,美国华盛顿州立大学经济学院副教授。2002年,获得美国尔湾加州大学经济学博士学位。2002至2004年在美国ChoiceStream公司担任高级数据科学家。2004至2007年在香港理工大学工商管理学院担任助理教授。2007年至今,严佳担任过美国布鲁金斯学会的访问研究员,悉尼大学和南开大学的访问教授,并于2013获得华盛顿州立大学终身教职。

  “今天,我们日常生活中生成的大数据已成为了解和预测我们集体行为的新技术。”

  大数据深度分析需专业理论指引

  记者:如今大数据产业越来越火,大数据企业也雨后春笋般成长起来。在您看来,目前国内外的大数据技术发展到哪一步?

  严佳:过去几年大数据技术在以下方面取得了巨大的进步。第一是数据的采集技术。新兴互联网产业帮助我们收集了大量的有关个人行为和生产过程的数据,如,社交网络和各种线下到线上的商业模式的兴起、智能移动和穿戴设备的普及、物联网技术的发展。第二是大数据基础设施。如,开源的分布式大数据存储和分析技术、更快速处理数据和支持图像处理的计算机芯片技术、处理非格式化的数据库技术以及大幅降低中小企业利用大数据成本的云服务技术。第三是大数据的分析软件。如,能够将复杂大数据图示化和对大数据进行统计分析的软件技术。第四是大数据在各行各业的应用。如,商业智能、金融科技、自动驾驶等。

  从目前情况看,未来一段时间大数据技术的发展在以下几个方面将引人关注。第一是大数据的云计算平台。从事大数据的分析有较高入门门槛,简单易操作的云计算平台的出现可以让大量不具备数据分析技术的用户也可以享受到大数据分析带来的好处。第二是大数据的深度分析以及在深度分析基础之上的人工智能技术。现在的大数据技术已经能够让我们快速准确地从大量繁杂的数据中总结数据特征,但还不足以让我们了解背后数据产生的机理。大数据的深度分析更侧重于分析数据的结构以及数据产生的原理,在深度分析基础之上的人工智能技术能大幅提高人类生产效率。第三是大数据在各个垂直细分领域的深度运用。与前几年大数据技术在各行各业的广泛运用不同,未来我们可能看到很多初创公司深耕于特定细分领域,结合对该领域的专业知识和大数据分析技术,对该领域面临的难题提出解决方案。

  总之,数据分析技术的进一步发展取决于基础学科理论,如数学、物理、生物医学、计算机科学、经济学和心理学的发展,并在专业理论指引下对各个领域的大数据进行深度分析。

  记者:您认为大数据技术给社会和个人带来了哪些变化?

  严佳:大数据正在改变一切。今天,我们日常生活中生成的大数据已成为了解和预测我们集体行为的新技术。未来,在强大的数学工具和计算机的帮助下,我们将进一步了解人类社会的普遍规律。

  建高效数据交易市场需打破信息孤岛

  记者:目前,交通、网络交易等领域已经运用大数据技术让管理更加便捷有效,但很多领域信息孤岛现象依旧存在。在您看来,如何打破这些信息孤岛?

  严佳:打破信息孤岛的办法是建立高效的数据交易市场,让数据在市场上根据需求流通整合。但一个高效的数据交易市场难以建立起来,主要原因包括:第一,原始数据作为一种资产,产权在很多时候比较模糊,产权不清晰使得数据交易难以进行;第二,许多孤立存在的数据本身价值并不大,需要和其他数据源相结合才能实现价值。众多孤立存在的低价值的数据源增加了数据交易的信息搜索成本。

  根据这两个原因,我们可以找出打破信息孤岛的办法。第一是通过立法界定数据产权。以微信为例,尽管个人信息不属于微信,但在个人信息上加总的一些脱敏的有价值的信息可以作为微信的资产进行交易。第二是鼓励数据交易中心和数据技术服务商合作,让数据技术服务商成为数据交易市场的“做市商”,根据市场需求加工、清洗和整合孤立存在的数据源,从而降低数据交易的信息搜索成本。

  大数据技术发展有无限潜能

  记者:您为企业和国际组织提供过许多基于数据分析的咨询业务,能否分享几个案例?在提供咨询业务的过程中,您觉得大数据技术还有多大的发展潜能?

  严佳:当前,我和合作伙伴一起为优步公司(UBER)提供基于大数据的分析咨询。在和优步公司的合作研究中,我们首先利用第三方大数据分析美国10个大城市的居民出行选择行为。我们把每一个城市划分为4平方英里的不重合的小区,通过出行大数据估计出在每两个小区之间出行选择行为。然后利用优步公司自身数据,估算优步的出现给城市出行者带来的好处。

  我认为,大数据技术的发展潜能是无限的。尽管现在我们收集的有关个人、经济、社会的数据越来越多,大数据存储和利用的技术越来越先进,但我们对个人、经济和社会的认识还是非常有限,加深这些认识需要进一步挖掘大数据技术,并在人工智能技术上不断取得突破。同时,数据的不断积累和数据复杂程度的不断增加也会对大数据技术提出新的要求。(记者王婉)

作者:王婉 编辑:陈嘉新