智库跟踪 | IMF——大数据：潜力、挑战和对统计工作的启示

再不点蓝字关注，机会就要飞走了哦

前言

《全球竞争力报告》的竞争力排名以全球竞争力指数为依据。全球竞争力指数由世界经济论坛于2005年提出，是“决定一个国家生产力水平的一整套制度、政策和影响因素的集合”。竞争力指数评比指标分为3大类，共12项具体的支柱指标。今年的报告对全球137个经济体进行指数排名，结果显示：瑞士连续九年成为全球最具竞争力的经济体，美国、新加坡紧随其后。排在榜单第4至10位的分别为：荷兰、德国、中国香港、瑞典、英国、日本和芬兰。中国排位比去年上升一位，全球排名第27位。报告在10年的数据基础上提出了三点关注：一是破坏金融系统的风险犹存；二是人力资本对经济竞争力的增强作用；三是创新成果转化推动力欠缺。

2017年9月，国际货币基金组织（IMF）统计部门下属的大数据研究组（2016年8月成立）发布员工讨论记录（Staff Discussion Notes ，SDN），其观点不代表官方意见，供各界讨论。

（一）概要

这份工作人员讨论报告介绍了宏观经济和财政统计领域内，大数据的潜力、挑战和统计学意义。报告提及了各种发布“官方”数据和统计数据的单位，并涵盖了利益相关的使用者和生产者。在任何社会和经济层面，良好的数据和统计作为战略要素，对于私人和公共部门的政策健全和决策都是至关重要的。目前，许多私营企业、国家和国际组织都认为，“大数据”不仅仅是一个时髦词汇，而是一个需要远见卓识的中期概念。

大数据是一个演进中的概念，可以为经济和财政分析提供创新的、实时、细致的参考。然而就单个国家而言，大数据的使用机会将是不对称的，这将取决于国家的特点，以及能够提供大数据的系统和网络使用的能力。统计数据的编辑者和使用者在开始地将大数据融入到他们的工作计划中时，必须意识到大数据所带来的机遇，挑战，以及对官方统计数据的影响。

大量的大数据应用程序已经开始执行，无论是被使用者还是被数据统计的编辑者。然而，一个系统且有组织的讨论尚属空白：，即大数据宏观经济和财政统计的影响。同时，进一步研究和详细分析有助于了解大数据是否能够直接或间接地支持IMF的监督工作，这一点至关重要的。

大数据的定义是什么？虽然没有达成一致的定义，但其特点通常用3v来形容——高容量，高速度和高多样性。随着时间的推移，越来越多的v被添加进来，比如准确性和时效性。与基于特定用途的统计数据不同，大数据可以看作是由商业和行政系统、社交网络以及物联网的副产品组成的。为了讨论这个问题，本文提出了一种与宏观经济和财政统计相关的大数据分类。

大数据具有怎样的潜力？大数据可以对宏观经济和财政数据带来有益的影响，最终通过以下三个方面为制定决策者提供便利：

1. 回答新问题并产生新指标；

2. 缩短官方统计数据在时间上的滞后，并对现有指标的预测提供支持；

3. 作为官方统计数据的一个创新数据来源。

大数据带来了哪些挑战？数据质量问题，访问困难，以及需要新的技能和技术是大数据的主要挑战。虽然大数据主要衡量的是洞察力、相关性、趋势和情绪，但根据国际公认的标准，但详细的逐国时间序列数据仍然是衡量和监测各国经济表现和政策的关键所在。

对统计工作的启示：未来，国际统计合作是克服大数据所带来挑战的关键，也是在国家和国际统计机构、使用者和数据所有者之间建立持久伙伴关系的关键。这需要各利益相关方在其组织中建立所需的技能和技术。对于国家统计机构来说，机遇、挑战和潜在的影响是特别高的：将大数据作为新的数据源加入，无论是补充还是取代传统的数据源，在方法、组织和预算方面的都会遇到挑战。

大数据项目的成功不在于实现一个特定的技术，而是基于人与流程建立一个环境，推动大数据的创新，并驱动其生效。考虑到处理大数据所需的各种技能，它也为组织提供了一个机会来打破组织内部壁垒，包括数据与统计数据的使用者和生产者之间的壁垒。

对于一个组织机构来说，从单独的大数据应用到形成系统的、定期的、大规模统计数据产出，在投入大量且耗时的投资之前，应该从一个概念的证明开始，从组织的角度上证明项目的价值和可行性。统计机构应该根据具体情况做出决定，并选择最有希望的大数据项目来补充现有的统计数据。此外，为了跟上形势，各机构应该主动寻找大数据来源，以解决最紧迫的研究需求。选定的大数据项目也可能被纳入能力开发活动，使成员能够建立他们从可用的大数据源获益的能力。展望未来，研究和汇编优秀项目——统计技术和方法，能够解决准确性和时效性问题，这将成为统计学领域的首要议程。

考虑到大数据不是静态的，而是动态的，生成大数据的系统和网络技术在不断地发展，伴随着大数据产生更多可能性、挑战和局限性。因此，随着大数据和官方统计数据的发展，本文所做的评估需要重新审视。

（二）潜力

大数据打破了传统的从数据角度寻找因果关系的方法。尽管大数据的有效性和使用方法仍在不断演变中，但毫无疑问，大数据将彻底改变我们看待信息的方式。在某些情况下，大数据可以让政策分析更加细致，洞察深层次隐藏的信息以便更好地做出政策响应。在IMF的大数据和分析研讨会之后，IMF为在未来工作中利用大数据的创新方式做好了铺垫。并且，大数据有助于更好地衡量财政包容性、财政服务和经济增长的影响。IMF和其他组织可以利用大数据对目前由第三方提供的监测指标进行交叉核对，并评估方法、数据源和指标的质量。

更快的洞察力是大数据的最大的优势之一，财务关键数据几乎可以即时观察到。大数据的使用创造了一个机会，可以在几乎实时的情况下提取经济财政信息。短时预测(或实时预测)已经在许多指标中被广泛应用于私有和公共部门。其他突出的例子包括旅游、就业、零售业和贸易流等。

世界范围内关于官方统计数据在大数据时代应该如何演变的讨论结果显示，统计机构正开始经历重大变化。将大数据纳入官方统计数据的策略将从部分到完全取代现有的统计资料。编辑者正在就大数据项目开展创新，以改进和补充传统数据源。在许多国家，大数据可能是一种低成本、高质量的数据源，用于编制官方统计数据。为了保持领先地位，统计机构应抓住大数据带来的新机遇，为使用者提供更多的服务。

（三）挑战

在政策制定方面，从大数据中获得的趋势和指标对于政治和声誉的风险应当降到最低程度。任何新数据源的适用性都需要根据核心特性进行评估，如准确性、可持续性和方法可靠性。许多类型的大数据都不能代表随机样本，这同样为大数据的使用带来挑战。基于大数据的指标时间跨度很短，并且其连续性无法得到保证。

大数据的起源和创建大多不在国家或国际机构的控制范围之内，而管理数据明显例外。在使用大数据时，隐私、机密性和网络安全风险是一个主要问题。在使用大数据源时要尽可能降低隐私、机密性和网络安全风险，隐私保护程序和信息技术上关键。为此，一些国家已经开始建立合作关系，对大数据的访问问题进行研究。

需要多学科的团队来进行大数据的交流。统计机构、中央银行、公共机构和国际组织不仅要培训和发展现有的员工来处理大数据，还必须与私营部门竞争来招聘或雇佣新员工。这些新的工作人员必须熟悉大数据，例如数据工程师、IT架构专家、可视化专家和与专业人员等。平均而言，初始阶段的大型数据实践开始于一个由3到4名员工组成的核心团队，他们必须拥有新的技术和业务技能。

（四）对统计工作的启示

统计机构应该进一步加大对大数据项目的投入，并与国际组织密切合作了解已经取得了哪些成果。统计机构需要对那些有潜力的官方宏观经济和财政统计数据的项目进行评估，最具前景的宏观经济和财政统计数据来源将会随着时间的推移而得到确认。尽管目前来看大数据源在不同领域体现出不同的偏好，但其派生的指标跨越了所有传统的统计学领域。官方统计数据需要开发新的数据质量概念，并扩展现有框架，以整合大数据带来的机遇和挑战。

内容框架

I. 前言

II. 大数据意味着什么？

III. 大数据的潜力

A. 大数据：回答更多问题，产生更多指标

B. 大数据：弥补官方统计数据的滞后，对现有指标进行预测

C. 大数据：官方统计数据的来源及创新模式

IV. 大数据带来了哪些挑战?

A. 数据质量

B. 大数据的访问

C. 新的技术资料和科技

V. 对统计工作的启示

VI. 总结与前瞻

VII. 参考资料

附件

1. UNECE大数据任务组制定的分类法

2. 表1 大数据与统计之间的联系

3. 表2 当前大数据在宏观经济和财务统计中的应用

4. 大数据与数字经济

关键图表

框1  UNECE对大数据的分类

图1  大数据的5V——易变性，多样性，时效性，准确性和数据容量

图2  大数据的潜力

图3  数据研究者

本内容仅供研究参考，严禁用于商业用途。

校  审 | 陈立娜   贺璐婷

编  辑 | 路凌霄

”

推荐阅读

好文章，快分享，一起涨姿势~