揭开“大数据产业”的神秘面纱

自从工业革命开始以来，数据科学就越来越得到人们的重视，只是到了21世纪初，数据应用的积累，深深触动了产业重构和业态创新，“大数据”一词才应运而生。严格来讲大数据针对并服务的是某个特定目标的立体数据生态系统，而且这个系统中的前端功能模型、中断数据架构及后端算法及编程，是一个统一体系。确切地说，“大数据”概念的内涵及外延，主要体现在三个层面：

一是基于行业趋势及产业业态创新的需求端“功能模块”的构建，这是一个需要具有大数据思维逻辑的产业经济的命题。比如：如果要优化一个区域的旅游产业结构、投资结构、资源配置结构，可以通过完善产业供给链达到延伸游客消费链的目的，这就需要建立区域性的动态运行的“旅游产业大数据”信息系统，而此举首先要做的是：产业发展物理模块的策划、设计、搭建和论证。这项工作是实施这项大数据项目的“前提”。

二是基于产业发展功能模块基础的“数据模块”的搭建设计，这是一个紧密服务于应用端诉求的有效数据关系分析、确定算法的复杂过程，这也是数据建模及搭建特别功能属性的数据仓库的过程，需要用人力思维与计算机算法的有机结合。目前，这个领域的技术才刚刚开始向产业领域渗透，未来可拓展空间很大。

三是基于数据模块进行的数据挖掘、采集、清洗和应用编程。这个过程实际上是“技术工人”的工作，多数计算机及信息系统专业的人都可以完成，如果在熟练应用传统计算机信息系统应用软件的基础上，熟练掌握Hadoop、Spark、IOE等操作系统，就可以完成此项工作，但更多的工作量还得基于Excel来完成，因此，把Excel玩熟玩透是玩好大数据的基础，或许更有价值。

当下的中国乃至全球，能真正看清“大数据”的真正面目，并通过数据革命引领产业创新的优秀人才屈指可数，所谓的大数据专家，不单是计算机及信息系统领域的专家，也不是行业及专业领域里的权威，而是善于把应用诉求端与数据技术服务端，用大数据思维整合到一起的复合专家，通俗来讲，是市场行家、产业及产品专家、有效数据资源识别及配置高手的复合体。大数据专家既可以是一位在某个行业领域里具有这三项功能的复核人才，真正的大数据专业人才之所以太稀少，是因为他们的思维细微深深扎根于市场，他们是从市场上“野蛮”生成的，绝非闭门于高等学府可以修炼出来的。

俗话说：大隐隐于市。纵观全球，百分之七八十的优秀大数据专业人才，都就职于全球顶尖的科技公司，然而，他们未必意识到自己就是一流的“大数据”专家。

中国作为全球经济产出体量最大、消费需求规模最大的新型经济体，大数据产业对推动各个产业领域的创新发展，具有不可估量的发展空间，这是发展大数据产业的必要性，而关于“大数据产业”，需要强调的几个概念：

大数据技术的研究及应用，是以市场诉求及产业经济发展需要为基础的，它不过是服务于特定目标的技术手段。因此，目前最最紧缺的是行业性的大数据专才，比如医学领域急需要懂得人体生命科学及健康学的具有大数据思维的专家。

大数据人才并非只有数理学科的专业人才，而是混合型人才，比如：能够写计算机编码程序的人比比皆是、身价也不高，因为他们只知其然不知其所以然。然而，大数据时代的“架构师”不是单纯的数字建模和初级的行业知识，而是能够独立策划设计出产业创新发展物理模块的专家。也就是说，玩“大数据”的技术圈子，若单纯靠Hadoop、MR、Storm、Spark、Kafka、Dataflow这些数据处理技术，只能搭建出没有使用价值的空中楼阁，其研究只能自困于小圈子而渐渐窒息。因此，如果大数据的研发及应用，只是数据技术的“圈内人”，那的确是一种悲哀。

越是大数据时代，数据资源越是宝贵，任何机构和个人越是不会轻易泄露自己的数据信息。其实，并不是数据越多越好、数据流量越大越好，有效数据及数据关系才是最重要的。因此，大数据研究与应用，在很大程度上是研究模式和研究方法问题，如果把握好应用端的明确诉求，采集有效数据样本并不是太难。因此，推动大数据产业发展的“数据源”主要来自自身，第三方研究服务者的数据主要来自需求方的委托。特别需要说明的是，一个真正的大数据专家应当具备的最基本的“真功夫”是：根据产业发展需求设计有效的数据样本并建立模拟应用系统，然后在实践中验证。

在很多人看来，未来的数字世界，大数据无所不能。这实在是一个误区。大数据技术的进步及应用普及，主要还是基于应用端的诉求。还有一些领域永远是不可知的，比如：包括人类在内的动物的思维神经系统的数字化，这方面几乎是上帝设计的“密码箱”，如果人类真能够打开它，那不是科技进步，而是人类的灾难。大数据不是万能的，老老实实地基于人类经济及社会进步的理性诉求，推动大数据产业的理性发展才是正途。因此，未来中国大数据产业的发展，应当着眼于中国经济社会发展进步的未来趋势及生产力水平，构建不同行领域的大数据生态循环系统。