大数据技术的发展及其研究综述

[摘 要]“互联网+”时代，信息技术的广泛使用极大推动了大数据技术的应用与发展，其已经渗透到人们的日常生活中。本文从大数据技术的概念、发展展开论述，总结了大数据技术对人类发展存在的价值和意义，并分析了使用大数据技术所存在的风险及伦理问题，为大数据技术的进一步研究提供理论指导，并为其实践应用提供借鉴。

[关键词]大数据技术；发展；应用价值；应用风险；道德伦理

doi：10.3969/j.issn.1673 - 0194.2016.20.097

[中图分类号]TP311.13 [文献标识码]A [文章编号]1673-0194（2016）20-0-02

1 大数据技术概述

当前，学术界对于大数据概念还没有一个完整统一的定义。全球知名咨询公司麦肯锡（McKinsey）在《大数据：创新、竞争和生产力的下一个前言领域》报告中认为：大数据是一种数据集，它的数据量超越了传统数据库技术的采集、存储、管理和分析能力。权威咨询公司Gartner则认为：大数据指的是一种新的数据资产，是高数据、高容量、种类繁多的信息价值，这种数据资产需要由新的处理模式来应对，以便优化处理和正确判断。信息专家涂子沛在其著作《大数据》中认为：大数据之大绝不只是指容量之大，更在于通过对大量数据的分析而发现新知识，从而创造新的价值，获得大发展。尽管目前学界和产业界对大数据概念尚缺乏统一的定义，但对大数据的基本特征还是达成了一定共识，即大数据具有5个基本特征：数据规模大、种类多、速度快、真实性和数据价值密度稀疏。

大数据技术的兴起虽然是近年的事情，但追本溯源则是从20世纪发端的。1989年，Howard Dresner首次提出“商业智能（Business Intelligence）”，它是一种能够把数据转化为信息与知识从而帮助企业进行决策从而提升企业竞争力的工具，其核心就在于对大量数据的处理。随着20世纪互联网的飞速发展，数据量越来越大，复杂性越来越高，对此，传统的数据技术已经不能满足当前处理海量数据的需要，因而对海量数据的收集和处理的技术变得尤为重要，“大数据”这一概念诞生。1997年，考克斯和埃尔斯沃思在第八届美国电气和电子工程师协会（IEEE）学术年会上发表了《为外存模型可视化而应用控制程序请求页面调度》的文章，提出了大数据问题，这是在美国计算机学会的数字图书馆中第一篇使用“大数据”这一术语的文章。2008年，随着互联网产业的迅速发展，雅虎、谷歌等大型互联网或数据处理公司发现传统的数据处理技术不能解决问题时，大数据的思考理念和技术标准被首先应用到了实际。2010年2月，肯尼斯・库克尔（Kenneth Cukier）在《经济学人》上发表了长达14页的大数据专题报告《数据，无所不在的数据》，认为从经济界到科学界，从政府到平民，“大数据”概念广为人知。Twitter、Facebook、微博等社交网络兴起将人类带入了自媒体时代；苹果、三星等智能手机的普及，移动互联网时代的到来，这一时期里，大数据技术逐渐得到空前重视。2011年，麦肯锡（McKinsey）战略咨询公司的全球研究院（MGI）了名为《大数据；创新、竞争和生产力的下一个新领域》研究报告，认为大数据从技术领域进入商业领域的时机已经到来，大数据的运用将融入到政治、经济、社会等领域的各个方面。2014年4月，世界经济论坛以“大数据的回报与风险”主题了《全球信息技术报告（第13版）》，认为在未来几年中针对各种信息通信技术的政策甚至会显得更加重要，各国政府逐渐认识到大数据在推动经济发展、改善公共服务、增进人民福祉，乃至保障国家安全方面的重大意义。

在国内外大数据技术的发展日新月异，对大数据技术研究的需要也日益重要。虽然当前学界对大数据技术概念的定义尚未统一，不同机构、公司、企业都对大数据技术有着自身的认识和看法，但对大数据技术的基本内涵还是可以通过研究和分析而达到一个基本的共识和标准，而对大数据技术的内涵、内容、特点等基本问题做出研究和界定，又有利于大数据技术与其研究的进一步发展。

2 大数据技术的应用价值

大数据是不断流动、产生和快速发展的，现在已经成为一种社会资源，具有重大价值。数据产生、解析、存入、共享、检测、消费形成了大数据的连环网络，构成了大数据的有机生态结构系统。在每个环节都可能产生不同的需要，而各个环节的不同需要又促进理论、技术和方法的革新。大数据技术与社会应用相结合，使大数据与政策决策和商业决策相关联，通过大数据技术处理重组和快速利用各类战略资源，通过大数据技术使信息产生增值价值，以挖掘并发挥大数据技术的巨大潜力和价值。Luciano Floridi指出，大数据的价值论问题在于如何通过数据挖掘找出真正有附加价值的数据新模式以及如何使大数据能够被真正用来推动经济社会发展。大数据现在是一种商业资本，通过大数据技术处理可以创造新的经济利益，通过思维的转变，大数据就能巧妙用来激发创造新产品和服务。

大数据技术拥有巨大的潜在价值，必须要对大数据技术进行深刻的分析和研究，发现其潜藏的巨大功能和价值，例如大数据技术在政策制定和商业决策方面能发挥巨大作用，同时在医疗和教育等其他领域也可以渗透进去，从而发挥自身的价值。并且在研究大数据技术的价值之后，将其运用于社会生活的各方各面，从而将大数据技术的积极影响发挥出来，创造人类更美好的生活。因此，研究大数据技术的价值具有重要意义。但值得指出的是，学者多从政治、经济、社会、科学等角度对大数据的价值进行分析，忽视了大数据技术的应用风险问题。任何新的技术都不单单涉及科技和社会生活方面，同时必将其与应用风险相联系，在研究新技术的诞生和发展的同时，对其应用风险等方面的问题做出思考。

3 大数据技术的应用风险

大数据技术在使得社会生活变得便利、快捷的同时，伴随而来的也包括数据安全风险的增加，主要体现在技术安全、内容安全、管理脆弱等方面。例如在互联网金融中，大数据技术在互联网金融业的应用带来信息的多样化和决策的正确化等优势的同时也带来了巨大风险，互联网金融与传统金融的监管体系相比在合法性、规范性和安全性等方面尚存在很多问题，这些问题会威胁互联网金融的健康发展，甚至国家的长治久安，因而必须建立互联网金融预警系统以保证互联网金融业的健康发展。

已有学者从其他角度探讨了大数据技术的应用风险，例如黄国彬从信息安全的角度研究了大数据的风险框架，他从基础设施、数据处理、数据管理、技术漏洞、数据可信度五个角度分析了大数据信息安全风险，这些构成了大数据信息风险的内部框架，而外部框架还包括法律法规、行业自律性、个人隐私意识、黑客攻击等问题。朱光重点讨论了隐私风险问题，他认为已有研究重点关注信息加密技术的改进和完善，忽视了对大数据环境下隐私信息从产生至销毁的全生命周期过程中所面临的风险进行宏观的分析、评估和预测，并且现有研究很少关注对隐私泄露后的追踪和问责，因而他基于生命周期理论建立大数据隐私风险管理框架，主动监测和评估隐私风险，并对泄露进行溯源追责。Luciano Floridi也指出大数据会造成一系列的开放、共享与数据权利问题，他尤其从安全和伦理学角度讨论了隐私问题、身份与信用问题、公正问题、规范问题等，认为大数据技术的发展不能只重视技术的发展，要同时面对并解决这些风险问题。

在面对大数据技术所带来的革命性影响和各种积极作用的同时，学者们对大数据技术同样保持警惕。作为一项新兴的技术，大数据技术在给人们的社会生活带来积极影响的同时，也不可避免地带来消极的后果，因此对大数据技术所可能带来的风险必须保持警惕，并对其进行深入和深刻的研究。大数据技术是一柄双刃剑，在带来经济利益的同时，也会对人们的安全造成威胁，更会对伦理方面产生难以预料的影响。所以，对大数据技术的风险进行分析讨论有着十分重要的意义。

4 大数据技术的应用伦理

新技术的产生和发展总会带来新的伦理问题，大数据技术同样会产生需要关注和研究的伦理问题。虽然大数据技术在社会的各行各业的运用能带来便捷和利益，但同样需要对其风险保持警惕，同时由其而来的伦理问题也必须加以关注。

大数据技术是一把双刃剑，必须鉴定并平衡其利益和风险，对于隐私、安全、数字鸿沟等伦理问题需要给予高度重视。蒋洁认为在大数据预测中存在结果预判挑战自由、隐私披露挑战尊严、信息垄断挑战公平、固化标签挑战正义等伦理背反问题，为了解决这些问题，需要健全以尊重原则、橡皮原则、无害原则、可持续发展原则等为核心的后现代数据伦理。薛孚认为大数据隐私伦理问题表现在数据挖掘、数据预测和更全面的监控等方面。产生这些问题的根源在于四个方面，即技术性根源、社会性后果、现实性原因和个体性原因。要解决这些问题，必须做到提高数据使用中的价值透明度、调整个人的隐私观、搭建共同价值平台以及寻求合理的伦理决策点。安宝洋探讨了大数据技术应用、创新和研发中的信息伦理失范及其治理问题，指出大数据技术在给人类社会带来了积极变化的同时，也引发了信息异化、数据权利、信息隐私和数字鸿沟等网络信息伦理问题。针对这些问题应从人道、无害、同意、公正、共济的原则出发进行伦理治理。宋振超讨论了大数据背景下网络信息的伦理失范问题，认为网络信息失范的原因在于网络主体的虚拟性、网络技术的快速发展和外部规约不足。对此，在遵循现有社会伦理规则之外，还需坚持使用与维护相统一、自律与他律相统一的原则，加强立法、监督和保护意识。

针对大数据技术的伦理，学者们提出了自己所预见的各种伦理问题，并且将大数据技术引入到各个行业中，窥探不同产业和领域中的大数据技术伦理问题。但值得注意的是，已有研究仍多从隐私、安全、风险、利益等角度展开，仍旧不够深入，因此对于自由（意志）、民主、公正、责任等伦理学问题和概念可以做进一步的深入研究，以论证大数据技术在何种程度上与这些概念发生联系，并且与这些概念发生何种关系（促进、阻碍或威胁等）。

5 结 语

进入21世纪以来，云计算、大数据等新兴科学词汇频出，人们在了解、学习这些新兴技术的同时，需要客观看待这些新兴事物。从当前来看，大数据技术的发展前景非常可观，但同时也需要对其应用风险和伦理道德问题做进一步的研究，更好地使用大数据技术，通过对大数据的挖掘、分析，获得富有价值的信息，从而推动社会发展，造福于人类。

主要参考文献

[1]L Floridi.Big Data and Their Epistemological Challenge[J]. Philosophy & Technology，2012（4）.

[2]Viktor Mayer-Schonberger. Big Data： A Revolution That Will Transform How We Live， Work， and Think[M]. London：John Murray Publishers，2013.

[3]杨虎，易丹辉，肖宏伟.基于大数据分析的互联网金融风险预警研究[J].现代管理科学，2014（4）.

[4]黄国彬，郑琳.大数据信息安全风险框架及应对策略研究[J].图书馆学研究，2015（13）.

[5]朱光，崔维军，张薇薇.信息生命周期视角下的大数据隐私风险管理框架研究[J].情报资料工作，2016（1）.

[6]蒋洁，陈芳，何亮亮.大数据预测的伦理困境与出路[J].图书与情报，2014（5）.

[7]薛孚，陈红兵.大数据隐私伦理问题探究[J].自然辩证法研究，2015（2）.

[8]安宝洋.大数据时代的网络信息伦理治理研究[J].科学学研究，2015（5）.

[9]宋振超，黄洁.大数据背景下网络信息的伦理失范、原因及对策[J].理论与改革，2015（2）.