新书快报｜姚前等：征信大数据理论与实践

01AI.World · 公众号 · · 2018-08-07 18:40

正文

请到「今天看啥」查看全文

数据重要，数据分析更重要。“有借必有贷，借贷必相等”的复式簿记法本质上即是一种数据分析方法。它创造了一种科学的从会计凭证中获取有关经济往来和经营成果重要信息的方法，为现代企业和商业社会的形成准备了一个完美的经济信息系统。德国哲学家歌德把它赞誉为“人类智慧的绝妙创造之一，每一个精明的商人从事经营活动都必须利用它”。不仅如此，经济学家和统计学家们还建立了计量经济学与实验经济学，提出各种计量分析框架、思想和理论，如面板数据计量经济学、微观计量经济学、金融计量经济学、宏观计量经济学等，为经济数据的实证分析提供重要的方法论基础。

时至今日，随着信息技术和人类生产生活交汇融合，互联网快速普及和云计算的发展，数据呈现出全新的表象：大数据。大数据具有数据规模海量、数据流转快速、数据类型多样、数据价值巨大等四大特征。数据规模海量和流转快速意味着无法在有限时间内用传统IT技术和软硬件工具对其进行感知、获取、管理、处理和服务，需要新的特殊技术和软硬件系统，以有效地存储和处理大量的经过容忍时间内的数据，比如大规模并行处理(MPP)数据库、分布式文件系统、分布式数据库、云计算平台和可扩展的存储系统等;数据类型多样意味着数据变量高维，传统的基于低维变量的数据分析技术不再适用，而基于高维变量的大数据分析技术将成为重点。数据价值巨大意味着从数据中获取价值是大数据分析的核心，需要专家知识和理论建模的进一步提高，还需分类分析、聚类分析、关联分析、神经网络、机器学习等数据挖掘技术的进一步成熟和完善。