本书对大数据的基本理论进行了详细介绍, 分析了大数据的数据资源、数据质量和大数据生命周期的含义, 阐述了科学数据与资源共享以及大数据在交通、能源、教育和公共安全等各领域的应用, 解释了大数据的治理框架及服务方向, 进一步论述了大数据的储存、管理和处理, 以及人工智能的操作, 本书阐述了大数据与人工智能的未来, 让读者了解人工智能的一个重要应用方向--智能人工系统。
近年来,大数据的浪潮奔涌到世界上的每个角落。在大数据的驱动下,人类社会在加速发展。大数据已经成为企业界、科技界和政府等关注的热点。大数据涉及的范围非常广泛。它也将持续地影响人们生活的各个方面。
人们已经不再纠结大数据的概念——大数据已经开始在各个领域得到应用,数据产品诞生,为使衣食住行更为便捷而努力,支撑商业社会的运转,或者维系着某种庞大体系的安全;还在单纯讲着大数据故事和满足于展望未来的人越来越少——有些故事被证明只是故事,而一些三四年前被认为尚且遥远的想象,正在逐步成为现实。无论给这个时代赋予怎样的标签——“互联网”“移动互联网”“人工智能”,我们都将发现,大数据在其中确实具有广泛的基础性和关键性价值。毕竟在这纷繁复杂、高速运转、迭代进化的信息世界中,数据——无论是数值型或是文本型,结构化或是非结构化的——都是信息的最佳留存载体,也是我们用于解释过去和预测未来唯一有价值的资料。过去因存储条件的限制,只有一部分信息被留存下来,即使如此,面对这些保存下来的信息资料,我们尚感到力不从心;如今我们已身处大数据洪流,人类社会面临的中心问题,的确已从提高劳动生产率,转变为如何更好地利用信息帮助我们做出最佳决策。
由于互联网和信息技术的快速发展,大数据日益受到人们的关注,已经引发自互联网、云计算之后IT产业的新的技术革命。面对信息的激流,多元化数据的涌现,大数据已经为个人生活、企业经营,甚至国家与社会的发展都带来了机遇和挑战,成为IT产业中最具潜力的蓝海。人们用大数据来描述和定义信息爆炸时代产生的海量数据,并命名与之相关的技术发展与创新。企业内部的经营信息、互联网世界中的商品物流信息,以及互联网世界中的人与人交互信息、位置信息等,其数量将远远超越现有企业IT架构和基础设施的承载能力,实时性要求也将大大超越现有的计算能力。然而如何盘活这些数据资产,使其为国家治理、企业决策乃至个人生活服务,是大数据的核心议题。
本书首先对大数据的基本概念做了简单的介绍,以便读者在阅读本书时,能够对大数据有个浅显的认识,也能对本书内容有更深入的理解;其次本书研究了大数据的生命周期以及大数据安全问题的管理,通过这两方面的研究对大数据的具体形式和当前的现状等问题都能够有深入的了解;最后以大数据应用的基本策略以及大数据应用模式和价值引出当前大数据在城市交通、金融、能源、教育等领域的应用问题。
由于作者水平有限.本书在内容上难免有不妥甚至谬误之处,敬请广大学界同人和读者朋友指正。
第一章 大数据概述
第一节 数据洪流
第二节 大数据的基本概念
第三节 大数据的生态环境
第四节 大数据的性质
第五节 大数据技术
第六节 大数据基本分析
第二章 大数据的生命周期
第一节 大数据生命周期概述
第二节 大数据的采集
第三节 大数据的存储
第四节 大数据的整合
第五节 大数据的呈现与使用
第六节 大数据分析与应用
第七节 大数据归档与销毁
第三章 大数据安全问题管理
第一节 大数据安全和隐私问题
第二节 大数据安全防护
第三节 大数据隐私保护
第四节 大数据合规管理
第四章 大数据应用的基本策略
第一节 大数据的商业应用架构
第二节 大数据应用的前期准备
第三节 大数据分析的基本过程
第四节 数据仓库的协同运用
第五节 大数据战略与运营创新
第五章 大数据应用模式和价值
第一节 大数据应用的一般模式
第二节 大数据应用的业务价值
第三节 大数据应用的共性需求
第六章 交通数据资源
第一节 大数据时代下的城市交通
第二节 城市交通及相关领域数据资源
第三节 城市交通大数据的组织、描绘及技术
第四节 城市交通大数据的应用开发与服务
第七章 金融大数据应用
第一节 大数据与资产管理
第二节 大数据与量化投资
第三节 基于数据挖掘的自动化交易
第八章 能源大数据
第一节 能源大数据概述
第二节 能源大数据的分析与处理
第三节 能源大数据公共服务平台建设
第九章 大数据与教育
第一节 教育大数据的概述
第二节 教育大数据在教师知识管理的应用
第三节 远程教育的大数据研究与应用
第四节 我国教育与大数据应用
第五节 大数据环境下高等教育管理
参考文献