大数据应用基础(计算机类普通高等教育公共基础课系列教材)

正如中国人在发明文字前就有了阴阳学说，并用其解释包罗万象的宇宙世界一样，西方人用制造、获取和复制的所有。和1，通过计算机处理组成了数字世界。人们通过拍摄照片和共享音乐制造了大量的数字信息，而企业则组织和管理这些数字信息的访问、存储，并为其提供强有力的安全保障。现在的社会是一个高速发展的社会，科技发达，信息通畅，人们之间的交流越来越密切，生活也越来越方便，大数据就是这个高科技时代的产物。

    有人把数据比喻为蕴藏能量的煤矿。煤炭按照性质有焦煤、无烟煤、肥煤、贫煤等类型，而露天煤矿、深山煤矿的挖掘成本又不一样。与此类似，大数据并不在“大”，而在于“有用”。价值含量、挖掘成本比数量更为重要。对于很多行业而言，如何利用这些大规模数据是赢得竞争的关键。

    大数据的价值体现在以下几个方面。

    (1)为大量消费者提供产品或服务的企业，可以利用大数据进行精准营销。

    (2)做小而美模式的中小微企业，可以利用大数据做服务转型。

    (3)面临互联网压力之下必须转型的传统企业，需要与时俱进、充分利用大数据的价值。

    不过，大数据在经济发展中的巨大意义并不代表其能取代一切对于社会问题的理性思考，科学发展的逻辑不能被湮没在海量数据中。著名经济学家路德维希‘冯‘米塞斯曾提醒过：。·就今日言，有很多人忙碌于资料之无益累积，以致对~IN2_说明与解决，丧失了其对特殊的经济意义的了解。”这确实是需要警惕的。

    在这个快速发展的智能硬件时代，困扰应用开发者的一个重要问题就是如何在功率、覆盖范围、传输速率和成本之间找到微妙的平衡点。

    企业组织利用相关数据和分析可以帮助它们降低成本、提高效率、开发新产品、做出更明智的业务决策等。例如，通过结合大数据和高性能的分析，下面这些对企业有益的情况都可能会发生。

    (1)及时解析故障、问题和缺陷的根源，每年可能为企业节省数十亿美元。

    (2)为成千上万的快递车辆规划实时交通路线，躲避拥堵。

    (3)分析所有存货单位(stockkeepingunit，SKU)，以利润最大化为目标来定价和清理库存。

    (4)根据客户的购买习惯，为其推送可能感兴趣的优惠信息。

    (5)从大量客户中快速识别出金牌客户。

    (6)使用点击流分析和数据挖掘来规避欺诈行为。

    另外，可视化是引起数字世界急速膨胀的主要原因之一。由于数码照相机、数码监控摄像机和数字电视的普及，数字世界的容量和膨胀速度超过此前估计。个人日常生活的“数字足迹”大大刺激了数字世界的快速增长。通过互联网和社交网络、电子邮件、移动电话、数码照相机及在线交易等多种方式，每个人的日常生活都在被“数字化”。全球数据总量的规模在2015~2035年预计出现几何级别的爆发式增长，如图1．3所示......