编辑推荐
在今天的商业环境中,无穷无尽的大数据潮流经常影响着重要的决策流程。为了保持和延续业务盈利,利用大数据的能力势在必行。但是,只是获得数据和具有处理能力并不足以得到有意义的结果。
《大数据挖掘与机器学习》为市场营销主管、商业领袖和技术专家提供一套综合手段,使其能开发出不断产生有效结果并提高利润率的战略和方法,并且能将这些战略和方法贯彻实施下去。在本书中,Jared Dean对大数据分析现状以及日益提升的高性能计算体系结构的趋势进行深入浅出的回顾。《大数据挖掘与机器学习》明确地展示了如何利用大数据分析促进积极改变并且驱动效率。
Jared Dean循序渐进地揭示了如何应用技术创建数据挖掘、机器学习及大数据处理的分析环境。该作者还探索权衡了不同技术选择的结果。《大数据挖掘与机器学习》囊括了能够加以应用从被挖掘的数据中获取信息的算法和方法,并提供了对如何有效地应用这些方法的解释。本书还提供了许多案例研究的说明,给出了许多已经成功应用了新的技术和算法来建立其竞争优势的组织的例子。作者还对预测建模和如何应用这些工具于决策流程进行了讨论。
对任何希望获得数据分析能力的组织,这本重要的书都可以作为理解大数据基本技术和大数据分析的关键指引。现在你可以充满自信地掌控你所在组织的大数据分析,创造出能够一击即中的结果。
内容简介
《大数据挖掘与机器学习:工业4.0时代重塑商业价值》分为3个部分,共17章。第Ⅰ部分“计算环境”,包括第1章到第3章。第Ⅱ部分“将数据转化为商业价值”,包括第4章到第10章。这一部分聚焦于数据挖掘活动中所要用到的方法、算法和路径。第Ⅲ部分“将其全部结合起来的成功案例”包括第11章到第17章。本部分主要描述了作者参与过的成功应用大数据分析优化企业决策、提高企业价值的公司案例。
《大数据挖掘与机器学习:工业4.0时代重塑商业价值》可作为企业管理人员、营销主管、分析人员、IT人员等作为理解大数据、应用大数据为企业创造价值的指引,同时,本书也可供统计学、应用数学及计算机专业学者和研究人员参考学习。
作者简介
Jared Dean(杰瑞德·迪安)是SAS研究院的研发高级总监。他负责SAS全球数据挖掘解决方案的开发。这包括客户互动、新功能开发、技术支持、销售支持和产品集成。在加入SAS之前,Dean是美国人口调查局的数学统计学家。
内页插图
目录
1 概述
大数据大事年表
为何这个主题现在很重要
大数据是否只是一时的狂热?
在何处应用大数据会产生重大影响?
21 第Ⅰ部分 计算环境
23 第1章 硬件
1.1 存储器(磁盘)
1.2 中央处理器
1.3 内存
1.4 网络
31 第2章 分布式系统
2.1 数据库计算
2.2 文件系统计算
2.3 考虑因素
37 第3章 分析工具
3.1 Weka
3.2 Java和JVM语音
3.3 R语言
3.4 Python
3.5 SAS
47 第Ⅱ部分 将数据转化为商业价值
49 第4章 预测建模
4.1 一个建模方法
4.2 sEMMA
4.3 二元分类法
4.4 多层分类法
4.5 区间预测
4.6 预测模型评估
63 第5章 一般预测建模技术
5.1 RFM
5.2 回归
5.3 广义线性模型
5.4 神经网络
5.5 决策树和回归树
5.6 支持向量机
5.7 贝叶斯网络分类方法
5.8 组合方法
117 第6章 细分
6.1 聚类分析
6.2 距离测度(指标)
6.3 聚类评估
6.4 聚类数量
6.5 K-means算法
6.6 分层聚类法
6.7 群特征刻画
129 第7章 增量响应建模
7.1 建立响应模型
7.2 评估增量响应
137 第8章 时间序列数据挖掘
8.1 降维
8.2 探查模式
8.3 时间序列数据挖掘的应用:Nike+Fuelband智能手环
149 第9章 推荐系统
9.1 何为推荐系统?
9.2 应用于何处?
9.3 如何起作用?
9.4 推荐质量评估
9.5 推荐系统的应用:SAS 图书馆
161 第10章 文本分析
10.1 信息检索
10.2 内容分类
10.3 文本挖掘
10.4 文本分析应用:让我们来玩《危险边缘》(Jeopardy!)
177 第Ⅲ部分 将其全都结合起来的成功案例
179 第11章 基于某大型美国金融服务公司的案例研究
11.1 传统市场营销活动流程
11.2 高效的营销解决方案
11.3 变革的价值主张
187 第12章 主要卫生保健提供者的案例研究
12.1 CAHPS
12.2 HEDIS
12.3 HOS
12.4 IRE
197 第13章 技术制造商案例研究
13.1 发现设备缺陷
13.2 如何降低成本
201 第14章 在线品牌管理的案例研究
205 第15章 移动应用推荐的案例研究
209 第16章 高科技产品制造商的案例研究
16.1 处理缺失数据
16.2 超越生产的应用
213 第17章 展望未来
17.1 重复性研究
17.2 隐私与公共数据集
17.3 物联网
17.4 未来的软件开发
17.5 未来算法开发
17.6 总结
221 关于作者
223 附录
225 参考文献
231 译者后记
前言/序言
现代企业数据驱动决策:从数据海洋到商业洞察的实战指南 拥抱数据洪流:重塑企业运营与战略的基石 在信息爆炸的今天,数据已成为企业最宝贵的资产,但“拥有数据”与“利用数据”之间存在着巨大的鸿沟。本书旨在为企业管理者、数据分析师以及技术决策者提供一套清晰、实用的框架,指导他们如何有效地驾驭海量复杂数据,将其转化为可衡量的商业价值。我们不聚焦于深奥的算法理论,而是深入探讨如何将先进的数据处理和分析技术,落地到实际的业务场景中,实现从原始数据到战略洞察的无缝对接。 本书构建了一个全面的“数据驱动成熟度模型”,帮助企业识别自身在数据生命周期管理(Data Lifecycle Management)、数据治理(Data Governance)以及应用场景开发中的当前位置,并清晰规划通往下一阶段的路径。我们强调,数据驱动的变革不是一个纯粹的技术项目,而是一场深刻的组织文化和流程再造。 第一部分:数据基建与治理的艺术 数据资产的构建与清洗:摆脱“脏数据”的困境 任何高级分析的基础都建立在高质量的数据之上。本部分将详细阐述构建稳固数据基石的实践方法。我们首先探讨现代企业数据生态系统的构成,从事务型数据库、日志文件到社交媒体流,数据来源的多样性对整合能力提出了前期的严峻挑战。 数据集成策略的演进: 介绍批处理、流处理在不同业务场景下的适用性,重点讲解构建统一数据视图(Single Source of Truth)的关键技术路径,如数据湖(Data Lake)与数据仓库(Data Warehouse)的协同工作模式。 数据质量的量化与保证: 讨论如何建立一套行之有效的数据质量指标体系(准确性、完整性、时效性、一致性)。我们将分享企业级数据清洗的自动化流程设计,包括异常值检测、缺失值填补的业务驱动方法,而非单纯依赖默认算法。 数据治理的落地实践: 深入剖析数据治理框架的构建,强调“谁拥有数据、谁负责质量、谁有权使用”的明确界定。讨论如何通过元数据管理系统,实现数据血缘的可追溯性,确保合规性与审计的便捷性。 第二部分:洞察的提取与可视化表达 从数据透视到商业叙事:让数据会说话 数据分析的价值在于其传递出的洞察力。本部分将重点关注如何利用成熟的分析技术,将复杂的数据转化为决策者能够理解和信任的商业语言。 描述性分析与诊断性分析的深化应用: 探讨如何超越基础的KPI报告,利用时间序列分析、同期群分析(Cohort Analysis)等技术,深入挖掘历史表现背后的驱动因素。我们将展示如何构建动态仪表板,实时反映关键业务健康度。 商业智能(BI)系统的选型与部署: 评估主流BI工具的优劣势,重点不在于工具本身,而在于如何根据企业特定的分析需求(如自助式分析、嵌入式分析)来定制化部署方案。 数据叙事的力量: 分析如何构建有说服力的商业报告。讲解如何通过数据可视化设计原则,避免误导性展示,专注于“结果-原因-建议”的逻辑链条,将数据分析报告转化为可执行的商业行动方案。 第三部分:驱动业务变革的应用场景 精细化运营与客户体验的重塑 本部分聚焦于将数据分析能力直接嵌入到企业的核心业务流程中,实现运营效率的飞跃和客户价值的提升。 供应链与库存的优化: 介绍需求预测在不同波动性环境下的应用策略。探讨如何结合外部宏观经济数据和内部历史交易数据,实现安全库存水平的动态调整,降低资金占用成本。 客户生命周期价值(CLV)的精细化管理: 分析如何通过客户行为数据,进行客户细分(Segmentation)和流失预警(Churn Prediction)。阐述如何设计差异化的营销触点和挽留策略,最大化每位客户的长期贡献。 风险控制与欺诈检测的实时化: 探讨在金融、电商等高风险领域,如何利用异常检测技术,实现毫秒级的交易风险评估。强调模型可解释性在合规性审查中的重要地位。 第四部分:数据驱动的组织转型与伦理考量 构建适应未来的数据文化 成功的数字化转型,其核心在于人与流程的变革。本部分提供组织层面的指导方针。 跨职能团队的协作模式: 讨论如何打破传统的数据孤岛,建立“业务专家-数据工程师-分析师”三位一体的敏捷数据项目团队。 培养数据素养(Data Literacy): 提出面向不同层级员工的数据培训路径图,确保决策层能够有效质疑和利用分析结果,一线员工能够准确记录和输入高质量数据。 数据伦理与隐私保护的制度化: 随着监管日益趋严,探讨在数据采集、存储和使用过程中,如何严格遵守GDPR、CCPA等相关法规。重点讨论如何在利用个人数据实现个性化服务的同时,保障用户的隐私权,建立企业的数据使用红线。 本书最终的目标是,为企业提供一套务实的工具箱和思维模式,确保数据投资能够真正转化为持久的竞争优势和可衡量的商业成果。它是一本关于如何“使用”数据来管理企业,而不是仅仅关于“如何处理”数据的实战手册。