MediaPipe机器学习跨平台框架实战

图书标准信息

• 作者 马健健
• 出版社 清华大学出版社
• 出版时间 2024-01
• 版次 1
• ISBN 9787302651024
• 定价 109.00元
• 装帧 平装
• 开本 16开
• 页数 240页
• 字数 360千字

【内容简介】

本书以实际项目为线索，带领读者探索mediapipe在不同场景中的应用，使读者既能了解理论知识，又能通过实践掌握技能。全书共9章，章介绍mediapipe基础；第2章重点探讨mediapipe的控制流、同步机制以及gpu的使用；第3章介绍medapipe中的facemeh，探讨其在增强现实、ar滤镜和会议软件中的应用；第4章将mediapipe与游戏控制相结合，介绍如何在体感游戏中应用medapripe技术；第5章以ar激光剑效果、发小游戏、空中作图等为例，展示mediapipe在视觉方面的应用；第6章介绍如何使用mediapripe实现手语识别应用；第7章展示如何通过medapipe打造虚拟智能健身教练；第8章通过案例介绍mediapipe与unity在游戏与虚拟现实领域整合应用的强大潜力；第9章展望 mediappipe的未来，为读者提供了对这一技术的更深层次的认识和思。
本书内容新颖，案例丰富，代码翔实，不仅适合对机器学感兴趣的程序员、广大编程爱好者，还适合在校、创业者或者普通用户学与参。

【作者简介】

马健健，于上海交通大学，硕士，拥有超过十年的软件架构经验，先后供职于 外多家知名公司，目前职于上海某知名外企，主要负责大数据处理、机器学应用和 数据挖掘方面的研究和实施工作，长期研究ai虚拟人技术。已出版图书虚拟偶像ai实 现ai创意绘画与制作：基于table diffuion和control 

【目录】

章 mediapipe基础1

1.1 mediapipe——站在巨人的肩膀上1

1.1.1 mediapipe简介1

1.1.2 mediapipe可以做什么2

1.1.3 mediapipe和实时流媒体数据3

1.1.4 mediapipe和tensorflow 5

1.1.5 mediapipe和opencv6

1.2 为什么选择mediapipe7

1.3 主流推理框架的对比7

1.4 小结8

第2章 mediapipe上手步9

2.1 mediapipe的安装9

2.1.1 在centos下安装10

2.1.2 在windows下安装11

2.1.3 使用docker安装12

2.2 mediapipe的基础架构介绍15

2.2.1 基础架构组件的构成及

特点15

2.2.2 mediapipe技术栈介绍16

2.3 控制流和同步加速机制介绍26

2.3.1 控制流27

2.3.2 同步机制28

2.4 gpu的使用28

2.5 小结31

第3章 mediapipe facemesh33

3.1 facemesh简介33

3.1.1 用于增强现实34

3.1.2 用于ar滤镜34

3.1.3 用于会议软件35

3.1.4 基于mediapipe的美应用36

3.2 实现虚拟化身（一）36

3.2.1 构建工作环境36

3.2.2 构建流程 38

3.2.3 获取面部关键点39

3.3 实现虚拟化身（二）53

3.3.1 构建开发环境53

3.3.2 构建虚拟化身55

3.4 实现美特65

3.5 虚拟背景的python实现68

3.6 虚拟背景的android实现 71

3.6.1 构建开发环境72

3.6.2 背景的实现80

3.7 小结99

第4章 mediapipe与游戏控制100

4.1 体感游戏简介100

4.2 体感游戏与mediapipe的姿态估计（e estimation）102

4.3 mediapipe姿态检测102

4.4 游戏人物控制机制105

4.5 控制水和竖直方向的移动105

4.5.1 控制水方向的移动105

4.5.2 控制竖直方向的移动107

4.6 控制键盘或鼠标的移动109

4.7 小结 110

第5章 mediapipe视觉实现111

5.1 识别眼睛ear活动111

5.1.1 ear介绍112

5.1.2 ear判定疲劳的流程113

5.1.3 medipipe监测ear114

5.2 ar激光剑效果118

5.2.1 游戏策划119

5.2.2 准备和设计图片资源120

5.2.3 编写脚本120

5.2.4 测试和预览效果131

5.3 发小游戏131

5.4 空中作图149

5.4.1 空中作图的历史149

5.4.2 应用流程的设计149

5.4.3 菜单的设计149

5.4.4 选择和绘画手势的判断150

5.4.5 绘画逻辑的实现152

5.4.6 测试和预览效果154

5.5 小结 155

第6章 mediapipe手语识别实战156

6.1 手语识别介绍156

6.1.1 手语简介156

6.1.2 手语识别的历史157

6.2 mediapipe手语识别的实现步骤157

6.3 小结 183

第7章 mediapipe智能健身教练实战184

7.1 智能健身概述184

7.2 mediapipe健康教练的实现185

7.3 小结199

第8章 mediapipe和unity200

8.1 mediapipe unity插件简介200

8.2 mediapipe unity插件的安装方法201

8.3 mediapipe unity插件的使用方法206

8.4 案例介绍214

8.5 小结230

第9章 mediapipe的前景和展望231

9.1 实时识别、移动设备加速ai技术的落地，助力廉价ar/vr设备（arcore/vrchat）231

9.2 mediapipe助力元宇宙发展232

9.3 面临的挑战233

9.4 小结233