今天跟大家聊聊我最近搞的姿态直播，也算是趟了趟水，把一些经验教训跟大家分享一下，希望能帮到想搞姿态直播的朋友们。
起心动念：
一开始也没想过搞直播，就是看别人直播挺热闹，自己也想试试。正好最近在研究人体姿态识别这块，就想着能不能结合起来，搞个姿态直播，也算是个小小的技术展示。
设备准备：
俗话说，巧妇难为无米之炊，搞直播得有设备。我手头现有的设备大概是这些：
- 电脑：一台还算不错的台式机，配置是必须的，不然直播卡顿就尴尬了。
- 摄像头：一个罗技的C920，这个是标配了，清晰度还行。
- 麦克风：一个普通的USB麦克风，收音效果凑合能用。
- 灯光：之前拍视频用的环形灯，这回也拿来凑数了。
为了更好的效果，我还是添置了一些装备，比如：
- 相机：索尼a7m4 一台，清晰度杠杠的。
- 镜头：FE 55mm F1.8 ZA全画幅蔡司镜头 1支，拍出来人像很舒服。
- 灯光：爱图仕艾蒙拉100d LED影视灯 3盏，打光效果确实
- 灯光：爱图仕艾蒙拉100XS LED影视灯 2盏，补光用的。
软件选择：
直播软件我试了好几个，OBS、Streamlabs OBS、还有一些其他的平台自带的直播工具。还是选择了OBS，主要是因为它免费开源，而且功能也比较强大，可定制性很高。一开始用起来可能觉得有点复杂，但是熟悉之后会发现真的很好用。
姿态识别方案：
这是最关键的一步。我用的是Python+OpenCV+Mediapipe来实现的。Mediapipe是Google开源的一个多媒体处理框架，里面的人体姿态识别模型效果还不错，而且速度也比较快。具体的步骤大概是这样的：
- 用摄像头获取视频流。
- 把视频流输入到Mediapipe的人体姿态识别模型中。
- 模型会返回人体关键点的坐标。
- 根据这些关键点坐标，可以在视频画面上绘制骨骼，或者做一些其他的特效。
直播流程：
- 先启动OBS，设置好直播推流地址和码率。
- 运行Python脚本，打开摄像头，开始进行姿态识别。
- 把Python脚本的输出画面通过OBS的“窗口捕获”功能添加到直播画面中。
- 调整画面布局，让姿态识别的画面和摄像头画面和谐地显示在一起。
- 开始直播！
遇到的坑：
别看我上面说的好像很简单，实际操作起来还是遇到了不少坑的：
- 电脑配置不够：一开始我的电脑配置比较低，直播的时候CPU占用率经常跑到100%，导致画面卡顿。后来升级了CPU和显卡才解决了这个问题。
- 姿态识别速度慢：Mediapipe模型虽然效果不错，但是如果电脑配置不够高，识别速度会比较慢，导致画面延迟。后来通过优化代码和调整模型参数，才勉强达到了可以接受的水平。
- 画面延迟：直播画面延迟也是一个比较头疼的问题。我试了很多方法，比如调整OBS的缓冲设置、优化网络连接等等，但是效果都不太明显。只能接受几秒钟的延迟了。
- 直播内容：这个是最难的！技术有了，但是直播内容不能只有干巴巴的姿态识别？后来我想了一些办法，比如跟着音乐跳舞，或者做一些简单的瑜伽动作，让直播更有趣一些。
经验
这回姿态直播的实践还是很有收获的。虽然遇到了不少问题，但是最终都一一解决了。也积累了一些经验：
- 搞直播一定要有耐心，不要想着一口吃个胖子。
- 设备和软件的选择很重要，要根据自己的需求和预算来选择。
- 技术只是基础，内容才是王道。
- 多和其他主播交流学习，借鉴他们的经验。
未来展望：
这回姿态直播只是一个简单的尝试，未来我还想加入更多有趣的功能，比如：
- 根据姿态识别结果，控制游戏角色。
- 实现虚拟形象的驱动。
- 加入更多的互动元素，让观众参与进来。
直播的世界很大，还有很多东西可以探索。希望我的这回分享能给大家带来一些启发，也欢迎大家一起交流学习！
还没有评论，来说两句吧...