SmartPeople - 数字人 AI 流式交互系统
系统与逻辑实现
- 流式音频架构：设计并实现基于 Dictionary + Queue 的 PCM 流播放器，支持音频流分片的乱序接收与按序合并。
- 多流打断与恢复：实现流播放状态的记忆机制，支持在播放 A 音频时随时暂停并插播 B 音频，B 结束后精确读取缓存与时间戳，无缝恢复 A 的播放进度。
- 跨端通信与解析：通过 UnityPlayer 与 Android 端交互，完成 Base64 到 float 数组的动态解析与采样率自适应。
性能与优化表现
- 音画精准同步：集成 uLipSync 插件实时驱动数字人嘴型，并开发时间轴匹配算法实现字幕逐字精准推送。
- 异常处理机制：底层实现超时检测（15s阈值）与静音字节填充机制，有效防止网络波动导致的播放卡死。
- 内存管理：动态创建与及时销毁 AudioClip 实例，避免长音频流带来的内存泄漏问题。
准备好聊聊了吗？
我正在寻找 Unity 客户端开发的岗位。如果您对我的项目 Demo 感兴趣，欢迎随时联系我！
📧 Email: 1299152921@qq.com | 📱 Phone: 13640096430