ARTICLE DETAIL

资讯详情

深耕郑州网站建设与运营推广的一线实战洞察。

Duix Mobile:开源实时对话数字人 SDK 上手指南

Duix Mobile:开源实时对话数字人 SDK 上手指南 Duix Mobile开源实时对话数字人 SDK 上手指南【免费下载链接】Duix-Mobile The best real-time interactive AI avatar(digital human) with on-premise deployment and 1.5 s latency.项目地址: https://gitcode.com/GitHub_Trending/du/Duix-Mobile给 App 做数字人多数方案要依赖云端合成再回传画面链路长、延迟高、成本不好控。Duix Mobile 是一套把实时交互式数字人完全放在移动端的开源 SDK端侧推理、离线运行、不依赖云服务器Android 和 iOS 开发者都能用适合想把对话数字人嵌进产品里的团队。什么是 Duix Mobile一句话定位在手机上本地渲染、由语音实时驱动的 2D 数字人 SDK。核心亮点 纯端侧推理可完全离线运行⚡ 响应延迟低于 120ms骁龙 8 Gen 2 实测 口型同步、动作控制、支持打断 模块化设计可自接 LLM/ASR/TTS它支持 Android、iOS、平板、车机、VR、IoT 等端官方给出的参考延迟低于 1.5 秒核心能力本地运行对网络依赖低。核心能力速览能力实现思路开发者收益语音驱动口型推送 16kHz/16bit 单声道 PCM 流端侧逐段驱动口型边合成边说支持打断插话不用等整段音频本地渲染C 推理引擎ncnn、onnx Android GLES / iOS Metal 出图透明通道渲染可自由叠加背景与前景动作控制模型附带 SpecialAction.json 标注动作区间一句话调用播放打招呼等指定动作也可随机播放资源管理SDK 内置模型下载与解压工具也可自建托管换形象只改模型地址接入成本低如何快速上手三步跑通第一个数字人获取代码git clone https://gitcode.com/GitHub_Trending/du/Duix-Mobile环境配置Android 端要求 Android 10、8GB 内存设备、1GB 以上可用存储数字人运行需预留约 800MB 内存Android Studio 使用 JDK 17iOS 端要求 iOS 12.0、Xcode 12、iPhone 8 及以上在 Info.plist 中声明麦克风权限。首次运行Android 用 Android Studio 打开duix-android/dh_aigc_androidiOS 打开duix-ios/GJLocalDigitalDemo/GJLocalDigitalDemo.xcworkspace编译运行 Demo 即可看到数字人播报把 Demo 中的 modelUrl 换成官方公开模型就能换形象。仓库资源导航代码Android SDK 源码duix-android/dh_aigc_android/duix-sdk/含 C 核心与 JNI 层Android Demoduix-android/dh_aigc_android/test/iOS SDK 源码duix-ios/GJLocalDigitalDemo/GJLocalDigitalSDK/iOS Demoduix-ios/GJLocalDigitalDemo/文档与工具Android SDK 接入文档duix-android/dh_aigc_android/README_zh.mdiOS SDK 接入文档duix-ios/GJLocalDigitalDemo/README_zh.md隐私声明PRIVACYSTATEMENT.md数字人资源官方形象库res/avatar/含 4 个公开模型 Leo、Oliver、Sofia、Lily 共 14 张形象图行业模型视频res/540p/老师、律师、陪伴、医生与 res/270p/财神、观音、女友、寿司师傅测试音频素材duix-android/dh_aigc_android/test/src/main/assets/PCM、WAV、背景图如何参与社区共建文档完善中英文 README 与 SDK 接入文档补充典型问题的排查说明代码优化 Android/iOS 封装层与 C 核心如 duix-android/dh_aigc_android/duix-sdk/src/main/cpp/dhunet/ 的推理模块案例落地行业场景客服、导览、陪伴等并沉淀接入经验协议项目采用 duix.com 社区许可协议分发时需附带协议并展示 Powered by Duix.com详见 LICENSE私有形象定制可通过 supportduix.com 联系官方通常提供 15 秒至 2 分钟视频即可完成。路线图与展望从仓库版本记录看迭代方向集中在三处Android 4.0.1 引入 PCM 流驱动、动作区间播放与自研音频播放器iOS 1.2.x 陆续增加 128 模型支持与渲染问题修复带打断的流式音频自 2025 年 7 月 17 日版本起提供。后续可预期的是流式交互、模型兼容范围与端侧渲染稳定性的持续打磨。Duix Mobile 把能对话的数字人从云端拉回了手机本地离线、低延迟、可自接大模型是移动端数字人方向里接入成本较低的开源选择。更多接口细节与排查指南建议直接查阅官方文档。官方文档 | 开源协议 | 贡献指南【免费下载链接】Duix-Mobile The best real-time interactive AI avatar(digital human) with on-premise deployment and 1.5 s latency.项目地址: https://gitcode.com/GitHub_Trending/du/Duix-Mobile创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
返回列表