Published: 13 Jun 2023 › Updated: 13 Jun 2023
数字人初步开发体验 / ai #11
AI·Joe 更新完有一段时间了,运行还算不错。考虑到后期,应该是增强功能和升级之类。前段时间大伟兄对数字人直播很是着迷,一番交流下,想想,升级到数字人也是不错的方案。
初步测试了几个开源的方案,数字人实现一般是两种方案:一是实时生成视频,音频,再合成;二是使用虚拟引擎,直接用音频控制。其中Fay数字人方案挻不错的,集成了很多时髦的方案。
Fay数字人长这样
上面是Fay采用虚拟引擎的数字人方案: 用音频与用户交流,再用音频控制数字人的嘴型与表情。目前来看,还是比较早期,还有蛮多的细节要做。这里面的细节也挺多的,Ai驱动这块倒不算难,毕竟有过开发AI·Joe的经历,就是虚拟引擎(Unreal Engineer)挺麻烦的,对电脑要求也高,测试时也是很卡,麻烦的一逼!
市面上heygen、闪剪这些数字人方案都还不错,向它们也学习了一些设计思路。下一步是使用较简洁和便利的方法来实现本地数字人的生成和视频,进一步再到直播。大家有好的方案和建议也请不吝赐教。
Leave 数字人初步开发体验 / ai #11 to:
Read more #cn posts
Best Posts From lemooljiang
We have not curated any of lemooljiang's posts yet. But you can encourage our curation team to review posts by visiting them regularly and by referring other readers. Because we give priority to frequently read content.
More Posts From lemooljiang
- Nextjs初体验,和Nuxt的异同
- DeepTutor:AI个性化辅导平台 / ai #57
- ComfyUI:可编程和自动化的PS / ai #56
- 将Neo4j封装进Agent / ai #55
- 闲鱼省钱大法:极限0.5折!
- 对Neo4j批量导入结构化数据 / ai #54
- langchain对neo4j进行交互,写入和查询数据 / ai #53
- 知识图谱和图数据库Neo4j的作用和使用场景 / ai #52
- SpaceX、美股和比特币
- 又是币圈血洗日!
- 链股合流,当币安也开始卖股票啰
- 天涯社区重启,爷青回?
- 诺基亚在AI时代重新杀回来啦
- 《2049:未来10000天的可能》书中的镜像世界为什么不叫元宇宙
- 今天适合吃披萨
- 开通即被封,别再给Claude送人头了!
- 两根内存条引发的“官司”
- AI·Joe V12更新, 更新GPT-5.5和DeepSeek V4 等
- 中医进校园活动反响热烈
- 猪价低伤农,猪价贵伤民