Created by BUPT_GWY 如何能看到更高的价值点?如何能一下子拿到结果?

Letter To You

元宇宙有很多荒诞的概念和解读
有人预言说它会将人类引向极乐,变得堕落
这个问题很有趣,却对我们的生活没有指导意义
值得关注的,是它作为工具升级、生产力提升的一面

我们试图掀开过一角:以虚拟人脸为切入点
或许它能窥见一些元宇宙反哺现实的方法
当数字合成资产普世化以后,人们可以更简单、更公平的获得生产资料
当数字内容编辑亲民化以后,人们可以更高效、更轻松的开展生产协作
将数字生成内容应用在生活的购/览/设/投,让百姓感受到生成技术带来的便捷与优势,或许是合理的推进策略
您若感兴趣可进一步阅读本网站以了解更具象的信息

20220506 Any-Avatar

即插即用型数字人

除了做ToB/ToG以外,数字人是否也可以做成ToC去赋能个人呢?
我们试图构建一种新的数字人制作方案,称之为即插即用型数字人
它与传统的录制型数字人(录制-训练-唇形播报的方式)不同,技术上有两点变化:
1. 不限制专人:支持将海量形象替换在任意视频上进行给定语音的播报
2. 无训练过程:即插即用,在PC端上10分钟可合成1分钟长度数字人视频

* W2LP2P基于音频+照片驱动,实现唇形合成+姿态驱动功能,同时共享pose信息来保证音唇画的一致性

Demos

模型支持视觉驱动替换面部和语音驱动合成唇形技术,以及任意数据迁移
目前还有一些工程问题需要修复,优化好后就会给出demo~

思考:为什么人们愿意为数字人买单?

  这个问题好重要呀。我觉得没有人把这个问题讲清楚过,很多人都是一股脑在做。
  我身边有做技术的人也有做商业的人,他们关注点还是挺不一样的,比如要么是技术很fancy,要么是好讲故事拉投资。但我觉得真正重要的是用户的角度——假如我啥也不懂,我看见一个数字人,我觉得这个技术很牛很逼真,可能我点赞转发一波。。但我凭啥掏钱买它??它能给我提供啥服务呢?
  目前看有两种理由,第一种是我喜欢TA(TA是个偶像),为了给TA应援或者得到TA的定制祝福语等付费,这种有市场但是不够有黏性(用户离开TA照样生活);另一种理由比较难找,就是那种真人搞不定只有数字人能搞定,同时这个任务又不得不做的场景——难找是因为目前数字人还处在模仿真人的阶段(能力复刻于真人),但找到这个点非常重要。
  我能想到的短期刚需场景包括:1. 照片聊天器:家里放一张人物照片,按一个按钮之类的,他的嘴巴能动能说话,这个很酷哦,因为总有我们思念的人,单纯照片还不够寄托相思之情; 2. 数字人替身:利用面部驱动+唇语合成制作一个数字人替身,让替身为真人打工(卖方要偷懒+买方要内容),比如明星授权面部版权合成祝福语卖给上百个商家/销售授权面部版权合成一百段介绍视频传播给一百个客户等等,这是长期且广的需求点。 长期的刚需场景包括:1. 元宇宙的技术基石已基本确认为3D数字人,这是每个民众都必须且只能用到数字人的地方(达成数字孪生),它能推助元宇宙渗入到人们生活的每一处。
  总而言之,我觉得只有找到真人搞不定的而数字人才能搞定的场景才能称之为商业化,目前已推的这些新闻播报/手语翻译/虚拟人带货全都是噱头(它们是功能但一定不是商业化。。),找到玉的人还在后面。

——写于20220530

虚拟人选美

Faces Menu

生成日志目录

代数 标签 生成器 生成样本
1 高颜值 官方(Github /
2 更高颜值 官方+颜值分类器 /
3 "萌娃"特辑 萌娃脸生成器(Github 1万张(提取码:75AG)
4 "最美笑容"特辑 官方+笑容分类器 5万张(提取码:AHU3)
5 "中国姑娘"特辑 黄种人脸生成器(Github 5万张(提取码:A01B)
6 "类现实名人"特辑 现实人脸编码器 20张
7 "中国明星"特辑 明星脸生成器(Github 1万张(提取码:XVAL)
8 "中国网红"特辑 网红脸生成器(Github 1万张(提取码:3IQT)
9 "超模"特辑 超模脸生成器(Github 1万张(提取码:2A5W)
10 "混血"特辑 融合明星脸&超模脸生成器 20张
人脸属性编辑器(Github //适用于所有上述生成器
基于StyleGAN2重制 含上述所有生成器(Github //消除伪影和损坏现象

好玩生成技术

广义的生成技术是更具有冲击力的,我也喜欢用业余时间探索很多新方向

方向 描述 代码地址(Github)
视频擦除 擦除掉视频当中的指定内容 Video-Auto-Wipe
高清换脸 基于单图输入的高清换脸训练代码 SimSwap-train
数字模特 零成本的环球广告模特生成与制作 Model-Swap-FaceModel-Swap-Face-v2

如果您有什么问题是我可以帮您解决的,欢迎您通过QQ:312863063等方式来联系我;
最近不接项目做了,想玩点有意思的东西,有加我没回的请见谅。

Faces Database

Epoch 001

第一代诞生

声明:本站所有的照片都是电脑绘制, 世界上不存在与之同样的照片或同样的人。