让手绘动漫人设图动起来,一个开源 AI 项目

2022 年 8 月 12 日
 hzwer

Github 项目 | 模型解读 | B 站介绍视频 |

我们的这个工作的目标是让用户通过输入几张任意姿势,任意角度下的手绘人物图片,生成该人物生动的动画视频。

希望有兴趣的朋友来体验和帮助我们改进;或动动小手给个三连,谢谢大家。

5751 次点击
所在节点    分享创造
21 条回复
Aloento
2022 年 8 月 12 日
我可以提供炼丹 GPU
hzwer
2022 年 8 月 12 日
@Aloento GPU 我们倒是有很多,可以附送算法大佬吗(
FightPig
2022 年 8 月 13 日
这个不错
Aloento
2022 年 8 月 13 日
@hzwer 羡慕不缺显卡的,那我可以拿来用用试试看。不是很有空提 PR 抱歉
c0xt30a
2022 年 8 月 13 日
OP 能否写篇文章介绍下文章核心算法和炼丹时候踩过的坑?
hzwer
2022 年 8 月 13 日
@c0xt30a 现在只有这个,因为还在改进中,之后看看有没机会再写
https://zhuanlan.zhihu.com/p/549112479
codingBug
2022 年 8 月 13 日
看起来好棒
whywaoxaks
2022 年 8 月 13 日
是我看错了么?胸还在抖么?😂
edis0n0
2022 年 8 月 13 日
黄学长太强了!要是能做到只输入一张图(因为很多情况都是只有一张图)应用就广了。
hzwer
2022 年 8 月 13 日
@edis0n0 输入一张图也可以有一定效果,但确实应该需要一些其他的补全技术
jwenjian
2022 年 8 月 14 日
https://sketch.metademolab.com/canvas , Meta 有一个让孩子的手绘小人动起来的实验项目, 是不是一个原理?
Juszoe
2022 年 8 月 15 日
b 站刷到过,很有趣的工作。但是需要一个和人物类似的 3D 模型,这个就没那么简单了,输入人物和模型也不一定刚好能匹配上😂
tsutomu
2022 年 8 月 15 日
直接导出模型就好
hzwer
2022 年 8 月 15 日
@Juszoe 是的,不过我们试过匹配不上的情况,也没有崩得非常离谱
总之是需要联合其它组件一起的,也需要工程师们继续来改进
hzwer
2022 年 8 月 15 日
@jwenjian 哇这个确实很有意思,我大概能感受到有很多共通之处
lisongeee
2022 年 8 月 15 日
有没有坤坤打篮球的动作?
hzwer
2022 年 8 月 15 日
Youkochan0v0
2022 年 8 月 16 日
@jwenjian 试了一下楼主和#11 的链接,蛮有趣的
darkscope
2022 年 8 月 17 日
B 站先关注一波,之前看你发的补帧的也很赞;
话说模型是直接生成视频吗,还是说一套贴图呢,我看需要 mesh 和动作序列
明天看看论文~
Rooney1
2022 年 8 月 21 日
很棒的样子

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://v2ex.xtra.eu.org/t/872545

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX