1 核心功能进展

在过去的不到一个月,FaceChain开源项目从无到有,成功突破了相关技术瓶颈,GitHub(GitHub - modelscope/facechain: FaceChain is a deep-learning toolchain for generating your Digital-Twin.)获得了超过4.6K star,为未来的应用发展奠定了坚实的基础。以下是我们已经实现的一些核心功能:

最少1张照片就可以训练生成特定的人物LoRA,生成的人物写真照片形象鲜明又颇具美感。​相关原理详见论文:https://arxiv.org/abs/2308.14256 


(资料图片仅供参考)

可以精准指定人物的动作和姿态

已经打通LoRA风格的无限扩展,例如仙女风、拍立得港风、花园婚纱、冬季汉服、校园风等。

更多风格DIY教程:

【手把手教程】无限场景风格LoRA与固定人物LoRA的融合-酷蛙FaceChain0826周记(GitHub已4K Star!)

2 应用场景设想

距离FaceChain应用生态的爆发式增长还有多远呢?我们已经设想了以下一些可能的应用场景:

生成各种场景LoRA风格的人物写真(这已经实现,但还可以无限拓展)

创作人物连环画故事。

制作人物表情包

结合sadtalker生成人物视频

影视、动画角色设计及生成

无限可能……

3 to do list

为了实现这些应用,FaceChain仍需攻克一些技术难题:

指定某一固定背景的人物写真(需要掌握inpainting技术)。

高清分辨率图片生成。

图片风格的拓展(包括3D、卡通、特定动画风格如吉普力)。

结合LLM+SD生成连续的图片系列形成完整故事。

连续性视频的生成

……

4 开发者邀请​

作为一个开源项目,我们热忱欢迎更多具有创新思维和热情的开发者加入,各个子项目虚位以待:

我们也会对有以下相关贡献的开发者进行表彰:

贡献项目相关的教程文章。

贡献项目在Github上的PR、issue。

在魔搭平台上同步贡献项目相关模型(如风格LoRA)、训练数据集、衍生的创空间应用。

贡献者将有机会获得项目贡献证书以及modelscope平台免费计算时长奖励,更重要的还是可以结识一群有趣的开发者共同建设一个有趣的项目

如你也认可我们的项目公约:有趣、有用、向善、向美,请跳转原文报名加入!

我们期待FaceChain开源项目能够持续发展,引领人工智能技术的新潮流。

有更多技术细节还可以关注本周五《AI模型社》的直播,有原理讲解+实操演示,可扫码预约直播:

推荐内容