13

FaceChain应用生态爆发?无限可能的人物应用等你加入探索!

 11 months ago
source link: https://blog.csdn.net/sunbaigui/article/details/132685527
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
neoserver,ios ssh client

1 核心功能进展

在过去的不到一个月,FaceChain开源项目从无到有,成功突破了相关技术瓶颈,GitHub(GitHub - modelscope/facechain: FaceChain is a deep-learning toolchain for generating your Digital-Twin.)获得了超过4.6K star,为未来的应用发展奠定了坚实的基础。以下是我们已经实现的一些核心功能:

  • 最少1张照片就可以训练生成特定的人物LoRA,生成的人物写真照片形象鲜明又颇具美感。​相关原理详见论文:https://arxiv.org/abs/2308.14256 

  • 可以精准指定人物的动作和姿态

be27da8e9def42d68acf8cd7e9cef718.png
  • 已经打通LoRA风格的无限扩展,例如仙女风、拍立得港风、花园婚纱、冬季汉服、校园风等。

1c86ac7e22d4b0d4dd3c25a5b5cab324.png
3c893987d86b8e29496e3d25ab413579.png

更多风格DIY教程:

【手把手教程】无限场景风格LoRA与固定人物LoRA的融合-酷蛙FaceChain0826周记(GitHub已4K Star!)

2 应用场景设想

距离FaceChain应用生态的爆发式增长还有多远呢?我们已经设想了以下一些可能的应用场景:

  • 生成各种场景LoRA风格的人物写真(这已经实现,但还可以无限拓展)

  • 创作人物连环画故事。

46836c41be8a0f158f14de25ba0d1632.png
  • 制作人物表情包

455b574d31041a975b67a255fb89fc1f.png
d6a5ae75745c0ae690aa9dc3505f375c.png
  • 结合sadtalker生成人物视频

  • 影视、动画角色设计及生成

  • 无限可能……

3 to do list

为了实现这些应用,FaceChain仍需攻克一些技术难题:

  • 指定某一固定背景的人物写真(需要掌握inpainting技术)。

  • 高清分辨率图片生成。

  • 图片风格的拓展(包括3D、卡通、特定动画风格如吉普力)。

  • 结合LLM+SD生成连续的图片系列形成完整故事。

  • 连续性视频的生成

4 开发者邀请​

作为一个开源项目,我们热忱欢迎更多具有创新思维和热情的开发者加入,各个子项目虚位以待:

9d3113117693f61a767cf0904f8cf6f2.png

我们也会对有以下相关贡献的开发者进行表彰:

  • 贡献项目相关的教程文章。

  • 贡献项目在Github上的PR、issue。

  • 在魔搭平台上同步贡献项目相关模型(如风格LoRA)、训练数据集、衍生的创空间应用。

贡献者将有机会获得项目贡献证书以及modelscope平台免费计算时长奖励,更重要的还是可以结识一群有趣的开发者共同建设一个有趣的项目

如你也认可我们的项目公约:有趣、有用、向善、向美,请跳转原文报名加入!

我们期待FaceChain开源项目能够持续发展,引领人工智能技术的新潮流。

有更多技术细节还可以关注本周五《AI模型社》的直播,有原理讲解+实操演示,可扫码预约直播:

7f1846eea0074137a02ad9cdec021119.png

About Joyk


Aggregate valuable and interesting links.
Joyk means Joy of geeK