在过去的不到一个月,facechain开源项目从无到有,成功突破了相关技术瓶颈,github(github - modelscope/facechain: facechain is a deep-learning toolchain for generating your digital-twin.)获得了超过4.6k star,为未来的应用发展奠定了坚实的基础。以下是我们已经实现的一些核心功能:
最少1张照片就可以训练生成特定的人物lora,生成的人物写真照片形象鲜明又颇具美感。相关原理详见论文:https://arxiv.org/abs/2308.14256
(资料图片仅供参考)
可以精准指定人物的动作和姿态
已经打通lora风格的无限扩展,例如仙女风、拍立得港风、花园婚纱、冬季汉服、校园风等。
更多风格diy教程:
【手把手教程】无限场景风格lora与固定人物lora的融合-酷蛙facechain0826周记(github已4k star!)
距离facechain应用生态的爆发式增长还有多远呢?我们已经设想了以下一些可能的应用场景:
生成各种场景lora风格的人物写真(这已经实现,但还可以无限拓展)
创作人物连环画故事。
制作人物表情包
结合sadtalker生成人物视频
影视、动画角色设计及生成
无限可能……
为了实现这些应用,facechain仍需攻克一些技术难题:
指定某一固定背景的人物写真(需要掌握inpainting技术)。
高清分辨率图片生成。
图片风格的拓展(包括3d、卡通、特定动画风格如吉普力)。
结合llm sd生成连续的图片系列形成完整故事。
连续性视频的生成
……
作为一个开源项目,我们热忱欢迎更多具有创新思维和热情的开发者加入,各个子项目虚位以待:
我们也会对有以下相关贡献的开发者进行表彰:
贡献项目相关的教程文章。
贡献项目在github上的pr、issue。
在魔搭平台上同步贡献项目相关模型(如风格lora)、训练数据集、衍生的创空间应用。
贡献者将有机会获得项目贡献证书以及modelscope平台免费计算时长奖励,更重要的还是可以结识一群有趣的开发者共同建设一个有趣的项目
如你也认可我们的项目公约:有趣、有用、向善、向美,请跳转原文报名加入!
我们期待facechain开源项目能够持续发展,引领人工智能技术的新潮流。
有更多技术细节还可以关注本周五《ai模型社》的直播,有原理讲解 实操演示,可扫码预约直播:
关键词: