离FaceChain应用生态爆发还有多远?-0905迭代周记

本文涉及的产品
模型在线服务 PAI-EAS,A10/V100等 500元 1个月
模型训练 PAI-DLC,5000CU*H 3个月
交互式建模 PAI-DSW,5000CU*H 3个月
简介: 在过去的不到一个月,FaceChain开源项目从无到有,成功突破了相关技术瓶颈,GitHub(https://github.com/modelscope/facechain)获得了超过4.6K star,为未来的应用发展奠定了坚实的基础。

核心功能进展



在过去的不到一个月,FaceChain开源项目从无到有,成功突破了相关技术瓶颈,GitHub(https://github.com/modelscope/facechain获得了超过4.6K star,为未来的应用发展奠定了坚实的基础。


以下是我们已经实现的一些核心功能:

1、最少1张照片就可以训练特定的人物LoRA,生成的人物写真照片形象鲜明又颇具美感。相关原理详见论文:https://arxiv.org/abs/2308.14256 


2、可以精准指定人物的动作和姿态


3、已经实现了LoRA风格的无限扩展,例如仙女风、拍立得港风、花园婚纱、冬季汉服、校园风等。



更多项目资料都在这里:https://modelscope.cn/brand/view/FaceChain



应用场景设想



距离FaceChain应用生态的爆发式增长还有多远呢?我们已经设想了以下一些可能的应用场景:


生成各种场景LoRA风格的人物写真(这已经实现,但还可以无限拓展)


创作人物连环画故事



制作人物表情包




结合sadtalker生成人物视频

https://live.csdn.net/v/326197


影视、动画角色设计及生成

无限可能……



To Do List



为了实现这些应用,FaceChain仍需攻克一些技术难题:


  • 指定某一固定背景的人物写真(需要掌握inpainting技术)。
  • 高清分辨率图片生成。
  • 图片风格的拓展(包括3D、卡通、特定动画风格如吉普力)。
  • 结合LLM+SD生成连续的图片系列形成完整故事。
  • 连续性视频的生成
  • ……



开发者邀请



作为一个开源项目,我们热忱欢迎更多具有创新思维和热情的开发者加入,各个子项目虚位以待:


我们也会对有以下相关贡献的开发者进行表彰:

  • 贡献项目相关的教程文章。
  • 贡献项目在Github上的PR、issue。
  • 在魔搭平台上同步贡献项目相关模型(如风格LoRA)、训练数据集、衍生的创空间应用。


贡献者将有机会获得项目贡献证书以及modelscope平台免费计算时长奖励,更重要的还是可以结识一群有趣的开发者共同建设一个有趣的项目。


如你也认可我们的项目公约:有趣、有用、向善、向美,请跳转原文报名加入!

我们期待FaceChain开源项目能够持续发展,引领人工智能技术的新潮流。



直播预告


有更多技术细节还可以关注本周五《AI模型社》的直播,有原理讲解+实操演示,可码预约直播:


报名链接:https://survey.aliyun.com/apps/zhiliao/9h-tR9Cv1

相关文章
|
1月前
|
机器学习/深度学习 算法 PyTorch
PyTorch团队首发技术路线图,近百页文档披露2024下半年发展方向
【8月更文挑战第2天】PyTorch团队首度公布了详尽的技术路线图,规划了2024年下半年的发展蓝图。这份近100页的文档聚焦四大核心领域:性能提升,包括算法优化及硬件支持;易用性改进,旨在简化API并增强文档;生态系统建设,扩展硬件兼容性和框架集成;研究支持,提供丰富的工具促进学术探索。尽管前景光明,但仍面临持续优化、用户体验平衡、生态建设和跟踪科研进展等挑战。[原文链接](https://dev-discuss.pytorch.org/t/meta-pytorch-team-2024-h2-roadmaps/2226)
50 8
|
4月前
|
人工智能 自然语言处理 API
【活动】开源与闭源大模型:探索未来趋势的双轨道路
在人工智能领域,大模型(Large Language Models, LLMs)凭借其强大的语言理解和生成能力,正逐步成为推动技术革新和社会进步的关键力量。随着GPT-3、BERT、Turing-NLG等知名模型的面世,大模型的开放与封闭策略也成为行业内外热议的话题。本文旨在探讨开源与闭源大模型各自的优劣,并基于当前技术发展、市场趋势及社会需求,分析两者在未来的发展前景。
79 2
|
5天前
|
人工智能
AI设计自己,代码造物主已来!UBC华人一作首提ADAS,数学能力暴涨25.9%
【9月更文挑战第15天】近年来,人工智能领域取得了显著进展,但智能体系统的设计仍需大量人力与专业知识。为解决这一问题,UBC研究人员提出了“自动智能体系统设计(ADAS)”新方法,通过基于代码的元智能体实现智能体系统的自动化设计与优化。实验结果表明,ADAS设计的智能体在多个领域中表现优异,尤其在阅读理解和数学任务上取得了显著提升。尽管如此,ADAS仍面临安全性、可扩展性和效率等挑战,需进一步研究解决。论文详情见链接:https://arxiv.org/pdf/2408.08435。
15 4
|
2月前
|
人工智能 Cloud Native 物联网
AI对谈 | 大模型“上车”,终局是什么?
AI对谈 | 大模型“上车”,终局是什么?
43 1
|
3月前
|
机器学习/深度学习 人工智能
可控核聚变新里程碑,AI首次实现双托卡马克3D场全自动优化,登Nature子刊
【6月更文挑战第4天】AI在可控核聚变研究中实现双托卡马克装置3D磁场全自动优化,助力抑制边缘能量爆发(ELMs),提升核聚变性能90%,成果登上《自然通讯》。虽有ELMs少量出现及装置适应性问题,但这一突破为经济可行的核聚变能源发展迈出重要步伐。[论文链接](https://www.nature.com/articles/s41467-024-48415-w)
68 1
|
编解码 物联网 开发者
FaceChain应用生态爆发?无限可能的人物应用等你加入探索!
在过去的不到一个月,FaceChain开源项目从无到有,成功突破了相关技术瓶颈,GitHub获得了超过4.6K star,为未来的应用发展奠定了坚实的基础。 本文将介绍我们已经实现的一些核心功能、,以及未来一些场景的设想。文章末尾,诚邀有意向有能力的开发者加入我们!
1235 1
|
人工智能 自然语言处理 前端开发
探索AI时代的应用工程化架构演进,一人公司时代还有多远?
当代AI来势汹汹,本文从AI的特点、对研发的挑战、AI的应用工程和场景分化等剖析了AI时代的应用工程化架构演进之路。
20816 6
|
存储 人工智能 算法
探索 AI 时代的应用工程化架构演进,一人公司时代还有多远?
序言 在当下生成式模型的 AI 时代,了解和使用 AI 相关技术是前后端研发同学迟早要面对的事。 所有产品都值得用 AI 去重新做一遍。其根本原因在于当下 AI 的形态即生成式模型是通过 AI 辅助来改变和创造新的产品形态,而不是像以往的技术一样只是对现有产品形态的补充。 简单来说,产品研发同学可以做的事情更多了。
174 0
|
新能源 Shell
首个室温常压超导掀全球热度,数万人正在围观这个中国团队的复现进度
首个室温常压超导掀全球热度,数万人正在围观这个中国团队的复现进度
|
人工智能 算法 安全
【年终特辑】看见科技创新力量 洞见时代创业精神—智能制造—工源三仟:AI+X-Ray技术方案解决产品内部缺陷检测难题
【年终特辑】看见科技创新力量 洞见时代创业精神—智能制造—工源三仟:AI+X-Ray技术方案解决产品内部缺陷检测难题
142 0