在過去的不到一個月,F(xiàn)aceChain開源項目從無到有,成功突破了相關(guān)技術(shù)瓶頸,GitHub(GitHub - modelscope/facechain: FaceChain is a deep-learning toolchain for generating your Digital-Twin.)獲得了超過4.6K?star,為未來的應(yīng)用發(fā)展奠定了堅實的基礎(chǔ)。以下是我們已經(jīng)實現(xiàn)的一些核心功能:
最少1張照片就可以訓(xùn)練生成特定的人物L(fēng)oRA,生成的人物寫真照片形象鮮明又頗具美感。?相關(guān)原理詳見論文:https://arxiv.org/abs/2308.14256?
(資料圖片僅供參考)
可以精準(zhǔn)指定人物的動作和姿態(tài)
已經(jīng)打通LoRA風(fēng)格的無限擴展,例如仙女風(fēng)、拍立得港風(fēng)、花園婚紗、冬季漢服、校園風(fēng)等。
更多風(fēng)格DIY教程:
【手把手教程】無限場景風(fēng)格LoRA與固定人物L(fēng)oRA的融合-酷蛙FaceChain0826周記(GitHub已4K Star?。?/p>
?
距離FaceChain應(yīng)用生態(tài)的爆發(fā)式增長還有多遠呢?我們已經(jīng)設(shè)想了以下一些可能的應(yīng)用場景:
生成各種場景LoRA風(fēng)格的人物寫真(這已經(jīng)實現(xiàn),但還可以無限拓展)
創(chuàng)作人物連環(huán)畫故事。
制作人物表情包
結(jié)合sadtalker生成人物視頻
影視、動畫角色設(shè)計及生成
無限可能……
?
為了實現(xiàn)這些應(yīng)用,F(xiàn)aceChain仍需攻克一些技術(shù)難題:
指定某一固定背景的人物寫真(需要掌握inpainting技術(shù))。
高清分辨率圖片生成。
圖片風(fēng)格的拓展(包括3D、卡通、特定動畫風(fēng)格如吉普力)。
結(jié)合LLM+SD生成連續(xù)的圖片系列形成完整故事。
連續(xù)性視頻的生成
……
作為一個開源項目,我們熱忱歡迎更多具有創(chuàng)新思維和熱情的開發(fā)者加入,各個子項目虛位以待:
我們也會對有以下相關(guān)貢獻的開發(fā)者進行表彰:
貢獻項目相關(guān)的教程文章。
貢獻項目在Github上的PR、issue。
在魔搭平臺上同步貢獻項目相關(guān)模型(如風(fēng)格LoRA)、訓(xùn)練數(shù)據(jù)集、衍生的創(chuàng)空間應(yīng)用。
貢獻者將有機會獲得項目貢獻證書以及modelscope平臺免費計算時長獎勵,更重要的還是可以結(jié)識一群有趣的開發(fā)者共同建設(shè)一個有趣的項目
如你也認可我們的項目公約:有趣、有用、向善、向美,請?zhí)D(zhuǎn)原文報名加入!
我們期待FaceChain開源項目能夠持續(xù)發(fā)展,引領(lǐng)人工智能技術(shù)的新潮流。
有更多技術(shù)細節(jié)還可以關(guān)注本周五《AI模型社》的直播,有原理講解+實操演示,可掃碼預(yù)約直播:
關(guān)鍵詞: