自從 ChatGPT、Stable Diffusion 發(fā)表以來，各種相關(guān)開源專案百花齊放，著實(shí)讓人應(yīng)接不暇。

今天，著重挑選幾個優(yōu)質(zhì)的開源專案分享給大家，對我們的日常工作、學(xué)習(xí)生活，都會有很大的幫助。

一、Visual ChatGPT

這個是微軟開源的項(xiàng)目，一週多的時間，就斬獲了 23.6k star。

簡單概括它，那就是一個多模態(tài)的問答系統(tǒng)。

支援?AI 繪畫、語言問答、看圖片問答，將 AI 屆近期的 3 大熱點(diǎn)集於一身。

效果顯示：

系統(tǒng)實(shí)作架構(gòu)如下：

這是一個「大力出奇蹟」的開源項(xiàng)目，集多方研究成果於一身：BLIP、CLIP、ChatGPT、pix2pix、inpainting、 vqa 等。

說穿了，就是教你怎樣使用這些項(xiàng)目，建立一個多模態(tài)的問答系統(tǒng)，這個系統(tǒng)架構(gòu)很有參考價值。

專案網(wǎng)址：

https://github.com/microsoft/visual-chatgpt

二、SadTalker

這是一篇2023 年的CVPR 論文對應(yīng)的開源專案。

剛剛開源，新鮮熱乎～

功能就是：根據(jù)一張圖片、一段音頻，合成臉部說這段語音的視頻。

結(jié)合 ChatGPT、AIGC、音訊文字轉(zhuǎn)換，虛擬二次元 or 三次元形象，就能「活」過來了。

此外，專案也做成了 stable diffusion webui 的插件，也就是直接能在 stable diffusion 裡使用。

產(chǎn)生的圖片，直接配合一段音頻，就能產(chǎn)生合成的影片。

專案網(wǎng)址：

https://github.com/winfredy/sadtalker

三、FateZero

文字能編輯生成圖片？那影片能編輯嗎？

FateZero：我可以！

左圖是原圖，右圖是產(chǎn)生效果，輸入的文字是：

增加Pokémon 動畫風(fēng)格：

這個專案也是基於 sd 做的，離一鍵生成視頻，又進(jìn)了一步。

專案網(wǎng)址：

https://github.com/chenyangqiqi/fatezero

四、ChatPaper

#arXiv 想必大家都知道，當(dāng)下最受歡迎的論文託管網(wǎng)站，上面有來自世界各地的科學(xué)家、研究學(xué)者。

為了提高 arXiv 使用者閱讀論文的效率，有人開源了一款利用 ChatGPT 總結(jié) arXiv 論文的開源工具 ChatPaper。

開發(fā)者的動機(jī)，他是這樣講述的：

#簡而言之，該專案可根據(jù)使用者關(guān)鍵字下載arXiv 上的最新論文，利用ChatGPT3.5 API 強(qiáng)大的歸納能力，將其濃縮成固定格式，文字少且易讀。

同時，專案支援個人自己部署，或直接去 Hugge Face 體驗(yàn)。

計(jì)畫網(wǎng)址：

https://github.com/kaixindelele/ChatPaper

https://huggingface.co/spaces/wangrongsheng/ChatPaper

最後

最近有太多公司all in ChatGPT 了，各種相關(guān)的開源專案也是層出不窮。

希望這些項(xiàng)目，對你能有所幫助。