重磅干貨，第一時(shí)間送達(dá)

情人節(jié)將至，當(dāng)其他人還在苦思冥想如何準(zhǔn)備情人節(jié)禮物時(shí)，我卻已經(jīng)收到了我最喜歡的idol說(shuō)給我的情話視頻～不僅如此，我還用自己的照片說(shuō)出了親愛(ài)的ta最喜歡的告白臺(tái)詞，究竟是什么技術(shù)讓我能夠在這個(gè)情人節(jié)脫穎而出？什么？說(shuō)我吹牛。那先來(lái)放一些我的idol情話視頻的節(jié)選！

哼哼，這下總算是相信了吧？多虧了這項(xiàng)絕技，只要我手里擁有「人臉圖片/視頻」和「告白音頻」，不僅可以擁有idol對(duì)我說(shuō)情話的視頻，甚至是用我本人的臉，也可以同樣說(shuō)出優(yōu)美的情話、唱出動(dòng)人的情歌，“美麗的皮囊+有趣的靈魂”——這樣完美的搭配，簡(jiǎn)直是完勝其他人的情人節(jié)禮物，再假裝不經(jīng)意地發(fā)在朋友圈中，簡(jiǎn)直是標(biāo)準(zhǔn)“凡爾賽式秀恩愛(ài)”呀~什么？你以為這門(mén)絕技需要耗時(shí)耗力？大錯(cuò)特錯(cuò)！PaddleGAN(飛槳生成對(duì)抗網(wǎng)絡(luò)套件)中的Wav2lip唇形精準(zhǔn)合成算法讓你輕松變身「情場(chǎng)高手」！心急的小伙伴直接傳送門(mén)去查看完整開(kāi)源的項(xiàng)目呀：https://github.com/PaddlePaddle/PaddleGAN開(kāi)源不易，歡迎Star支持啊！接下來(lái)，就讓我們來(lái)簡(jiǎn)單了解下這個(gè)技術(shù)原理，和具體的操作步驟，手把手教你如何讓新垣結(jié)衣告白，讓小羅伯特唐尼說(shuō)周星馳電影經(jīng)典橋段“我養(yǎng)你”或者讓任何你心儀的Idol說(shuō)情話????·?·????而這個(gè)「讓idol說(shuō)情話、自己唱情歌」的魔法總共只需要四步！！！

① 安裝Paddle環(huán)境并下載PaddleGAN

② 選擇想要「被告白/對(duì)口型」的idol/人臉以及「告白臺(tái)詞音頻」內(nèi)容

③ 將準(zhǔn)備好的「人臉視頻/圖片」以及「告白臺(tái)詞音頻」輸入Wav2lip模型中，讓這個(gè)模型進(jìn)行推理工作

④ 輸出idol的嘴唇與告白語(yǔ)音做出匹配唇形動(dòng)作的idol說(shuō)情話視頻，就可以分享到朋友圈過(guò)凡爾賽式的情人節(jié)啦~聰明的小伙伴們可能注意到了，這里面最核心的就是名稱(chēng)為Wav2lip的模型，那它到底是個(gè)什么原理呢？PaddleGAN的唇形遷移能力

Wav2lipWav2lip是PaddleGAN中提供的一個(gè)基于GAN的唇形動(dòng)作遷移算法模型，它的網(wǎng)絡(luò)結(jié)構(gòu)可以通過(guò)VisualDL直接查看到：Power by VisualDL：https://github.com/PaddlePaddle/VisualDLWav2lip模型實(shí)現(xiàn)唇形與語(yǔ)音精準(zhǔn)同步突破的關(guān)鍵在于：采用唇形同步判別器(Discriminator)，以強(qiáng)制生成器(Generator)持續(xù)產(chǎn)生準(zhǔn)確且逼真的唇部運(yùn)動(dòng)。

通過(guò)在判別器中，使用多個(gè)連續(xù)幀而不是單個(gè)幀，并使用視覺(jué)質(zhì)量損失(visual quality loss)，而不僅僅是對(duì)比損失(L1 Loss)來(lái)考慮每幀之間的時(shí)間相關(guān)性，從而很大程度的提升視覺(jué)效果。詳情請(qǐng)見(jiàn)：https://github.com/PaddlePaddle/PaddleGAN/blob/develop/docs/en_US/tutorials/wav2lip.md而且！！！萬(wàn)能的Wav2lip模型適用于任何人臉、任何語(yǔ)音、任何語(yǔ)言！對(duì)任意語(yǔ)音及視頻都能達(dá)到很好的融合，達(dá)到逼真的效果！還在擔(dān)心不會(huì)使用？PaddleGAN團(tuán)隊(duì)為大家在AI Studio上準(zhǔn)備了對(duì)應(yīng)的公開(kāi)項(xiàng)目，里面包含了完整的實(shí)現(xiàn)步驟及代碼，AI Studio的免費(fèi)算力助力大家體驗(yàn)「告白」視頻的制作，讓你輕輕松松獲得「芳心」！貼心的傳送門(mén)：https://aistudio.baidu.com/aistudio/projectdetail/1542850項(xiàng)目的具體詳細(xì)介紹如下：1.下載PaddleGAN并安裝所需依賴(lài)#?進(jìn)入工作目錄

%cd?/home/aistudio/work

#?從github上克隆PaddleGAN代碼(如下載速度過(guò)慢，可用gitee源)

!git?clone?https://gitee.com/PaddlePaddle/PaddleGAN

#或者使用?!git?clone?https://github.com/PaddlePaddle/PaddleGAN

#?安裝所需安裝包

!mkdir?sndfile

%cd?sndfile

!wget?http://www.mega-nerd.com/libsndfile/files/libsndfile-1.0.28.tar.gz

!tar?xzvf?libsndfile-1.0.28.tar.gz

%cd?libsndfile-1.0.28

!./configure?--prefix=/home/aistudio/build_libs?CFLAGS=-fPIC?--enable-shared

!make

!make?install

%cd?/home/aistudio/work/PaddleGAN

!pip?install?-r?requirements.txt

%cd?applications/

2.執(zhí)行唇形合成命令!export?PYTHONPATH=$PYTHONPATH:/home/aistudio/work/PaddleGAN?&&?python?tools/wav2lip.py?--face?/home/aistudio/work/jieyi13s.mp4?--audio?/home/aistudio/work/gaobai12s.m4a?--outfile?pp_gaobai_jieyi.mp4具體的參數(shù)使用說(shuō)明如下：face: 原始idol人臉視頻，視頻中的idol的唇形將根據(jù)臺(tái)詞音頻進(jìn)行唇形合成--即，想讓誰(shuí)說(shuō)情話audio：驅(qū)動(dòng)唇形合成的告白臺(tái)詞音頻，視頻中的idol將根據(jù)此音頻進(jìn)行唇形合成--即，想聽(tīng)idol說(shuō)什么重點(diǎn)來(lái)啦！！本項(xiàng)目支持大家上傳idol或自己的人臉?biāo)夭囊曨l，以及告白臺(tái)詞音頻， 合成任意想要的情話/情歌告白視頻！！只需在命令中的face參數(shù)和audio參數(shù)分別換成自己的人臉?biāo)夭囊曨l和告白臺(tái)詞音頻路徑，然后運(yùn)行命令，就可以生成和臺(tái)詞音頻同步的idol告白視頻。程序運(yùn)行完成后，會(huì)在當(dāng)前文件夾下生成文件名為outfile參數(shù)指定的idol告白視頻文件，該文件即為和臺(tái)詞音頻同步的idol告白視頻文件。本項(xiàng)目中提供了demo展示所用到的idol人臉視頻和告白臺(tái)詞音頻文件。看到這里，各位有沒(méi)有心動(dòng)了呢～要是以為PaddleGAN只能幫你「告白成功」，那你就大錯(cuò)特錯(cuò)啦！！免費(fèi)開(kāi)源的寶藏套件PaddleGAN的能力當(dāng)然不止于唇形遷移/生成的技術(shù)，里面滿(mǎn)滿(mǎn)都是種類(lèi)豐富、趣味十足的圖像/視頻生成、處理能力，等待大家探索~如圖像風(fēng)格遷移、視頻修復(fù)、圖像超分辨率、人像動(dòng)漫化、照片動(dòng)漫化、人臉編輯等等！！PaddleGAN就如一個(gè)「游樂(lè)場(chǎng)」，歡迎各位「玩家」加入，體驗(yàn)各類(lèi)「游戲設(shè)施」，無(wú)需門(mén)票，如果玩得開(kāi)心，記得點(diǎn)Star支持下~

總結(jié)

以上是生活随笔為你收集整理的python朋友圈表白_情人节「告白生成器」来了！这个AI能让偶像对你说情话，过于真实！...的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。