python朋友圈表白_情人节「告白生成器」来了!这个AI能让偶像对你说情话,过于真实!...
重磅干貨,第一時間送達
情人節將至,當其他人還在苦思冥想如何準備情人節禮物時,我卻已經收到了我最喜歡的idol說給我的情話視頻~不僅如此,我還用自己的照片說出了親愛的ta最喜歡的告白臺詞,究竟是什么技術讓我能夠在這個情人節脫穎而出?什么?說我吹牛。那先來放一些我的idol情話視頻的節選!
哼哼,這下總算是相信了吧?多虧了這項絕技,只要我手里擁有「人臉圖片/視頻」和「告白音頻」,不僅可以擁有idol對我說情話的視頻,甚至是用我本人的臉,也可以同樣說出優美的情話、唱出動人的情歌,“美麗的皮囊+有趣的靈魂”——這樣完美的搭配,簡直是完勝其他人的情人節禮物,再假裝不經意地發在朋友圈中,簡直是標準“凡爾賽式秀恩愛”呀~什么?你以為這門絕技需要耗時耗力?大錯特錯!PaddleGAN(飛槳生成對抗網絡套件)中的Wav2lip唇形精準合成算法讓你輕松變身「情場高手」!心急的小伙伴直接傳送門去查看完整開源的項目呀:https://github.com/PaddlePaddle/PaddleGAN開源不易,歡迎Star支持啊!接下來,就讓我們來簡單了解下這個技術原理,和具體的操作步驟,手把手教你如何讓新垣結衣告白,讓小羅伯特唐尼說周星馳電影經典橋段“我養你”或者讓任何你心儀的Idol說情話????·?·????而這個「讓idol說情話、自己唱情歌」的魔法總共只需要四步!!!
① 安裝Paddle環境并下載PaddleGAN
② 選擇想要「被告白/對口型」的idol/人臉以及「告白臺詞音頻」內容
③ 將準備好的「人臉視頻/圖片」以及「告白臺詞音頻」輸入Wav2lip模型中,讓這個模型進行推理工作
④ 輸出idol的嘴唇與告白語音做出匹配唇形動作的idol說情話視頻,就可以分享到朋友圈過凡爾賽式的情人節啦~聰明的小伙伴們可能注意到了,這里面最核心的就是名稱為Wav2lip的模型,那它到底是個什么原理呢?PaddleGAN的唇形遷移能力
Wav2lipWav2lip是PaddleGAN中提供的一個基于GAN的唇形動作遷移算法模型,它的網絡結構可以通過VisualDL直接查看到:Power by VisualDL:https://github.com/PaddlePaddle/VisualDLWav2lip模型實現唇形與語音精準同步突破的關鍵在于:采用唇形同步判別器(Discriminator),以強制生成器(Generator)持續產生準確且逼真的唇部運動。
通過在判別器中,使用多個連續幀而不是單個幀,并使用視覺質量損失(visual quality loss),而不僅僅是對比損失(L1 Loss)來考慮每幀之間的時間相關性,從而很大程度的提升視覺效果。詳情請見:https://github.com/PaddlePaddle/PaddleGAN/blob/develop/docs/en_US/tutorials/wav2lip.md而且!!!萬能的Wav2lip模型適用于任何人臉、任何語音、任何語言!對任意語音及視頻都能達到很好的融合,達到逼真的效果!還在擔心不會使用?PaddleGAN團隊為大家在AI Studio上準備了對應的公開項目,里面包含了完整的實現步驟及代碼,AI Studio的免費算力助力大家體驗「告白」視頻的制作,讓你輕輕松松獲得「芳心」!貼心的傳送門:https://aistudio.baidu.com/aistudio/projectdetail/1542850項目的具體詳細介紹如下:1.下載PaddleGAN并安裝所需依賴#?進入工作目錄
%cd?/home/aistudio/work
#?從github上克隆PaddleGAN代碼(如下載速度過慢,可用gitee源)
!git?clone?https://gitee.com/PaddlePaddle/PaddleGAN
#或者使用?!git?clone?https://github.com/PaddlePaddle/PaddleGAN
#?安裝所需安裝包
!mkdir?sndfile
%cd?sndfile
!wget?http://www.mega-nerd.com/libsndfile/files/libsndfile-1.0.28.tar.gz
!tar?xzvf?libsndfile-1.0.28.tar.gz
%cd?libsndfile-1.0.28
!./configure?--prefix=/home/aistudio/build_libs?CFLAGS=-fPIC?--enable-shared
!make
!make?install
%cd?/home/aistudio/work/PaddleGAN
!pip?install?-r?requirements.txt
%cd?applications/
2.執行唇形合成命令!export?PYTHONPATH=$PYTHONPATH:/home/aistudio/work/PaddleGAN?&&?python?tools/wav2lip.py?--face?/home/aistudio/work/jieyi13s.mp4?--audio?/home/aistudio/work/gaobai12s.m4a?--outfile?pp_gaobai_jieyi.mp4具體的參數使用說明如下:face: 原始idol人臉視頻,視頻中的idol的唇形將根據臺詞音頻進行唇形合成--即,想讓誰說情話audio:驅動唇形合成的告白臺詞音頻,視頻中的idol將根據此音頻進行唇形合成--即,想聽idol說什么重點來啦!!本項目支持大家上傳idol或自己的人臉素材視頻,以及告白臺詞音頻, 合成任意想要的情話/情歌告白視頻!!只需在命令中的face參數和audio參數分別換成自己的人臉素材視頻和告白臺詞音頻路徑,然后運行命令,就可以生成和臺詞音頻同步的idol告白視頻。程序運行完成后,會在當前文件夾下生成文件名為outfile參數指定的idol告白視頻文件,該文件即為和臺詞音頻同步的idol告白視頻文件。本項目中提供了demo展示所用到的idol人臉視頻和告白臺詞音頻文件。看到這里,各位有沒有心動了呢~要是以為PaddleGAN只能幫你「告白成功」,那你就大錯特錯啦!!免費開源的寶藏套件PaddleGAN的能力當然不止于唇形遷移/生成的技術,里面滿滿都是種類豐富、趣味十足的圖像/視頻生成、處理能力,等待大家探索~如圖像風格遷移、視頻修復、圖像超分辨率、人像動漫化、照片動漫化、人臉編輯等等!!PaddleGAN就如一個「游樂場」,歡迎各位「玩家」加入,體驗各類「游戲設施」,無需門票,如果玩得開心,記得點Star支持下~
總結
以上是生活随笔為你收集整理的python朋友圈表白_情人节「告白生成器」来了!这个AI能让偶像对你说情话,过于真实!...的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: mysql密码错误 mac_MAC下MY
- 下一篇: java 线程池 源码_java线程池源