【星球知识卡片】换脸算法和人脸驱动都有哪些核心技术,如何对其长期深入学习...
大家好,歡迎來到我們的星球知識小卡片專欄,本期給大家分享換臉算法和人臉驅動相關的資源。
作者&編輯 | 言有三
1?基于3D模型的換臉和人臉驅動
基于3D模型的換臉算法是一類非常經典的思路,它首先對人臉進行三維重建,然后進行姿態對齊,紋理映射和融合改進,能夠取得非常好的換臉效果,其中換臉算法以“On Face Segmentation, Face Swapping and Face Perception”為代表。而人臉驅動則以"Face2face"為代表。
2?基于風格遷移模型的換臉
換臉算法保留了被換臉的表情,姿態,形狀,同時使用了新臉的紋理,要實現的就是紋理的遷移,這可以使用已經較為成熟的風格遷移算法,以“Fast Face-swap”為代表。
3 基于生成模型的一對一換臉算法
換臉算法可以看作是一個人臉到人臉的圖像翻譯問題,所以VAE,GAN等生成模型可以被用于人臉特征編碼,其中最經典和著名的算法就是Deepfake系列,這實際上是一系列開源項目。
4 任意人物換臉與驅動算法
Deepfake系列換臉需要收集雙方的大量數據進行訓練,不能實現任意人物的換臉,因此研究任意人物的換臉和驅動是重要課題,典型的包括FSNet,First Order Motion。
5 其他
總的來說,人臉換臉有一些重要的研究方向,包括:
(1) 編解碼框架的改進。
(2) 3D模型的運用。
(3) 人臉監督信息的使用。
(4) 遮擋區域的修復。
(5) 圖像融合的處理。
(6) 其他等等。?
以上內容,如果你不想自己學習,可以去我們知識星球的網絡結構1000變板塊—人臉與GAN閱讀。
以及《深度學習之人臉圖像算法:理論與實踐》視頻課程中找到換臉算法相關的視頻。
【視頻課】一課徹底掌握深度學習人臉圖像算法,長期更新
有三AI知識星球
知識星球是有三AI的付費內容社區,里面包括各領域的模型學習,數據集下載,公眾號的付費圖文原稿,技術總結PPT和視頻,知識問答,書籍下載,項目推薦,線下活動等資源,了解詳細請閱讀以下文章:
【雜談】有三AI知識星球一周年了!為什么公眾號+星球才是完整的?
【雜談】萬萬沒想到,有三還有個保密的‘朋友圈’,那里面都在弄啥!
轉載文章請后臺聯系
侵權必究
往期精選
【星球知識卡片】殘差網絡家族10多個變種學習卡片,請收下!
【星球知識卡片】移動端高效率的分組網絡都發展到什么程度了?
【星球知識卡片】注意力機制發展如何了,如何學習它在各類任務中的應用?
【星球知識卡片】模型剪枝有哪些關鍵技術,如何對其進行長期深入學習
【星球知識卡片】模型量化的核心技術點有哪些,如何對其進行長期深入學習
【星球知識卡片】模型蒸餾的核心技術點有哪些,如何對其進行長期深入學習
【星球知識卡片】視頻分類與行為識別有哪些核心技術,對其進行長期深入學習
【星球知識卡片】圖像生成都有哪些核心技術,如何對其進行長期深入學習
【星球知識卡片】AutoML都有哪些核心技術,如何對其進行長期深入學習
【星球知識卡片】人臉屬性編輯都有哪些核心知識點,如何長期進行學習
【星球知識卡片】深度學習圖像降噪有哪些關鍵技術點,如何學習
【星球知識卡片】圖像風格化與翻譯都有哪些核心技術,如何對其長期深入學習
總結
以上是生活随笔為你收集整理的【星球知识卡片】换脸算法和人脸驱动都有哪些核心技术,如何对其长期深入学习...的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 【阿里云课程】如何从零开始完成一个完整的
- 下一篇: 【直播课】6小时教你掌握轻量级网络,在安