吴忠躺衫网络科技有限公司

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

如何基本不用GAN把照片生成簡筆畫?

中科院長春光機所 ? 來源:機器之心 ? 作者:機器之心 ? 2021-01-20 15:33 ? 次閱讀

如何基本不用GAN把照片生成簡筆畫?這個項目就做到了。

先前,機器之心報道過簡筆畫生成人臉。而 AI 從人臉生成簡筆畫的效果如何呢? 先看幾張效果圖!

《老友記》多人照片轉換效果:

還有男神基努 · 里維斯

效果是不是出奇的好?更有意思的是,這種創作線稿的方法并沒有使用大多數類似工具會用到的生成對抗網絡 GAN。 目前,該項目在 Reddit 上已經有超高熱度,項目名為 ArtLine,github star 量也已經超過 700。如果你想嘗試一下自己的照片,項目作者 Vijish Madhavan 也把代碼放在了 Google Colab 上,運行即可。

項目鏈接:

https://github.com/vijishmadhavan/ArtLine

Colab 地址:https://colab.research.google.com/github/vijishmadhavan/Light-Up/blob/master/ArtLine(Try_it_on_Colab).ipynb

技術細節 效果驚艷的 ArtLine 都用到了什么技術呢?這里有詳細的技術細節介紹,包括自注意機制、逐步調整圖片大小以及生成器損失函數。 自注意機制借鑒的相關研究是 Ian Goodfellow 等人的論文《Self-Attention Generative Adversarial Networks 》。

0ea59994-4492-11eb-8b86-12bb97331649.png

論文:https://arxiv.org/pdf/1805.08318.pdf 項目作者介紹,生成器是經過頻譜歸一化和自注意機制預訓練的 UNET,也借鑒了 Jason Antic 的 DeOldify 項目,從而獲得有關面部特征的適當細節。 DeOldify 項目地址:https://github.com/jantic/DeOldify 看到這里,也許有讀者會質疑,不是說沒有用到 GAN 嗎?項目作者給出的解釋是,GAN did not make much of a difference so I was happy with No GAN. 在逐步增加圖片大小上,作者分別借鑒了英偉達與首爾國立大學的兩項相關研究:

論文:https://arxiv.org/pdf/1710.10196.pdf

論文:https://arxiv.org/pdf/1707.02921.pdf

在這個項目中,圖像尺寸逐漸增加,學習率也得到了調整。逐步調整圖片大小,可以幫助模型更好地泛化,因為它可以看到更多不同的圖像。 該項目使用到的最后一項技術源于 2016 年斯坦福大學李飛飛團隊的研究論文《Perceptual Losses for Real-Time Style Transfer and Super-Resolution》。

0eb42b08-4492-11eb-8b86-12bb97331649.png

論文鏈接:https://arxiv.org/pdf/1603.08155.pdf 這項研究提出利用感知損失函數來訓練圖像轉換中的前饋網絡,結果表明,在風格遷移任務中,該研究得到了與其他方法類似的效果,但運行速度提升了數個數量級。 轉換效果雖好,但項目作者表示,該項目依然存在著以下一些局限:

獲得良好的輸出效果取決于燈光、背景、陰影和照片質量。一開始通常會獲得好的輸出效果,但也可能出現問題。模型需要調整以適應所有用戶;

模型會混淆陰影與頭發,這也是項目作者正努力解決的問題;

500px 以下的低質量圖片輸出效果不佳;

由于項目作者并非碼農,代碼和實現會比較困難,未來更新版本將會改進。

關于 ArtLine 轉換中未用到 GAN,網友表達了驚嘆贊許之詞!

0f10953c-4492-11eb-8b86-12bb97331649.png

責任編輯:lq

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • AI
    AI
    +關注

    關注

    87

    文章

    31536

    瀏覽量

    270358
  • GaN
    GaN
    +關注

    關注

    19

    文章

    1966

    瀏覽量

    74244
  • 生成器
    +關注

    關注

    7

    文章

    319

    瀏覽量

    21129

原文標題:不用GAN,照片生成簡筆畫,效果驚艷

文章出處:【微信號:cas-ciomp,微信公眾號:中科院長春光機所】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    如何兩個數據返回給調用函數

    已經知道函數會返回兩個數據,提前申請兩個元素的內存,并且數組作為參數傳遞過去,返回值放在數組中就行。 第三種,定義一個全局的結構體變量,這樣可以不用傳參也不用返回,直接操作全局數據
    的頭像 發表于 01-08 10:15 ?99次閱讀

    GaN有體二極管嗎?了解GaN的第三象限運行

    電子發燒友網站提供《GaN有體二極管嗎?了解GaN的第三象限運行.pdf》資料免費下載
    發表于 09-19 12:55 ?6次下載
    <b class='flag-5'>GaN</b>有體二極管嗎?了解<b class='flag-5'>GaN</b>的第三象限運行

    GaN應用介紹

    電子發燒友網站提供《GaN應用介紹.pdf》資料免費下載
    發表于 09-12 09:55 ?0次下載
    <b class='flag-5'>GaN</b>應用介紹

    GaN晶體管的應用場景有哪些

    GaN(氮化鎵)晶體管,特別是GaN HEMT(高電子遷移率晶體管),近年來在多個領域展現出廣泛的應用場景。其出色的高頻性能、高功率密度、高溫穩定性以及低導通電阻等特性,使得GaN晶體管成為電力電子和高頻通信等領域的優選器件。以
    的頭像 發表于 08-15 11:27 ?1073次閱讀

    GaN MOSFET 器件結構及原理

    GaN MOSFET(氮化鎵金屬氧化物半導體場效應晶體管)是一種新型的功率器件,具有高功率密度、高效率和快速開關速度等優點。與傳統的硅基MOSFET相比,GaN MOSFET具有更高的電子遷移率
    的頭像 發表于 07-14 11:39 ?1542次閱讀

    曠視AI開源新突破:上傳照片即可生成表情包視頻!

    為了展示其泛化性,MegActor甚至可以將VASA中的人物肖像和視頻組合生成,得到生動的表情視頻。即使與阿里EMO的官方案例相比,MegActor也能生成近似的效果。
    的頭像 發表于 07-12 11:20 ?471次閱讀
    曠視AI開源新突破:上傳<b class='flag-5'>照片</b>即可<b class='flag-5'>生成</b>表情包視頻!

    格芯收購 Tagore Technology 的 GaN 技術

    Technology 專有且經過生產驗證的功率氮化鎵 (GaN) IP 產品組合,這是一種高功率密度解決方案,旨在突破汽車、物聯網 (IoT) 和人工智能 (AI) 數據中心等廣泛電源應用的效率和性能界限。隨著生成
    的頭像 發表于 07-08 12:33 ?546次閱讀

    CGD為電機控制帶來GaN優勢

    評估套件具有 Qorvo 的高性能無刷直流 / 永磁同步電機控制器 / 驅動器和 CGD 易于使用的 ICeGaN GaN 功率 IC 的性能 ? 英國劍橋 - Cambridge GaN
    發表于 06-07 17:22 ?1799次閱讀
    CGD為電機控制帶來<b class='flag-5'>GaN</b>優勢

    OpenAI發布圖像檢測分類器,可區分AI生成圖像與實拍照片

    據OpenAI介紹,初步測試結果表明,該分類器在辨別非AI生成圖像與DALL·E 3生成圖像時,成功率高達近98%,僅有不到0.5%的非AI圖像誤判為DALL·E 3生成。此外,該工具還具備應對多種常見圖像處理操作如壓縮、裁剪及
    的頭像 發表于 05-09 09:57 ?522次閱讀

    阿里云視頻生成技術創新!視頻生成使用了哪些AI技術和算法

    照片就能讓 EMO 合成演戲唱歌視頻。 ? 阿里云在視頻生成領域的創新 ? EMO(Emote Portrait Alive)是一個由阿里巴巴集團智能計算研究院開發的框架,一個音頻驅動的 AI 肖像視頻生成系統,能夠通過輸入單一
    的頭像 發表于 05-08 00:07 ?3461次閱讀

    深度學習生成對抗網絡(GAN)全解析

    GANs真正的能力來源于它們遵循的對抗訓練模式。生成器的權重是基于判別器的損失所學習到的。因此,生成器被它生成的圖像所推動著進行訓練,很難知道生成的圖像是真的還是假的。
    發表于 03-29 14:42 ?4754次閱讀
    深度學習<b class='flag-5'>生成</b>對抗網絡(<b class='flag-5'>GAN</b>)全解析

    Adobe Substance 3D整合AI功能:基于文本生成紋理、背景

    Substance 3D Stager是以Adobe Dimension為基礎改造而成,使用者可直觀地進行3D場景構建,包括模型、材質和燈光等要素。借助其強大功能,能夠生成極具觀賞性的虛擬照片
    的頭像 發表于 03-20 10:28 ?844次閱讀

    功率GaN的多種技術路線簡析

    電子發燒友網報道(文/梁浩斌)功率GaN的大規模應用,其實也只有六七年的歷史,從2018手機快速充電器上才正式吹響了普及的號角。目前,從晶體管來看,功率GaN主要的產品是HEMT(高電子遷移率晶體管
    的頭像 發表于 02-28 00:13 ?2997次閱讀

    功率GaN,炙手可熱的并購賽道?

    ? 電子發燒友網報道(文/梁浩斌)繼去年英飛凌收購GaN Systems之后,2024年1月,另一家汽車芯片大廠瑞薩也收購了功率GaN公司Transphorm。 ? Transphorm在2022年
    的頭像 發表于 02-26 06:30 ?2516次閱讀
    功率<b class='flag-5'>GaN</b>,炙手可熱的并購賽道?

    微軟相冊更新生成式擦除編輯功能,消除照片干擾

    微軟公開宣布,已經成功地將最近研發出的所有人工智能編輯功能(包括模糊背景、刪除及替換背景以及生成式擦除)移植到適配Arm64設備和Windows 10的照片應用中,現在已面向全平臺的Windows預覽體驗成員推廣生效。
    的頭像 發表于 02-23 14:33 ?847次閱讀
    大发888娱乐场17| 缅甸百家乐网上投注| 百家乐官网看| 百家乐官网记算| 百家乐官网路珠价格| 湖北省| 百家乐官网视频下栽| 百家乐官网必学技巧| 南部县| 百家乐官网翻天片尾曲| 百家乐官网赌博现金网平台排名| 百家乐官网双龙出| 百家乐官网外套| 长沙百家乐官网的玩法技巧和规则| 百家乐官网大小桌布| 百家乐官网在线娱乐场| 真人百家乐官网网络游戏信誉怎么样| 玩百家乐官网的好处| 百家乐桌折叠| 总统百家乐的玩法技巧和规则 | 拉斯维加斯娱乐| 马牌百家乐官网现金网| 百家乐官网网上真钱娱乐场| 百家乐官网路单免费下载| 玩百家乐官网游戏的最高技巧| 大上海百家乐官网娱乐城| 百家乐大小点桌子| 大发888娱乐场下载专区| 法老王娱乐城| 百家乐官网二十一点| 八卦24山叫什么意思是什么| 百家乐群lookcc| 大发8888娱乐场| 临城县| 真人百家乐官网国际第一品牌| 澳门百家乐博彩网| 上市百家乐评论| 大发888官网用户登录| 广州百家乐筹码| 凯斯娱乐城| 百家乐官网娱乐网77scs|