吴忠躺衫网络科技有限公司

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

自主機器視覺系統時面臨的復雜設計挑戰

jf_pJlTbmA9 ? 來源:jf_pJlTbmA9 ? 作者:jf_pJlTbmA9 ? 2023-07-10 10:39 ? 次閱讀

為了提高效率和性能,工業自動化越來越受歡迎。在自主移動機器人 (AMR)、倉庫機器人、無人機、農業、工廠檢查和安防/監控等應用場景,會實施基于機器視覺人工智能 (AI) 與先進技術來執行關鍵功能。要想提高現有的對象檢測和識別能力,需要解決在不利光照條件下,對運動中的對象和更遠距離的精細細節捕獲圖像的難題。安森美(onsemi) 新推出的 AR0822 傳感器具備嵌入式高動態范圍 (eHDR) 功能,可解決工程師在開發自主機器視覺系統時面臨的復雜設計挑戰。

高動態范圍在工業自動化中的重要性

許多工業應用的工作場景中,光線刺眼,且明亮區域和黑暗區域同時存在。例如,室外 AMR 必須在同時存在陽光和黑暗區域的場景中精確運行;監控系統警報是否觸發,取決于能否辨別未授權人員從黑暗區域移動到明亮區域。雖然工廠工程師會控制照明以便在需要捕捉畫面細節的地方達到理想亮度水平,但有些倉庫可能無法控制照明,或者可能需要花費高昂的成本進行重建。此外,工業機器人應該能夠延伸到多個位置進行操作,而這可能會出現不確定的光照條件。例如,運輸包裹的無人機在夜間或高強度陽光下,可能就會遇到這種情況。這幾個例子說明這些自主系統必須在高動態范圍場景下運行。

多次曝光 = 更高的動態范圍

傳感器的動態范圍是指圖像傳感器在黑暗和明亮區域中捕獲圖像細節的能力,測量單位為分貝 (dB)。一般而言,120 dB 的動態范圍可捕獲除極端場景以外的所有場景中的細節(汽車應用需要更高的動態范圍,尤其是在乘客安全方面)。在這類包含黑暗和明亮區域的場景中,如果使用單次長曝光,可能會導致明亮區域過飽和;而單次短曝光可能無法捕獲到暗處的細節。

因此,為了捕獲所有區域的細節,傳感器可采用短、中、長曝光時間,通過多次曝光拍攝多張圖像。然后,將這些曝光合并為單張圖像,以實現高動態范圍,這一過程稱為線性化。

現在,憑借一系列從亮到暗的細節,人工智能識別系統可提高辨認和識別性能。

高分辨率挑戰

如果識別距離更遠,圖像細節更多,則需要更高的分辨率。與對象相距 5 至 10 米遠時,1080p 不足以提供對象檢測和分類所需的細節。因此,對 4K、甚至更高分辨率傳感器的需求不斷增加。對于這些尺寸的圖像,帶寬成為一大設計挑戰,因為每張圖像的尺寸顯著增加。此外,如果要實現 120 dB HDR,傳感器需要三次曝光和 3 倍的有效幀率,因為傳感器會為每幀拍攝三張不同的圖像。例如,對于三次曝光 HDR,如果傳感器的有效幀率為每秒 30 幀 (fps),則傳感器陣列、電路和輸出需要在 90 fps 幀率有效工作。幀率為 30 fps 的三次曝光 HDR 4K 圖像如果在獨立于傳感器的 ISP 中執行線性化,需要 9000 Mbps,這對處理性能和接口速度是一大挑戰。對于攝像頭系統,將高分辨率與傳感器外 HDR 相結合是一項艱巨的挑戰。

1687835270186201.png

圖 4. 典型的高動態范圍架構通過圖像傳感器和 ISP 之間的接口發送多張圖像,在高分辨率時可能會導致可用帶寬緊張或超出可用帶寬

為了緩解這兩個問題,安森美AR0822 通過將實時線性化集成到傳感器中,智能地嵌入高動態范圍。如此一來,即便是在更高分辨率時,傳統的處理性能和接口速度也更容易滿足需求。

1687835267424811.png

圖 5. AR0822 嵌入式高動態范圍 (eHDR) 圖像傳感器

運動和 LED 照明偽影

由于三次曝光是在不同的時間點進行,所以 HDR 圖像中會出現偽影。每次曝光時,快速移動的對象的位置(角速度)將略有不同。

此外,帶有 LED 照明的場景可能會出現其他偽影。為節省用電,LED 以攝像頭而非人眼能夠看到的頻率打開和關閉。LED 可能會在第一次曝光時打開,在第二次和第三次曝光時關閉,從而導致多次曝光和多張圖像中的光照水平不同。

AR0822 eHDR 包含“智能線性化”,以解決這些由多次曝光幀組合而引起的偽影。通過感測一個幀內由不同曝光捕獲的信號電平差異,從而試圖減少通常因運動或 LED 閃爍造成的偽影,就有可能實現上述目的。

圖 8和圖9. 得益于 AR0822 的智能線性化,風扇沒有運動偽影且 LED 燈箱的兩列完全亮起

通過在充滿挑戰的光照條件下提供高質量性能,再結合人工智能系統在安防/監控、AMR 和工業移動機器人應用中所需的目標分辨率,eHDR 可增強對象檢測與識別。

下載我們的白皮書,詳細了解 AR0822,以及在嵌入式自主機器視覺應用中實施更高動態范圍的圖像傳感器時,使用 eHDR 如何能夠增加動態范圍并克服其他挑戰。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 機器視覺
    +關注

    關注

    162

    文章

    4406

    瀏覽量

    120733
  • 人工智能
    +關注

    關注

    1796

    文章

    47672

    瀏覽量

    240289
  • 工業自動化系統

    關注

    0

    文章

    7

    瀏覽量

    957
收藏 人收藏

    評論

    相關推薦

    如何解決嵌入式視覺系統面臨挑戰

    迎來了更多的挑戰,比如功耗、復雜的算法、處理器的性能、更高的圖像分辨率等,人們需要的是更加智能化的系統,嵌入式視覺系統是實現智能化系統重要的
    發表于 02-01 15:12 ?3841次閱讀

    應用機器視覺系統進行導航機器人的設計

    機器視覺系統是智能機器人的重要標志,機器視覺系統模仿了人的視覺感知能力,允許對環境做非接觸式的
    的頭像 發表于 09-30 08:54 ?7300次閱讀

    【「具身智能機器系統」閱讀體驗】2.具身智能機器人的基礎模塊

    具身智能機器人的基礎模塊,這個是本書的第二部分內容,主要分為四個部分:機器人計算系統自主機器人的感知系統
    發表于 01-04 19:22

    機器視覺系統應用成為檢測行業主導潮流

    、分辨率需要多高、對比度需要多大等因素。從功能上來看,典型的機器視覺系統可以分為:圖像采集部分、圖像處理部分和運動控制部分。機器視覺系統是一種比較
    發表于 06-13 15:07

    嵌入式在機器視覺系統的應用

    ,嵌入式視覺系統也迎來了更多的挑戰,比如功耗、復雜的算法、處理器的性能、更高的圖像分辨率等,人們需要的是更加智能化的系統,嵌入式視覺系統是實
    發表于 08-05 08:17

    服務機器人的視覺系統怎么設計?

    隨著計算機科學和自動控制技術的發展,越來越多的不同種類的智能機器人出現在工廠、生活當中,機器視覺系統作為智能機器系統中一個重要的子
    發表于 04-07 07:27

    機器視覺系統的工作原理是什么?有哪些應用實例?

    機器視覺系統的工作原理是什么?機器視覺系統的特點有哪些?機器視覺系統的結構是由哪些部分組成的?
    發表于 07-16 08:06

    機器視覺系統是指什么? 機器視覺系統的工作原理是什么?

    機器視覺系統是指什么?機器視覺系統的工作原理是什么?影響機器視覺系統輸入的重要因素有哪些?
    發表于 07-16 11:23

    機器視覺系統原理及基礎知識

    機器視覺系統的目的就是給機器或自動生產線添加一套視覺系統,其原理是由計算機或圖像處理器以及相關設備來模擬人的視覺行為,完成得到人的
    發表于 12-16 14:40 ?0次下載
    <b class='flag-5'>機器</b><b class='flag-5'>視覺系統</b>原理及基礎知識

    機器視覺_ni機器視覺系統-技術專輯

    在現代自動化生產過程中,人們將機器視覺系統廣泛地用于工況監視、成品檢驗和質量控制等領域。本專題內容涉及機器視覺是什么,ni機器
    發表于 08-03 11:33
    <b class='flag-5'>機器</b><b class='flag-5'>視覺</b>_ni<b class='flag-5'>機器</b><b class='flag-5'>視覺系統</b>-技術專輯

    基于FPGA的立體視覺系統設計

    基于計算機技術的機器視覺系統已廣泛應用于工業生產領域,大幅提高了生產效率與精度。隨著信息科學的飛速發展,人們面臨機器視覺系統的應用環境更加
    發表于 09-03 17:35 ?53次下載
    基于FPGA的立體<b class='flag-5'>視覺系統</b>設計

    機器視覺系統的結構由什么部分組成

    隨著工業自動化的飛速發展,很多朋友都不了解機器視覺系統的結構由什么部分組成,之所以會面臨這樣的情況是因為機器視覺系統內部比較
    的頭像 發表于 10-14 15:22 ?1.3w次閱讀

    機器視覺系統詳解

    機器視覺系統詳解說明。
    發表于 04-19 15:16 ?21次下載

    機器視覺系統概述

    機器視覺系統概述說明。
    發表于 04-21 10:07 ?12次下載

    機器視覺系統的經典應用

    機器視覺系統的經典應用。
    發表于 05-28 10:25 ?15次下載
    大田县| 宝格丽百家乐官网娱乐城| 百家乐官网优惠高的网址| 破战百家乐官网的玩法技巧和规则 | 华侨人娱乐城| 最好的百家乐官网娱乐场| 西游记百家乐官网娱乐城| 百家乐官网高命中打法| 百家乐人生信条漫谈| 大发888线上| 百家乐官网三珠连跳打法| 百家乐补牌规制| 大发888博彩| 百家乐官网的代理办法| 百家乐官网最新分析仪| 找真人百家乐的玩法技巧和规则| 威尼斯人娱乐城官方站| 百家乐官网有作弊的吗| 百家乐怎么才会赢| 娱乐城网站| 百家乐官网庄闲和的概率| 百佬汇百家乐的玩法技巧和规则| 太阳城娱乐总站| 朔州市| 百家乐龙虎斗扎金花| 88娱乐城网址| 君怡百家乐官网的玩法技巧和规则| 巴黎百家乐地址| 优博代理| 玩百家乐官网怎么能赢呢| 威尼斯人娱乐棋牌是真的吗| 百家乐官网投注平台导航网| 百家乐最安全打法| 永发娱乐城| 百家乐娱乐城体育| 赌场风云主题曲| 现金百家乐网上娱乐| 足球投注技巧| 彩会百家乐游戏| 蒙特卡罗娱乐网| 百家乐大赢家客户端|