西門子系統集商-上海煥拓自動控制有限公司

深爱激情网內容

當前位置:西門子PLC > 深爱激情网內容 > 深爱激情网 | 单层OLED原型问世,深爱激情网成本有望降低? > 正文

深爱激情网 | 单层OLED原型问世,深爱激情网成本有望降低?

西门子深爱激情网內容   查阅次数:2681   更新时间: 2019-07-17 17:25

據外媒報道,德國馬克斯普朗克聚合物研究所開發出一種單層OLED的原型,這預示著相對于現在多層疊在一起的OLED來說,制造成本可能大大降低。

該研發團隊使用了一種數十年曆史的技術,名爲熱激活延遲熒光,使用壽命達到2000小時,亮度下降了50%。

团队负责人Gert-Jan A. H. Wetzelaer博士表示,“现在我们希望进一步改进概念,实现更长的使用寿命”,“这可以让这个概念用于工业目的。”

單層可以大大降低通常爲5到7層的OLED的成本。

该团队在《Nature photonics》杂志上发表了他们的研究发现。

OLED即有機發光二極管,其發光的原理與LED類似,只不過與LED采用無機半導體作爲發光材料不同,其采用的發光材料是有機材料。

發燒友長期以來一直認爲,OLED將徹底改變照明結構,因爲OLED具有可彎曲、柔韌性佳的特性。但是,事實是生産成本很高。而且OLED在能效方面也落後于LED,並且LED制造商已經改進了設計,將LED嵌入薄板中,從而模仿OLED的效果。

原文標題:單層OLED原型問世,生産成本有望降低?

文章出處:歡迎添加關注!文章轉載請注明出處。

比閃電還快,人臉檢測中的戰鬥雞!

人臉檢測是應用最爲廣泛的計算機視覺任務之一,特別是在移動端上發揮著不可替代的重要作用,包括美顔、人臉跟蹤、VR、人臉特效、人臉識別等任務以及刷臉支付、直播、試妝等應用上都有著廣泛的引用,幾乎涵蓋了人工智能落地的方方面面。作爲很多後續工作的第一步,人臉檢測器需要達到非常高效的性能,盡可能高速准確地完成檢測任務。

爲了不斷提升用戶的流程體驗、促進人臉相關應用的進一步發展、拓寬支持人臉檢測的設備範圍,來自谷歌的研究人員通過改造mobileNet提出更爲緊湊的輕量級特征提取方法、結合適用于移動端GpU高效運行的新型錨框機制,以及代替非極大值抑制的加權方法保證檢測結果的穩定性,在移動端上實現了超高速的高性能人臉檢測BlazeFace,最快不到一毫秒的檢測速度爲衆多人臉相關的應用提供了更廣闊的發展空間。

強大的模型一定有強大的細節在支撐。

BlazeFace模型一共從四個方面進行了有效改進,從而大幅減小了計算量並提高了檢測精度與穩定性。它提升了mobilenet中深度可分離卷積的計算效率和感受野,基于此構建了有效的特征抽取器、改進錨框機制後處理過程。

更大的感受野更快的計算。mobilenet中的深度可分離架構包含了每個通道上的3*3卷積和逐點進行的在深度方向上的1*1的卷積操作。

深度可分離卷積

研究人員發現,其中大部分計算量都發生在最後逐點計算1*1的過程中。例如針對一個s*s*c的張量,如果使用k*k卷積核爲大小的深度可分離操作,那麽第一步操作的計算量是s^2*c*k^2,第二步針對d個通道的輸出進行逐點1*1卷積的計算量則是s^2*c*d,第二步相對于第一步的計算量消耗是d/k^2倍。在mobilenet論文中也提高1*1卷積對于計算資源的占比較高。

让我们再来直观的感受一下这两种操作计算量的大小。针对实际的iphoneX深爱激情网,其中基于Metal performance Shader实现的3*3卷积,针对56*56*128大小的16比特浮点张量操作需要0.07ms,而使用1*1卷积对128通道到128通道的操作则需要耗时0.3ms,几乎是前者的四倍多。

这样的结果为研究人员指明了提高效率的方向,增加深度可分離卷積操作中第一步核的大小是相对高效的选择。所以在BlazeFace中研究人员将卷积核的大小扩大成了5*5。卷积核的增大在bottleneck总量减小的情况下保证了模型感受野的大小。

此外,MobileNetV2的bottleneck通過非線性將深度增加的擴張和深度縮減的投影分開。

mobileNet中的深度可分離卷積单元

爲了適應Blaze單元中更少的通道數,研究人員對這一階段進行掃描使得殘差可以實現類似拓展通道分辨率的操作。

BlazeBlock的單元構造,包括增大的卷積核與殘差連接。

左圖是基本的blaze單元,右圖是雙blaze單元

由于增大了卷積核後的Blaze單元的開銷很小,使得另一個層的加入成爲可能。于是研究人員又在上面模塊的基礎上開發出了雙份的Blaze單元。不僅增加了感受野的大小,同時也提高了特征的抽象。

特征抽取器。雖然這一模型同時適合與後攝和前攝,研究人員在文章中針對前視攝像頭作爲例子來構建特征抽取器,前視攝像頭需要搜索的範圍更小,計算需求也更少。

模型的輸入是針對128*128大小的rgb圖像展開的,在一個卷積後疊加了5個單Blaze單元和6個雙Blaze單元,可以看到通道數最多的時候達到了96,而最低的空間分辨率則不低于8*8的大小。

可以發現這一模型的最大通道數大大小于其他模型,而最低空間分辨率也較高。下面是模型的構造細節:

錨框機制。錨框在目標檢測中廣泛使用,通常爲了適應多尺度的目標,預定義的錨框都包含了多個不同的分辨率。同時大幅度的將采樣也爲目標檢測中的計算量帶來了較多的優化。雖然SSD中使用了多個不同尺度的特征度來進行預測,單池化金字塔架構中卻表明過多尺度的特征圖可能在某個分辨率後變得冗余。

同時GpU計算相比于CpU存在一個需要注意的關鍵問題,針對特定層的計算GpU存在固定的調度開銷,在對低分辨率層進行計算時會尤其明顯。例如測試中的MobileNetV1耗時4.9ms,其中只有3.9ms真正在進行計算。

綜上考慮,研究人員對于錨框的設計作出了以下幾個方面的改進:

首先特征圖的尺寸不低于8*8,避免更深的下采樣;

其次將8*8,4*4和2*2各個特征圖上的兩個錨框用8*8特征圖上的6個錨框代替;

由于人臉的寬高比相對問題,在實際過程中使用1*1的錨框比例已經能夠達到足夠的精度了。

後處理。由于在8*8的特征圖上存在多個錨框,很有可能産生多個重疊的結果。爲了處理多個不同的框,先前的方法利用執行度的非極大值抑制來選擇可能性最高的框作爲結果,但這會帶來人臉檢測結果的抖動,造成人類感知上的不適。

爲了緩解這種抖動,研究人員使用融合策略代替了非極大值抑制,通過加權平均多個重疊結果的方式來估計最後回歸的bbox參數。這不會增加額外的計算量,在減小抖動的同時還提升了10%的精度。實驗表明這一機制使得前視攝像頭的人臉檢測抖動降低了40%,後攝則降低了30%。

優異性能

實驗中研究人員利用66K圖像進行了訓練,2K多樣性圖像進行了測試。下圖顯示了數據在地理位置上的多樣性:

針對前視攝像頭模型,只有超過20%的區域被人臉占據才考慮。下圖顯示了與MobileNetv2-SSD對比下的前視攝像頭性能,研究人員利用tensorflowLite在16bit下實現了模型,在iphoneXS上僅需0.6ms,這意味著達到了1600fps+的速度。

研究人員還測試了在不同型號深爱激情网上的實現結果,速度都在約170fs到1600ps之間。

最後研究人員還比較了回歸參數的預測質量,由于模型體量較小帶來了一定程度的退化,但不影響AR或者人臉跟蹤中的使用。

應用展示

高速准確的人臉檢測網絡將爲後續的人臉相關任務提供有效地預處理,包括關鍵點檢測、輪廓、表面幾何估計、微表情識別和人臉解譯等任務。

通過與BlazeFaze給出的人臉關鍵點結合,算法可以得到跟隨人臉旋轉的bbox,得到居中的、尺度歸一化的、相對框無較大角度誤差的人臉結果,這將大幅度降低後續對于圖像的旋轉和平移處理,節約了計算的開銷。

例如在人臉輪廓檢測中,首先利用BlazeFace模型預測出人臉框和對應的關鍵點,隨後利用更爲複雜的模型對人臉輪廓進行進一步優化估計。這些檢測結果可以用于後續幀的處理中。

研究人員展示了基于這一人臉檢測模型的一系列例子,包括人臉幾何重建、分割、美妝等等。

值得一提的是,研究人員還將這一方法集成到了多模態媒體機器學習工具mediapipe中,這一工具包含了多種圖像處理模塊和方法、可以基于圖機制來構建多模態的機器學習應用工具鏈,並實現跨平台的運行。

最後附上一份Blazeface的海報,再次感受下這一算法衆多的創新:

原文標題:超高速人臉檢測器BlazeFace,谷歌將人臉檢測效率提升到逆天水平

文章出處:歡迎添加關注!文章轉載請注明出處。