目標檢測中對端對端(End to end)的理解

End to end:指的是輸入原始數據,輸出的是最後結果,應用在特徵學習融入算法,無需單獨處理。

end-to-end(端對端)的方法,一端輸入我的原始數據,一端輸出我想得到的結果。只關心輸入和輸出,中間的步驟全部都不管。

  端到端指的是輸入是原始數據,輸出是最後的結果,原來輸入端不是直接的原始數據,而是在原始數據中提取的特徵,這一點在圖像問題上尤爲突出,因爲圖像像素數太多,數據維度高,會產生維度災難,所以原來一個思路是手工提取圖像的一些關鍵特徵,這實際就是就一個降維的過程。
  那麼問題來了,特徵怎麼提?
  特徵提取的好壞異常關鍵,甚至比學習算法還重要,舉個例子,對一系列人的數據分類,分類結果是性別,如果你提取的特徵是頭髮的顏色,無論分類算法如何,分類效果都不會好,如果你提取的特徵是頭髮的長短,這個特徵就會好很多,但是還是會有錯誤,如果你提取了一個超強特徵,比如染色體的數據,那你的分類基本就不會錯了。
  這就意味着,特徵需要足夠的經驗去設計,這在數據量越來越大的情況下也越來越困難。
  於是就出現了端到端網絡,特徵可以自己去學習,所以特徵提取這一步也就融入到算法當中,不需要人來干預了。

  簡單來說就是深度神經網絡處理問題不需要像傳統模型那樣,如同生產線般一步步去處理輸入數據直至輸出最後的結果(其中每一步處理過程都是經過人爲考量設定好的 (“hand-crafted” function))。

  與之相反,只需給出輸入數據以及輸出,神經網絡就可以通過訓練自動“學得”之前那些一步接一步的 “hand-crafted” functions。

相關理解:

1、傳統系統需要幾個模塊串行分別設計,end2end把中間模塊都去掉了。
以機器翻譯爲例 要設計翻譯模型 語言模型 調序模型
端到端就是直接一個模型搞定

2、cnn就是比較典型的end2end模型。在圖像分類裏輸入image各通道像素,輸出圖像類別。 相比於非end2end,conv層的卷積核可以充當feature extractor部分而不需要額外的工作去做特徵工程的內容。儘管每一層需要自己設計,但如何得到feature並不需要額外的操作。

3、另一種理解:就是輸入一頭豬,輸出的是香腸(好有才,,,,)

End-to-end在不同應用場景下有不同的具體詮釋,

對於視覺領域而言,end-end一詞多用於基於視覺的機器控制方面,具體表現是,神經網絡的輸入爲原始圖片,神經網絡的輸出爲(可以直接控制機器的)控制指令,如:

1. Nvidia的基於CNNs的end-end自動駕駛,輸入圖片,直接輸出steering angle。從視頻來看效果拔羣,但其實這個系統目前只能做簡單的follow lane,與真正的自動駕駛差距較大。亮點是證實了end-end在自動駕駛領域的可行性,並且對於數據集進行了augmentation。鏈接:https://devblogs.nvidia.com/parallelforall/deep-learning-self-driving-cars/

2. Google的paper: Learning Hand-Eye Coordination for Robotic Grasping with Deep Learning and Large-Scale Data Collection,也可以算是end-end學習:輸入圖片,輸出控制機械手移動的指令來抓取物品。這篇論文很贊,推薦:https://arxiv.org/pdf/1603.02199v4.pdf

3. DeepMind神作Human-level control through deep reinforcement learning,其實也可以歸爲end-end,深度增強學習開山之作,值得學習:http://www.nature.com/nature/journal/v518/n7540/full/nature14236.html

4. Princeton大學有個Deep Driving項目,介於end-end和傳統的model based的自動駕駛之間,輸入爲圖片,輸出一些有用的affordance(實在不知道這詞怎麼翻譯合適…)例如車身姿態、與前車距離、距路邊距離等,然後利用這些數據通過公式計算所需的具體駕駛指令如加速、剎車、轉向等。鏈接:http://deepdriving.cs.princeton.edu/

總之

end-end不是什麼新東西,也不是什麼神奇的東西,僅僅是直接輸入原始數據,直接輸出最終目標的一種思想。

參考鏈接:
[https://blog.csdn.net/A1_abc/article/details/82999748]

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章