網頁

2022-03-31

[openpilot] 2022/3/12 GH答客問 - comma對C3成本考量與鏡頭的規劃


 這兩周我有點忙,discord上也很熱鬧,現在趁空餘時間趕快把comma的討論內容補上來,這次討論到C3的成本以及C3上鏡頭的替代選擇以及未來鏡頭配置規劃,有興趣的人來看一看吧~



GH:在#dev-openpilot中發布了pixel3的openpilot的安裝說明。它還不能運作,但已經可以啟動到ui。

(Saber評論:如果pixel3(OP6T)可以安裝openpilot,這就表示說手機+3D列印的產品模式還可以繼續運作,而且有更好的算力跟品質,如果沒有要用到三鏡頭,又想要使用最新的model,看起來pixel3 (OP6T)也是個可以商業化的產品架構。)



GH:如果大家一起玩,並開始幫助修復臭蟲,我們將保持這種存在形式。否則派對就結束了。你應該也能在OP6T和pixel 3 xl上玩,只要安裝最新的安卓9版本,並按照說明操作即可。



GH:是的,這只是為開發者準備的。我們沒有計劃在pixel 3的基礎上開發任何產品,而且我們有足夠多的樂視版了。


GH:模型現在應該是相當成熟完整的,如果你能正確處理相機的內部參數。


GH:C3最大進步的地方不是處理器,而是相機。還不清楚845會有多大影響,但歡迎你自己建造一個(OP6T)。


GH:我們不會用它(OP6T)來取代LePro3(意旨C2系列),官方不會支援它。

官方從不會支援它,comma沒有計畫再用手機來開發輔助駕駛的東西。但是openpilot是一個終身的作業系統,而部分生命期就是在安卓上運行。



GH:話說我們應該做一個無人機。看起來像是一個可以掛上pixel 3的東西。飛行的pixel 3。


GH:設立一個無人機硬體的討論區。



GH:肯定花很少心力在移植pixel 3上。你自己放到無人機上。
無人機叫做"comma hat",它可以讓你的comma body飛起來。(Saber:根本應該叫做竹蜻蜓吧?)


GH:現代Sonata已經準備好開去TacoBell餐廳(有一個微小的修改解除90度限制)


GH:EV6也可能沒有(90度)限制。



GH:正準備Pi Day宣布。我想人們會喜歡它。


GH:另外,0.8.14版本的模型將在C2/C3各占一半的數據上進行訓練,我們很高興在C2廢除時可以全部使用C3上傳資料。當所有的影像都有完美的焦點時,那真是太好了。

    較差的圖像訓練出來的模型,對較好的圖像有效。 較好的圖像訓練出來的模型,不一定對較差的圖像有效。

    此外,一旦我們只用C3訓練時,bigmodel才會變成真正的bigmodel。雖然目前的bigmodel同時使用C3鏡頭,但它的視野大小被限制在C2所能看到的範圍。

GH:我正在看C3的BOM表,決定哪些可以去除。

我們需要LTE,沒有LTE導航就無法使用,很多人在它們車子內時也沒有wifi。像我就沒有,我住在公寓裡。

GH:(砍掉LTE)是多麼爛的用戶體驗。砍掉LTE也只省了40鎂,大的成本是處理器和鏡頭。

GH:我們買SOM跟在ebay上買pixel 3s差不多價格。你不在美國嗎?

我想我們超過八成的銷售在美國。


GH:我們花在電路板組裝上的錢比花在LTE上的錢還多。此外,我認為我們也許可以在LTE模塊中使用GPS,那麽我們就可以減少額外的GPS晶片,我想把電路板的組裝放回公司內部。我也對圖像傳感器的成員感到不安,AR0231現在的價格是原來的兩倍!

每個41.28美元!


GH:那是在每個C3中都要有的。我寧願不換代料。

老天,我們花了4美元在保險絲上。我希望你們都能理解5美元的鏡頭。5美元是C2全部相機的成本。我們正在努力為你們降低C3的價格。實際上,可能只是提高了我們的利潤。如果將保險絲換成0歐姆的電阻,可以節省4美元。通貨膨脹和零件短缺都是很糟糕的事情。中國有疫情,所以我們的螢幕會延後交貨。


成員:你們利潤率跟iphone比較?

GH:C3比較差,C2跟iphone差不多。

成員:你們可以移除一顆前鏡頭嗎,保留廣角鏡頭就可以了。

GH:我的意思是,這是我們在C2上做的事情。


GH:不可能存在 "真正高解析度又是180度的相機",還有合理的價格。

問題是鏡頭的品質。我們的鏡頭是1080p的,真正能做到4k的鏡頭都很昂貴。想想看單眼鏡頭。

因此,為什麽所有的手機要使用多個鏡頭?

電阻是一筆好例子。我們在電路板上規劃放置電阻器的費用,超過電阻本身成本的100倍。

眼睛是騙人的,像素並不是均勻分布的。如果你能買到這樣的傳感器,那麽單前鏡頭就有可能實現了。嗯,實際上你確實可以用非常高的分辨率來模擬它。

人眼的鏡頭(水晶體)怎麽會這麽好?


GH:我相信在4K 45度視角區域的相機可以與人類眼睛視覺的完美匹配。
我認為我們的HDR 2.0非常接近眼睛的動態範圍。
1角分作為視網膜黃斑區是一個很酷的數字,這意味著1080p的30度鏡頭或4k的60度鏡頭是20/20(1.0)的視力。
有合理的價格的鏡頭完全可以做到這一點。
順道一提,如果我們可以在comma設備上重做鏡頭的布局,我希望有5個這樣的鏡頭配置。
* 1x 4k 60度朝前(昂貴的傳感器和昂貴的玻璃鏡頭)。
* 4個1080p的105度,在四個角落(用便宜的傳感器和便宜的塑料鏡頭,2個向後鏡頭沒有紅外線過濾) 
魚眼鏡頭是令人討厭的,非常扭曲變形。

成員:變形會影響model嗎?

GH:不全然,只是在我們的模擬當中很討厭。

(Saber評:5鏡頭??所以這是暗示comma 5的意思嗎?)


GH:是的,我們正在完成一些像這樣的東西

    我正在思考像這些的四角鏡頭 https://www.ebay.com/itm/284570523022

    有人知道他的視角嗎?

成員:97度

GH:喔,你哪裡拿到的?

    我意思是3.5度的重疊可能OK。

GH:你有97度數據的連結嗎?

成員:https://vr-compare.com/headset/oculusquest2

GH:不,那只是顯示視角,不是鏡頭視角。



GH:我們至少要一顆高畫質的前鏡頭

成員:解析度640X480有150度視角的魚眼,RGB視角70-90度

GH:魚眼的問題是變形還有邊緣低解析度的限制

    我們開車的時候不需要垂直的視角。


GH:也許是4顆97度或3顆127度鏡頭。把C3兩顆貴的鏡頭,換成3或4個便宜的手機鏡頭。

    我對在C3上看到的行車紀錄畫質印象深刻,特別是在我們有HDR 2.0之後。

成員:考慮在車外部的commas設備嗎?

GH:哈,不。人需要在車外的鏡頭(才能開車)嗎?


GH:C3有往後的鏡頭

    不,你絕對需要紅外線鏡頭來做駕駛監控,人類無法用環境光來達成這點。


GH:我很喜見手機往更大的感應器發展,將可以降低大型感光元件的成本。

GH:看看這些,這是夢想的感應器:https://www.sony-semicon.co.jp/products/common/pdf/IMX324_424.pdf

    imx424、4k解析度、1/1.7"尺寸、RCCB影像感測、120db動態範圍(與C3相同)。不過像素比C3小一點,2.25微米而不是3微米。RCCB使你的夜間性能比RGGB提升一大截。

GH:哇,我還沒看過這個(imx490),它的尺寸跟C3一樣,你知道它的價格嗎?他很明顯是imx390的後繼款。


GH:喔它(imx490)還是開發套件。我設想它會是25鎂的imx390三倍到四倍的價格帶。

(https://www.sony.com/en/SonyInfo/News/Press/201812/18-098E/)

GH:這很酷它們訂價在(127.89鎂),這是樣本的價格,所以如果量產可能降到一半。

GH:但是這價格還是超過comma的目標價格區間,我們如果拿這些酷炫的鏡頭在C3上,我們可能要訂價在3000鎂。


GH:可惜的是,手機的處理器正對著屏幕,所以很難散熱。這一點加上大鏡頭定焦相機是我們不得不轉向客製硬體的原因。我很抱歉C3很貴,我也希望我們能用製造C2的成本來製造它們。

GH:大部分的C2都還很好,我們已經賣了7千台,這也是為什麼你們聽得到故障。




如果你是第一次來到這邊,歡迎加入下方社群,我都會在第一時間報導與解析Comma ai與openpilot的最新動態,快來一起follow吧!