Tesla 的AI 老大 A.K. 的演講
各大車廠的CEO看到這些
只會說 你在講三小

计算机视觉在特斯拉
由于保密以及DNA等原因,特斯拉公开的paper和技术细节资料都挺少的。难得的,特斯拉AI部门老大Andrej Karpathy 在PyTorch Devcon 19 上做了一个技术演讲,包括AutoPilot 和Smart Summon等,本文是对这个演讲的详细剖析,可以一窥这个全球市值最高的汽车科技公司的内部AI技术栈。也可以看到学术界和工业界的gap有多大,比如课程上1个YOLO搞定的事情,实际工作中需要7个以上YOLO,而且是同时,还是在边缘端,如何实现呢?
.....
.....
下面是我们刚才讨论的所有内容的总结:
特斯拉同时运行50项任务,这些任务都必须在一台名为 FSD (完全自动驾驶)的非常小的计算机上运行。
为了做到这一点,他们使用了一个 HydraNet 架构,这个架构允许他们在每个任务中使用相同的网络,只是使用不同的头。所有的头都与图像分割有关。
特斯拉使用8个融合在一起的相机,并不是每个相机都用于一个任务。
训练是使用 PyTorch 和一个工人池架构完成的(有些任务是同时训练的)。
实现了一个完整的循环: 司机收集数据,特斯拉标记真实世界的数据,并在其上训练他们的系统。
有,依原廠網站 :
透過能穿越濃霧、灰塵、雨水、霜雪以及車輛下方的特定波長特性,雷達在偵測與反應前方物件時扮演重要的角色。
但看文字這等級就像是 判斷有無 大型物體 用的雷達而己
現在講的雷達會偏向於光學雷達 LiDAR
光學雷達,或簡稱光達(英語:lidar, LIDAR, LiDAR,是英文「light detection and ranging」的縮寫),是一種光學遙感技術,它通過向目標照射一束光,通常是一束脈衝雷射來測量目標的距離等參數。
這種的可以直接繪出地形地貌地物,而且不會被視覺騙了 , 可達公分級測量用
但是,成本過高及對眼晴(包含野生動物)的傷害是最大的缺點
還有 GNSS 國內政府也有提供這個服務,
一樣精度有達 公分級測量用 的,但是一樣會受衛星訊號被遮蔽影響
所以過於靠 GNSS ,應該沒什麼用
內文搜尋

X