黑芝麻智能科技致力于提供基于圖像處理、計算圖像以及人工智能的嵌入式視覺感知平臺。安創成長營五期Demo Day現場，黑芝麻智能科技榮獲“最具潛力獎”，安創加速器聯合創始人楊宇欣先生為團隊頒獎。

安創加速器聯合創始人楊宇欣先生

為“最具潛力獎”團隊黑芝麻智能科技頒獎

黑芝麻智能科技演講實錄

非常高興，也很感謝安創加速器給我們提供了這樣的舞臺，為大家介紹黑芝麻智能科技。我們的slogan是“用芯，看懂世界”，提供基于圖像處理、計算圖像以及人工智能的嵌入式視覺感知平臺，不僅要看清楚世界，而且要理解世界。我們致力于成為全球領先的自動駕駛感知技術方案提供商。

最近，總會看到一些關于自動駕駛車禍的報道： Uber的感知系統不穩定，所以把warning關掉了，結果發生了車禍；特斯拉沒有把隔離帶識別出來，結果直接撞了上去；右下角的是Mobileye無人駕駛測試車，沒有識別出紅綠燈，直接闖過去了。如果我們沒有一個好的感知系統，自動駕駛根本無法談起。

我們認為，一個準確的、穩定的、可靠的感知系統需要有四個方面的功能：清晰的視覺、優質的算法、多傳感器融合、足夠的計算能力。

這是我們提出的解決方案。面對復雜的外部環境，如車、人、道路、交通標識等，通過傳感器感知信號，利用控光技術把光場進行處理（攝像頭），使得攝像頭能夠在實現在各種特殊工況條件下成像。再通過毫米波雷達、超聲波雷達、GPS、IMU與攝像頭融合，將這些信號傳入到黑芝麻感知系統。

在黑芝麻感知系統中搭載獨特的圖像處理技術，感知理解算法以及優化的計算平臺。關于感知理解算法，比如人的特征、行為和場景的識別等；我們還有一個優化的SoC計算平臺，這樣能夠將感知結果傳達給下游自動駕駛企業去做決策、控制。因此，黑芝麻提供的是端到端、全棧式的感知解決方案。

這是我們第一次對外展示SoC的架構。上面中間的部分是Arm 架構CPU，藍色部分都是黑芝麻的技術，包含ISP、Codec、計算機視覺和神經網絡等。和國內很多企業只關注神經網絡加速相比，我們的技術更加豐富。

目前，汽車是我們著重關注的領域。利用黑芝麻的獨特技術，黑芝麻能夠開發出車規級的芯片，實現的功能包括支持多種傳感器的輸入，針對超低光、超高動態范圍的圖像處理，也能夠滿足L3、L4自動駕駛的計算能力。同Mobileye EyeQ4和EyeQ5相比，黑芝麻感知芯片單位功耗下計算能力有優勢。

我們的高動態成像當中經常會出現這樣的情景，通過黑芝麻的算法能夠得到完整的、比較清晰的圖片，這樣能夠為深度學習、網絡加速提供很好的圖像信息來源。

這個DEMO展示了我們在不同工況下，有效識別出車道和汽車、行人、交通標志，在彎道，大逆光、低光、雨/霧天等情況下都能進行識別。

接下來這個demo展示了黑芝麻利用多種傳感器的融合，進行高精度定位。綠色的是我們定位的軌跡，紅色的是普通GPS信號的軌跡。可以看到，經過傳感器融合后的定位跟實際位置幾乎沒有偏差。

黑芝麻智能成立于2016年8月，在硅谷、上海、深圳、武漢都建立了自己的研發機構和辦事處，員工接近100人，都來自于細分領域的頂級公司，包括OV、Ambarella、高通、英偉達，甚至美國國防部，平均工作時間也都超過15年。

現在你們整機廠方面的進展情況怎么樣？

車規級的芯片我們選擇了三家有代表性的汽車廠，一個是中國實力最強的主機廠，另一個是中國新能源汽車當中的佼佼者，還有一個是新勢力造車的典型代表。

有沒有明確的計劃和時間表？

有的，因為是車規級的，目前芯片設計部分已經結束，完成所有驗證要到2021年。

剛才我們看到了很棒的視頻展示，團隊過去在傳感器方面有很多積累，非常惡劣的環境下表現非常好，大家對這方面應該沒有任何疑問，能否分享一下具體團隊成員的情況和經驗？如何把車規級的SoC做出來？

我們的團隊成員在產業工作年限都超過15年，曾在行業尖端企業，比如高通、安霸等工作，在芯片的設計和驗證方面有著豐富的經驗。

智能網聯汽車規劃當中提到，中國需要有自主的智能駕駛計算平臺，國家也有一些戰略推動整車廠方面建立自主的計算平臺，現在這些大的整車廠大概是什么進程？

現在中國的自主品牌主機廠都有一個很明確的A/B方案，A方案就是剛才說的外圍公司，B方案就是黑芝麻，所以需要跟著自主品牌一起成長。

傳感器方面現在的合作力度是比較緊密的，因為直接會決定信息的獲取，整個合作的過程當中對傳感器是怎樣的影響力？

芯片的功能特征是有雷達、GPS等其他傳感器的接口。

比如激光雷達，全球短期內有沒有比較容易做出來的？

目前激光雷達商業化確實比較難，成本也比較高，目前我們只是留了接口，但還沒有進行具體布局，實現商業化還需要一定時間。

現在算法是已經固化到里面了嗎？

我們沒有固化，就是留了接口。我們有ISP，加上神經網絡、SOC架構當中還有基于RISK-V保密和加密安全方面。

基于視覺的識別都是你們自己做的嗎？

是的。

第三方有些很知名的，專門做機器視覺的公司，他們的算法也可以應用于你們的芯片嗎？

可以。

所以CNN加速不依賴于自己的算法？

我們是比較開放的平臺。會給第三方開發兩種選擇：一是用我們提供的神經網絡開發工具直接進行原始網絡的硬件合成； 二是用我們提供的神經網絡開發工具進行網絡的深度優化，包括剪裁和再訓練。

黑芝麻智能科技（上海）有限公司是一家視覺感知核心技術開發與應用提供商，該公司正致力于成為全球嵌入式圖像處理、計算機視覺的領跑者。2016年8月，分別在上海和美國加州硅谷成立研發中心。團隊成員已接近100人，核心團隊成員皆有15年以上產業工作經驗。公司核心業務為提供圖像處理、計算圖像的解決方案，以及基于人工智能的嵌入式視覺感知平臺。目前公司已經完成A+輪融資。