第二十八屆中國國際廣播電視信息網絡展覽會(以下簡稱CCBN2021)于2021年5月28日至30日在北京中國國際展覽中心（靜安莊館）舉行。思必馳IoT家電線產品總監于鵬偉受邀參加并帶來了精彩主題分享，全面展示思必馳語音技術情況以及多模態技術在帶屏終端的應用與經驗。

CCBN2021展會展覽面積60,000平米，設置專業展區20余個，舉辦會議論壇和專項活動30余場，同步進行線上展覽和會議交流。在5月28日同期舉辦的CCBN BDF2021智慧廣電+系列論壇——智能終端篇上，思必馳IoT家電線產品總監于鵬偉進行了題為《帶屏終端場景下的多模態交互》的主題分享，全面展示了思必馳語音技術情況以及多模態技術在帶屏終端的應用與經驗。

在2021世界超高清視頻（4K/8K）產業發展大會上，工業和信息化部部長肖亞慶表示，過去一年中，國內4K超高清電視的市場占比超過了70%，同時8K電視也開始加速滲透。

自去年以來，受疫情影響，民眾居家娛樂需求提升，使得4K電視加速普及。據資料顯示，2020年國內4K電視總銷量約為3338萬臺，銷售額超過千億元。中國電子信息產業發展研究院院長張立介紹稱，未來8K電視將成為電視廠商旗艦產品的主流配置。

據Strategy Analytics統計，2020年全球8K電視的銷量低于預期，僅為35萬臺。但到了2021年，這個數字有望突破百萬。到2025年，8K電視將進入全球范圍內超過7200萬個家庭之中，其中以北美和亞太地區占比最高。

于鵬偉在分享中提到，智能電視作為「客廳經濟」中的核心代表產品，占據客廳場景最大的流量入口，一直是各大家電廠商爭奪的核心領域。思必馳依托智能語音行業深耕多年的經驗及關鍵技術優勢，為智能電視打造流暢自然的語音入口+輸出，同時背靠DUI平臺，打通了超過300家第三方資源接口，為用戶提供全屋家居控制、交通出行、新聞資訊、生活娛樂等各領域內容服務。除此之外，于鵬偉還分別介紹了思必馳的AMAEC技術、TH1520芯片和多模態交互技術的應用。

AMAEC，杜比全景聲效的最佳搭檔

AMAEC（AISpeech Multichannel Acoustic?Echo?Cancellation）是思必馳推出的多通道回聲消除技術，采用傳統信號處理方法結合深度學習網絡，對每一獨立的發聲通道建立專有濾波系統，使得多揚聲器系統的回聲消除達到極佳效果。

思必馳AMAEC，適配4/6/8麥+N回路場景，保障中高端電視杜比全景聲效下的語音交互無障礙進行。流暢自然智能語音交互與杜比全景聲絕妙體驗雙管齊下，實為中高端智能電視更優之選。

目前思必馳與電視領域頭部企業海信達成深度合作，海信及其子品牌東芝高端電視型號已全面搭載思必馳AMAEC技術，包括海信85U9E、海信75U9G Pro、海信85U7G max、東芝940、東芝840、東芝740等。

TH1520，系統CPU高占用的救星

TH1520是一款AI專用的雙核增強型低功耗DSP芯片。大容量片內靜態存儲，多通道音頻解碼支持廣域采樣率，可以為上層SOC端的工作減輕壓力。另外，芯片支持低功耗模式和全速模式，實現毫瓦級待機功耗和百毫瓦級的全速工作功耗。

TH1520集成思必馳語音算法，家居噪音環境下可以實現5米遠場喚醒率>95%，識別準確率>92%，誤喚醒僅1次/48h（國際認可1次/24h為優秀水平）；支持喚醒詞自定義，可內置本地指令數百條，響應時間<500ms；背靠DUI平臺，可自選對接天氣、音樂、故事、百科、新聞等海量技能，云端服務無限制。

目前海信S7F社交電視、近日發布的樂視GS系列電視，也同樣搭載了TH1520語音專用芯片，在未來幾個月還會有大批搭載TH1520芯片的智能電視發布出貨。

多模態交互技術的應用

于鵬偉表示，思必馳全鏈路語音交互技術在一般家居場景底下能夠為用戶提供流暢的交互體驗。

在一些特殊的場景底下，比如多位用戶在激烈的玩電子游戲、親朋好友聚會等，很容易出現多人同時交互的情況出現，此時純語音交互則很難對聲源進行精準判斷，交互成功率會直線下降。

針對周邊嘈雜干擾大、多人密集同時交互的情況，思必馳結合全鏈路語音交互技術及自研計算機視覺技術，推出多模態交互技術方案，根據視覺和音頻特征，通過多模態融合VAD分離出說話人的目標語音，拒識其他說話人的聲音，從而實現輔助降噪、提高聲源定位的精準度，即使說話人在移動狀態下也不受影響。

思必馳多模態交互技術方案還可以應用在會議大屏、商場顯示大屏、地鐵購票機等商用帶屏顯示設備中，目前此技術已在全國多個地區地鐵的購票設備中落地。思必馳始終堅持技術源頭創新，結合行業最新動態，為企業提供更優質的自然語言交互解決方案，為用戶帶來更自然的人機交互體驗。

原文標題：CCBN | 思必馳：帶屏終端場景下的多模態交互

文章出處：【微信公眾號：思必馳】歡迎添加關注！文章轉載請注明出處。

責任編輯：haq