日前,商湯科技日日新大模型SenseNova即將正式上線聲網云市場,開發者和企業用戶可通過聲網的實時互動云服務進行調用,將商湯領先的模型能力集成到各類應用場景中,快速構建基于日日新大模型的實時音視頻對話產品和應用,實現穩定、流暢、無延遲的音視頻對話體驗。
打造穩定、實時、極低延遲的實時音視頻對話體驗
2024年7月,商湯科技推出了國內首個具備實時音視頻交互大模型。今年,全新升級的日日新大模型SenseNova,擁有更加強大的實時交互、視覺識別、記憶思考、持續對話、復雜推理,以及情緒感知和表達等能力,還可隨時打斷,讓人機對話擺脫一問一答的刻板模式,互動體驗更自然、更流暢、更絲滑。
在今年1月實時音視頻中文測評基準 SuperCLUE-Live 中,商湯日日新大模型以總分 68.59 位列國內首位,展現了強大的多模態信息感知和理解及記憶能力。
在實時音視頻交互場景中,對話響應速度、語音清晰度等是衡量模型能力和產品體驗的重要指標。在級聯方案中,聲網已經將端到端延時降低到650ms。
商湯基于日日新大模型SenseNova的多模態推理與交互能力,結合聲網領先的產品優勢,更實現了500ms的端到端超低傳輸延時,與人類日常對話交互極為接近。同時,還可支持全雙工通信,在弱網環境下也可有效保障傳輸質量,并可智能消除對話中的噪聲、回聲、背景人聲,做到精準的人聲識別,讓人與AI的交互自然流暢。
合作賦能用戶,解鎖更多應用新場景
商湯日日新大模型SenseNova與聲網實時互動云服務的結合,有望打開更多人機交互場景,滿足兒童陪伴、同聲傳譯、視頻面試、電話客服、口語陪練、心理療愈、虛擬主播、個人助理等多元化場景的用戶需求,拓展大模型的落地與應用寬度。
此外,商湯科技與聲網還將攜手通過開放社區 RTE開發者社區,向有潛力的個人開發者及中小企業開放商湯日日新的深度體驗,旨在持續擴大生態伙伴體系,并為開發者提供豐富的資源和平臺支持。目前,雙方已與40家中小企業達成深度體驗合作,共同探索大模型在實時音視頻交互領域的更多應用潛能。
自2018年以來,商湯科技與聲網一直保持著緊密合作,在數字人、美顏特效、人力資源大模型等場景為不同行業客戶提供多種、差異化的產品和服務。未來,雙方還將繼續合作拓展日日新大模型的應用場景,共同將中國原創AI技術推向全球。
-
音視頻
+關注
關注
4文章
599瀏覽量
31434 -
商湯科技
+關注
關注
8文章
616瀏覽量
37625 -
大模型
+關注
關注
2文章
3706瀏覽量
5227
原文標題:商湯日日新上線聲網云市場,與四十家企業開啟合作
文章出處:【微信號:SenseTime2017,微信公眾號:商湯科技SenseTime】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
商湯科技正式開源空間智能模型日日新SenseNova-SI-1.3
商湯科技正式開源多模態自主推理模型SenseNova-MARS
避繁就簡!商湯日日新大模型靈性巧解數學難題,獲贊“機器的審美”
商湯科技日日新Seko系列模型與寒武紀成功適配
商湯日日新V6.5多模態大模型登頂全球權威榜單
小米AI眼鏡×商湯日日新 商湯“日日新”大模型交互平臺「商量」已探索性接入小米AI眼鏡
看點:商湯“日日新”擬接入小米AI眼鏡 鴻利智匯:部分產品已應用于小米汽車
商湯日日新SenseNova融合模態大模型 國內首家獲得最高評級的大模型
商湯科技日日新V6大模型斬獲“雙料第一” 一項國內榜首,一個全球第一
商湯科技日日新大模型SenseNova上線聲網云市場
評論