在科技的浪潮中,每一次創(chuàng)新都是一次對未來的探索。近日,科大訊飛以“釋放想象力,智能新出行”為主題,在合肥舉行了一場盛大的2023智能汽車新品發(fā)布會。這是一場科技與藝術的碰撞,是一場未來與現(xiàn)實的交融,更是一場對人類出行方式的全新定義。在這場發(fā)布會上,科大訊飛以其深厚的技術積累和創(chuàng)新精神,發(fā)布了基于訊飛星火V3.0的座艙、音效、智駕三大方向的產品升級。這三大方向的產品升級,無疑將為我們的出行生活帶來前所未有的體驗。
一、訊飛星火+座艙:賦能人車交互體驗躍升
10月24日最新發(fā)布的訊飛星火V3.0將賦能智能座艙全面升級,面向多樣化的汽車使用場景,科大訊飛推出星火座艙OS、星火汽車APP和星火座艙域控,支持實時檢索,可以實現(xiàn)插件化調度,并集成了多模態(tài)生成的能力,為合作伙伴提供自主可控、組件化以及更開放的座艙解決方案。
星火座艙OS包括星火汽車助理和星火場景應用兩大部分,將語音與視覺模態(tài)深度融合,讓識別更精準,語音合成MOS>4.6,大模型業(yè)務貫穿支持十輪以上的上下文語義繼承,新增的實時檢索能力打破大模型認知邊界,時新信息即時查詢,為用戶帶來更自由、更智能、更自然的人車交互體驗。借力大模型賦能,星火座艙OS打造了多個沉浸式的使用場景,并支持自定義,一句話生成復雜場景,觸達200+車控動作。星火汽車APP圍繞用車場景打造的多樣化大模型車端應用,如用車顧問、兒童故事、口語陪練、心靈SPA、旅行伙伴等等,將大模型能力托身于眾多實用小場景,為用戶帶來可感知的、能用好用的AI超能力。
星火座艙域控是智能化AI新底座,擁有豐富成熟的接口能力,面向行業(yè)輸出兼容核心AI算法的“核心板”,基于全棧的座艙AI算法和結合芯片的異構算法優(yōu)勢實現(xiàn)芯算融合,SOC算力消耗降低10%,并與國內廠商深度合作,大幅度提升國產平臺的渲染效果。星火座艙域控旨在以更少的資源、更短的開發(fā)周期實現(xiàn)差異化產品創(chuàng)新。
二、訊飛星火+iFlySound Plus24ch:智享動聽
作為駕駛場景下最安全和高效的交互方式,聽覺感官備受關注,用戶對汽車場景下的聽感品質要求逐漸提高,對高級別車載音響系統(tǒng)的需求也在持續(xù)增長。
本次發(fā)布會現(xiàn)場,科大訊飛發(fā)布了最新的iFlySound Plus24ch功放硬件平臺,將基于應用場景的交互、聽感、內容、顯示與車控深度融合,讓車載音效體驗從單維向多維、從單場景向多場景演進,重新構建汽車聲音鏈條,形成整車智能化聲音交互閉環(huán),用智能化升維汽車座艙聲音體驗。
在硬件層面,iFlySound Plus24ch功放硬件平臺使用高性能浮點DPS,擁有最高2GHZ*2的高速音頻處理加速器和128通道數(shù)字音頻處理能力,可以獲得高達 24bit 96kHz 的HD Audio支持,并且兼容未來E-E架構,擁有超強的硬件擴展能力和音頻推動能力,性能超越當前市面上大部分主流硬件設施。同時,科大訊飛還在保證性能的前提下有效降低了硬件的尺寸和重量,實現(xiàn)“小型化輕量化”。
在軟件算法層面,科大訊飛核心技術自主研發(fā),當前已具備3D環(huán)繞、聲場分區(qū)、ICC、響度補償、主動降噪、虛擬音效、多音區(qū)交互、高擬真主動聲浪、車內交流償、低品質音源修復、場景增益控制、聲場分區(qū)、車載K歌和大模型音效等多個全自研的高階音效算法,并推出基于持續(xù)擴展豐富的聲音庫、聲浪庫、音效庫、功能庫的訂閱模式。
在調音層面,基于大模型聲學理論體系實現(xiàn)人機耦合,端云協(xié)同AI調音,與車企共同打造AI之音,基于iFlyDSP GUI工具,無需更改代碼,即可快速完成定制需求。全自研MCU基礎軟件架構使得跨平臺代碼復用度超70%,靈活的軟硬一體平臺配置可以積極適配不同定位和級別的車型。
當前,科大訊飛車載音效產品已獲得國內13家主流車企平臺化項目定點,合作車型超過30款。
三、訊飛星火+智駕:讓輔助駕駛更安心
大模型的理解、推理、表達和多模態(tài)知識學習等能力給自動駕駛帶來了更多新的技術思路,基于訊飛星火認知大模型,科大訊飛帶來了兩款高性價比的行泊一體智駕解決方案——智駕STD和智駕PRO,配備增強型高速NOA(HNOA)、記憶行車和記憶泊車等功能,讓汽車駕駛更安全、更智能,更有樂趣。
科大訊飛行泊一體智駕解決方案通過強大的AI算法研發(fā)能力、高效完整的數(shù)據(jù)閉環(huán)云平臺、深厚的工程技術能力,打造車云一體的智駕研發(fā)體系。大模型利用海量數(shù)據(jù)以及駕駛領域知識的強化,可以用于自動駕駛場景數(shù)據(jù)以及駕駛策略的生成,并支持以交互的方式增強對基礎駕駛模型的理解??拼笥嶏w自研了從深度學習訓練到模型調優(yōu)量化、模型推理部署的全棧工具鏈,并打造了智駕應用開發(fā)框架和中間件,確保系統(tǒng)穩(wěn)定,支撐跨平臺算法快速移植。自研4D重建與自動標注系統(tǒng)有效提升了標注的效率和質量。
星火大模型將從技術架構層面賦能BEV+transformer智駕感知大模型的研發(fā),解決智能駕駛當前存在的感知不精準、決策不智能、長尾不收斂三大技術難題。通過統(tǒng)一的BEV+Transformer網絡,可以實現(xiàn)多模態(tài)、多任務、長時序4D感知。基于機器學習的超聲波感知算法應用,有效提升感知準確性和泛化性。結合星火座艙強大的人車交互能力,將艙駕信息進行深度融合,加強人車交互性能、提升用戶體驗,同時用戶可以自由下達車控和智駕相關指令,行泊流程自如可控,讓輔助駕駛更智能、更安心。
同時,科大訊飛訊飛在生態(tài)方面也保持著的巨大優(yōu)勢,除了基于訊飛自研的兒童教育、K12教育、音娛資源、聽見會議以及訊飛翻譯五大自建生態(tài)資源外,訊飛星火大模型賦能的智能座艙已經與支付寶、咪咕、騰訊音樂、喜馬拉雅、高德、火山引擎、雷石、能鏈、喜泊客等九家企業(yè)開展了深度生態(tài)合作,積極建立車主全旅程運營服務鏈條,滿足車主多元化需求,提供高效、便捷的車載場景體驗。此外,科大訊飛智能座艙還與百余家企業(yè)生態(tài)積極合作,力求以豐富全面的軟件生態(tài)賦能智能座艙,助力中國汽車產業(yè)智能化的發(fā)展。
隨著進入智能化的下半場,大模型“上車”正在重塑人機交互和服務生態(tài)。自5月6日發(fā)布以來,訊飛星火在汽車領域取得了顯著成就,并與多家車企及合作伙伴建立了強大的汽車AI星火生態(tài)。未來,科大訊飛將深化大模型在汽車領域的應用,與合作伙伴共同推動中國汽車產業(yè)的智能化革新。