在科技的浪潮中,每一次創(chuàng)新都是一次對(duì)未來(lái)的探索。近日,科大訊飛以“釋放想象力,智能新出行”為主題,在合肥舉行了一場(chǎng)盛大的2023智能汽車新品發(fā)布會(huì)。這是一場(chǎng)科技與藝術(shù)的碰撞,是一場(chǎng)未來(lái)與現(xiàn)實(shí)的交融,更是一場(chǎng)對(duì)人類出行方式的全新定義。在這場(chǎng)發(fā)布會(huì)上,科大訊飛以其深厚的技術(shù)積累和創(chuàng)新精神,發(fā)布了基于訊飛星火V3.0的座艙、音效、智駕三大方向的產(chǎn)品升級(jí)。這三大方向的產(chǎn)品升級(jí),無(wú)疑將為我們的出行生活帶來(lái)前所未有的體驗(yàn)。
一、訊飛星火+座艙:賦能人車交互體驗(yàn)躍升
10月24日最新發(fā)布的訊飛星火V3.0將賦能智能座艙全面升級(jí),面向多樣化的汽車使用場(chǎng)景,科大訊飛推出星火座艙OS、星火汽車APP和星火座艙域控,支持實(shí)時(shí)檢索,可以實(shí)現(xiàn)插件化調(diào)度,并集成了多模態(tài)生成的能力,為合作伙伴提供自主可控、組件化以及更開(kāi)放的座艙解決方案。
星火座艙OS包括星火汽車助理和星火場(chǎng)景應(yīng)用兩大部分,將語(yǔ)音與視覺(jué)模態(tài)深度融合,讓識(shí)別更精準(zhǔn),語(yǔ)音合成MOS>4.6,大模型業(yè)務(wù)貫穿支持十輪以上的上下文語(yǔ)義繼承,新增的實(shí)時(shí)檢索能力打破大模型認(rèn)知邊界,時(shí)新信息即時(shí)查詢,為用戶帶來(lái)更自由、更智能、更自然的人車交互體驗(yàn)。借力大模型賦能,星火座艙OS打造了多個(gè)沉浸式的使用場(chǎng)景,并支持自定義,一句話生成復(fù)雜場(chǎng)景,觸達(dá)200+車控動(dòng)作。星火汽車APP圍繞用車場(chǎng)景打造的多樣化大模型車端應(yīng)用,如用車顧問(wèn)、兒童故事、口語(yǔ)陪練、心靈SPA、旅行伙伴等等,將大模型能力托身于眾多實(shí)用小場(chǎng)景,為用戶帶來(lái)可感知的、能用好用的AI超能力。
星火座艙域控是智能化AI新底座,擁有豐富成熟的接口能力,面向行業(yè)輸出兼容核心AI算法的“核心板”,基于全棧的座艙AI算法和結(jié)合芯片的異構(gòu)算法優(yōu)勢(shì)實(shí)現(xiàn)芯算融合,SOC算力消耗降低10%,并與國(guó)內(nèi)廠商深度合作,大幅度提升國(guó)產(chǎn)平臺(tái)的渲染效果。星火座艙域控旨在以更少的資源、更短的開(kāi)發(fā)周期實(shí)現(xiàn)差異化產(chǎn)品創(chuàng)新。
二、訊飛星火+iFlySound Plus24ch:智享動(dòng)聽(tīng)
作為駕駛場(chǎng)景下最安全和高效的交互方式,聽(tīng)覺(jué)感官備受關(guān)注,用戶對(duì)汽車場(chǎng)景下的聽(tīng)感品質(zhì)要求逐漸提高,對(duì)高級(jí)別車載音響系統(tǒng)的需求也在持續(xù)增長(zhǎng)。
本次發(fā)布會(huì)現(xiàn)場(chǎng),科大訊飛發(fā)布了最新的iFlySound Plus24ch功放硬件平臺(tái),將基于應(yīng)用場(chǎng)景的交互、聽(tīng)感、內(nèi)容、顯示與車控深度融合,讓車載音效體驗(yàn)從單維向多維、從單場(chǎng)景向多場(chǎng)景演進(jìn),重新構(gòu)建汽車聲音鏈條,形成整車智能化聲音交互閉環(huán),用智能化升維汽車座艙聲音體驗(yàn)。
在硬件層面,iFlySound Plus24ch功放硬件平臺(tái)使用高性能浮點(diǎn)DPS,擁有最高2GHZ*2的高速音頻處理加速器和128通道數(shù)字音頻處理能力,可以獲得高達(dá) 24bit 96kHz 的HD Audio支持,并且兼容未來(lái)E-E架構(gòu),擁有超強(qiáng)的硬件擴(kuò)展能力和音頻推動(dòng)能力,性能超越當(dāng)前市面上大部分主流硬件設(shè)施。同時(shí),科大訊飛還在保證性能的前提下有效降低了硬件的尺寸和重量,實(shí)現(xiàn)“小型化輕量化”。
在軟件算法層面,科大訊飛核心技術(shù)自主研發(fā),當(dāng)前已具備3D環(huán)繞、聲場(chǎng)分區(qū)、ICC、響度補(bǔ)償、主動(dòng)降噪、虛擬音效、多音區(qū)交互、高擬真主動(dòng)聲浪、車內(nèi)交流償、低品質(zhì)音源修復(fù)、場(chǎng)景增益控制、聲場(chǎng)分區(qū)、車載K歌和大模型音效等多個(gè)全自研的高階音效算法,并推出基于持續(xù)擴(kuò)展豐富的聲音庫(kù)、聲浪庫(kù)、音效庫(kù)、功能庫(kù)的訂閱模式。
在調(diào)音層面,基于大模型聲學(xué)理論體系實(shí)現(xiàn)人機(jī)耦合,端云協(xié)同AI調(diào)音,與車企共同打造AI之音,基于iFlyDSP GUI工具,無(wú)需更改代碼,即可快速完成定制需求。全自研MCU基礎(chǔ)軟件架構(gòu)使得跨平臺(tái)代碼復(fù)用度超70%,靈活的軟硬一體平臺(tái)配置可以積極適配不同定位和級(jí)別的車型。
當(dāng)前,科大訊飛車載音效產(chǎn)品已獲得國(guó)內(nèi)13家主流車企平臺(tái)化項(xiàng)目定點(diǎn),合作車型超過(guò)30款。
三、訊飛星火+智駕:讓輔助駕駛更安心
大模型的理解、推理、表達(dá)和多模態(tài)知識(shí)學(xué)習(xí)等能力給自動(dòng)駕駛帶來(lái)了更多新的技術(shù)思路,基于訊飛星火認(rèn)知大模型,科大訊飛帶來(lái)了兩款高性價(jià)比的行泊一體智駕解決方案——智駕STD和智駕PRO,配備增強(qiáng)型高速NOA(HNOA)、記憶行車和記憶泊車等功能,讓汽車駕駛更安全、更智能,更有樂(lè)趣。
科大訊飛行泊一體智駕解決方案通過(guò)強(qiáng)大的AI算法研發(fā)能力、高效完整的數(shù)據(jù)閉環(huán)云平臺(tái)、深厚的工程技術(shù)能力,打造車云一體的智駕研發(fā)體系。大模型利用海量數(shù)據(jù)以及駕駛領(lǐng)域知識(shí)的強(qiáng)化,可以用于自動(dòng)駕駛場(chǎng)景數(shù)據(jù)以及駕駛策略的生成,并支持以交互的方式增強(qiáng)對(duì)基礎(chǔ)駕駛模型的理解??拼笥嶏w自研了從深度學(xué)習(xí)訓(xùn)練到模型調(diào)優(yōu)量化、模型推理部署的全棧工具鏈,并打造了智駕應(yīng)用開(kāi)發(fā)框架和中間件,確保系統(tǒng)穩(wěn)定,支撐跨平臺(tái)算法快速移植。自研4D重建與自動(dòng)標(biāo)注系統(tǒng)有效提升了標(biāo)注的效率和質(zhì)量。
星火大模型將從技術(shù)架構(gòu)層面賦能BEV+transformer智駕感知大模型的研發(fā),解決智能駕駛當(dāng)前存在的感知不精準(zhǔn)、決策不智能、長(zhǎng)尾不收斂三大技術(shù)難題。通過(guò)統(tǒng)一的BEV+Transformer網(wǎng)絡(luò),可以實(shí)現(xiàn)多模態(tài)、多任務(wù)、長(zhǎng)時(shí)序4D感知?;跈C(jī)器學(xué)習(xí)的超聲波感知算法應(yīng)用,有效提升感知準(zhǔn)確性和泛化性。結(jié)合星火座艙強(qiáng)大的人車交互能力,將艙駕信息進(jìn)行深度融合,加強(qiáng)人車交互性能、提升用戶體驗(yàn),同時(shí)用戶可以自由下達(dá)車控和智駕相關(guān)指令,行泊流程自如可控,讓輔助駕駛更智能、更安心。
同時(shí),科大訊飛訊飛在生態(tài)方面也保持著的巨大優(yōu)勢(shì),除了基于訊飛自研的兒童教育、K12教育、音娛資源、聽(tīng)見(jiàn)會(huì)議以及訊飛翻譯五大自建生態(tài)資源外,訊飛星火大模型賦能的智能座艙已經(jīng)與支付寶、咪咕、騰訊音樂(lè)、喜馬拉雅、高德、火山引擎、雷石、能鏈、喜泊客等九家企業(yè)開(kāi)展了深度生態(tài)合作,積極建立車主全旅程運(yùn)營(yíng)服務(wù)鏈條,滿足車主多元化需求,提供高效、便捷的車載場(chǎng)景體驗(yàn)。此外,科大訊飛智能座艙還與百余家企業(yè)生態(tài)積極合作,力求以豐富全面的軟件生態(tài)賦能智能座艙,助力中國(guó)汽車產(chǎn)業(yè)智能化的發(fā)展。
隨著進(jìn)入智能化的下半場(chǎng),大模型“上車”正在重塑人機(jī)交互和服務(wù)生態(tài)。自5月6日發(fā)布以來(lái),訊飛星火在汽車領(lǐng)域取得了顯著成就,并與多家車企及合作伙伴建立了強(qiáng)大的汽車AI星火生態(tài)。未來(lái),科大訊飛將深化大模型在汽車領(lǐng)域的應(yīng)用,與合作伙伴共同推動(dòng)中國(guó)汽車產(chǎn)業(yè)的智能化革新。