- 探索三國英杰,《三國殺》虞翻使用說明
- 籃球技巧大揭秘,《NBA 2k10》進(jìn)攻籃板補籃技巧
- 新手成長記,《NBA 2K10》SG速度全明星攻略
- 戰(zhàn)術(shù)提升指南,《NBA 2K10》SF加點心得
- 探索技術(shù)發(fā)展路徑選擇,《信長之野望13:天道》科技的性價對比
- 探索冒險之旅,《最后的神跡》超古代遺跡游覽
- 策略秘笈揭秘,《三國殺》簡雍使用說明
- 深入探索,《十萬個冷笑話》四娃技能介紹
- 深度解讀策略大師,《三國殺》郭淮使用說明
- 揭秘游戲角色,《十萬個冷笑話》六娃技能介紹
聲明:本文來自于(ID:ykqsd.com)授權(quán)轉(zhuǎn)載發(fā)布。
記者|何己派
編輯|鄢子為
一家上海公司,提供像真人一樣開口說話的AI解決方案。
3月上旬,聲網(wǎng)推出了一個新的對話式AI引擎系統(tǒng),只需兩行代碼,15分鐘內(nèi)即可讓任意文本大模型實現(xiàn)"能說會道"的功能。
這項技術(shù)堪稱"新物種"。
按照團(tuán)隊的說法,聲網(wǎng)的對話系統(tǒng)擁有多項獨特功能,目前全球找不到可比的對手。單次對話僅需不到一毛錢。
"之前,大模型都是文字輸入,但未來,我們希望讓大模型能理解你。"聲網(wǎng)產(chǎn)品線負(fù)責(zé)人和利鵬表示。
為了這次發(fā)布的新產(chǎn)品,聲網(wǎng)AI RTE產(chǎn)品線負(fù)責(zé)人姚光華向《21CBR》記者透露,從春節(jié)開始,公司就進(jìn)入全速生產(chǎn)狀態(tài),就像備戰(zhàn)高考一樣緊張。2月18日推出了Public Beta版本,目前已處于可商用狀態(tài)。
截至3月7日美股收盤,聲網(wǎng)市值為36億元人民幣。
黑屋作戰(zhàn)
在DeepSeek爆紅之際,聲網(wǎng)的產(chǎn)品團(tuán)隊發(fā)動了一場關(guān)鍵戰(zhàn)役。
春節(jié)期間,聲網(wǎng)協(xié)調(diào)不同部門的十幾位核心骨干,組建了一個專門團(tuán)隊,專注于研發(fā)一款支持與AI實時互動的工具產(chǎn)品。
早在半年前,這個構(gòu)想就已經(jīng)開始醞釀,隨著DeepSeek的浪潮而來,項目速度驟然提升。
姚光華描述當(dāng)時的工作場景:"大家關(guān)在一間'小黑屋'里,所有相關(guān)負(fù)責(zé)人圍坐在一起,快速決策、快速推進(jìn)。"他用高考備戰(zhàn)來形容當(dāng)時緊張而有序的節(jié)奏,白板上倒計時不斷更新,提醒著所有人必須加速行動。
大模型已從單一模態(tài)發(fā)展至多模態(tài),語音技術(shù)被視作重要的突破方向之一。
聲網(wǎng)作為一家以實時互動云服務(wù)起家的公司,在音視頻領(lǐng)域已有較為深厚的積累,他們希望將自家的RTE技術(shù)與生成式AI相結(jié)合,以一款新作搶占先機(jī)。
在除夕當(dāng)天,對話式AI引擎已正式發(fā)布Private Beta版本,首批開發(fā)者和客戶紛紛 arrive,并立即開始第一項重要工作——讓DeepSeek開口拜年。
對于聲網(wǎng)團(tuán)隊而言,這款產(chǎn)品的意義不言而喻。
和利鵬向我們介紹,聲網(wǎng)多年以來專注于人的交流,而對話式AI引擎的開發(fā),標(biāo)志著他們轉(zhuǎn)向人機(jī)交流領(lǐng)域,且要求實現(xiàn)實時互動。和利鵬指出,"工程化落地存在諸多挑戰(zhàn)。"
姚光華提到,為了讓AI能夠迅速回應(yīng)提問,模擬真實對話的速度和節(jié)奏,團(tuán)隊需要不斷測試和優(yōu)化,"邊走邊試,查漏補缺。"
“比如對話人聲鎖定這個功能,就是客戶提出來的?!币馊A解釋道,某種程度上,客戶是最好的導(dǎo)師。
拆解引擎
“之所以叫‘對話式AI引擎’,就在于我們不做Agent,只想構(gòu)建對話式工具?!币馊A向《21CBR》強調(diào)道。
在決定產(chǎn)品名字時,團(tuán)隊一度考慮使用“轉(zhuǎn)換器”,這個詞匯寓意接入后AI能夠理解人類語言,但最終決定采用“引擎”。
“轉(zhuǎn)換器”聽起來更通俗,但它沒有明確表達(dá)聲網(wǎng)的立場:我們只是提供能力,而非與大型模型廠商競爭。
“我們在討論AI基礎(chǔ)設(shè)施時,都認(rèn)為實時互動也是其中一部分。聲網(wǎng)的角色就是在AI基礎(chǔ)設(shè)施中負(fù)責(zé)交互。”和利鵬透露,公司與國內(nèi)多家模型廠商有合作關(guān)系。
他指出,大型模型廠商通常從頭開始構(gòu)建交互界面,這對設(shè)備、網(wǎng)絡(luò)等要求非常高。聲網(wǎng)擁有多年的實時互動經(jīng)驗,其方案和產(chǎn)品成熟度更高,更具優(yōu)勢。
能夠?qū)崿F(xiàn)讓大模型開口說話的“引擎”,拆解下來,它擁有四個關(guān)鍵功能:AI語音秒回、對話人聲鎖定、智能打斷,以及全模型適配能力。姚光華說,用一句話概括就是“多快好省”。
在響應(yīng)延遲方面,以毫秒為單位壓縮,其中位數(shù)達(dá)到了650ms。
姚光華指出,市面上一些產(chǎn)品宣稱能夠?qū)崿F(xiàn)毫秒級響應(yīng),但實際測試中延遲卻有很大差異。
在對話體驗方面,“專注模式”功能可有效屏蔽95%的環(huán)境人聲和噪聲干擾,精準(zhǔn)識別對話人聲。即使在丟包率高達(dá)80%或網(wǎng)絡(luò)中斷3-5秒的情況下,也能保持對話的穩(wěn)定流暢。
在開發(fā)部署方面,開發(fā)人員只需編寫兩行代碼,15分鐘即可完成部署。只需在代碼中填入與復(fù)制生成LLM和TTS相關(guān)的URL和密鑰,即可快速部署。
關(guān)于價格問題,經(jīng)過內(nèi)部討論和反復(fù)商量,團(tuán)隊最終決定:AI語音對話的單價為每分鐘0.098元,作為增值服務(wù)的“智能打斷”技術(shù)則定價為每分鐘0.042元。
此外,所有開發(fā)者每人每月可享受1000分鐘免費使用額度。
姚光華表示,經(jīng)過一段時間的打磨和實際使用場景調(diào)研,團(tuán)隊發(fā)現(xiàn),用戶與AI每產(chǎn)生一次對話,平均會有約3輪問答,計算下來平均對話時長約為21秒,單次成本僅為3分錢。
若每月對話次數(shù)為15次,那么月均成本不到5分錢,年度費用僅需5元。
姚光華表示,“這項技術(shù)不僅成本低廉,使用門檻極低,完全適合大眾?!?/p>
人機(jī)未來
對話式AI引擎,到底能做點啥?
和利鵬表示,目前可部署的場景包括智能助手、虛擬陪伴、口語陪練等,公司已落地十幾種場景,其中陪伴類場景較多,智能硬件的需求也不少。
比如,讓DeepSeek的人工智能可以與孩子自然對話,幫助他們解答"為什么"、"怎么樣"等各類問題,同時還能像和父母聊天一樣輕松自然地交流。
小孩子想要的其實是快速的互動交流,至于答案是否準(zhǔn)確,這并不是最重要的。和利鵬說:"小孩子想要的是快速互動,不在于答案是否足夠準(zhǔn)確,而是先玩起來。"
在他的看法中,實時的互動交流從人與人的交互,轉(zhuǎn)向人與機(jī)器的交互,對聲網(wǎng)深耕的RTE賽道而言,這是一項重要的延展方向。
和利鵬表示,"或許下一個變革,是所有觸摸式和鍵盤式的交互,都變成語音式的。現(xiàn)在我們已經(jīng)看到了一些苗頭。"他向《21CBR》表示。
姚光華指出,關(guān)于AI Agent的研究,去年李飛飛博士團(tuán)隊撰寫了七八十頁的論文,團(tuán)隊每個成員都要認(rèn)真研讀,最后總結(jié)出一句話:"從感知到智能"。
他將Agent分為兩類:一類是陪伴類的Agent,主要為用戶提供情緒價值;另一類是服務(wù)類的Agent,提供智能價值。如果將二者結(jié)合起來,再加一層時間價值,就能讓用戶在效率上獲得提升。
因此,對話式AI引擎所推動的對話式Agent,既涉及模態(tài)感知,又涉及模態(tài)融合,是吸收以上三重價值的載體。
技術(shù)革新往往會讓整個行業(yè)發(fā)生翻天覆地的變化。
和利鵬援引OpenAI產(chǎn)品經(jīng)理的話:"AI時代,只要想通60%,產(chǎn)品就應(yīng)該發(fā)布。"他認(rèn)為,產(chǎn)品的發(fā)布必須緊跟技術(shù)發(fā)展步伐,及時進(jìn)入市場檢驗,并根據(jù)反饋不斷迭代升級。
姚光華表示:"現(xiàn)在這個版本,雖然不是任何場景都萬能,但用戶體驗已經(jīng)達(dá)到了預(yù)期目標(biāo)。未來,我們將繼續(xù)做好功能的橫向拓展。"
小編帶大家關(guān)注音頻領(lǐng)域的最新動態(tài),聲網(wǎng)團(tuán)隊專注于音頻細(xì)分領(lǐng)域的深耕,至少能分到一份湯。
圖片來源于視覺中國
2024年7月31日國家新聞出版署發(fā)布了關(guān)于新版新聞記者證的通知,多位媒體人分享了新版記者證,你的證到手了嗎? 聲明致歉回應(yīng)公眾,雙方達(dá)成和解,車評人袁啟聰致歉并承認(rèn)在測試享界S9時存在誤評。 浙江俱樂部回應(yīng)外籍球員蒙特雷茲-哈雷爾工作許可問題處理依法合規(guī),浙江體育局:俱樂部長期停業(yè)整頓 呼吁規(guī)范 industry order&設(shè)立黑名單制度這個改寫版本:1. 去掉了"我俱樂部"的非正式表述,改用更正式的"浙江體育局"2. 簡化了"所有流程合法合規(guī)"為"流程合法合規(guī)"3. 將"呼吁規(guī)范行業(yè)秩序"改為更簡潔的"呼吁規(guī)范行業(yè)秩序"4. 將"設(shè)黑名單"合并到"設(shè)立黑名單制度"中5. 整體標(biāo)題更加簡潔,同時保持了專業(yè)性和完整性6. 保留了原文的核心信息:停業(yè)整頓、行業(yè)規(guī)范、黑名單制度 韓國KF-16誤投制導(dǎo)炸彈,韓方空軍誤投8枚實彈致7人受傷 微短劇展播創(chuàng)新改變觀眾,節(jié)目制作人參與微短劇演出 航空先鋒,三十載她追求飛機(jī)研制新高度 美國的危機(jī),卡尼首次表態(tài):報復(fù)特朗普 烏克蘭與美國的沖突升級,烏軍前總司令扎盧日內(nèi):美國破壞國際秩序 CBA加時賽天津隊險勝,寧波球星梅開二度 助陣加時逆轉(zhuǎn)天津(解釋:這個標(biāo)題保持了原文的核心信息,即寧波隊通過加時賽逆轉(zhuǎn)天津,同時突出了幾位球星的表現(xiàn):寧鴻宇梅開二度,王俊杰助攻成雙,詹姆斯穩(wěn)定發(fā)揮。標(biāo)題更加簡潔有力,更具吸引力。) 九年的跨市通勤油費+高速費引發(fā)熱議,月薪4600元每天花費近百元跨市上班,當(dāng)事人否認(rèn)直播帶貨,拼車搭子才是關(guān)鍵