3月9日,南京硅基智能科技集團(tuán)(以下簡(jiǎn)稱硅基智能)宣布在GitHub(全球最大開(kāi)發(fā)者社區(qū))開(kāi)源旗下AIGC數(shù)字人模型HeyGem.ai,同時(shí)發(fā)布基于該模型的同名數(shù)字人工具硅基數(shù)字人克隆的本地安裝包,迅速成為AI開(kāi)源領(lǐng)域現(xiàn)象級(jí)事件。短短一周,幾萬(wàn)名來(lái)自全球的開(kāi)發(fā)者會(huì)聚硅基智能線上社區(qū),GitHub點(diǎn)贊超3000顆星。
“為什么開(kāi)源,不怕沒(méi)了技術(shù)壁壘嗎?”3月18日,面對(duì)記者的提問(wèn),硅基智能創(chuàng)始人兼CEO司馬華鵬淡定回答道:“既然選擇開(kāi)源,就代表了技術(shù)上的自信。扎根南京這片科技創(chuàng)新沃土,我們又和江蘇省產(chǎn)業(yè)技術(shù)研究院共建了JITRI—硅基智能聯(lián)合創(chuàng)新中心。在科技創(chuàng)新和產(chǎn)業(yè)創(chuàng)新深度融合的過(guò)程中,公司必然能不斷拿出更好的產(chǎn)品。同時(shí),我們也希望能推動(dòng)產(chǎn)品優(yōu)勢(shì)向生態(tài)優(yōu)勢(shì)轉(zhuǎn)變,在全球形成品牌影響力,從南京出發(fā),邁向全球?!?/p>
01
科產(chǎn)深融“造人”多國(guó)媒體點(diǎn)贊南京AI
其實(shí)早在開(kāi)源前,硅基智能就在國(guó)際上名聲很響,相關(guān)報(bào)道見(jiàn)諸《麻省理工科技評(píng)論》、德國(guó)第一電視臺(tái)、日本共同社、法蘭西24臺(tái)等國(guó)外媒體。法國(guó)一家電視臺(tái)參與報(bào)道的記者杜瓦爾更是直言:“中國(guó)的人工智能技術(shù)已經(jīng)非常成熟,我們相信硅基智能的AI數(shù)字人技術(shù)一定有著光明的前景。”
美德法日媒體爭(zhēng)相報(bào)道硅基智能。
司馬華鵬將這一切歸功于科產(chǎn)深融帶來(lái)的技術(shù)突破。
他告訴記者,硅基智能雖然才成立不到8年,但始終高度重視技術(shù)及創(chuàng)新發(fā)展。
一方面,健自身“筋骨”,公司算法等研發(fā)人員占員工總數(shù)的70%以上,研發(fā)費(fèi)用持續(xù)3年過(guò)億元;另一方面,強(qiáng)校企合作,聚焦數(shù)字人生成、虛擬現(xiàn)實(shí)引擎、智能編碼等多個(gè)領(lǐng)域的前沿技術(shù),和南京大學(xué)、東南大學(xué)等眾多高校深度合作,逐步建立以企業(yè)為主體、市場(chǎng)為導(dǎo)向、產(chǎn)學(xué)研結(jié)合的自主創(chuàng)新體系。
同時(shí),硅基智能還積極外拓創(chuàng)新“朋友圈”,兩年前與江蘇省產(chǎn)業(yè)技術(shù)研究院共建了JITRI—硅基智能聯(lián)合創(chuàng)新中心。
司馬華鵬深信,創(chuàng)新,永遠(yuǎn)不能靠單打獨(dú)斗,“我們有自研武器,但也需火力支持。大家合力研發(fā),將創(chuàng)意轉(zhuǎn)化為實(shí)際的產(chǎn)業(yè)應(yīng)用,從10發(fā)展到100,甚至更大規(guī)模?!?/p>
聯(lián)合創(chuàng)新中心成立后,硅基智能結(jié)合當(dāng)下數(shù)字人發(fā)展情況,第一時(shí)間列出10項(xiàng)技術(shù)需求,涉及自主意識(shí)與情感反應(yīng)數(shù)字人系統(tǒng)、多模態(tài)融合智能處理框架、直播數(shù)字人的音頻驅(qū)動(dòng)口型、多模態(tài)智能人機(jī)交互的語(yǔ)義關(guān)聯(lián)信息融合技術(shù)等。
“每一項(xiàng)都是我們一線最迫切的需求。如今,已經(jīng)有一半都對(duì)接解決了。剩余5項(xiàng),正借助江蘇省產(chǎn)業(yè)技術(shù)研究院的創(chuàng)新網(wǎng)絡(luò)在全球‘張榜’?!彼抉R華鵬說(shuō),在科技創(chuàng)新和產(chǎn)業(yè)創(chuàng)新深度融合的過(guò)程中,公司“造數(shù)字人”技術(shù)穩(wěn)步邁向國(guó)際水平,特別是在“擬人”上實(shí)現(xiàn)巨大突破,獲得較為成功的應(yīng)用效果。
截至目前,硅基智能已拿下全球發(fā)明專利授權(quán)135件。
02
技術(shù)迭代升級(jí)為數(shù)字人注入“靈魂”
在取得一系列成果的基礎(chǔ)上,硅基智能的技術(shù)研發(fā)腳步并未停歇,而是持續(xù)迭代升級(jí)。
采訪當(dāng)天,記者正巧碰見(jiàn)一場(chǎng)關(guān)于“多模態(tài)深度學(xué)習(xí)模型架構(gòu)”的研發(fā)小組會(huì)議。會(huì)議室內(nèi),數(shù)十臺(tái)筆記本電腦屏幕上閃爍著復(fù)雜的數(shù)據(jù)與代碼,研發(fā)人員的討論熱烈又冷靜。
“這是一場(chǎng)接力創(chuàng)新賽?!边B山易(公司內(nèi)部花名)已在硅基智能研發(fā)組工作多年,會(huì)后主動(dòng)留下擦白板、整理會(huì)議室,“兩年前聯(lián)合創(chuàng)新中心建立后提出一批技術(shù)需求,對(duì)于已解決的,我們要接著在創(chuàng)新之上再創(chuàng)新;對(duì)于還沒(méi)解決的,我們自己必須上,不能干等人家‘揭榜’幫忙。”他手指點(diǎn)了點(diǎn)白板上還殘留著的“層次化”“融合”“橋梁”等字樣。傳統(tǒng)Transformer架構(gòu)處理單類數(shù)據(jù)(如文本或圖像)表現(xiàn)出色,可現(xiàn)實(shí)中,人們接收文字、圖片、聲音等多元信息時(shí),Transformer就難以將不同類型數(shù)據(jù)有效融合理解,顯得力不從心。“現(xiàn)在,我們找到了方法,要給不同模態(tài)的數(shù)據(jù)搭建一座‘橋梁’?!彼f(shuō)。
這座“橋梁”能讓文本、圖像和聲音等數(shù)據(jù)相互交流、融合。連山易進(jìn)一步解釋道:“這樣可以讓數(shù)字人整合周圍環(huán)境,你的表情、聲音等信息一起,形成一個(gè)對(duì)外部環(huán)境更全面、更準(zhǔn)確的理解,從而提供更豐富的交互體驗(yàn)和更準(zhǔn)確的信息傳遞。”
硅基智能創(chuàng)造永恒的kodry.ai,為6000公里外的外國(guó)媽媽圓夢(mèng)。
據(jù)了解,當(dāng)前,硅基智能正瞄準(zhǔn)3個(gè)核心技術(shù)方向展開(kāi)研發(fā),分別是融合式多模態(tài)深度學(xué)習(xí)模型架構(gòu)、實(shí)時(shí)上下文感知與自適應(yīng)決策系統(tǒng)、跨模態(tài)一致性與高效輸出保障平臺(tái)。連山易打了個(gè)比方,“當(dāng)前行業(yè)正在共同突破的技術(shù)目標(biāo)是‘如何讓數(shù)字人變得更像一個(gè)人’。你可以把這3個(gè)方向簡(jiǎn)單理解為我們?cè)谠噲D注入‘靈魂’,要讓數(shù)字人的‘大腦’更像人一樣去思考,‘眼睛’更像人的眼睛一樣去看懂世界,‘講話’更像人一樣在避免歧義的同時(shí)進(jìn)行個(gè)性化表達(dá)。”
03
開(kāi)源建生態(tài)推動(dòng)“數(shù)字人”產(chǎn)業(yè)創(chuàng)新發(fā)展
硅基智能用AI技術(shù)還原了聞一多、梅蘭芳、謝晉等。
走進(jìn)硅基智能,第一感覺(jué)是“人潮”洶涌。這里隨處可見(jiàn)顯示屏,屏幕上是數(shù)字人律師、數(shù)字人主播、數(shù)字人醫(yī)生、數(shù)字人老師、數(shù)字人企業(yè)家……屏幕外,數(shù)字人研發(fā)者不僅是“造人者”,也是其研發(fā)產(chǎn)品的長(zhǎng)期使用者。
“你好,現(xiàn)在醫(yī)保零星報(bào)銷可以掌上操作嗎?”“可以。參保人關(guān)注‘南京醫(yī)保’微信公眾號(hào)—進(jìn)入‘服務(wù)大廳’—點(diǎn)擊‘零星報(bào)銷掌上預(yù)審’……”扶搖(公司內(nèi)部花名)一早就來(lái)到數(shù)字人醫(yī)生面前咨詢醫(yī)保政策。
場(chǎng)景應(yīng)用驅(qū)動(dòng)技術(shù)創(chuàng)新。司馬華鵬說(shuō),開(kāi)源也是基于這一邏輯。
他將話題轉(zhuǎn)回科產(chǎn)深融,以此舉例道:“你看,我們?cè)瓉?lái)以自研為主,后來(lái)和大家聯(lián)合研發(fā)。開(kāi)源也是一樣的道理,只有走出去,讓越來(lái)越多的人接觸數(shù)字人、使用數(shù)字人,形成一個(gè)良好的生態(tài)環(huán)境,產(chǎn)業(yè)才能發(fā)展得越來(lái)越好?!彼抉R華鵬表示,中國(guó)企業(yè)要以開(kāi)放的姿態(tài)制定行業(yè)新標(biāo)準(zhǔn),讓數(shù)字人技術(shù)真正“飛入尋常百姓家”,讓技術(shù)紅利惠及全球開(kāi)發(fā)者與普通人,而非囿于壟斷與封鎖。
硅基勞動(dòng)力賦能各行各業(yè)。
據(jù)了解,硅基智能已經(jīng)在日本、韓國(guó)、美國(guó)等市場(chǎng)展開(kāi)布局,未來(lái)將繼續(xù)推動(dòng)數(shù)字人技術(shù)全球普及,幫助更多行業(yè)實(shí)現(xiàn)智能化轉(zhuǎn)型。司馬華鵬提到,硅基智能將繼續(xù)加快與高校合作,吸引更多優(yōu)秀AI人才,共同推動(dòng)技術(shù)創(chuàng)新和產(chǎn)業(yè)發(fā)展?!伴_(kāi)源不是失守,而是領(lǐng)跑。我們要讓世界看到,中國(guó)AI有底氣、有實(shí)力,也有擔(dān)當(dāng)。”他說(shuō)。