“鎮(zhèn)館之寶”支付寶智能助理亮相展區(qū),現(xiàn)場體驗人人可享的AI應用

大模型進入應用時代,螞蟻集團將展出基于百靈大模型研發(fā)的最新AI應用,打造人人可享的AI。在這里,您將看到螞蟻大模型全棧技術布局大圖,以及螞蟻AI在各行各業(yè)的應用。主要包括AI生活管家“支付寶智能助理”,以及AI金融管家和AI就醫(yī)助理等,參會觀眾可沉浸式體驗AIGC應用。

AI生活管家「支付寶智能助理」

首次展示的「支付寶智能助理」基于螞蟻集團自研的百靈大模型進行研發(fā),致力于成為人人可用的AI生活管家。它依托支付寶這一國內最大的服務型App,用戶在首頁下拉就能喚起,問一問就能獲得出行、健康、政務、金融等領域的超8000項數(shù)字生活服務,不僅“有腦有嘴能對話”,更是“有手有腳能辦事”。

同時,伴隨AI走向產業(yè)共建,支付寶智能助理也將成為專業(yè)智能體生態(tài)的平臺入口。用戶通過與智能助理的對話,就能一鍵連接生活、金融、醫(yī)療等垂直行業(yè)的AI智能體,獲得更專業(yè)豐富的服務。

互動體驗1:WAIC大會智能助理

本屆世界人工智能大會,支付寶創(chuàng)造性地將AI融入展會服務,打造“AI逛展搭子”,為觀眾提供智能觀展的新體驗。觀眾抵達會場后,在支付寶首頁下拉,便能喚起智能助理,獲取本屆大會的核心亮點、場館導覽、論壇議程等資訊,還能快速預定酒店、呼叫網(wǎng)約車、搜尋附近的餐館及充電寶、定制本地游玩攻略等,AI助理在手,逛展不發(fā)愁。

AI技術的創(chuàng)新應用,不僅提升了公眾的看展體驗,更解決了吃、住、行、游、購、娛等展會之外的多元需求。

互動體驗2:讓AI替你點單,支付寶智能助理與咖啡機器人“夢幻聯(lián)動

為了讓支付寶智能助理的服務能力得到具象化展示,螞蟻展區(qū)搭建了智能助理與咖啡機器人的“夢幻聯(lián)動”。在展覽現(xiàn)場你可以在螞蟻咖啡體驗店,對AI助理大屏說“幫我點一杯熱美式”,咖啡機將接受智能助理信息開始制作,1分鐘后就能收到通過智能助理下單、機器人制作的一杯咖啡,真正實現(xiàn)“有手有腳能辦事”。

AI點單這一新功能,已在支付寶App開啟測試,首批支持星巴克、瑞幸、喜茶、霸王茶姬、蜜雪冰城等11個茶飲品牌的支付寶小程序。用戶通過支付寶智能助理下達指令,比如“我想點一杯星巴克的中杯冰拿鐵”,AI便會進入小程序自動下單,用戶確認并付款后,就能到附近的線下門店取到咖啡。

(支付寶智能助理點咖啡效果圖,以實際為準)

支付寶AI點單的功能,并非簡單通過調用接口來實現(xiàn),而是基于原生多模態(tài)大模型的技術,讓智能助理具備屏幕感知與仿真執(zhí)行能力,就像讓AI有了“眼睛”和“手腳”,過去用戶多次點擊才能完成的操作,未來只需要一句話,AI就能幫你辦好。據(jù)支付寶介紹,這一名為ACT(Transformer for Adctions)的智能服務技術,目前仍在測試中,未來將持續(xù)調整優(yōu)化,并在快餐點單、醫(yī)院掛號、門票預定等場景中落地應用。

AI金融管家

金融管家,可以幫助用戶用一部手機就獲得高質量的行情解讀、持倉分析、投教陪伴等個性化的服務,降低金融專業(yè)服務的獲得門檻。目前已經(jīng)服務了4300萬用戶,而且支小寶的服務水平已經(jīng)趨近于真人行業(yè)專家,未來將讓每個投資者都擁有一個「私人理財專家」。

金融管家效果圖,以實際展出為準

AI就醫(yī)助理

AI就醫(yī)助理是利用AI大模型、數(shù)字人等技術,助力醫(yī)療機構為患者的提供覆蓋就醫(yī)前、中、后的“AI陪伴就診”服務。此前,螞蟻聯(lián)合浙江衛(wèi)健委推出了全國首個AI就醫(yī)助理“安診兒”, 運用了亞運同款數(shù)字人技術,讓每個患者在就診全程都有貼心的數(shù)字陪診員。這一方案也正在全國醫(yī)院、醫(yī)療機構落地。

“安診兒”效果圖

此外,螞蟻還展示了研發(fā)助手CodeFuse、遙感大模型及大雁系統(tǒng)、AI創(chuàng)意海報、AI表情包、AI靈活就業(yè)等不同場景的應用,服務普通人生活的方方面面。

在沉浸式的數(shù)字人中心,游客可和全國首個陪診數(shù)字人安診兒、政務數(shù)字人小贛事、10億人參與的亞運數(shù)字人、央視數(shù)字主播等會面,體驗虛實結合的數(shù)字生活服務,觀賞虛擬人小藝帶來的唱跳表演。

數(shù)字人中心效果圖

AI鑒真產品首次亮相 共建安全可信的AI

AI鑒真中心

如果說AI的A面是應用,那么它的B面就是反欺詐和AI安全。用AI打敗AI,也從技術想象走到了真實場景里。

在螞蟻集團“AI鑒真中心”,將展出包括多模態(tài)AI鑒真、“諜影重重”深度偽造(Deepfake)互動,為普通人揭開“聲音模擬、AI換臉”的真相,在展區(qū)現(xiàn)場來一把“人機對抗”,進一步了解到反深偽技術的發(fā)展,守護人們的安全。

互動1:AIGC鑒真

該互動模擬了蟻天鑒AIGC檢測和證照深度合成檢測兩大能力,對抗聲音模擬、證件偽造等AI濫用風險場景的過程?!腹舳恕鼓M了常見偽造手法,涵蓋證照、視頻等多樣化素材可供選擇,可對「防御端」檢測模型進行攻擊。該產品依托生成模型構建TB級樣本,實時攻防對抗,快速精準鑒別圖像、視頻、音頻、文本內容的真?zhèn)尾⑿纬蓹z測報告,從而幫助用戶識別和評估相關素材是否被篡改或深度生成,防御AI技術的潛在濫用。

互動方式:現(xiàn)場觀眾在裝置前,可以選擇互動裝置上的證照、視頻等多樣化素材,該互動會先對這些素材做一番偽造模擬生成;上述步驟完成之后,該互動能對上述偽造的素材(如圖像、視頻、音頻、憑證)快速進行精準鑒別,并形成檢測報告。

多模態(tài)鑒真效果圖

互動2:“諜影重重”深度偽造(Deepfake)互動——“AI換臉”對抗

Deepfake,指的是基于深度學習算法,從大量的視頻和圖像數(shù)據(jù)中學習,偽造出逼真的面部動畫和語音。

Deepfake 不僅增加了公眾識別視頻真?zhèn)蔚碾y度,也進一步滋生了詐騙、色情等違法犯罪活動的風險和隱患。 在2024年世界人工智能大會上,螞蟻集團特設“諜影重重之 Deepfake 互動展”,用戶上傳一張照片就可以生成仿真視頻。通過場景化的體驗,讓觀眾了解Deepfake的使用場景和領先的反深偽技術。

ZOLOZ作為螞蟻數(shù)科的安全科技品牌,搭建了端云一體的技術體系,會對攝像頭狀態(tài)、設備及網(wǎng)絡環(huán)境、輸入圖像等進行嚴格審查,確保軟硬件環(huán)境安全無風險。此外,ZOLOZ會通過GAN模型,生成超 30 萬測試樣本并進行判別訓練,每個月還會對其進行超過20000次的攻防測評,模擬上百種偽造攻擊情況,以保持技術的領先性。

互動方式:用戶上傳一張自己的照片,通過AI換臉合成一張?zhí)摷偃四樢曨l,嘗試使用合成后的視頻去刷臉,該互動能夠鑒別出該視頻是否是AI合成,進而阻止風險行動。

深度偽造互動效果圖

大會首發(fā)大模型安全產品“蟻天鑒2.0”亮相展區(qū)

本次大會首發(fā)的國內首個大模型安全一體化解決方案“蟻天鑒”2.0屆時將在展區(qū)展示,觀眾能第一時間參觀了解這項產品的最新能力。

蟻天鑒是業(yè)內首個實現(xiàn)產業(yè)級應用的大模型安全評測與防御一體化解決方案,可保障大模型的生產和使用更加安全、可控、可靠。目前,“蟻天鑒”的檢測與防御產品已開放給20余家外部機構和企業(yè)使用,曾被評為2023年世界人工智能大會“鎮(zhèn)館之寶”。隨著AI技術向大模型和Agent范式發(fā)展,蟻天鑒升級到2.0版本:

1)在大模型安全評測上:打造了大模型安全評測“智能體Agent”,并新增大模型X光、大模型基礎設施檢測等兩大評測能力。蟻天鑒2.0依托“智能體”,針對大模型的幻覺、算法和軟件系統(tǒng)安全及AIGC濫用的危害,提供全方位智能化的自動化評測體系,漸進式挖掘大模型潛在的弱點和漏洞。目前,蟻天鑒2.0有超300萬高質量評測題庫,支持50萬/日飽和式誘導攻擊,實現(xiàn)1工作日內完成評測,全流程自動化率>99%。

新增的兩項評測能力:一是「大模型X-ray」,即大模型X光??舍槍Υ竽P偷膬仍谏窠?jīng)元進行X光掃描來做探查和判斷,讓研究人員了解大模型內部在發(fā)生什么、定位可能引發(fā)風險的神經(jīng)元、并進行編輯修正,在模型內部治理幻覺,實現(xiàn)從源頭識別和抑制風險。二是「大模型基礎設施評測」。從攻擊者視角出發(fā),深入掃描模型算法組件及模型軟件系統(tǒng),可及時準確發(fā)現(xiàn)大模型供應鏈及運行環(huán)境安全問題,保障云到端的應用安全可控。

2)面對新技術的濫用場景,蟻天鑒還推出了「AI鑒真」解決方案,支持多模態(tài)內容真實性和深度偽造檢測,可快速精準鑒別圖像、視頻、音頻、文本內容的真?zhèn)?,有效應對AI換臉、聲音模擬、證件偽造等各類深度偽造風險場景。圖像識別準確率99.9%達到行業(yè)最高優(yōu)秀級別(信通院評測)。

螞蟻集團是國內較早布局大模型安全的廠商。蟻天鑒除了大模型安全評測,還提供大模型安全防御方案。在大模型安全防御上,蟻天鑒2.0構建了“內置+外掛”雙重防御護欄,在提問環(huán)節(jié)做預防,對回答內容進行風險過濾,保障其應用安全。

大模型研發(fā)前沿技術

大模型從智能涌現(xiàn)到應用涌現(xiàn)實現(xiàn)人人可得,需要解決專業(yè)、安全、可信等問題,并布局關鍵技術。本次會展中,螞蟻展示了應對大模型大規(guī)模應用背后的系列關鍵技術。

多模態(tài):讓大模型能看能聽也能說,像人一樣感知和交互

本次WAIC期間,螞蟻百靈大模型多模態(tài)能力全面提升——它能“看”會“聽”,能“說”會“畫”,可支持音、視、圖、文等多模態(tài)理解與生成,可以讓大模型更像人一樣感知和互動,支撐智能體體驗升級,其能力未來將應用在支付寶智能助理等多個AI智能體。

百靈大模型多模態(tài)能力,在中文圖文理解MMBench-CN評測集上達到GPT-4o水平,在信通院多模態(tài)安全能力評測達到優(yōu)秀級(最高),具備支持規(guī)?;瘧玫哪芰Γ苤С諥IGC、圖文對話、視頻理解、數(shù)字人等一系列下游任務。

螞蟻集團有著豐富的應用場景,百靈大模型的多模態(tài)能力,也已被應用在支付寶智能助理、搜索推薦、互動娛樂等場景。在生活服務,螞蟻集團利用多模態(tài)能力實現(xiàn)了ACT技術,并應用在支付寶智能助理上,可輕松調起各類服務。在醫(yī)療領域為用戶實現(xiàn)復雜任務的操作,可以對超過100多種復雜的醫(yī)學檢驗檢測報告進行識別和解讀,還可以檢測毛發(fā)健康和脫發(fā)情況,對治療提供輔助。

智能認知決策技術與平臺:為大模型裝上可信大腦

螞蟻科技集團與浙江大學的【智能認知決策技術與平臺】,實現(xiàn)了對大模型、圖學習、知識圖譜、運籌優(yōu)化技術的融合和突破,大幅提升了AI的認知、推理和決策能力,特別是解決了AI落地嚴謹產業(yè)中專業(yè)知識薄弱、復雜決策能力不足的關鍵挑戰(zhàn),為大模型裝上可信大腦!目前已在醫(yī)療、政務、金融等行業(yè)機構實現(xiàn)規(guī)?;瘧?。該技術平臺也已獲得了2024WAIC的SAIL獎TOP30。

“隱語cloud”大模型密算平臺:讓大模型更安全地獲取專業(yè)領域數(shù)據(jù)

大模型向下扎根深入行業(yè),必須要破解高質量數(shù)據(jù)供給的挑戰(zhàn)。當下,高質量數(shù)據(jù)供給和安全流通,成為大模型進入垂直產業(yè)應用的首要挑戰(zhàn)。其一,行業(yè)大模型要獲得解決專業(yè)問題的能力,首先要經(jīng)過數(shù)量充足、質量高的專業(yè)數(shù)據(jù)訓練。然而,專業(yè)數(shù)據(jù)往往分散在不同的機構、企業(yè)中,并且由于價值大、保密要求高,難以流動。此外,在企業(yè)、大模型廠商和用戶之間存在信任壁壘,企業(yè)擔心數(shù)據(jù)對外泄露,大模型廠商擔心模型資產安全,用戶擔心個人數(shù)據(jù)和隱私風險。

現(xiàn)階段大模型在垂直行業(yè)應用時,許多企業(yè)通過私有化部署來應對數(shù)據(jù)安全挑戰(zhàn),這不僅增加企業(yè)的運維和服務成本,也影響對外服務的效率和質量。對行業(yè)的發(fā)展來說,私有化方案不利于多方數(shù)據(jù)跨領域、跨行業(yè)高效融合,無法進一步激發(fā)大模型的能力。

在本次大會期間,螞蟻集團“隱語cloud”大模型密算平臺將對外發(fā)布?!半[語Cloud”大模型密算平臺,通過軟硬件結合的可信隱私計算技術,在大模型托管和大模型推理等環(huán)節(jié)實現(xiàn)數(shù)據(jù)密態(tài)流轉,保護模型資產、數(shù)據(jù)安全和用戶隱私。7月5日下午,浙江螞蟻密算科技有限公司CEO王磊將在《隱私計算:助力大模型與數(shù)據(jù)可信融合發(fā)展》分論壇發(fā)布該產品,并體系化地分享這套服務的技術思路,以及產品特點。

此外,圍繞大模型可靠、經(jīng)濟、易用的三大問題,螞蟻展示了在大模型領域研發(fā)重點:包括1)大模型應用的可信框架,實現(xiàn)行業(yè)規(guī)模應用;2)如何讓大模型瘦身,在APP上讓大模型跑起來;3)綠色計算為大模型降本增效;4)ACT讓大模型觸手可及,提升易用性。

與此同時,盡管大模型催生了新一輪技術創(chuàng)新與產業(yè)變革,與之而來的安全可信問題不容忽視。在科技倫理展區(qū),您將了解螞蟻集團科技倫理的建設工作。螞蟻集團從 2015 年就積極投入可信 AI 的技術研究。圍繞「安全、合規(guī)、可控、可靠」的目標,目前螞蟻集團建立了大模型綜合安全治理體系,未來將保持人力資源和算力資源的持續(xù)投入、高強度投入,加強大模型安全治理,目前大模型倫理建設人員占整體大模型技術人員的將近 20%,未來將繼續(xù)保持高水平和高強度的投入。

在展區(qū)數(shù)字技術出海模塊,您還可近距離了解螞蟻數(shù)科服務一帶一路的數(shù)字化升級案例,OceanBase中國數(shù)據(jù)庫服務全球。

分享到

xiesc

相關推薦