91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

商湯科技正式開源空間智能模型日日新SenseNova-SI-1.3

商湯科技SenseTime ? 來源:商湯科技SenseTime ? 2026-02-10 14:12 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

商湯科技正式開源空間智能模型日日新SenseNova-SI-1.3,在空間測量、視角轉(zhuǎn)換、綜合推理等核心任務(wù)中展現(xiàn)出顯著提升,另外對比之前的版本增強(qiáng)了回答簡答題的能力。

在集成多項(xiàng)權(quán)威空間智能榜單的綜合評測平臺EASI上,SenseNova-SI-1.3綜合性能超越Gemini-3-Pro,均分?jǐn)孬@EASI-8(八個(gè)權(quán)威空間智能榜單的混合評測)標(biāo)準(zhǔn)第一,在多個(gè)高難度空間任務(wù)(尤其是視角轉(zhuǎn)換)中表現(xiàn)優(yōu)異。

5d1a9928-032b-11f1-90a1-92fbcf53809c.png

刁鉆考題驗(yàn)證:SenseNova-SI-1.3

精準(zhǔn)突破空間智能核心難點(diǎn)

EASI-8包含一系列專門考察空間理解能力的高難度測試題,讓Gemini-3-Pro等模型都頻頻踩坑。那么SenseNova-SI-1.3表現(xiàn)如何呢?(下列問題在測試模型時(shí)使用的原題為英文,為便于讀者理解翻譯為中文)。

題目要求統(tǒng)計(jì)兩張照片中建筑模型的總數(shù)量,核心難點(diǎn)是理解兩張圖的對應(yīng)關(guān)系,以此避免遮擋漏數(shù)和重復(fù)多數(shù)。圖2視角下顯現(xiàn)出圖1中被遮擋的深灰色建筑,且部分模型在兩圖中重復(fù)出現(xiàn)。Gemini-3-Pro未完全去重,誤數(shù)為6個(gè);SenseNova-SI-1.3則給出“4 個(gè)”的準(zhǔn)確答案。

題目給出兩張書房局部照片,已知iMac 位于房間北部,詢問學(xué)生寫作業(yè)區(qū)域的方位。需先理解兩張圖片屬于同一空間,再通過視覺線索拼接場景。Gemini-3-Pro誤判學(xué)習(xí)區(qū)在西側(cè);SenseNova-SI-1.3精準(zhǔn)定位 “西北角”,完全符合空間邏輯。

題目要求以“未戴眼鏡男士的自身視角” 判斷身旁戴眼鏡男士的方位,考察“參照系轉(zhuǎn)換” 能力,模型很容易以“觀察者視角”來判斷方向。Gemini-3-Pro就誤選了“右邊”;SenseNova-SI-1.3則能正確給出“左邊” 的正確答案。

題目給出粉色瓶子前、后、左、右4張照片,詢問圖4角度下瓶子左邊物體。這道題需整合多視角線索重構(gòu)房間全局布局,再切換至目標(biāo)視角判斷方位—— 第4張照片中瓶子左側(cè)完全處于視覺盲區(qū),僅能通過前3張圖中的窗戶、床、衣柜等線索還原空間關(guān)系。Gemini-3-Pro誤選 “窗戶和藍(lán)色窗簾”,SenseNova-SI-1.3精準(zhǔn)鎖定正確答案 “衣柜和門”。

以雙層巴士與公交站的場景為題,需避免陷入“英國巴士靠左行駛,因此靠站的是左側(cè)”的常識陷阱,而是通過實(shí)際的視覺畫面判斷方位。Gemini-3-Pro誤判 “左側(cè)” 為答案;而 SenseNova-SI-1.3則準(zhǔn)確理解“右側(cè)” 為正確答案。

空間智能是極其獨(dú)特的多模態(tài)能力

5f91b5f6-032b-11f1-90a1-92fbcf53809c.png

Core Knowledge Deficits in Multi-Modal Language Models (2025)發(fā)現(xiàn)視角轉(zhuǎn)換任務(wù)與其它多模態(tài)任務(wù)的相關(guān)性(紅框內(nèi))呈藍(lán)色,即代表相關(guān)性較低

一篇2025年發(fā)表于機(jī)器學(xué)習(xí)頂會ICML的論文《Core Knowledge Deficits in Multi-Modal Language Models》揭示了一個(gè)有趣的發(fā)現(xiàn):視角轉(zhuǎn)換(Perspective)和所有傳統(tǒng)多模態(tài)模型的能力的相關(guān)性均異常得低,這代表主流算法路徑可能不是空間智能的形成的有效路徑,這也解釋了為什么領(lǐng)先的多模態(tài)大模型在空間智能相關(guān)的任務(wù)上表現(xiàn)不佳。

5ff72f8a-032b-11f1-90a1-92fbcf53809c.png

Core Knowledge Deficits in Multi-Modal Language Models (2025)發(fā)現(xiàn)增大模型尺寸對提升視角轉(zhuǎn)換任務(wù)效果不佳

這篇論文也發(fā)現(xiàn),空間智能似乎存在反尺度效應(yīng)的現(xiàn)象:更大的模型并不能更好地解決空間智能任務(wù)。另外,在EASI的官方報(bào)告中也可以找到相似的描述,指出視角轉(zhuǎn)換任務(wù)(Perspective-taking)依然是最具挑戰(zhàn)的基礎(chǔ)能力之一。

空間智能需要全新的學(xué)習(xí)范式。

從3D世界數(shù)據(jù)匱乏

到空間智能的尺度效應(yīng)

空間智能的核心——視角轉(zhuǎn)換任務(wù)被拆解成了三個(gè)關(guān)鍵步驟:建立跨視角關(guān)聯(lián)、理解視角移動、想象視角變換,并圍繞著解決這三個(gè)基礎(chǔ)能力構(gòu)造大量訓(xùn)練數(shù)據(jù)

學(xué)術(shù)界現(xiàn)有數(shù)據(jù)集多著重于目標(biāo)識別與場景理解,模型往往停留在圖像模式匹配階段,難以形成穩(wěn)定的空間理解能力?;谶@一洞察,想要解決空間智能尤其是視角轉(zhuǎn)換任務(wù),簡單擴(kuò)充相關(guān)數(shù)據(jù)規(guī)模是不夠的。

為了解決這一根本問題,我們將視角轉(zhuǎn)換看作從二維視覺信息邁向三維空間關(guān)系理解的關(guān)鍵橋梁,并將其拆解為遞進(jìn)的能力階段,由易到難、難度遞增的三個(gè)任務(wù)層級(建立跨視角關(guān)聯(lián)、理解視角移動、想象視角變換),并構(gòu)造大量且層次分明的訓(xùn)練數(shù)據(jù),使模型建立完備的空間理解能力。

同時(shí),在數(shù)據(jù)規(guī)模持續(xù)擴(kuò)大的過程中,SenseNova-SI團(tuán)隊(duì)挖掘并重組多視角學(xué)術(shù)數(shù)據(jù)資源,將許多過去未被充分利用的標(biāo)注轉(zhuǎn)化為視角轉(zhuǎn)換訓(xùn)練數(shù)據(jù)。例如,多目關(guān)聯(lián)數(shù)據(jù)集MessyTable提供了高物體復(fù)雜度場景,其中跨視角物體一致性信息與精確的相機(jī)位姿標(biāo)注,可用于訓(xùn)練物體對應(yīng)與相機(jī)運(yùn)動推理能力;而部分室內(nèi)場景掃描數(shù)據(jù)如CA-1M中包含物體自身朝向標(biāo)注的樣本,則被用于補(bǔ)充模型進(jìn)行視角轉(zhuǎn)換與想象所需的稀缺數(shù)據(jù)。這種跨數(shù)據(jù)源的重組與再利用,使積累大量豐富而系統(tǒng)的空間理解數(shù)據(jù)成為可能。

空間智能的尺度效應(yīng):SenseNova-SI在視角轉(zhuǎn)換任務(wù)上超越GPT-5

大規(guī)模高質(zhì)量的空間智能數(shù)據(jù)在SenseNova-SI團(tuán)隊(duì)的手中最終驗(yàn)證了空間智能的尺度效應(yīng):SenseNova-SI的8B參數(shù)基模型最終超越了強(qiáng)閉源模型如GPT-5,而2B參數(shù)的小模型也表現(xiàn)不俗,在相同數(shù)據(jù)規(guī)模下,甚至超越了紐約大學(xué)的Cambrian-S和字節(jié)的VST兩個(gè)7B參數(shù)的模型。

只在Ego-Exo4D上訓(xùn)練第一/第三人稱視角匹配的模型可以大幅提升(+90.4%)在MMSI的2D迷宮導(dǎo)航問題上的表現(xiàn)

更有趣的是,團(tuán)隊(duì)在研究中似乎發(fā)現(xiàn)了一些智能涌現(xiàn)的先兆:一些看起來毫無關(guān)聯(lián)的但也許細(xì)想之下有底層能力聯(lián)系的任務(wù)可以協(xié)同發(fā)展。另外,團(tuán)隊(duì)也發(fā)現(xiàn)在視角轉(zhuǎn)換任務(wù)上訓(xùn)練的模型也可以增強(qiáng)如心智重建(Mental Reconstruction)、綜合空間推理(Comprehensive Reasoning)等能力。

商湯引領(lǐng)空間智能普惠生態(tài)

SenseNova-SI-1.3模型的升級發(fā)布背后,是商湯科技始終致力于打破技術(shù)壁壘,讓頂尖空間智能技術(shù)惠及更多開發(fā)者與企業(yè)。

對科研人員而言,SenseNova-SI-1.3通過在空間智能上驗(yàn)證數(shù)據(jù)尺度效應(yīng)提供了一個(gè)與現(xiàn)有基座模型完全兼容,但又長于空間智能的強(qiáng)力預(yù)訓(xùn)練模型和基線(SenseNova-SI已被VSI-Bench, MMSI-Bench等權(quán)威榜單官方收錄),可以直接在其之上設(shè)計(jì)創(chuàng)新算法或者續(xù)訓(xùn),推動空間智能向人類水平邁進(jìn);

對企業(yè)來說,可直接基于SenseNova-SI-1.3快速落地應(yīng)用,縮短研發(fā)周期、降低技術(shù)門檻;

對普通用戶而言,未來將有更多搭載先進(jìn)空間智能的產(chǎn)品走進(jìn)生活——從智能家電到自動駕駛,從工業(yè)機(jī)器人到教育設(shè)備,都將更懂 “空間邏輯”、更貼合實(shí)際需求。

SenseNova-SI在具身任務(wù)上的探索了空間智能的重要性

開源地址

SenseNova-SI模型家族(點(diǎn)擊閱讀原文跳轉(zhuǎn)):

https://huggingface.co/collections/sensenova/sensenova-si

SenseNova-SI開源代碼:

https://github.com/OpenSenseNova/SenseNova-SI

Discord 社區(qū)邀請碼:

https://discord.gg/WBzH62bk

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 開源
    +關(guān)注

    關(guān)注

    3

    文章

    4200

    瀏覽量

    46107
  • 模型
    +關(guān)注

    關(guān)注

    1

    文章

    3749

    瀏覽量

    52089
  • 商湯科技
    +關(guān)注

    關(guān)注

    8

    文章

    608

    瀏覽量

    37546

原文標(biāo)題:綜合評分登頂八大榜單!商湯開源SenseNova-SI-1.3,空間智能尺度效應(yīng)突破

文章出處:【微信號:SenseTime2017,微信公眾號:商湯科技SenseTime】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    商湯技正開源多模態(tài)自主推理模型SenseNova-MARS

    今日,商湯正式開源多模態(tài)自主推理模型 SenseNova-MARS(8B/32B 雙版本),其在多模態(tài)搜索與推理的核心基準(zhǔn)測試中以 69.74 分超越Gemini-3-Pro(69.0
    的頭像 發(fā)表于 01-30 10:13 ?499次閱讀
    <b class='flag-5'>商湯</b>科<b class='flag-5'>技正</b>式<b class='flag-5'>開源</b>多模態(tài)自主推理<b class='flag-5'>模型</b><b class='flag-5'>SenseNova</b>-MARS

    商湯開源SenseNova-MARS:突破多模態(tài)搜索推理天花板

    今日,商湯正式開源多模態(tài)自主推理模型 SenseNova-MARS(8B/32B 雙版本),其在多模態(tài)搜索與推理的核心基準(zhǔn)測試中以 69.74 分超越Gemini-3-Pro(69.0
    的頭像 發(fā)表于 01-29 23:53 ?148次閱讀
    <b class='flag-5'>商湯</b><b class='flag-5'>開源</b><b class='flag-5'>SenseNova</b>-MARS:突破多模態(tài)搜索推理天花板

    避繁就簡!商湯日日新模型靈性巧解數(shù)學(xué)難題,獲贊“機(jī)器的審美”

    、字節(jié)跳動,讓數(shù)學(xué)與AI同臺碰撞,開展了一場真刀真槍的“圖靈測試”。 現(xiàn)場,面對數(shù)學(xué)家拋出的難題,商湯科技“日日新”大模型在解答復(fù)分析計(jì)算積分、微分幾何證明等問題中,展示了驚人的進(jìn)化力。 在計(jì)算一個(gè)復(fù)雜的廣義積分
    的頭像 發(fā)表于 01-12 11:41 ?259次閱讀
    避繁就簡!<b class='flag-5'>商湯</b><b class='flag-5'>日日新</b>大<b class='flag-5'>模型</b>靈性巧解數(shù)學(xué)難題,獲贊“機(jī)器的審美”

    商湯科技日日新V6.5榮獲2025年多模態(tài)大模型全國第一

    近日,權(quán)威大模型評測基準(zhǔn) SuperCLUE 發(fā)布《中文多模態(tài)視覺語言模型測評基準(zhǔn)12月報(bào)告》,商湯日日新V6.5(SenseNova V6
    的頭像 發(fā)表于 01-06 14:44 ?604次閱讀
    <b class='flag-5'>商湯</b>科技<b class='flag-5'>日日新</b>V6.5榮獲2025年多模態(tài)大<b class='flag-5'>模型</b>全國第一

    商湯科技日日新Seko系列模型與寒武紀(jì)成功適配

    12月15日,商湯科技基于在生成式AI與多模態(tài)交互領(lǐng)域的技術(shù)積累,正式發(fā)布Seko2.0——行業(yè)首個(gè)多劇集生成智能體。該智能體在多劇集視頻生成的一致性方面展現(xiàn)出顯著優(yōu)勢,其背后依托的是商湯
    的頭像 發(fā)表于 12-17 14:06 ?450次閱讀

    商湯技正式發(fā)布并開源全新多模態(tài)模型架構(gòu)NEO

    商湯技正式發(fā)布并開源了與南洋理工大學(xué)S-Lab合作研發(fā)的全新多模態(tài)模型架構(gòu) —— NEO,為日日新Se
    的頭像 發(fā)表于 12-08 11:19 ?1009次閱讀
    <b class='flag-5'>商湯</b>科<b class='flag-5'>技正</b>式發(fā)布并<b class='flag-5'>開源</b>全新多模態(tài)<b class='flag-5'>模型</b>架構(gòu)NEO

    商湯日日新V6.5多模態(tài)大模型登頂全球權(quán)威榜單

    根據(jù)權(quán)威評測平臺OpenCompass多模態(tài)大模型學(xué)術(shù)榜單(Multi-modal Academic Leaderboard)最新數(shù)據(jù)顯示,商湯日日新 V6.5」(SenseNova
    的頭像 發(fā)表于 09-10 09:55 ?781次閱讀

    商湯日日新模型賦能紫光漢圖打造激光多功能一體機(jī)

    商湯日日新模型賦能紫光漢圖,為一線教師打造全新教學(xué)生產(chǎn)力。
    的頭像 發(fā)表于 08-19 15:51 ?897次閱讀
    <b class='flag-5'>商湯</b><b class='flag-5'>日日新</b>大<b class='flag-5'>模型</b>賦能紫光漢圖打造激光多功能一體機(jī)

    小米AI眼鏡×商湯日日新 商湯日日新”大模型交互平臺「商量」已探索性接入小米AI眼鏡

    程度:據(jù)國內(nèi)XR Vision報(bào)道,小米AI眼鏡首銷3天銷量或已接近5萬副,創(chuàng)下了中國AI眼鏡最快銷售紀(jì)錄。 作為小米長期生態(tài)合作伙伴,商湯日日新”大模型交互平臺「商量」已探索性接入小米AI 眼鏡,成為用戶的 “第二大腦”,幫
    的頭像 發(fā)表于 08-07 15:35 ?9546次閱讀
    小米AI眼鏡×<b class='flag-5'>商湯</b><b class='flag-5'>日日新</b> <b class='flag-5'>商湯</b>“<b class='flag-5'>日日新</b>”大<b class='flag-5'>模型</b>交互平臺「商量」已探索性接入小米AI眼鏡

    看點(diǎn):商湯日日新”擬接入小米AI眼鏡 鴻利智匯:部分產(chǎn)品已應(yīng)用于小米汽車

    給大家?guī)硪恍I(yè)界資訊: 商湯日日新”擬接入小米AI眼鏡 據(jù)商湯科技透露,作為小米長期生態(tài)合作伙伴,商湯日日新”大
    的頭像 發(fā)表于 08-07 14:47 ?995次閱讀

    商湯日日新SenseNova融合模態(tài)大模型 國內(nèi)首家獲得最高評級的大模型

    近日,中國信息通信研究院(以下簡稱“中國信通院”)完成可信AI多模態(tài)大模型首輪評估。 商湯日日新SenseNova融合模態(tài)大模型在所有
    的頭像 發(fā)表于 06-11 11:57 ?1410次閱讀

    商湯科技日日新V6大模型斬獲“雙料第一” 一項(xiàng)國內(nèi)榜首,一個(gè)全球第一

    出爐!商湯日日新 V6」(SenseNova-V6 Reasoner)憑借出色的綜合能力表現(xiàn),以62.96分的優(yōu)異成績,與Doubao-1.5-thinking-pro并列國內(nèi)第一,摘得金牌,并在
    的頭像 發(fā)表于 05-30 11:13 ?1584次閱讀
    <b class='flag-5'>商湯</b>科技<b class='flag-5'>日日新</b>V6大<b class='flag-5'>模型</b>斬獲“雙料第一” 一項(xiàng)國內(nèi)榜首,一個(gè)全球第一

    商湯科技與上海徐匯區(qū)文旅局達(dá)成合作

    近日,商湯科技與上海徐匯區(qū)文旅局達(dá)成合作,基于商湯最新AI大模型日日新SenseNova V6,打造智慧文旅新技術(shù)與應(yīng)用成果,可為游客提供擬
    的頭像 發(fā)表于 04-24 16:23 ?931次閱讀

    商湯科技日日新模型SenseNova上線聲網(wǎng)云市場

    日前,商湯科技日日新模型SenseNova即將正式上線聲網(wǎng)云市場,開發(fā)者和企業(yè)用戶可通過聲網(wǎng)的實(shí)時(shí)互動云服務(wù)進(jìn)行調(diào)用,將商湯領(lǐng)先的
    的頭像 發(fā)表于 04-08 17:24 ?1482次閱讀

    商湯日日新”融合大模型登頂大語言與多模態(tài)雙榜單

    據(jù)弗若斯特沙利文(Frost & Sullivan, 簡稱“沙利文”)聯(lián)合頭豹研究院發(fā)布的《2025年中國大模型年度評測》結(jié)果顯示:在語言和多模態(tài)核心能力測評中,商湯日日新”融合大模型
    的頭像 發(fā)表于 03-18 10:35 ?1136次閱讀