2025-03-19 簡訊 : SAKANA稱其人工智能生成的論文通過同行評審


頭條


SAKANA稱其人工智能生成的論文通過同行評審

https://techcrunch.com/2025/03/12/sakana-claims-its-ai-paper-passed-peer-review-but-its-a-bit-more-nuanced-than-that/

日本人工智能初創(chuàng)公司Sakana用其AI Scientist - v2生成了一篇被ICLR研討會接受的論文,但因透明度問題在初步評審后撤回。盡管Sakana強調(diào)了人工智能的潛力于樟,但批評者稱人類判斷力至關(guān)重要肢娘,且研討會較高的接受率促成了論文被接受雄可。懷疑論者仍持謹(jǐn)慎態(tài)度固惯,強調(diào)人工智能的技術(shù)缺陷,以及制定規(guī)范以防止科學(xué)評審過程受影響的必要性疑务。

谷歌助手將被Gemini取代儿奶。

https://blog.google/products/gemini/google-assistant-gemini-mobile/

谷歌助手正過渡到Gemini框往,這是一款更個性化、由人工智能驅(qū)動的助手闯捎,旨在與應(yīng)用程序和服務(wù)集成椰弊,同時利用生成式人工智能。

谷歌對美國人工智能政策的回應(yīng)

https://blog.google/outreach-initiatives/public-policy/google-us-ai-action-plan-comments/

谷歌勾勒出其對美國人工智能政策的愿景瓤鼻,主張對人工智能基礎(chǔ)設(shè)施進行投資秉版,簡化政府采用流程,并制定利于創(chuàng)新的國際標(biāo)準(zhǔn)茬祷,以維持其在人工智能領(lǐng)域的領(lǐng)先地位清焕。


研究


無需歸一化的Transformer

https://arxiv.org/abs/2503.10622

大多數(shù)Transformer模型都通過層歸一化進行歸一化處理。這可以看作是將模型歸一化到一個球體上牲迫。不過耐朴,如果你精心設(shè)置雙曲正切函數(shù),就可以在保持穩(wěn)定性的同時省去層歸一化盹憎。這現(xiàn)在就相當(dāng)于歸一化到一個超立方體上。

DILOCO的規(guī)模定律

https://arxiv.org/abs/2503.09799

DeepMind發(fā)表了一篇論文铐刘,詳細(xì)介紹了強大的跨數(shù)據(jù)中心訓(xùn)練算法DiLoCo的擴展定律陪每。這些定律顯示了即使跨大洲同步梯度,模型訓(xùn)練也能有多穩(wěn)定。

用Whisper進行說話者識別

https://arxiv.org/abs/2503.10446v1

WSI利用聯(lián)合損失優(yōu)化檩禾,將Whisper ASR編碼器重新用于多語言說話人識別挂签。在識別不同語言和環(huán)境中的說話人方面,它的表現(xiàn)優(yōu)于Pyannote盼产、ECAPA TDNN和Xvector饵婆。


工程


視覺推理模型(GitHub 倉庫)

https://github.com/groundlight/r1_vlm

用于訓(xùn)練視覺語言模型(VLMs)以提升基礎(chǔ)能力和推理能力的工具包。

優(yōu)化勞動力學(xué)習(xí)智能體(GitHub 倉庫)

https://github.com/camel-ai/owl

OWL是一個智能體框架戏售,看似合理且性能不錯侨核。它能實現(xiàn)簡單的組合,甚至能復(fù)制一些閉源智能體的功能灌灾。

用于大語言模型(LLM)檢索的分層檢索增強生成(RAG)(GitHub 倉庫)

https://github.com/hhy-huang/HiRAG

HiRAG引入了一種基于分層知識的檢索增強生成(RAG)方法搓译,可提高特定領(lǐng)域任務(wù)中的語義理解和索引能力。


其他


LUMA用于多模態(tài)模型的全新預(yù)訓(xùn)練方法

https://lumalabs.ai/news/inductive-moment-matching

Luma首席科學(xué)家宋佳明(他創(chuàng)建了最早的擴散模型加速算法)推出了歸納矩匹配(IMM)——一種新的多模態(tài)預(yù)訓(xùn)練方法锋喜,該方法樣本質(zhì)量更高些己,效率提高了10倍,超越了擴散模型嘿般。

Thunder Kittens

https://hazyresearch.stanford.edu/blog/2025-03-15-tk-blackwell

ThunderKittens是用于編寫高效能CUDA內(nèi)核的強大且簡單的抽象工具段标。本文探討如何將該框架用于英偉達最新的布萊克韋爾系列GPU。主要區(qū)別在于從數(shù)據(jù)流的角度去思考炉奴。

開放模型真的開放嗎逼庞?

https://techcrunch.com/2025/03/14/open-ai-model-licenses-often-carry-concerning-restrictions/

許多被標(biāo)注為“開源”的人工智能模型都有嚴(yán)格的許可條款。谷歌新推出的Gemma 3模型以及Meta類似的發(fā)布產(chǎn)品引發(fā)了對商業(yè)限制的擔(dān)憂盆佣,這可能會影響依賴這些技術(shù)的小公司往堡。

亞馬遜通用人工智能負(fù)責(zé)人稱,亞馬遜沒有任何部門能“不受”人工智能影響

https://techcrunch.com/2025/03/03/no-part-of-amazon-is-unaffected-by-ai-says-its-head-of-agi/

亞馬遜通用人工智能副總裁維沙爾·沙瑪證實共耍,人工智能已融入亞馬遜網(wǎng)絡(luò)服務(wù)(AWS)虑灰、機器人技術(shù)和Alexa中,凸顯了該公司廣泛的人工智能部署痹兜。

癌癥檢測全景挑戰(zhàn)

https://links.tldrnewsletter.com/BjcMaW

PANORAMA研究是一項國際項目穆咐,旨在評估人工智能模型和放射科醫(yī)生在通過CT增強掃描檢測胰腺癌方面的表現(xiàn)。

人工智能公司效仿DeepSeek字旭,用“蒸餾”技術(shù)打造更便宜的模型

https://arstechnica.com/ai/2025/03/ai-firms-follow-deepseeks-lead-create-cheaper-models-with-distillation/

像OpenAI对湃、微軟和Meta這樣的領(lǐng)先人工智能公司,正通過用 “教師” 大語言模型(LLM)訓(xùn)練較小系統(tǒng)的方式遗淳,利用 “蒸餾” 來創(chuàng)建更具成本效益的模型拍柒。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市屈暗,隨后出現(xiàn)的幾起案子拆讯,更是在濱河造成了極大的恐慌脂男,老刑警劉巖,帶你破解...
    沈念sama閱讀 223,207評論 6 521
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件种呐,死亡現(xiàn)場離奇詭異宰翅,居然都是意外死亡,警方通過查閱死者的電腦和手機爽室,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 95,455評論 3 400
  • 文/潘曉璐 我一進店門汁讼,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人阔墩,你說我怎么就攤上這事嘿架。” “怎么了戈擒?”我有些...
    開封第一講書人閱讀 170,031評論 0 366
  • 文/不壞的土叔 我叫張陵眶明,是天一觀的道長。 經(jīng)常有香客問我筐高,道長搜囱,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 60,334評論 1 300
  • 正文 為了忘掉前任柑土,我火速辦了婚禮蜀肘,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘稽屏。我一直安慰自己扮宠,他們只是感情好,可當(dāng)我...
    茶點故事閱讀 69,322評論 6 398
  • 文/花漫 我一把揭開白布狐榔。 她就那樣靜靜地躺著坛增,像睡著了一般。 火紅的嫁衣襯著肌膚如雪薄腻。 梳的紋絲不亂的頭發(fā)上收捣,一...
    開封第一講書人閱讀 52,895評論 1 314
  • 那天,我揣著相機與錄音庵楷,去河邊找鬼罢艾。 笑死,一個胖子當(dāng)著我的面吹牛尽纽,可吹牛的內(nèi)容都是我干的咐蚯。 我是一名探鬼主播,決...
    沈念sama閱讀 41,300評論 3 424
  • 文/蒼蘭香墨 我猛地睜開眼弄贿,長吁一口氣:“原來是場噩夢啊……” “哼春锋!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起差凹,我...
    開封第一講書人閱讀 40,264評論 0 277
  • 序言:老撾萬榮一對情侶失蹤看疙,失蹤者是張志新(化名)和其女友劉穎豆拨,沒想到半個月后直奋,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體能庆,經(jīng)...
    沈念sama閱讀 46,784評論 1 321
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 38,870評論 3 343
  • 正文 我和宋清朗相戀三年脚线,在試婚紗的時候發(fā)現(xiàn)自己被綠了搁胆。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 40,989評論 1 354
  • 序言:一個原本活蹦亂跳的男人離奇死亡邮绿,死狀恐怖渠旁,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情船逮,我是刑警寧澤顾腊,帶...
    沈念sama閱讀 36,649評論 5 351
  • 正文 年R本政府宣布,位于F島的核電站挖胃,受9級特大地震影響杂靶,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜酱鸭,卻給世界環(huán)境...
    茶點故事閱讀 42,331評論 3 336
  • 文/蒙蒙 一吗垮、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧凹髓,春花似錦烁登、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,814評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至赌躺,卻和暖如春狼牺,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背寿谴。 一陣腳步聲響...
    開封第一講書人閱讀 33,940評論 1 275
  • 我被黑心中介騙來泰國打工锁右, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人讶泰。 一個月前我還...
    沈念sama閱讀 49,452評論 3 379
  • 正文 我出身青樓咏瑟,卻偏偏與公主長得像,于是被迫代替她去往敵國和親痪署。 傳聞我的和親對象是個殘疾皇子码泞,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 45,995評論 2 361

推薦閱讀更多精彩內(nèi)容