Intern-S2-Mobius:解耦知識與推理的 35B 基礎模型
Intern-S2-Mobius 論文提出了一款基於 Mobius-v0 架構的 35B 基礎模型,其核心創新在於將知識儲存與推理能力進行解耦。這種架構轉變旨在透過分離模型儲存事實與處理事實的方式,來提升可解釋性與效率。該方法提供模組化設計以應對大型語言模型日益增加的複雜性,有助於提升除錯與微調的效率。在實作層面,該模型利用 Xtuner 和 LMDe…
第 55 / 61 頁,依本站收錄時間整理(台灣時間),不代表原文發布時間。
Intern-S2-Mobius 論文提出了一款基於 Mobius-v0 架構的 35B 基礎模型,其核心創新在於將知識儲存與推理能力進行解耦。這種架構轉變旨在透過分離模型儲存事實與處理事實的方式,來提升可解釋性與效率。該方法提供模組化設計以應對大型語言模型日益增加的複雜性,有助於提升除錯與微調的效率。在實作層面,該模型利用 Xtuner 和 LMDe…
Reddit 社群提出一項思想實驗,建議僅使用 1900 年之前發表的物理文獻來訓練大型語言模型,以觀察其能否獨立推導出愛因斯坦的相對論及 E=mc² 公式。該實驗專門針對運動物體的電動力學,要求 AI 在沒有 20 世紀見識輔助的情況下,彌補經典力學與現代物理學之間的差距。這項測試旨在確定 AI 是否具備真正的發現能力,抑或僅是在既有知識上進行模式匹…
中國科學家開發出一款「讀腦」AI 模型,專注於青少年群體,透過分析大腦處理臉部表情的方式來評估情緒反應。該技術能利用神經影像標記物,識別與情緒反應及憂鬱症易感性相關的生物指標,進而提前四年預測青少年的憂鬱症風險。 這項突破為預防精神醫學帶來重大潛力,使醫療人員能在症狀完全顯現之前進行早期介入。它有望解決當前臨床中難以確定哪些預防性治療或抗憂鬱藥物對特…
分析指出,與人類設計的系統相比,AI 生成的代碼在可維護性和組合性方面往往缺乏所需的架構深度。文章強調,大型語言模型(LLM)在細微推理方面存在不足,例如難以區分關鍵錯誤狀態與次要問題。這表明人類工程師對於設計複雜、分層且易於除錯的軟體架構仍然不可或缺。LLM 被描述為非確定性且基於記號(token)的,經常對錯誤處理做出與開發者意圖不符的假設。文章使…
社群感謝貼文指出,Georgi Gerganov 開發的 llama.cpp 及其底層 ggml 函式庫,已成為現代本地 AI 推論生態系的關鍵基礎。討論內容驗證了這些工具透過單檔案 C 語言程式碼與量化等架構模式,對 whisper.cpp 等後續專案產生深遠影響。 這項認可突顯了 llama.cpp 如何在無需依賴 Python 的情況下,讓消費…
最新研究指出,用於推理的強化學習(RL)僅修改了 1-3% 的詞元,其主要功能並非教授新技能,而是作為一種稀疏的選擇機制。該研究將強化學習特徵化為識別並強化基底模型分佈中潛在的正確推理路徑。 因此,研究人員使用 REASONMAXXER 方法,在運算量減少約 1000 倍的條件下,成功複製了這些效能提升。所提出的 REASONMAXXER 方法在無需…
一款 Genie 風格的可玩世界模型,成功在單張消費級 RTX 5090 顯卡上以 720p 解析度與 16 FPS 的幀率運行,僅需佔用 19GB 的 VRAM。此成果展示了高端消費級硬體在執行互動式 AI 代理時的高效推論能力,並為即時影片生成任務中的 VRAM 效率設下新基準。 該模型利用 RTX 5090 的 32GB GDDR7 記憶體,在…
Anthropic 公開了 Claude 的詳細系統提示,明確揭示了行為優先級,例如在危機期間優先考慮用戶福祉。此次發布為外界提供了了解引導模型回應之指令的透明視角。 此次披露為 Anthropic 的模型行為路線圖和安全優先級提供了寶貴見解,幫助開發人員了解 AI 如何在任務完成與用戶安全之間取得平衡。它也突顯了更廣泛 AI 生態系統中平台策劃和提示…
一個新的轉售經濟體正在興起,用戶之間交易未使用的 AI API 額度。估計市場上目前有數千萬個額度可供交易,讓開發者能以大幅折扣取得模型,儘管這通常違反了服務提供者的條款。 這個市場為無法充分利用訂閱配額的個人和小團隊提供了優化 AI 基礎設施成本的實用方法,同時也創造了套利機會,並為 API 流量的處理方式引入了新的安全動態。 安全風險包括第三方…
Firefox for iOS 正式推出原生廣告攔截器,直接在瀏覽器內建此功能,解決了長期以來的使用體驗缺口。相較於之前的替代方案,這項更新大幅簡化了用戶攔截廣告的流程,減少了對外部內容攔截器的依賴。新功能利用 iOS 的內容攔截器子系統運作,類似於 Firefox Focus 的做法,透過原生方式減少干擾性廣告,從而優化瀏覽體驗。這對 iOS 上的行…
最新分析指出,學術論文中頻繁出現將「腎衰竭」(kidney failure)誤譯為「腎失望」(kidney disappointment)的現象。此錯誤通常源於大型語言模型(LLM)在改寫時,將「failure」替換為同義詞「disappointment」,卻忽略了醫學語境中的細微差別。部分案例可追溯至 2021 年,顯示除了 AI 工具外,非英語母語…
Henrik Karlsson 在 2023 年的文章中,探討了孤獨與特定心態如何為新點子的誕生創造心理條件。文章強調新點子具有高度脆弱性,極易受到外部認可或批評的影響。具體而言,一個冷笑、哈欠或笑話都可能導致新點子夭折,因此需要建立保護性的內在狀態來守護創意。此外,文章也提及大腦可塑性和習慣在塑造這種創意心態中的關鍵作用,特別是在年輕時期。
一篇 2018 年的文章詳細介紹了如何利用重疊光源產生的莫列條紋來引導船舶沿特定路徑行駛。該技術允許導航員透過視覺對齊燈光,確保在狹窄水道中的精確定位。 該系統依賴於兩組燈光重疊時形成的視覺干涉條紋,產生清晰的對齊指示。社群評論指出其與飛機 PAPI 燈光及聲學拍頻的相似性,驗證了底層物理原理。
最新分析指出,AI 在藥物發現中的主要價值在於加速現有工作流程並促進新數據的生成,而非提供立竿見影的神奇療效。這種觀點將焦點從引人注目的突破轉向管道中的實際效用與效率提升。 這項務實的評估通過強調 AI 是科學家的強大力量倍增器而非替代品,有助於冷卻行業的過度炒作。它突顯了高品質數據生成和計算效率在實現臨床相關影響方面的重要性。 文章指出,應用機器…
Anthropic 執行長 Dario Amodei 指出,公眾對 AI 的懷疑源於對機構根深柢固的信任危機,而非對技術本身的恐懼。他強調,與行銷活動相比,交付如真正治癒癌症等具體成果,更能重新贏得公眾信心。 此觀點將產業焦點從透過訊息管理公眾認知,轉向優先重視實際效用與成果交付。這表明 AI 公司必須透過結果證明其價值,才能克服公眾對科技巨頭長達數十…
研究人員提出「可分離高斯和」(SSOG)作為標準縮放點積注意力(SDPA)的次二次方替代方案。此方法利用可分離的高斯核來降低計算複雜度,同時保持效能。標準注意力機制的二次方複雜度為 Transformer 處理長序列帶來瓶頸。SSOG 提供了一條更有前景的路徑,以更高效的處理方式應對更大的上下文長度,這可能影響電腦視覺和語言模型架構。SSOG 利用空間…
Qwen 35B 模型從 ModelScope ms-swift 倉庫的最新提交中被移除,引發了該模型可能在正式發布前洩露的猜測。被移除的模型很可能是 Qwen 3.5 35B-A3B,這是一個稀疏混合專家模型,證明了混合線性注意力 MoE 架構在規模化任務中的有效性。它在倉庫中的缺席表明該模型暫時撤出,可能是為了在正式發布前控制分發。對於依賴 ms-…
Reddit 上的討論預測,基於當前的模型架構和訓練效率加速趨勢,到 2027 年 1 月,參數約為 300 億的本地大型語言模型將達到與 Anthropic Mythos 系列相當的前沿能力。 核心技術假設是,循環深度或稀疏激活等架構創新將使較小的模型能夠複製萬億參數前沿模型的推理能力。社區爭議的重點在於資訊理論界限和硬體成本是否允許這種擴展效率。
社群分享了採用混合 IQ4_XS 格式的 Qwen3.8-27B GGUF 量化版本,使其能在 16GB VRAM 限制內運行。此發布讓使用者得以在記憶體受限的消費級硬體上執行擁有 270 億參數的大型模型。混合 IQ4_XS 格式在模型大小與準確度之間取得了平衡,儘管社群反饋指出其準確度可能略低於 Unsloth 的 IQ4_XS 變體。它支援 Qw…
一位 Reddit 使用者展示了專為本地大型語言模型推理而優化的雙 Intel Arc B140 顯卡組裝,並強調了改善後的 Linux 驅動程式與具競爭力的效能。該配置證明非 CUDA 顯卡能以較低的成本有效運行較小的稠密模型及較大的 MoE 模型。該系統採用基於 Xe2 架構的 Intel Arc B 系列,能以較少的軟體開銷提供更高的每瓦效能。使…
一篇文章指出,AI 系統目前主要憑藉優越的記憶力和回憶能力,而非更深層的邏輯推理,來超越數學家。這種觀點挑戰了人們對 AI 在複雜任務中成功源於類人認知理解的普遍假設。 這一區別對於理解人工智慧的真正本質及其在需要抽象創新領域的局限性具有重要意義。這表明,雖然 AI 在依賴檢索的領域中可以匹配或超越人類表現,但它可能仍缺乏人類數學發現中固有的創造力火花…
Anthropic 研究員 Sholto Douglas 預測,到 2028 年 AI 模型將自動化 95% 的電腦相關工作。儘管自動化規模龐大,他認為過渡期足夠緩慢,人類工作者在 2030 年代仍將持續發揮作用,並能與 AI 系統並肩工作。 此預測顯示白領工作的取代速度將比以往的技術轉變更為迅速,突顯了 AI 對勞動力的即時經濟影響。Douglas…
一名開發者利用 Codex AI 代理程式執行自動化的研究與最佳化循環,成功將特定核心(kernel)的效能提升 232 倍。該過程涵蓋基準測試、分析、驗證與研究改進的迭代循環,展示了 AI 編碼代理程式在處理複雜低階任務(如 CUDA 核心最佳化)方面的成熟度。這項成果暗示未來常規效能調整將日益自動化,使工程師能更專注於高層級的架構與設計。
最新分析指出,加密技術的普及與人工智慧驅動軟體開發的結合,正使執法機構的駭客工具面臨報酬遞減效應。這標誌著執法單位能輕易存取先進裝置資料的時代即將結束,此現象被稱為「進入黑暗」(going dark)。 此轉變對執法與情報機構影響深遠,它們可能很快難以解密大量裝置中維護良好的軟體資料。這突顯了理論上的安全上限與人工智慧程式碼所引入的日益增多的漏洞之間…
社群成員指出,新發布的 Qwen 3.8 27B 模型在消費級硬體(如 NVIDIA RTX 5090 系統)上本地運行時,其效能可與 Claude 等更大的前沿模型相媲美。該模型採用原生視覺語言架構,支援 262k 上下文視窗,並能透過 llama.cpp 和 Docker 等工具高效運行,非常適合用於網路安全與智能體工作流程。
一項由諾和諾德資助的研究發現,基於預測生物標記,使用司美格魯肽與五年內預測失智症風險降低 26% 相關。此發現突顯了該藥物在已知代謝益處之外的潛在神經保護作用。 這項研究將人工智慧驅動的預測模型與臨床藥理學相結合,提供了一種評估阿茲海默症風險的非侵入性方法。它強化了人們對 GLP-1 受體促效劑用於治療神經系統疾病的興趣,並可能將其應用範圍從糖尿病和肥…
一篇文章主張,與 AI 協作的體驗更接近於管理外包合約商,而非傳統的編碼工作,因此開發者需要展現領導力。這種觀點標誌著軟體工程的範式轉移,開發者的核心價值在於監督與指導,而非語法生成。關鍵細節包括將 AI 類比為快速但不可靠、來去匆匆的合約商,以及由領導者盲目信任 AI 輸出所導致的「技術破產」。討論指出,管理 LLM 需要與傳統人員管理不同的新技能,…
一名名叫 Sean Byrne 的男子在貝魯特機場因姓名與全球資料庫中的恐怖份子匹配而被拘禁,突顯了身份碰撞的現實後果。此事件引發了關於模糊匹配演算法局限性以及英語系國家缺乏全國身分證號碼制度的廣泛討論。 此案例說明了身份解析中的誤報如何給個人帶來顯著的法律、財務和行政負擔。它強調了在全球資料庫中採用更完善的資料完整性實踐和唯一識別碼,以預防此類系統性…
隨著 Google Chrome 全面轉向 Manifest V3,Firefox 成為最後一款仍完整支援原始 uBlock Origin 擴充功能的主流瀏覽器。這項轉變讓 Firefox 使用者能保留該廣告阻擋器在 API 限制下受限於其他瀏覽器的進階過濾功能。 這項差異突顯了瀏覽器擴充功能生態系的日益分歧,將 Firefox 定位為依賴強大廣告阻…
ThoughtDAG 是一款開源且以本地為先的工具,將 LLM 對話可視化為可編輯的情境圖表,幫助使用者管理決策歷史與研究深度。它允許使用者對節點進行分支、修剪和合併,從而精確控制發送給模型的內容。此工具透過使情境可見且可編輯,解決了 Agentic AI 工作流程中對透明度和控制力的日益增長的需求。它幫助使用者平衡研究的廣度與深度,並識別盲點,從而提…
我們使用 Google Analytics 了解閱讀情況與改善新聞網站。你可以接受或拒絕分析 Cookie,不影響閱讀。了解 Cookie 政策