Martin Huang·Jan 29DeepSeek mHC (manifold-contrained Hyper-Connections)完整解析DeepSeek看起來是喜歡在年末年初的時間發表新作啊。繼去年的V3/R1,今年DeepSeek再次於跨年之際,提出一個改變過往深度學習架構的概念:manifold-contrained…
InNLP系列byMartin Huang·Nov 11, 2025與LLM共享協作的3個月(1) — 混亂和秩序同時發生本篇文章轉載自這裡,並只有部分內容。A response icon1A response icon1
Martin Huang·Oct 24, 2025檢索增強生成(Retrieval-Augmented Generation)整理(2) — 檢索實作我們在前一篇整理RAG的理論脈絡,談到提出RAG的時間背景,以及理論架構。在本篇,我要進行實作。
Martin Huang·Oct 2, 2025檢索增強生成(Retrieval-Augmented Generation)整理(1) — 理論脈絡檢索增強生成(Retrieval-Augmented Generation,RAG)時至今日,在大語言模型橫流,各種應用概念推陳出新的當下,早已非新鮮名詞。但我一向不愛衝浪 — 我的意思是,我不需要非站在浪尖不可 —…
InNLP系列byMartin Huang·Mar 24, 2025DeepSeek R1:GRPO,在強化學習,我們可以走多遠?在前一篇V3的文章中,有提到R1[1]是相對比較專注在特定領域的模型,它的研究方向比較偏重於強化學習(Reinforcement Learning)。本篇的主題就來探討R1及其系列子模型,並試著整理強化學習在目前的發展狀況。
InNLP系列byMartin Huang·Feb 28, 2025DeepSeek V3技術報告:不能說抄襲,但也不是革新過年期間,兩個模型橫空出世 — 實際上在圈子裡面,也已經醞釀有一個月了 — 中國DeepSeek公司推出兩個大語言模型,DeepSeek V3和DeepSeek…
Martin Huang·Jul 17, 2024初探Kolmogorov–Arnold Networks (KAN):神經網路的新曙光?在今年4月,由來自麻省理工學院(MIT)、加州理工大學(CIT)以及東北大學(Northeastern…
Martin Huang·May 9, 2024機器學習模型系列 (2) — 利用Log Linear Model做多分類任務(Multiclass task)參考閱讀:機器學習模型系列(1) — Log Linear Model