LONGGE AI RESEARCH DAILY

龙哥读论文

每天筛选值得关注的 AI 论文,用工程视角拆解方法、实验和真正的落地价值。

目前已发表 1811 篇文章

分享网站 微博 X
PaperDaily 数据库收录 论文拆解 13572 篇 研究思路 385 条 AI 资讯 589 条 开源项目 177 个 科研招聘 140 条 学习资料 12 份 热点主题 830 条 论文成功模式 1776 条

标签:NLP

共 43 篇
图像恢复|印度理工25万张石刻字符数据集:让阿育王铭文自动翻译成英文
视觉与图像

图像恢复|印度理工25万张石刻字符数据集:让阿育王铭文自动翻译成英文

让AI去读两千多年前刻在石头上的字,听起来像考古队的活儿,可印度理工学院甘地讷格尔分校真把它做成了流水线:图像增强、字符识别、转写、翻译一步不落,还顺手开源了25.38万张字符图和2224对双语语料。方法不花哨,但“没数据”这个老大难被正面解决了,值得一看。

港城大×英伟达:把扩散时间步写进SSM递归算子,只训6.3M参数
大模型与智能体

港城大×英伟达:把扩散时间步写进SSM递归算子,只训6.3M参数

条件化这件事,主流做法要么把上下文塞进输入,要么用AdaLN去调激活,本质都是在外围打补丁。香港城市大学和英伟达AI技术中心这篇,直接把扩散时间步映射成SSM递归参数A、B、C、D、Δ的有界偏移,冻结111M骨干只训6.3到11M适配器,Chebyshev核平均验证损失压到2.55,还附送一份解析稳定性证书。能把"为什么稳"讲清楚的参数高效微调,不太多见,值

大语言模型|维也纳工大:给MoE专家路由做「翻译」,准确率涨65%
大模型与智能体

大语言模型|维也纳工大:给MoE专家路由做「翻译」,准确率涨65%

MoE模型火了好几年,可「专家到底在干嘛」一直没人说清。主流解释是每个专家管一个领域,但真去翻,翻不出来。维也纳工大等提出RouterInterp,用稀疏自编码器给出另一种答案:专家干的是「多份不相关特征的叠加活儿」。这个结论有点反直觉,但证据挺扎实。

普渡大学新研究:SAM能找最平坦解却不泛化,加速4倍要靠权重衰减
大模型与智能体

普渡大学新研究:SAM能找最平坦解却不泛化,加速4倍要靠权重衰减

「平坦的最小值更容易泛化」这条被引用了快三十年的经验规律,这次被普渡大学拿出来单独审了一遍。结论有点扎心:用 SAM 硬把解压到最平,模型照样一点儿没泛化;真正把模型从记忆推向泛化的,是权重衰减带来的范数下降,SAM 只是在这个窗口里帮忙踩了一脚油门,把转变加速到最多 4 倍。理论构造那部分尤其漂亮:两种插值的平坦度一模一样,差距全在范数上。

AI · PAPER
大模型与智能体

根特大学新方法:先看形状索引再遍历,一个跑不完的知识图谱查询跑通了

去中心化知识图谱听着很美,真去查能让人崩溃:引擎得顺着链接一根根摸,HTTP 请求一发一大把。这篇论文给查询引擎发了张"地图",也就是 RDF 形状索引——先看地图再走路,无关的房子根本不用敲门。最快提速 7 倍,一个原本怎么都跑不完的查询,现在跑通了。

跨域事件抽取不再迷路:领域条件化让小模型逆袭大LLM
大模型与智能体

跨域事件抽取不再迷路:领域条件化让小模型逆袭大LLM

事件抽取模型一出自家门就迷路?德国DFKI与奥尔登堡大学联合提出统一多域多任务生成框架:给T5加上领域指示和任务提示词,单模型就能横跨网络安全、生物医学、新闻等6大领域做事件抽取,多域联合训练还让多个数据集性能不降反升,这种"一个模型通吃天下"的玩法,值得认真聊聊。

LONGGE AI COMMUNITY

把每天读到的论文,变成长期积累

加入「龙哥读论文」知识星球,持续获取 AI 论文、资讯、开源项目、招聘与研究思路。

加入龙哥读论文微信群:添加微信 kangjinlonghelper,备注“研究方向 + 地点 + 学校/公司 + 昵称”。

龙哥读论文知识星球二维码 微信扫码加入知识星球