LONGGE AI RESEARCH DAILY

龙哥读论文

每天筛选值得关注的 AI 论文,用工程视角拆解方法、实验和真正的落地价值。

目前已发表 1573 篇文章

PaperDaily 数据库收录 论文拆解 12787 研究思路 385 AI 资讯 208 开源项目 164 科研招聘 128 学习资料 8 热点主题 493 论文成功模式 1625

标签:多模态

共 200 篇
图像生成|招牌写"兽医"宠物店秒变诊所?新基准专治文生图语义泄漏
视觉与图像

图像生成|招牌写"兽医"宠物店秒变诊所?新基准专治文生图语义泄漏

先来看一种并不罕见的场景:在产品包装设计、店铺招牌生成、设备铭牌渲染这类视觉内容创作任务里,用户往往给模型下达一个明确指令——在某个指定的主体区域(比如一家面包店的招牌、一辆货车的车身、一瓶饮料的标签)写入指定的文字,同。

同济新基准专治文生图“没文化”:GPT Image画隐喻也翻车,结构准确率仅78%
视觉与图像

同济新基准专治文生图“没文化”:GPT Image画隐喻也翻车,结构准确率仅78%

让AI画“时间就是金钱”,它可能真画一个挂满钞票的时钟;让AI画“知识就是力量”,它又可能把书本和哑铃硬拼在一起。文生图模型能把物体画得很真,却常常画不出“画外之音”。同济大学等机构提出VMetaphor-Bench,把“视觉隐喻生成”这件事第一次系统性地量化评测,结果连GPT Image 1.5也栽在结构组合上。

视频生成不懂物理?川大新框架用事件链思维,物理正确率暴涨至72.5%
视觉与图像

视频生成不懂物理?川大新框架用事件链思维,物理正确率暴涨至72.5%

大模型生成视频"看起来美,动起来假"的顽疾有解了。这篇来自四川大学的工作,不去堆算力,而是给视频生成装上"物理事件链"大脑,用可量化的物理公式约束每个中间状态,在PhyGenBench上把物理贴合度均值提升到72.5%,值得做视频生成与世界模型的朋友细读。

西南科大新研究:去掉文本Dice从91.61%暴跌至40.76%,医学图像分割真的离不开文字?
视觉与图像

西南科大新研究:去掉文本Dice从91.61%暴跌至40.76%,医学图像分割真的离不开文字?

每次看到给医学图像分割加文本引导的工作,龙哥都会问一句:那行文字到底起多大作用?这篇论文用5个预训练医学视觉语言模型和4种融合算子做了系统性交叉实验,还提出一个轻量诊断工具做证据解耦,把“换融合头不涨点、去文本却崩盘”这类反直觉现象掰开揉碎了讲清楚,值得做多模态医学影像的读者花几分钟细读。

北大&Galbot新作:VLA换台就懵?严格零样本跨本体迁移,最高提升18个点
视觉与图像

北大&Galbot新作:VLA换台就懵?严格零样本跨本体迁移,最高提升18个点

跨本体泛化是VLA从“会干活”走向“干得了所有机器人”的必经关卡,但“零样本”这个词在圈里长期被用得很随意。本论文用严格受控的基准把四种本体变化拆开细测,给出可复现的量化结论:换表征涨15个点、扩源多样性涨18个点、仅5%目标本体预训练数据再涨13.4个点。做机器人的朋友读完能少走不少弯路。

弗吉尼亚理工提出IntroConformal:让大模型自查"看图说话",弃权率狂降57%→25%
视觉与图像

弗吉尼亚理工提出IntroConformal:让大模型自查"看图说话",弃权率狂降57%→25%

大模型"看图说话"时编造细节,一直缺乏严格的统计约束。弗吉尼亚理工这篇工作用模型自己的"内心独白"替换外部验证器,照样把错误率控制在数学保证范围内,还顺手把弃权率打了下去。值得所有关注多模态可靠部署的读者一读。

LONGGE AI COMMUNITY

把每天读到的论文,变成长期积累

加入「龙哥读论文」知识星球,持续获取 AI 论文、资讯、开源项目、招聘与研究思路。

加入龙哥读论文微信群:添加微信 kangjinlonghelper,备注“研究方向 + 地点 + 学校/公司 + 昵称”。

龙哥读论文知识星球二维码 微信扫码加入知识星球