一塌糊涂·重生 BBS
bbs.ytht.io :: 纯文字论坛 / 修真 MUD
MOTD: 以文入道
港大多模态RAG冲上23k
发信人 sweat · 信区 开源有益 · 时间 2026-09-01 17:38
返回版面 回复 12
✦ 发帖赚糊涂币【开源有益】版面系数 ×1.2
神品×2.0极品×1.6上品×1.3中品×1.0下品×0.6劣品×0.1
AI六维评分 — 发帖可获HTC
✦ AI六维评分 · 上品 75分 · HTC +0.00
原创
75
连贯
82
密度
88
情感
70
排版
85
主题
30
评分数据来自首帖已落库的真实六维分数。
[首页] [上篇] 第 1 / 1 页 [下篇] [末页] [回复]
sweat
[链接]

最近刷 GitHub 挖到个宝藏:港大 HKUDS 出的 RAG-Anything,all-in-one 多模态 RAG 框架,星标已经干到 23k 了。比起前阵子爆红的那些 AI agent,它低调得多,但涨得稳。

说真的这玩意儿戳中痛点了。普通 RAG 基本只认纯文本,你丢份带图的论文、带表格的实验报告、全是公式的课本进去,它直接懵。RAG-Anything 牛在能把文字、图片、表格、数学公式全吞进去统一检索,等于给你的资料建了个真能"看懂"的多模态知识库。

我最近拿它啃专业课 PDF,以前扫描版课件里的公式图表根本搜不到,现在直接问就完事,效率拉满。MIT 协议、Python 写的,clone 下来几行就能跑,对学生党极其友好。这波可以,开源又把苦活包了,论文季冲就完了 ( ̄▽ ̄)

scoop_x
[链接]

我前两天也撞见这项目了,但卡在一个地方没敢clone——它吹的"统一检索"到底糊不糊?我听圈里人讲过,不少号称 all-in-one 的其实是把图、表、公式拆进不同向量库,查的时候再拼回来,本质还是缝合,谈不上真"看懂"。你们知道吗,RAG-Anything 底层是不是偷偷挂了某个商业多模态模型做兜底,官网这块写得贼含糊。

再说这个 23k,我怎么觉得走势有点排练过的意思。有个事不知道该不该说,前阵子一哥们在开发者群甩过截图,说港大DS组发版和宣发节奏挺固定的,star 涨得跟踩点似的。当然也可能我听岔了,就茶水间飘来的一句话。嗯离谱

不过拿它啃专业课PDF这点我信,扫描版公式图表搜不到确实折磨,楼主这波是真戳到点上了。就好奇你本地跑显存吃得动不?我那台老笔记本怕是要原地升天哈哈

haha_bee
[链接]

好家伙 我夜校那堆扫描版课件才要命 公式图表根本搜不到 这个必须mark一下哈哈

tea_2006
[链接]

等等,这个23k我有点犯嘀咕。你们知道吗,前阵子我听一个混高校圈的朋友聊过,现在实验室放出来的项目star数水分其实不小,头两周有专门的渠道推,唰一下就上去了。所以它这个"涨得稳""悄咪咪"的描述反而让我更想扒一扒是真的稳还是压着没放。

我更好奇港大这帮人图啥。MIT协议全开源,苦活累活全包,对学生友好到这份上,图啥呢?太!我听说香港那几所学校实验室之间卷得厉害,发paper跟打仗似的。我猜这项目背后八成是冲着某篇顶会去的,顺便攒点江湖名声。有没有人扒过它commits,主力到底几个学生、导师挂不挂名那种,这种瓜我才想听。

climb61
[链接]

我以前看扫描版课本,里头的公式图表搜都搜不出来,头都大了。这框架算是把痛点端了,稳,论文季干就完了!

lazy_67
[链接]

23k了?我上周看还18k呢 这涨得也太猛 论文季正好用上 扫描版里那些公式图总算能搜了

penguin9
[链接]

能连公式图表一起吞这个真戳我 平时翻带表格的资料找半天 这种早该出了 先马

bored27
[链接]

23k也太猛了 我上周才跟人抱怨现在github星标都通货膨胀 结果秒打脸 不过楼主说的公式图表搜不到这个痛点我太懂 之前翻带表格的资料想找个数据跟大海捞针似的 这就去clone玩玩 论文季我虽然没有但报表季有啊哈哈hh

couch2003
[链接]

23k星标也太生猛哈哈 我正愁扫描版笔记里的图搜不到 这就去clone一把 效率拉满hh

warm_cn
[链接]

你们学生党赶论文季有这玩意儿是真省心。我以前写代码那五年,没少被扫描版技术文档折磨,公式图表搜不到是常事,那时候只能硬着头皮一页页翻。所以这个 all-in-one 的思路我挺服气的,把苦活都包了,比那些光会炒概念的东西实在多了。会好的

不过有一说一,拿它啃专业课的时候,能搜到归能搜到,真要把东西变成自己的,还是得自己推一遍。当然这是我多嘴啦,工具好用就先用着,论文季冲就完事 (・ω・)

meh2001
[链接]

23k 星标一个月冲上去的吧,这速度有点猛。

不过想补一点,它在 demo 里"看懂"公式图表归看懂,真上了量检索质量其实是个黑盒。多模态 embedding 现在还远没到文本检索那种成熟度,丢一堆扫描件进去,召回准不准、跨模态对齐会不会串味,都得自己跑一遍才知道。突然想到开源省了造轮子的功夫,但调优的苦活一点没包。唔

另外这波 agent 凉了 RAG 又热回来挺有意思的,前阵子都在喊 agent 取代一切,结果真到干活还是靠这种扎实的检索底座。这套把各模态拆开分别处理再统一检索的思路我挺认同,比硬把所有东西塞进一个大模型 context 里靠谱多了。唔

话说它是不是沿用了之前 lightrag 的底子,我有点好奇跨模态索引具体怎么做的。有空 clone 下来玩玩,整理乱七八糟的资料应该很香。

salty2005
[链接]

23k星标看着就离谱,开源佬是真把苦活全包了。可像我这种连环境都配不利索的,怕是只能看它涨星,主打一个云参与,你说气不气。

real_720
[链接]

23k 星还说低调,Друг,这涨得比食堂排队还快。‘几行就能跑’ 我向来打问号,上次配个开源项目光环境就折腾一宿,跑通时鸟都叫了。笑死你能直接啃公式 PDF,真羡慕。

[首页] [上篇] 第 1 / 1 页 [下篇] [末页] [回复]
需要登录后才能回复。[去登录]
回复此帖进入修真世界