V2EX › ihnfsa 的所有回复 › 第 1 页 / 共 1 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

239 天前

我用过 milvus 和 lancedb ，milvus 功能比较全面，lancedb python api 方便，适合快速开发小 deme 做测试用

239 天前

@whileFalse 我理解的数据湖差不多就是这样，现在想自己部署一个，不然总有点知其表不知其里。

239 天前

@jiangbao888 谢谢了，这是个好东西，我部署一下试试

240 天前

@VermouthcZzz 谢谢，好文章。

240 天前

这个题目是甲方给的，导师也不懂，没安排和甲方沟通，让我在这想方案。s3/hdfs 是我自己琢磨的，我看数据湖一般会有一个存储系统，可以用来放非结构化数据和查询系统的数据。rag 和向量数据库、图数据库有关系，但感觉这些查询系统放在湖里面有点强行了。

240 天前

@ZGame 只是用现成的大模型，我也不会微调什么的

240 天前

@hero1874 谢谢哥，我去看看

240 天前

@opengps 我的理解是数据湖要有个持久化的存储系统，可以是对象存储，也可以是 hdfs 这种

240 天前

@deorth 哈哈哈是这样的，导师也不懂

240 天前

@yjhatfdu2 我也没搞清楚，现在想的是能不能把 Text2SQL 用在湖上一些查询系统上，类似于这种 https://help.aliyun.com/zh/dms/release-the-ai-agent

240 天前

@dog82 好的，谢谢哥

240 天前

@dayeye2006199 我也只知道几个关键字，AI Agent + RAG + 数据湖