V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
LawlietZ
V2EX  ›  问与答

有做过在线文档协同办公的老哥吗,进来交流一下技术相关(Y.js 相关)

  •  
  •   LawlietZ · 175 天前 · 895 次点击
    这是一个创建于 175 天前的主题,其中的信息可能已经有所发展或是发生改变。

    就是常见的飞书文档钉钉文档那套东西,不过不用 OT ,用 CRDT 来实现协同,最近调研的社区最火的 yjs 。

    但发现用 yjs 做版本恢复的话,要把所有的 update 都存下来,yjs 的 snapshot 存的只是 ydoc 某个时间点的版本坐标,没有数据,要想用 snapshot 还原版本,还得把之前所有的 update 存下来,初始化的时候全部取出来一个个 applyUpdate ,把本地的 ydoc 还原到之前最新的状态,之后才能用 snapshot 回溯到某个版本。

    后端 websocket 网络层用了社区的 hocuspocus ,问题是每个字符的改变 onchange 方法里都会生成一个 update ,如果文档有几万字,就至少有几万个 update(还有段落啥的特殊字符),这样前端还原 ydoc 的时候这里接口都要返回几万条 update 数据前端一个个 applyUpdate 也太不合理了。像 OT 恢复版本取得是最近的一个快照和后面的 update 数据,问题 yjs 的快照只存的是坐标,想请教一下这块优化怎么处理的好?是不是 yjs 也定期 flush 一下把之前 update 手动合并一下?但 yjs 并没有相关的 api ,只能从结构上表面上合并成数组,返回给前端的数据条数上减少一点。

    或者想听听各位对 yjs 做协同这块版本历史怎么实践的,网上这块资料基本为 0 。

    12 条回复    2024-08-09 19:51:45 +08:00
    scienhub
        1
    scienhub  
       175 天前 via iPhone
    请问你是基于什么考量决定用 yjs 呢? 前端编辑器用了什么呀?
    我们也在实现类似的功能,可以交流一下
    scienhub
        2
    scienhub  
       175 天前 via iPhone
    你有没有考虑用 git 做版本控制呢?
    murmur
        3
    murmur  
       175 天前
    别想了,老老实实买 wps 的文档中台,啥公司啊,都卷成黑海的地方还想着自研

    office 文件支持做完了么,office 都支持不好还想着协同
    Fca
        4
    Fca  
       175 天前
    onlyoffice
    LawlietZ
        5
    LawlietZ  
    OP
       175 天前
    @murmur 不用支持 office
    LawlietZ
        6
    LawlietZ  
    OP
       175 天前
    @murmur 这个贴只用来交流技术 其他的考虑就不用你操心了谢谢哈
    LawlietZ
        7
    LawlietZ  
    OP
       175 天前
    @scienhub git 做版本也要考虑存储那套,但协同版本这块没见过用 git 做控制的
    scienhub
        8
    scienhub  
       175 天前
    @LawlietZ 不知道你最后存的是不是文本文档。我们最终存的是文本文档,因此选择用 git 做版本控制了。
    LawlietZ
        9
    LawlietZ  
    OP
       175 天前
    @scienhub 存全量文本,如果你要做协同,这种数据是笛卡尔积式增加的,对存储和 IO 很不友好
    LawlietZ
        10
    LawlietZ  
    OP
       173 天前
    @scienhub 可以加 vx emhhbmcxMTA0MjcyMzE5 交流一下
    unhappy224
        11
    unhappy224  
       102 天前
    不用这样的, 关闭 GC 就行,就可以直接通过 snapshot 来恢复了,new Y.Doc( { gc: false} )。你这是一点他的论坛都没看啊
    LawlietZ
        12
    LawlietZ  
    OP
       102 天前
    @unhappy224 这种方式我们也考虑到了,缺点是:关闭了服务侧的文档 gc ,文档数据会无限膨胀,就算富文本里可能只有 1 个字符,用户在反复编辑这一个字符。经典的 crdt 数据膨胀问题。当然也有办法去优化
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3237 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 13:02 · PVG 21:02 · LAX 05:02 · JFK 08:02
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.