首页 时政热点 科技头条 智能AI 安全攻防 数码硬件 开发者生态 归档 标签 关于

我们如何使 IPFS 内容发布速度提高 10 倍

2026-07-01 1 阅读 约5分钟阅读 dennis-tra
分享:
字号:
简介 在分布式哈希表 (DHT) 中发布内容传统上是一项缓慢的操作,尤其是在以下情况下:i) 网络很大,并且 ii) 参与网络的节点频繁变动。 IPFS 的 Amino DHT 的情况也不例外,它满足这两个条件。 ProbeLab 团队多年前通过广泛的测量发现了这个问题,并提出了一种优化方案,该优化方案被证明可以提高性能,即将内容发布时间减少一个数量级以上,同时将网络开销减少 40%。该优化被命名为 Optimistic Provide,最近才在 IPFS 的 Kubo 0.39.0 中作为默认选项发布!该研究发表在 IEEE INFOCOM 2024 上,我们建议读者通过该出版物了解更多但更详细的细节。在这篇博文中,我们概述了我们团队提出的技术,以及基本的技术细节,当然还有证明我们最初声明的有效性的结果。非常感谢 IPshipyard 团队一路以来的支持以及为将此功能投入生产所做的最后努力。从结果来看,这一努力是值得的。 TL;DR Optimistic Provide 背后的基本思想如下:在遍历 DHT 时,立即存储可能属于全网络 20 个最近的对等点的记录。当发现的 20 个最近对等点的集合可能构成全网最接近对等点时,立即终止 DHT 遍历。在大多数(不是全部)PUT RPC 成功后,将控制权返回给用户,并在后台继续处理其余的 RPC。第 1 点和第 2 点需要了解总网络规模,这是我们从路由表刷新机制上搭载的轻量级估计方法得出的,不会产生任何额外的网络开销。 Optimistic Provide 显着降低了上传延迟,从超过 13 秒(通常接近 20 秒)降至不到 1 秒,为 IPFS 的性能带来了巨大的价值和影响。这在实践中意味着什么:内容发布者现在几乎可以实时发布其内容,即内容推送到网络后约 1 秒。与之前超过 10 秒相比,这是一个重大改进,因为开发人员、用户和应用程序提供商可以实时重新迭代和调试。传统的提供操作 要了解这些优化是如何工作的,我们必须首先了解传统的“提供”操作。在基于 Kademlia 的分布式哈希表 (DHT) 中,例如 IPFS 使用的 Amino 网络,存储记录需要识别最接近该数据标识符的 k 个对等点,其中在 Amino DHT 中 k 设置为 20。在这种情况下,“接近度”不是由地理接近度定义的,而是由 XOR 距离度量定义的。该指标通过对 ID 执行按位 XOR 运算来计算对等点的唯一 PeerID 与数据的内容标识符 (CID) 之间的距离。从一组硬编码的引导对等点开始,节点填充其本地路由表。寻找这 20 个最接近的同伴的过程被称为 DHT Walk 。这是一种迭代搜索,节点在其本地路由表中查询最接近的已知对等点,并向它们询问更接近的候选者。这个循环一直持续到发起者收到来自它所发现的三个最接近的对等方的成功响应为止。一旦步行终止,后续阶段就开始:发起者将提供者记录推送到所有 20 个最接近的对等点,以确保即使某些节点离开网络也能获得数据可用性。因此,要点是:提供过程由两个阶段组成 DHT Walk 查找全网 20 个最近的对等点 跟进 将记录推送到这 20 个对等点 性能瓶颈 虽然该系统很强大,但从历史上看它很慢,通常需要几十秒甚至几分钟才能完成。我们在 ProbeLab 的研究发现,主要延迟是 DHT 步行的终止条件。 “传统”算法是严格的:在 DHT Walk 阶段,它坚持等待来自三个发现的最接近的对等点的响应。在对等点频繁流失的无许可网络中,这些特定对等点通常无法访问。然后系统会“回溯”,查询更远的对等点来填补空白,而实际上 20 个最近的对等点可能已经被发现。下图显示了欧洲(传统上速度最快的地区)的供应操作总持续时间的累积分布函数。原始图表可以在这里找到。该图显示,平均延迟约为 20 秒左右,在最坏的情况下,单个提供操作可能需要两分钟以上的时间。这种性能特征对于延迟敏感的应用程序来说是令人望而却步的,而这正是我们试图通过 Optimistic Provide 解决的问题。乐观提供 乐观提供通过用 statist 代替严格的等待来解决缓慢的提供操作
这篇文章对您有帮助吗?

订阅66必读

每日精选科技资讯,直达你的邮箱