通过分析一个包含 2009 至 2014 年间超过 65 万个链接的旧数据库,我们发现了一个惊人的事实:互联网的记忆正在迅速消失。在对这些链接进行追踪后,结果显示超过 76% 的链接已无法访问,这种现象被称为“链接腐烂”。研究表明,这种消失现象对个人博客、论坛和地方新闻等“小型网络”的打击尤为严重,而大型中心化平台(如谷歌、维基百科)的内容则表现出更强的持久性。这揭示了互联网内容的脆弱性及其历史的加速流失。
一项关于链接存活率的测试
我们对数据库中 655,178 个可追溯的历史链接进行了检查,结果令人担忧。绝大多数链接已经失效。
- 51.24% 的链接无法建立连接(包括 DNS 解析失败、超时或 TLS 错误)。
- 25.44% 的链接返回了 HTTP 错误(如 404 Not Found 或 403 Forbidden)。
- 只有 23.32% 的链接成功加载了页面。
一个能正常打开的页面并不意味着原始内容仍然存在。一个充满了广告的停用域名,或是一个提示“内容已不可用”的页面,在技术上都算作“成功加载”。
即便是剔除指向同一目标的重复链接后,情况也未见好转。在 492,620 个独立网址中,仍有 78.7% 无法加载。这表明链接的失效是一个普遍现象,而非少数几个网站消失的结果。
随着时间的推移,链接失效的比例逐年增高:
- 2009 年: 64.58% 的网址失效
- 2012 年: 59.43% 的网址失效
- 2014 年: 78.16% 的网址失效
数字墓地巡礼
这个数据库就像一座 2010 年代互联网的博物馆,其中许多曾经的居民已经消失。
- Facebook 图片 CDN (fbcdn.net): 835 个链接,无一加载。
- Rapidshare (文件共享网站): 139 个链接,无一加载。
- Megaupload (文件共享网站): 71 个链接,无一加载。
- Picasa Web Albums (谷歌相册服务): 69 个链接,无一加载。
这些数据清晰地反映了一个趋势:中心化的大型网络(如谷歌、维基百科)通常能更好地保存内容,而由个人博客、论坛、本地新闻和独立图片托管服务构成的 “小型网络” 则在时间的侵蚀下显得格外脆弱。人们分享的个人内容和本地信息正在成片地从网络上消失。
例如,作为马其顿的第一个网址缩短服务,0.mk 的数据记录了该国部分互联网历史的消亡。许多链接指向了现已关闭的电视台 (A1 Television) 和在 2017 年停刊的报纸 (Utrinski Vesnik, Dnevnik, Vest)。这些短链接比它们所指向的新闻机构活得更久,但内容已无处可寻。
那些有趣的发现
在这些逝去的链接中,也埋藏着一些时代的“宝藏”:
- 第一个链接: 创建于 2009 年 7 月 14 日,它指向的不是什么宣言,而是一个 WordPress 博客上的 CSS 样式表。它只被点击过两次。
- 最短的目的地: 有人曾将
localhost(即127.0.0.1) 缩短。点击这个链接的人,只会被导向自己的电脑。 - 脆弱的叠加: 数据库中有 4,478 个链接指向了其他的网址缩短服务(如 bit.ly, goo.gl)。当谷歌在 2025 年关闭其 goo.gl 服务后,这些链接链就从中间断开了,形成了“链接腐烂”的平方效应。
- 不朽的链接: 创建于 2009 年 7 月 15 日的
0.mk/7指向google.com。它至今已被点击超过 95,999 次,在 17 年的风雨和一次服务复活后,依然有效。
为何 0.mk 会回归
到 2014 年,由于垃圾信息泛滥、维护成本高昂,而收入无法覆盖开支,0.mk 的创始团队关闭了服务。
然而,17 年后,人工智能技术改变了局面。AI 现在可以处理大部分的开发、垃圾信息检测、滥用审查和监控工作,这些正是当年压垮项目的人力成本。这使得 0.mk 的回归成为可能,让这些承载着历史的旧链接得以在分布于 300 多个城市的边缘计算机上重新运行。