原文
|
|||
|
|||
| Y Combinator|Apply|Companies|Blog|Live HN |Contact | |||
显示HN：22 GB 的 Hacker News 数据，以 SQLite 格式存储
Show HN: 22 GB of Hacker News in SQLite
原始链接: https://hackerbook.dosaygo.com
黑客书 新 | 前沿 | 开始 | 提问 | 展示 | 招聘 | 查询 某日，00月00日，0000年 < > 存档 加载中… Y Combinator|申请|公司|博客|Live HN |联系方式 < > 正在查看某日，00月00日，0000年的HN。时间相对于晚上11:59。 由DOSAYGO制作 · [获取此书]
## 浏览器中的黑客新闻档案
一名开发者创建了一个22GB的黑客新闻离线可搜索档案，打包为SQLite数据库，使用WebAssembly直接在浏览器中运行。这允许用户在没有互联网连接的情况下浏览20年的HN讨论。
该项目巧妙地避免一次性下载整个数据库，而是仅在您浏览时获取必要的SQLite文件“碎片”。它受到SQLite.js VFS和PMTiles等类似技术的启发，利用高效的数据检索方法。
创建者提供了一个GitHub仓库，其中包含下载和运行档案的说明，甚至添加了一个查看用户评论历史记录的功能。虽然最初在使用GitHub Pages时遇到问题，但该仓库现在是公开的。该项目旨在永久保存HN的历史，即使原始网站消失也能访问。它引发了关于数据压缩、离线浏览工具（如Kiwix）以及大型语言模型与该数据集集成的讨论。
相关文章
