## 内存子系统优化：摘要 这系列博客包含18篇文章，专注于通过高效利用内存子系统来优化软件性能——这对于处理大型数据集的应用至关重要，即使对于较小的应用也有益处。 主要涵盖的领域包括**减少内存访问**（通过寄存器使用和编译器技术）、通过访问模式和布局更改（类、数据结构）**提高数据局部性**，以及为了提高速度**减小数据集大小**。该系列还深入探讨了通过**自定义内存分配器**和**提高指令级并行性**进行的运行时优化。 进一步的主题包括使用预取**隐藏内存延迟**、**最小化TLB缓存缺失**以及**节省内存带宽**以实现“良好邻居”编程。 此外，还讨论了**多线程应用程序**和**低延迟系统**的专门考虑因素，以及**测量内存子系统性能**和**分支预测与内存访问**之间的关系。 这篇博客提供了实用的技术，通过理解和利用内存层次结构的复杂性来提高软件的速度和效率。
每日HackerNews RSS
## 黑客新闻讨论：内存子系统优化博客
最近一篇关于内存子系统优化的博客系列文章 (johnnysswlab.com) 在黑客新闻上引发了讨论。虽然文章因选择有趣的话题而受到赞扬，但许多评论者认为这些文章只是一个肤浅的概述，可能由LLM生成。
担忧集中在缺乏深度上，尤其是在TLB shootdown和hugepages等关键方面——一位用户指出，鉴于当前Linux发行版的默认设置，hugepages文章中存在不准确之处。 几位用户指出，这些博客文章与官方文档一致，表明它们并非仅仅是AI生成的“垃圾”，而是营销内容。
讨论还延伸到分配器选择（jemalloc、mi-malloc、TCMalloc）以及将分配器直接链接到程序中的好处。 其他缺失的元素包括NUMA、超线程、平台语义以及调试格式的权衡。 总的来说，该博客被认为是一个不错的入门资源，但缺乏在实际生产环境中所需的复杂性。
启用 JavaScript 和 Cookie 以继续。
## 黑客新闻讨论：自闭症患病率与诊断
一篇黑客新闻讨论，源于《边缘革命》的一篇文章，质疑自闭症的患病率是否真的在增加，或者诊断和社會接受度的变化扭曲了数据。 许多评论员指出，过去有自闭症的人在社会上成功运作，他们的怪癖仅仅被认为是性格特征。
对话强调了一种感知到的转变：虽然社会声称具有更大的接受度，但也增加了对那些在社交方面存在差异的人的排斥，这可能导致更多的诊断。 人们对DSM-5中自闭症谱系定义扩大表示担忧，导致轻度病例被纳入，并改变了对“严重”自闭症的认知。 一些人分享个人经历，注意到家庭成员跨世代所面临的挑战。
讨论的重要部分集中在原始文章的来源《边缘革命》，以及它与约旦·拉斯克等备受争议的人物之间的联系，拉斯克因数据操纵和推广有问题意识形态而受到批评。 评论员们争论拉斯克工作的可靠性以及与该博客相关的“理性主义”社区内的潜在偏见。 最后，提供了明尼苏达州自闭症服务医疗补助索赔增加的数据，引发了关于潜在欺诈以及诊断率增加的讨论。
## 相机工作原理：简化解释 本文分解了相机捕捉图像的基本原理，从基础概念开始。它从光检测的核心概念入手——历史上使用胶片，现在利用数字传感器，该传感器由光电探测器组成，将光转换为电信号。图像亮度取决于*曝光时间*（快门速度）——过短会导致曝光不足，过长会导致曝光过度。 彩色摄影是通过排列在探测器上的彩色滤镜（如拜耳滤镜）实现的，将光分离成红色、绿色和蓝色分量。然后，这些数据通过*去马赛克*处理，以创建完整的彩色图像。 然而，仅仅拥有传感器是不够的。镜头对于聚焦光线和创建清晰图像至关重要。文章详细介绍了镜头的工作原理，包括焦距、光圈（控制景深和光线摄入量）以及镜头缺陷带来的挑战，如像差和色差。 最终，相机的功能是控制光线——引导它、聚焦它并记录它，从而“用光作画”并捕捉瞬间。文章指出了进一步的资源，供那些希望更深入地了解光学和镜头设计的人参考。
## Hacker News 讨论：交互式相机与镜头网站
Hacker News 论坛讨论了 Bartosz Ciechanowski 制作的、视觉上引人入胜且具有交互性的网站 ([ciechanow.ski](https://ciechanow.ski))，该网站探索了相机和镜头。用户称赞该网站能够唤起早期网络体验（如 Flash）的趣味精神，同时提供科学准确且直观的学习体验。
对话涉及了为长期保存而存档此类动态网站的挑战，并将其与保存自包含 Flash applet 的相对容易性进行对比。人们对未来的兼容性以及对当前浏览器功能的依赖表示担忧。
许多评论者强调了 Ciechanowski 一贯的高产和高质量作品，并将其与人工智能生成内容的潜力（和局限性）进行对比。一个 Patreon 链接也被分享，用于支持他的工作。讨论还延伸到相关主题，例如光学中的光束扩展以及艺术和人类表达的历史背景。一些用户报告了 Firefox 的兼容性问题，而另一些用户则认为它运行良好。
## 超宽带 (UWB) 用于物联网：黑客新闻讨论
一篇关于超宽带 (UWB) 技术的文章在黑客新闻上引发了争论，焦点在于其实际益处与隐私问题。虽然 UWB 承诺精确的位置跟踪（精确到 10 厘米）以及用于自动化家居功能（恒温器调节、电视恢复、汽车访问）和改进安全/应急响应的安全测距，但许多评论员质疑这些便利的*必要性*以及背后的动机。
一个关键点是，许多宣传的 UWB 功能相对于现有解决方案的改进微乎其微，而真正的驱动力是数据收集以实现盈利。人们对供应商锁定和持续连接的隐私影响表示担忧。有人建议使用 NFC 作为更安全且更易于实施的访问控制替代方案。
另一些人强调了 UWB 在 AR/空间计算和无线扩展坞方面的潜力，同时承认当前开发板的高成本。讨论还涉及本地、注重隐私的解决方案（如 Home Assistant）作为云端系统的替代方案的可行性。最终，该帖子表明对 UWB 价值主张持怀疑态度，质疑其好处是否能证明隐私权衡以及推动其采用的经济力量。
该网站正在使用安全服务来保护自身免受在线攻击。您刚才的操作触发了安全解决方案。 提交特定词语或短语、SQL命令或格式错误的数据等行为可能会触发此阻止。
## 欧空局再次遭遇网络攻击
欧洲航天局（ESA）据报道再次成为网络攻击目标，黑客声称窃取了200GB的数据。被泄露的数据据称包括敏感信息，如源代码、API令牌、凭据、配置文件，甚至Terraform文件。
然而，Hacker News上的评论员质疑被盗数据的价值，认为它大多无法使用或应该已经公开。讨论还集中在欧空局反应迟缓的问题上，指出该机构正值新年假期关闭。一些人对此进行了辩护，指出国家实验室也有类似的关闭情况，而另一些人则批评了在重大安全漏洞发生时缺乏及时沟通。
该事件引发了关于数据安全、信息公开获取以及组织应对网络攻击的期望的争论，尤其是在与私营公司可能做出的反应进行对比时。
国土安全部（DHS）承认，REAL ID（一项20年前、9/11事件后的倡议，旨在标准化州身份证件）对于确认美国公民身份“不可靠”。这一消息是在对莱奥·加西亚·维内加斯（Leo Garcia Venegas）提起的民权诉讼的回应中的法庭文件中披露的。维内加斯是一位美国公民，尽管出示了有效的阿拉巴马州REAL ID，却多次在移民突袭中被拘留。 执法人员以各州合规法律不同为由，辩解说身份证件可以签发给非公民，因此不予采纳该身份证件。尽管REAL ID的签发需要提供合法身份证明，但国土安全部辩称REAL ID不是移民文件，无法明确证明公民身份。 REAL ID法案最初旨在通过要求使用带有星号标记的身份证件来获取联邦访问权限（如机场）来加强安全，但遭到了广泛抵制和多次执法延误。批评人士认为它实际上充当了全国身份证，在没有明显提高安全性的情况下侵蚀了隐私。维内加斯的案例凸显了种族歧视的担忧，因为执法人员根据外貌来 targeting 工人，这种做法最近得到了最高法院的维护，尽管存在对第四修正案的担忧。此案强调了权利缩减的风险，即使是官方文件也可能无法保护个人免受不必要的审查。
## Datastar-CL：Common Lisp SDK 概要
Datastar-CL 是 Datastar SDK 的 Common Lisp 实现，设计紧密遵循 Datastar 架构决策记录。它使用 CLOS 提供核心 SDK 功能，围绕用于服务器发送事件 (SSE) 的 `sse-generator` 类构建。
该 SDK 支持两种 Web 服务器方法：Hunchentoot 和 Clack（带有 Woo 或 Hunchentoot 后端）。虽然 Clack+Woo 是可行的，但对于需要大量并发 SSE 连接的应用程序，建议使用 Hunchentoot，因为 Woo 的工作线程存在限制。它使用 JZON 进行 JSON 解析，但这并非强制要求。
最近的添加包括 zstd 压缩支持。示例应用程序，包括 2D 太阳系模拟器（“Data SPICE”）和 Horizons JPL API 浏览器，展示了 SDK 的功能，特别是 SSE 流。全面的测试，包括边缘情况处理，可在 `test/` 目录中找到，以及服务器设置示例。
该项目采用 MIT 许可证，并通过 Quicklisp 轻松访问：`(ql:quickload "datastar-cl")`。
## Datastar Common Lisp SDK 发布
开发者 fsmunoz 发布了 Datastar 超媒体框架的 Common Lisp SDK，旨在简化 Lisp 的使用。该 SDK 专注于处理围绕 Datastar 简单 API 的复杂性，包括维护 SSE 流、压缩（目前为 zstd）以及与 Hunchentoot 和 Clack 等 Web 框架的兼容性。
为了演示该 SDK，fsmunoz 使用 NASA 的 SPICE 工具包和 JPL Horizons API 构建了卡西尼-惠更斯任务的模拟，网址为 [https://dataspice.interlaye.red/](https://dataspice.interlaye.red/)。
讨论强调了 SSE 连接阻塞事件循环的问题，以及使用 Wookie 等库的潜在解决方案。SPICE 应用程序使用 Fortran 解析数据，因为现有的 CL-SPICE 库存在限制，选择 Fortran 是出于熟悉性和易用性的考虑，而非完全的 Lisp 实现。开发者计划为 SDK 添加示例，以便更容易采用。
## HNSW：快速向量搜索解释
传统的向量搜索使用余弦相似度将查询与数据集中的每个项目进行比较——这是一个缓慢的过程（线性搜索，O(N)）。分层可导航小世界（HNSW）极大地加快了速度，即使对于大型数据集也能实现近乎即时的结果。
HNSW 模仿我们导航城市的方式：从广阔的概述（高速公路）开始，并逐步放大（州道、主干道、支路）以精确定位位置。它构建分层数据结构，其中较高层具有较少的连接（快速遍历），而较低层具有更多的连接（详细搜索）。
搜索过程从顶层开始，快速缩小可能性范围，然后向下遍历各层，细化搜索，直到到达底层。一个名为 `$ef` 的参数控制精度——较高的值意味着评估更多的节点，以获得更准确但更慢的搜索。另一个关键参数 `$M` 定义了每个节点的最大连接数，影响内存使用。
HNSW 在数据插入期间动态地构建这个“地图”，使用概率方法将点分配到层并将其连接到相似的邻居，从而确保效率。
最终，HNSW 将搜索复杂度从 O(N) 转换为 O(log N)，使其成为现代向量数据库和推荐系统、RAG 等应用的基础。
## PHP 中的 HNSW：一种独特的语义搜索方法
一位开发者 (centamiv) 创建了一个用于向量搜索的分层可导航小世界 (HNSW) 算法的 PHP 实现，并在 Hacker News 上分享。该项目旨在为 PHP 应用程序提供一个自包含的语义搜索解决方案，避免使用 Qdrant 或 Pinecone 等外部服务。
作者构建此实现是为了更深入地理解 HNSW 的机制，并发现启用 JIT 的 PHP 具有令人惊讶的能力。它专为需要语义搜索的 PHP 单体应用程序设计，代码可在 GitHub 上找到 ([https://github.com/centamiv/vektor](https://github.com/centamiv/vektor))。
讨论强调了性能，大约 1,000 份文档表现良好，并且该库不依赖于向量来源（OpenAI 用于示例，但 Ollama 或 HuggingFace 等其他工具也可以使用）。开发者计划根据用户反馈，在项目的 README 中添加有关向量生成的文档。该项目因其清晰和周到的方法而受到赞扬，避免了从其他语言的简单移植。
## 日本的苹果替代浏览器引擎政策 苹果现在允许在日本的 iOS 上使用替代浏览器引擎，但有严格的要求以确保用户安全和隐私。两种类型的应用程序符合资格：专用浏览器应用程序和通过嵌入式引擎提供应用内浏览的应用程序。 寻求使用这些引擎的开发者必须首先从苹果获得授权，证明他们致力于强大的安全实践。这包括主动漏洞监控、公开漏洞披露政策以及及时的安全更新（通常在 30 天内解决正在被利用的问题）。他们还必须使用内存安全的编程语言和最新的安全缓解措施。 隐私至关重要；应用程序必须默认阻止第三方 Cookie，分区存储，并在没有明确同意的情况下避免共享设备标识符。 **主要要求：** * **功能性能：** 引擎必须通过严格的行业标准测试（Web 平台测试的 90%，Test262 的 80%）。 * **引擎管理：** 对于应用内浏览，开发者必须是负责维护和保护其引擎的“浏览器引擎管理者”。 * **透明度：** 需要公开有关已解决漏洞和根证书策略（如果适用）的信息。 这些变化旨在促进竞争，同时坚持苹果为日本用户提供安全和私密浏览体验的承诺。
## 家庭互联网与服务访问的变迁
家庭互联网已经从一个简单、直接可寻址的连接发展成为一个由经济现实驱动的分层系统。IPv4地址的耗尽导致了运营商级NAT（CGNAT）的广泛采用，在这种模式下，ISP会在许多用户之间共享公共IP地址。虽然IPv6提供了一种解决方案，但许多网络目前同时使用两者。
CGNAT可以为ISP节省资金，但会阻止直接入站连接，从而使自托管、游戏和VoIP变得复杂。带宽不仅仅是“速度”；容量、对称性（上传/下载速度相等）和可靠性（服务级别协议）至关重要——尤其是对于企业而言。中断并不总是攻击；受欢迎程度的激增或配置错误的系统可能会模仿DDoS攻击。
如果CGNAT阻止访问，**隧道**提供了一种解决方法。像**bore-cli**这样的工具会创建到公开可访问服务器的出站连接，而**Cloudflare Tunnel**则在Cloudflare边缘提供一个安全的、HTTPS终止的连接。
**关键要点：**
* CGNAT在住宅用户中很常见，限制了入站连接。
* 容量和对称性比宣传的速度更重要。
* 隧道提供了一种绕过CGNAT的解决方案，但务必遵守ISP的服务条款。
* 优先考虑安全性：使用强身份验证，保持软件更新，并备份您的数据。