Derivations to Deployments: Practical Nix in Production

Lobsters Hottest 事件

摘要

这篇演讲介绍了如何用 Nix 实现从开发环境、构建到云部署的全面可复现性,并展示了 Antithesis 基于 Nix 的“命令集”框架来替代杂乱脚本。

<p><a href="https://lobste.rs/s/s94kc4/derivations_deployments_practical_nix">Comments</a></p>
查看原文
查看缓存全文

缓存时间: 2026/07/31 14:49

**TL;DR:** 这场演讲介绍了如何用 Nix 实现从开发环境、构建动作到云部署的全面可复现性,并展示了 Antithesis 基于 Nix 的“命令集”框架来替代杂乱脚本。 ## 演讲者与核心观点 我是约翰·默里,在 Antithesis 做开发者体验方面的工作,帮助构建内部工具,让开发者能开发出真正可用的软件。我是 Nix 的忠实粉丝,这次会议讲的是软件可靠性,而我相信,帮助你和团队获得可用软件的最好方法之一就是**处处实现可复现性**。 如果你的技术栈每一层都具有可复现性,就能帮你做出更好的软件: - 如果你能复现任何一个 bug,你基本上就有无数次机会去修复它。 - 如果你的开发环境是可复现的,就不太会遇到“在我机器上是好的”这种问题。 - 如果你的本地环境在云端也是可复现的,就能对自己在本地测试过的改动真正能在生产环境工作更有信心。 另外,可复现的开发者体验能让开发者花更多时间做真正重要的事,比如测试、走流程,少花时间跟环境搏斗。所有东西都提交在仓库里,所有人使用同一条主路径,而不是依赖随机 README 或公司里老掉牙的传说。 ## Nix 是什么 Nix 本质上是一种编程语言、一个包管理器,和一整个 Linux 发行版。它可以声明变量、写函数、创建对象、导入其他文件——基本上是 Haskell 和 JavaScript 生了个孩子:纯函数式语言、惰性求值,但类型系统基本不存在,一切都是运行时。 你想用 Nix 的原因,是它能提供**可复现的构建**,你可以用这个来构建整个技术栈,让你整个流程都可复现。例如一个最简单的 Nix 构建,只需要把输出写到一个特殊输出文件里,Nix 就会帮你追踪这一切。 要让构建可复现,Nix 会: - 追踪构建的所有输入,包括构建配方本身。 - 给每个构建唯一的、不可变的输出,存储在 Nix store 中。 - 在沙箱中运行每个构建,限制网络访问,标准化环境。 这里的“沙箱”主要不是安全概念,而是实现可复现环境的主要方法。你越了解代码周围的东西是什么,它就越有可能每次都表现一致。 ## 可复现输出长什么样 以你用 Nix 构建出来的 git 二进制文件为例。首先看到的是一小段哈希,它代表了构建 git 所需的**每一个输入**。如果你改变流程中的任何东西,会得到一个完全不同的输出。因此你可以在机器上同时拥有例如 40 个不同版本的 git,它们彼此独立运行,不会互相覆盖。 其次,Nix 会确保构建使用的每个依赖都是显式的。如果你对 git 二进制运行 `ldd` 查看动态依赖,Nix 会将它们固定到 Nix store 中的显式路径。它不依赖系统中的任何全局状态,所以如果它在我的机器上能跑,那它在你的机器上也能跑。 ## NixOS:整机声明式管理 很多人进入 Nix 的第一步是 NixOS。这是一个非常简单的 NixOS 配置示例——设置 GNOME、安装 Podman 作为容器运行时、给系统安装一些包。 NixOS 会把这份非常声明式的“基础设施即代码”配置转换成 systemd units,并从 Nix store 为不同配置创建符号链接,最终产生一个定义了整个系统的构建/派生(derivation)。也就是说**一个 Nix 输出就是你的整台电脑**。 这意味着你可以回滚到以前的版本。这是 NixOS 最棒的事情之一:就算配置是声明式的,也不代表它真的能用。有时你想换个桌面环境或试试新程序,结果网络驱动不工作、键盘失灵、显卡驱动一塌糊涂。在普通发行版上这会是巨大的麻烦,但在 Nix 里,你只需要重启并回滚到旧版本,就好像什么都没发生过。 另外,因为一切都写在代码里,分享配置非常容易。在 Antithesis,我们有一个所有开发者共享的模块,我可以向所有人滚动发布更新。例如有一次我们需要定制化 VPN,接入很多内部服务——我只需要让大家拉取配置、运行一次更新,一切就正常了,不需要让大家读三十步的文档。 但直接用 NixOS 并不是银弹:你不能指望团队里的每个人都恰好有一模一样的 Linux 发行版,人们想自定义自己的环境。所以我们不想强迫所有人使用相同配置。那么,在项目层面怎么实现可复现性呢? ## nix-shell:项目级开发环境 假设我们有一个 TypeScript 前端、一个 Rust 后端,可能还有一个 Postgres 数据库。如果你不是 Nix 深度用户,哪怕只从这次演讲学到一件事,那就是**搭建一个 nix-shell**。 `nix-shell` 能帮你指定项目所需的全部依赖。前端需要 Node.js,后端需要 cargo 和 Rust 工具链,我们甚至把 Postgres 也放进 shell 里。当你不在 shell 中时,你什么都没有——没有 `cargo`、`npm`。激活 nix-shell 后,这些工具都指向 Nix store 里的显式路径,然后你就可以像平常一样使用它们。 这是一个很棒、能解决 80% 问题的方案。它就像 `rustup`、`nvm` 等一大堆版本管理器,但可以用一个工具配置系统可能需要的每个工具,而且它会一直有效。六个月后回到项目,你会得到一模一样的开发者环境。 ## 构建真实项目 Nixpkgs 提供了很多辅助函数,让构建项目代码变得容易。只需要指向前端和后端源码,用特殊的构建器来构建 Node 包和 Rust 包,这就是构建本身。 很多人害怕 Nix 是因为奇怪的错误和困惑,但在很多情况下你只需要做简单构建,事情就能正常工作。唯一有点奇葩的是**哈希**:因为构建是沙箱化的,Nix 会限制网络访问。为了允许按需访问网络,你必须指定所下载内容的哈希。如果下载到的内容哈希不对,构建就会失败——这就是在允许网络访问的同时强制可复现性的方式。 ## 部署:Nix copy 与构建缓存 有了本地构建,怎么部署到生产服务器?虽然可以做成 Docker 容器用常规编排工具,但 Nix 有一个更酷的原语:**Nix copy**。 Nix copy 会把本地 Nix store 里的构建发送到远程机器。因为它知道每个构建的完整闭包,所以只发送那台机器没有的东西。如果你一遍又一遍迭代同一构建,只需要发送顶层的二进制文件,因为服务器已经有了所有共享库。 我在迭代时常用方法:用 Nix copy 把二进制复制到服务器,然后 SSH 进去运行它。对很多项目来说这是一个非常好的开发循环——不需要在服务器上克隆代码、跑完整构建,也不需要把容器推到 registry。这很像美好的旧时光:用 SCP 把 PHP 文件传到服务器,网站就上线了。 额外的好处是,你可以用同样的工具免费获得**构建缓存**:让 CI 服务器在每次提交时构建,把结果推到 S3 作为二进制缓存,所有开发者机器信任这个缓存。任何 Nix 构建都会先问缓存“你有这个吗?好,发给我”,这样你就不必为了拉取项目而承担可能长达一小时的 Rust 构建。 ## 大多数 Nix 教程停下的地方:脚本仍然很烦人 到这里,你有 NixOS 管理整个系统,有 nix-shell 管理仓库和基础构建,所有服务都有构建,本地可复现、声明在代码里、正常工作。这基本是对的,但一个问题是:**脚本仍然很烦人**。 我们已经安装了所有工具让程序构建出来,但这只是让软件系统能运行的一半功夫。还需要确保围绕系统的所有逻辑、运行和部署它的逻辑同样可复现。 例如 Kubernetes 仓库中有一个叫 `hack` 的目录,里面是一堆小脚本和开发者工具:启动本地集群、更新文档、运行代码生成、lint、跑测试。写成脚本比从 README 复制粘贴好,但这些脚本可能有隐式依赖——用了某个随机工具,你可能要记得更新 nix-shell 把它加进去。而且很多项目脚本散得到处都是,可发现性很差。有人会用 Makefile 或 justfile 组织,但最终仍是一个巨大的目录。 你可以用更多 Nix 解决部分问题:在 Nix 里写 shell 脚本,指定构建输入,例如“用 node 和 cargo”。这大概能行,但你会得到一个巨大的 nix-shell 文件,里面全是构建,只是为了把所有工具放在一个地方。Nix 语言本身可以帮你组织,但这还是会很痛苦——很多脚本可能在做非常特定的构建,比如开启 ASan 或打开 feature flag。如果我不是在开发那些东西,而激活 nix-shell 却要白白承担所有构建成本,就很烦人。 ## Antithesis 的“命令集”方案 Nix 的核心是惰性的,为什么不能在实际开发循环里也拥有这种惰性?所以在 Antithesis,我们把“用 Nix 构建一切”的思路做成了一个叫**命令集**(command set)的东西。 它其实是一个基于 Nix 的 CLI 框架,是 Nix 构建之上的一个包装,再加上自动补全、帮助文本等额外好东西。它由一些小 bash 片段构成,并且把所有东西都沙箱化,以提供更多可复现性。 核心是,你可以像指定任何其他 Nix 构建一样指定一个命令集,然后得到一个能放进 shell 的小型开发 CLI。定义构建时,底部有一个小辅助函数:你写一个 bash 脚本,通过三行代码就能工作。每个脚本还可以用沙箱包裹——在这个例子里,他们只是设置了 PATH,因为即使 Nix 会……(视频转录在此处中断) ## 来源 视频:https://www.youtube.com/watch?v=WaPOtisNu1k

相似文章

我的调试器有一半是 Nix 写的

Hacker News Top

作者介绍如何借助 Nix 的确定性 Rewind VM 构建调试器,利用 derivation 记录完整输入,实现可复现的竞态条件复现与精确定位,大幅降低了实现调试功能的难度。

我喜欢的 NixOS 声明式安装方式

Michael Stapelberg

一份关于使用 nixos-anywhere 等工具通过网络声明式安装 NixOS 的指南,重点强调在版本控制下管理配置文件。

使用Nix的开发环境:四个快速示例

Michael Stapelberg

本教程演示了使用Nix设置开发环境的四种方法,包括交互式一次性使用、配置文件以及密封的Nix Flakes,并以GoCV和OpenCV为例。

NixOS 让我不再那么害怕

Lobsters Hottest

作者分享了使用 NixOS 部署 FreshRSS 等自托管服务的体验,说明声明式配置如何大幅降低运维和重建服务器的心理负担与工作量。