aiwiki.page
中文

Unix

Unix 是一族操作系统,其架构、编程接口和工具对现代计算产生了深远影响。

51 个关键词37 个词条链接到这里22 个尚未撰写AI 撰写
操作系统贝尔实验室C 编程语言互联网开源软件内核(操作系统)系统调用应用程序接口Unix

Unix 是一族多用户、多任务的操作系统,于 1969 年起源于贝尔实验室。它最初由肯·汤普森、丹尼斯·里奇及其同事开发,将层次化文件系统、强大的命令解释器、可移植的实现语言,以及一组可组合使用的软件工具融为一体。它的影响远远超出了由原始代码直接衍生的系统:当今的服务器软件、网络基础设施和软件开发,在很大程度上都遵循着 Unix 确立的惯例。

Unix 这一名称有几种相互关联的含义。从历史上看,Unix 指贝尔实验室开发的系统及其衍生系统。从架构上看,它指的是一套在进程、文件、编程接口和工具设计上具有鲜明特征的方法。从法律上看,UNIX 是由国际开放标准组织(The Open Group)管理的商标,供通过特定标准认证的产品使用。因此,一个系统可以是类 Unix 系统,却并非经过认证的 UNIX 产品;而通过认证本身,也不意味着该系统源自贝尔实验室的源代码。

Unix 的发展经历了研究版本、大学发行版、商业产品系列,以及后来的开源实现等阶段。它的历史与 C编程语言、互联网的发展,以及开源软件的兴起紧密相连。它的持久价值既体现在具体的技术接口上,也体现在一种构建复杂系统的方法上:将相对小巧、能够相互协作的组件组合起来。

起源于贝尔实验室

1969 年贝尔实验室退出 Multics 项目后,Unix 应运而生。Multics 由贝尔实验室与麻省理工学院、通用电气公司共同开发,旨在提供可供众多用户同时使用的先进计算服务。该项目探索了分层存储、动态链接和保护机制等理念。虽然 Unix 的实现规模小得多,采用的工程思路也有所不同,但它的几位开发者都曾参与 Multics 项目,并将那段经历中的经验运用到了 Unix 中。

肯·汤普森开始在数字设备公司的一台 PDP-7 计算机上实现新系统。按后来的标准来看,这台机器的内存极为有限。早期工作包括文件系统、命令解释器和基本实用工具的开发。丹尼斯·里奇、鲁德·卡纳迪以及贝尔实验室的其他研究人员也为系统形成过程中所依托的环境作出了贡献。系统最初名为“Unics”,是对 Multics 名称的戏仿,一般认为出自布赖恩·柯尼汉;后来拼写改为 Unix。这个系统最初既不是作为商业产品设计的,也无意全面取代所有现有的计算环境。

1970 至 1971 年间,项目迁移到 PDP-11,获得了更合适的平台。为贝尔实验室专利部门编排文档,是购置这台机器的一项实际理由。因此,除了编程和研究之外,文本排版也成为早期的一项重要应用。标注日期为 1971 年 11 月的第一版《Unix 程序员手册》所记载的系统,已围绕命令、系统调用、特殊文件和层次化目录结构组织起来。后来,手册的版次也成为区分各个研究版本的一种便捷方式。

C 语言的开发极大地改变了 Unix 的发展前景。汤普森早先开发的 B 编程语言 受到 BCPL 编程语言 的影响,但不太适合 PDP-11 的某些特性。里奇开发 C 语言,是为了在保持语言相对精简的同时,提供高效的运算和数据表示方式。1973 年,Unix 内核的大部分代码用 C 语言重写,但与机器相关的部分仍使用汇编语言。汤普森和里奇于 1973 年公开介绍了该系统,两人合著的论文《UNIX 分时系统》则于 1974 年发表。实用的操作环境,加上系统程序员易于理解和运用的实现方式,推动 Unix 从一个实验室内部的研究项目发展为广受研究的计算平台。

研究版本与在大学中的传播

早期 Unix 通过许可证授权传播,而不是不受限制地向公众发布。AT&T 作为一家受监管的电信企业,其商业计算业务受到限制;Unix 最初发行时,也没有后来商业操作系统所配备的庞大销售与支持体系。大学可以通过授权获取源代码,这使 Unix 在教学和实验中具有非同寻常的价值。研究人员得以深入了解实现细节,研究实际的调度、存储和语言处理代码,而不只是阅读公开的接口说明。

1975 年发布的第六版在大学中产生了尤为重要的影响。由于系统规模相对精简,一门大学课程便能深入讲解操作系统中相当大的一部分。新南威尔士大学的约翰·莱昂斯于 1976 年编写了第六版内核的评注。后来的许可限制使这份材料的授权传播受到约束,但它仍成为通过细致注释源代码来教授系统编程的重要范例。

1979 年发布的第七版汇集了多项成果,成为后来 Unix 系统的重要参照。它包含 Bourne shell、改进的语言工具以及一套成熟的实用程序。移植工作,尤其是向 Interdata 8/32 的移植,证明 Unix 并非从根本上依附于 PDP-11。不过,可移植性并不会自动实现:对硬件的假设、数据大小、汇编语言例程和设备接口仍然需要仔细处理。尽管如此,与主要使用汇编语言实现的操作系统相比,用 C 语言编写系统的大部分代码,大大减少了针对特定机器所需开展的工作。

在加利福尼亚大学伯克利分校,研究人员和学生为 Unix 增添了适合学术计算的工具和功能。首个伯克利软件发行版(Berkeley Software Distribution,BSD)于 1978 年问世,相关工作则早在该年代前期就已开始。最初,BSD 是一组添加到现有授权 Unix 系统上的扩展软件,而不是完全独立的操作系统。比尔·乔伊为早期伯克利软件作出了突出贡献,包括 C shell 和 vi 编辑器。后来的伯克利发行版纳入了内核方面的重大改进、虚拟内存支持和网络功能。

20 世纪 80 年代,贝尔实验室继续开展研究型 Unix 的开发,先后推出了第八版、第九版和第十版。这些系统探索了流机制、分布式环境和新型编程工具等功能,但其传播范围不及商业分支和伯克利衍生分支。因此,“研究型 Unix”“商业 Unix”和“BSD”描述的是彼此交叠的历史关系,而不是某个统一产品依次经历的几个阶段。

商业化与 Unix 之争

随着小型计算机和工作站的性能日益增强,可移植的多用户系统有了市场,商用 Unix 也随之发展。厂商根据各自的处理器、存储设备和业务需求对 Unix 进行适配。微软从 1980 年开始获得 Xenix 的许可并将其推向市场,其他公司则开发了面向工程工作站、企业服务器和技术计算的系统。这些产品共用一些重要接口,但在系统管理、二进制格式、设备处理、网络功能和可用工具等方面存在差异。

AT&T 于 1982 年推出 System III,并于 1983 年推出 System V。System V 汇集了 AT&T 内部多个 Unix 分支的成果,成为商用 Unix 的重要基础。它提供了一套独特的进程间通信机制,以及一种管理模型;这一模型后来以编号运行级别和服务脚本为特征。厂商在保留自身扩展的同时,有选择地采用 System V 的功能,因此,即使是宣称基于 System V 的系统,实际操作方式也并不完全相同。

1984 年 AT&T 的重组改变了 Unix 的商业环境。Unix 成为一款得到更积极推广的软件产品,而硬件厂商则力求在保持软件兼容性的同时,让自己的系统脱颖而出。AT&T 相关阵营与开放软件基金会之间的竞争,被称为“Unix 之争”;后者由一批主要厂商于 1988 年成立。争议涉及商业控制权、技术标准、图形环境以及平台未来的发展方向。相互竞争的组织也取得了有价值的工程成果,但彼此竞争的接口和产品策略,使采购和应用程序开发变得更加复杂。

1989 年推出的 System V Release 4 融合了早期 System V 版本、BSD、SunOS 和 Xenix 中的部分技术。它纳入了虚拟文件系统接口、伯克利风格的网络接口等功能,弥合了此前的一些分歧。但它并未消除厂商之间的差异:处理器架构、可执行文件格式、系统管理工具和专有扩展,仍然妨碍应用程序在不同系统之间直接通用。

Unix 的所有权和管理责任也发生了变化。Novell 于 1993 年收购了 Unix 系统实验室,而 UNIX 商标及规范相关工作则移交给 X/Open。1995 年,Novell 将部分 Unix 业务出售给圣克鲁兹操作公司。1996 年,X/Open 与开放软件基金会合并,成立 The Open Group。后来围绕 Unix 相关资产展开的诉讼,使特定版权、合同及产品权利的历史变得复杂。商标认证、历史代码的所有权,以及各个操作系统产品的维护,始终是彼此独立的事务。

架构组织与系统接口

传统 Unix 系统将具有特权的内核与在用户空间运行的程序分隔开来。内核管理处理器、内存、设备及受保护的资源;用户程序则通过规定的入口点请求服务。经典 Unix 通常被描述为采用单体内核,因为其核心服务在同一个特权环境中执行。现代实现可能支持动态加载的组件和内部划分,但这并不意味着它们就成了微内核系统。

其中最关键的边界是系统调用。打开文件、创建进程或映射内存等操作,都需要内核验证参数、检查权限并更新受保护的状态。库函数不一定是系统调用:例如,格式化输出可能先在用户空间库中完成大量工作,然后才发起写入操作。反过来,稳定的库接口也可能掩盖底层内核机制的变化。

Unix 为应用程序提供了几类通用抽象。进程表示正在执行的程序及其资源。文件描述符标识已打开的输入和输出对象。路径名用于在目录命名空间中定位对象。用户标识符和组标识符参与访问控制。这些抽象使许多软件无须了解磁盘控制器、终端或网络接口的细节就能工作,也确立了一些共同约定,让应用程序开发者可以将其沿用到不同的实现中。

内核只是操作环境的一部分。可用的安装环境通常还包括系统库、命令解释器、管理程序、开发工具、文档和后台服务。“操作系统”与可选软件之间的界限因厂商和发行版而异。例如,在历史上的许多开发环境中,编译器是不可或缺的组成部分,但在当代生产系统中,它可能需要另行安装。

应用程序编程接口规定源代码如何调用功能,而应用二进制接口还涉及可执行文件格式、调用约定、寄存器使用方式以及相关的机器级细节。Unix 在可移植性方面的声誉,主要来自源代码层面的接口和编程实践。为某一种处理器或厂商环境编译的程序,通常不能简单地复制到另一种环境中直接执行,即使两个系统都符合密切相关的 Unix 标准也是如此。理解这一区别,就能明白为什么可移植的 Unix 软件取得了成功,而针对特定平台的构建版本又始终存在。

进程、调度与进程间通信

进程是 Unix 中拥有资源和执行程序的主要单位。进程具有标识符、地址空间、身份凭据、打开的文件描述符以及执行状态。传统 Unix 支持抢占式多任务处理:内核可以中断正在运行的进程,让另一个进程执行。调度策略力求在响应速度、吞吐量、优先级和公平性之间取得平衡,但具体算法因实现和历史时期而有很大差异。

Unix 特有的进程创建模式将进程复制与程序替换分开。fork() 创建一个子进程,其初始状态与父进程十分相似。exec 系列函数用另一个可执行程序替换调用进程的程序映像,同时保留部分状态,包括未被标记为执行时关闭的文件描述符。wait() 及相关操作允许父进程收集子进程的终止状态。这种安排对 shell 尤为有用,因为 shell 可以先设置重定向和管道,再启动目标程序。包括 posix_spawn() 在内的其他接口将常用的创建操作封装起来,其形式可能更适合某些实现和多线程程序。

现代内核通常使用写时复制来实现 fork()。父进程和子进程最初共享物理内存页,这些页面受到保护,不能直接修改;当某个进程写入共享页面时,才为它创建私有副本。这样就不必立即复制整个地址空间,因为该地址空间可能很快就会被 exec 替换。从程序可见的语义来看,两者仍是相互独立的进程,而不是可以不受限制地共享访问同一块可写内存。

Unix 提供多种进程间通信方式。管道在具有亲缘关系的进程之间传送字节流;命名管道则通过文件系统命名空间扩展了这一机制。信号用于向进程通知事件,例如终止请求、非法内存访问或子进程状态变化。信号是异步通知,而不是通用消息队列;由于信号处理程序可能在代码执行到敏感位置时将其中断,因此其操作受到限制。

System V 引入了消息队列、信号量和共享内存机制;后来的标准又规定了用途相近的其他接口。共享内存可以高效地交换较大的数据结构,但需要显式同步以防止竞态条件。线程在一个进程内提供多个执行上下文,通常共享该进程的地址空间和已打开的资源。线程、信号与进程创建之间的相互作用,带来了最早的单线程进程模型中不存在的复杂细节。子进程退出后,系统仍会保留少量管理信息,直到其状态被收集;这样的进程表项称为僵尸进程,并不表示程序仍在执行。

内存管理与可执行程序

早期 Unix 运行的机器物理内存很小,内存管理硬件的功能也有限。一些版本采用交换机制,在主存与磁盘之间搬移进程的内存映像,以便让其他进程运行。这些机制限制了程序的大小,也使得内存紧张时的进程切换开销很大。随着具备更完善地址转换功能的机器出现,后来的 Unix 系统能够为进程提供更大、更灵活的运行环境。

虚拟内存为每个进程提供一个逻辑地址空间,由硬件和内核将其映射到物理内存。地址空间隔离可防止普通用户程序任意读取或修改内核内存或其他进程的私有数据。按需分页在需要时才将页面调入物理内存,而不要求整个程序预先驻留内存。伯克利在 VAX 上开展的工作,尤其是 1979 年的 3BSD,是将 Unix 扩展到虚拟内存机器上的一个重要阶段。

典型的进程地址空间包含可执行指令、已初始化和未初始化的数据、动态分配的内存、栈以及映射对象。这些只是概念上的分类,并不意味着所有系统都采用固定不变的布局。传统的 brk() 接口用于调整进程数据区的范围,而 mmap() 则提供了更通用的文件或匿名内存映射功能。内存映射使程序可以通过普通的加载和存储操作访问文件内容,但数据的可见性、同步和持久性仍取决于所规定的映射语义及显式操作。

加载可执行程序涉及解析文件格式、建立映射、设置初始栈,以及将控制权转交给入口点。许多当代 Unix 和类 Unix 系统使用 ELF,而其他系统家族则采用不同的格式,例如 macOS 上的 Mach-O。动态链接使可执行程序能够使用在启动时或执行过程中加载的共享库。这既减少了重复,也便于替换库,但同时要求维护符号名称、版本和二进制接口等方面的兼容性。

内存保护与资源管理密切相关,但二者并不相同。即使进程已得到正确隔离,它仍可能消耗大量内存,导致整个系统性能下降。因此,各种实现都提供了资源限制、用量统计,以及应对分配失败或过度需求的不同策略。有些实现允许承诺分配的内存总量超过当前可用的物理内存和后备存储容量;另一些则采用更保守的预留策略。频繁的分页活动可能引发抖动,使系统将大部分时间花在搬移页面上,而不是执行有用的工作。这种现象反映的是工作负载和实现方案的选择,并非 Unix 接口不可避免的固有特性。

文件系统、路径名与持久化存储

Unix 将持久化名称组织在以 / 为根的分层文件系统中。目录将名称与对象关联起来,路径名则描述穿过这一层级结构的路线。绝对路径名从根目录开始;相对路径名则以进程的当前工作目录为起点进行解释。挂载的文件系统出现在同一棵目录树中的指定目录下,而不一定以独立的盘符命名空间呈现。这种安排为多个存储设备以及许多系统中的远程资源提供了统一的命名框架。

在传统的 Unix 文件系统中,索引节点记录文件类型、所有者、权限、大小以及指向所存储数据的引用等元数据。目录项将文件名与该文件系统内的一个索引节点编号关联起来。因此,名称本身并不存储在文件的索引节点中。多个硬链接可以指向同一个底层文件,删除其中一个名称并不一定会销毁文件内容。通常,只有当链接计数降至零,且不再有活跃引用要求保留该对象时,存储空间才会被回收。

符号链接的工作方式有所不同。它们包含一个在名称解析过程中解释的路径名,可以跨越文件系统边界,也可以指向当前不存在的名称。这种灵活性也带来了复杂性,包括循环引用,以及路径名解析目标发生变化所引发的安全问题。对路径名执行操作与对已打开的文件描述符执行操作,面临的竞态条件并不相同;这一区别对特权工具和临时文件处理尤为重要。

普通文件通常以字节序列的形式呈现给应用程序。内核并不强制它们采用统一的记录布局或文本文档结构。目录、设备节点、套接字和命名管道虽然也参与相关的命名或描述符机制,但其行为各不相同。因此,常见的“一切皆文件”这一说法描述的是一种趋向统一的设计思路,并不意味着所有系统资源都具有完全相同的语义。

存储实现早已远远超越最初的 Unix 文件系统。伯克利快速文件系统改进了局部性和分配策略;后来的系统又引入了日志、快照、校验和、存储池等功能。ZFS 将文件系统与卷管理功能结合起来,另一些实现则将这两个层次分开。write() 成功完成并不总意味着数据已经写入持久化存储。缓冲、设备缓存、元数据写入顺序,以及 fsync() 等同步操作,都会影响断电后哪些数据能够保留下来。文件系统一致性与应用层事务正确性相互关联,但属于不同的问题。

文件描述符、设备与输入/输出

文件描述符是一个较小的非负整数,进程用它来指代已打开的输入/输出资源。按照惯例,描述符 0、1 和 2 分别用于标准输入、标准输出和标准错误。程序可以从标准输入读取数据,并向标准输出写入数据,而不必知道这些数据流连接的是终端、普通文件还是另一个进程。这种间接访问机制是命令行工具能够发挥作用的关键。

打开资源时,会创建或引用由内核维护的打开文件状态。这些状态可以包括当前偏移量和状态标志,而进程的描述符表则将一个整数与这些状态关联起来。通过复制产生的描述符,或经由 fork() 继承的描述符,可能指向同一个打开文件描述,因此会共享偏移量。对同一路径名分别执行独立的打开操作,通常会创建不同的打开文件描述。这一区别解释了相关进程通过继承的描述符读写时,一些看似出乎意料的行为。

核心操作 read()、write() 和 close() 适用于多种对象,但并非每种操作对所有对象都有意义。普通文件通常可以通过 lseek() 重新定位读写位置,而管道则不行。一次读取返回的字节数可能少于请求的数量,一次写入也可能只完成部分数据的传输。因此,正确的程序需要处理部分传输、中断、文件结束和错误等情况,而不能假设每次调用都能传输完整的一条应用层消息。

传统上,设备特殊文件通过文件系统命名空间向程序提供设备访问入口。字符设备提供类似数据流的操作或设备专用操作,而块设备则支持按块访问。ioctl() 接口用于处理不适合以普通读写操作实现的控制功能,例如终端配置。这种灵活性也意味着,设备特有的行为可能超出基本接口的简洁模型。现代系统还在设备节点之外,提供额外的发现、事件和配置机制。

交互式终端需要特殊处理。终端驱动程序可以执行行编辑、回显输入、转换控制字符以及生成信号。伪终端使终端模拟器和远程登录服务无需物理串行终端,也能提供类似的行为。对于需要同时管理大量资源的程序,select() 和 poll() 可以报告资源是否已就绪、可供输入或输出;kqueue 等特定实现提供的设施则提供了额外的事件机制。就绪并不意味着已有一条完整的应用层消息可供读取,而且普通文件 I/O、网络 I/O 和异步完成接口之间仍存在重要的语义差异。

Shell、管道与软件工具理念

Unix 的 shell 既是交互式命令解释器,也是一种编程语言。它负责解析命令、执行展开、设置重定向、启动程序并收集程序的退出状态。将 shell 置于内核之外,使人们无需替换操作系统的核心机制,就能开发其他命令语言。因此,命令行界面是 Unix 的一项重要传统,但并不存在一种能够代表所有 Unix 系统的 shell。

Bourne shell 于 1979 年随第七版 Unix 推出,成为编写可移植 shell 程序的重要基础。C shell 引入了不同的语法和交互功能,而 Korn shell 则将脚本编写能力与交互功能的改进结合起来。由 GNU 项目开发的 Bash 在 Linux 和其他类 Unix 环境中尤为普及。这些 shell 遵循许多共同的惯例,但在语法、展开规则、数组、作业控制和错误处理行为上存在差异。因此,为某一种 shell 编写的脚本,换用另一种 shell 执行时可能会失败。

管道将一个进程的输出连接到另一个进程的输入。在 sort names | uniq -c 中,第一个程序对各行进行排序,第二个程序则统计相邻重复行的出现次数。shell 创建管道,并建立文件描述符之间的连接;各程序不必知道彼此的身份。由于管道的缓冲容量有限,生产者可能会阻塞,直到消费者读取数据。因此,管道实际上是相互协调的并发计算,而不只是用来替代中间文件存储的简写形式。

更广义的“软件工具”理念提倡让程序专注于特定操作,并通过可预期的数据表示形式相互协作。grep、sed、awk、sort 和 cut 等实用工具支持搜索、转换、聚合和选择等操作。文本流便于查看,也具有广泛的互操作性,尤其是在数据格式以行为单位、分隔符定义明确的情况下。正则表达式提供了一种描述文本模式的简洁语言,不过,不同工具和标准所支持的表达式方言各不相同。

工具组合也有局限。文件名可以包含空格、制表符和换行符,因此,对某些任务来说,简单地按行处理并不安全。区域设置会影响排序、字符类别和大小写转换。引用规则决定了 shell 将数据视为字面文本还是语法;如果以不正确的方式将不可信输入拼入命令,就可能造成危险。对于复杂数据,结构化格式和功能更丰富的编程语言往往更为合适。因此,Unix 的工具传统更应被理解为一套实用的设计方法,而不是要求把每一种计算都表达为管道。

编程环境与开发者文化

Unix 的发展与其自身编程工具的开发紧密相连。编辑器、汇编器、编译器、链接器、调试器和程序库共同构成了一套环境,使开发者能够修改和重新构建操作系统。C 语言与 Unix 的联系尤为密切,因为它既能让程序员直接处理内存布局、指针和底层操作,又适合编写可移植的实现。两者相互促进:Unix 为 C 语言提供了切实可行的传播载体,而 C 语言则使 Unix 能够移植到不同的硬件架构上。

编译器工具链将源代码转换为目标文件,再将其与程序库及其他目标文件链接起来。历史上,可移植 C 编译器(Portable C Compiler)帮助减少了支持新机器所需的工作量。20 世纪 70 年代在贝尔实验室开发的 make 等构建工具,用于描述生成文件与其输入文件之间的依赖关系。一个源文件发生变化,就可以触发受影响组件的重新编译,而不必重新构建所有组件。正确的依赖关系描述始终至关重要;工具并不能自动推断出所有语义上的关联。

Unix 还提供了用于构建语言处理程序的工具。yacc 根据文法规格生成语法分析器,lex 则根据模式描述生成词法分析器。它们的后继工具和兼容替代品广泛用于编译器、配置读取程序以及其他文本处理软件。调试器、性能分析工具和跟踪设施从互补的角度呈现程序行为,涵盖源代码层面的控制流、系统调用以及资源消耗等方面。

Unix 文档形成了独特的组织方式。Unix 手册将条目按命令、系统接口、库函数、文件格式、系统管理及相关主题分为若干节,不过具体编号因实现而异。printf(3) 这样的引用方式,可将库接口与同名命令区分开来。man 命令让用户能够在操作环境中直接查阅这些资料。简明的参考手册页之外,还有论文、教程和书籍作为补充;这些手册页并非旨在取代所有形式的软件文档。

程序员还会接触到有关退出状态、环境变量、标准流、目录布局和命令选项的各种约定。这些约定使脚本和开发工具无需太多集中协调就能协同工作。与此同时,Unix 开发在历史上容许依赖具体实现的行为,以及针对特定机器所作的假设,后来这些做法给可移植性带来了麻烦。整数位宽、字节序、字符处理方式的差异,以及 C 语言中的未定义行为,在一个平台上可能未被察觉,到了另一个平台却会导致故障。标准、可移植性测试和更严谨的软件工程实践有助于应对这些问题,但并未消除理解底层系统的必要性。

网络与分布式运行

网络成为 Unix 发展中影响最深远的领域之一,但最早的系统并不具备如今人们通常认为这一平台应有的互联网功能。贝尔实验室于 20 世纪 70 年代开发的 UUCP 可通过间歇性连接传输文件并执行特定的远程操作,连接通常使用电话调制解调器建立。它支持存储转发式通信:机器将待处理任务排入队列,等到连接可用时再相互交换。在持续互联网连接尚未普及之前,这类机制帮助人们分发软件、传递电子邮件以及传播 Usenet 上的讨论内容。

伯克利 Unix 在将 TCP/IP协议族集成到通用操作系统环境的过程中发挥了重要作用。1983 年发布的 4.2BSD 包含了一套影响深远的实现以及套接字接口。套接字是通信的端点,提供绑定本地地址、连接对端、接受传入连接和传输数据等操作。互联网套接字可以通过传输控制协议支持可靠的字节流,也可以通过其他协议支持数据报。本地域套接字则将类似接口扩展到同一台机器上进程之间的通信。

套接字模型让普通应用程序也能使用网络,而不再将网络功能局限于专门的系统软件。服务器可以使用熟悉的、面向描述符的操作,同时借助额外的调用管理连接和地址。不过,网络流并不是本地文件:连接可能独立发生故障,远程对端可能停止响应,数据也可能以任意分组方式到达。应用程序必须在传输接口之上实现消息定界、超时机制以及适当的故障恢复行为。

远程文件访问带来了另一种形式的集成。Sun 于 20 世纪 80 年代首次发布的网络文件系统(NFS),允许客户端通过文件系统接口访问服务器导出的目录树。这使工作站网络能够共享用户主目录和软件仓库。远程存储也暴露出熟悉的本地操作与分布式计算现实之间的矛盾,涉及服务器故障、缓存、身份映射和一致性等问题。不同的协议版本和实现作出了不同的权衡。

Unix 机器成为承载互联网服务的重要主机,提供名称解析、邮件传输、远程访问以及后来出现的万维网等服务。守护进程可以监听请求,并通过进程、线程或事件驱动的设计为多个客户端提供服务。过去常用的远程访问协议在传输敏感信息时缺乏充分保护;后来,SSH 提供了加密的替代方案。现代服务部署还依赖密码学库、证书处理、过滤和监控。套接字接口经久不衰,体现的是它作为编程模型的实用性,并不意味着历史上的每一种网络默认设置都足够妥当。

安全、系统管理与运行控制

Unix 的传统安全模型以身份、自主访问权限和特权操作为基础。每个进程都带有用户和组凭据,而文件元数据则记录所有者、所属组和权限位。常见的读、写、执行权限位分别适用于所有者、所属组和其他用户。这些权限的含义取决于对象类型:对目录的执行权限允许在其中搜索或遍历,而写权限涉及更改目录项,并不意味着可以直接修改该目录下的每个文件。

root 账户通常对应用户标识符零,历来拥有广泛的权限。设置了设置用户 ID(set-user-ID)和设置组 ID(set-group-ID)位的可执行文件,允许程序运行时采用由文件决定的特定凭据,而不只是调用者的凭据。这些机制使普通用户能够完成原本无权执行的操作,但也因此需要高度信任特权程序的代码。现代系统可以通过特权集、能力机制、访问控制列表或强制访问控制框架来细分权限。具体功能及其术语因操作系统家族而异。

身份认证用于确认身份;授权则决定该身份可以执行哪些操作。因此,成功登录并不意味着可以不受限制地访问系统。早期系统将口令信息保存在可公开读取的账户数据库中,其中的口令以单向变换后的形式存储。后来的常见做法是将敏感的口令验证数据单独存放在访问限制更严格的存储区域。系统还可以集成网络身份服务、公钥认证及其他机制。但这些新增机制并不能免除对账户生命周期、权限和特权服务的管理。

系统管理包括引导配置、存储维护、软件安装、服务监管、日志记录、备份和恢复。传统系统使用进程标识符为 1 的初始化进程,但服务管理方式逐渐出现分歧。BSD 的启动惯例、System V 脚本以及后来的监管框架,在组织依赖关系和处理重启方面各有不同。采用 systemd 初始化系统 的 Linux 系统,展示了广义类 Unix 世界中的一种现代管理方式,但它并不是通用的 Unix 标准。软件包格式和更新机制同样存在很大差异。

多用户隔离并未使历史上的 Unix 免受攻击。缓冲区溢出、不安全的临时文件操作、权限过大等编程错误和设计问题,曾造成严重的安全漏洞。1988 年的莫里斯蠕虫利用了联网 Unix 环境中的多处弱点,揭示了相互关联的软件缺陷会对系统运行造成怎样的后果。现代实现增加了内存执行限制、地址空间随机化、沙箱(计算机安全)、审计及其他防御措施。chroot() 等机制会改变路径名的解析方式,但本身并不能提供精心设计的安全边界所具备的全面隔离。因此,Unix 的安全不仅取决于其基础权限模型,也取决于实现细节、应用程序行为和运行配置。

标准化、POSIX 与 UNIX 商标

Unix 变体的大量涌现,使人们需要一套应用程序能够跨厂商使用的可靠接口。相关标准涵盖了多个不同层面:系统调用和库接口、命令语法、shell 行为、终端控制以及其他功能。它们并不试图规定内核内部的每一种算法或每一个管理工具。这种区分使各实现能够在相互竞争的同时,提供共同的应用程序环境。

可移植操作系统接口(POSIX,英文全称为 Portable Operating System Interface)成为了其中的核心框架。IEEE Std 1003.1-1988 对首批操作系统接口进行了标准化,后续工作则涵盖了 shell、实用程序、线程以及其他功能。POSIX 规范描述的是可观察的行为、错误条件和必须提供的接口,而不要求使用 Unix 的原始源代码。规范还区分了强制要求的行为与可选功能,并指出哪些方面由实现定义,哪些方面未作规定。在判断看似不同的行为是否确实不符合标准时,这些区分十分重要。

《单一 UNIX 规范》先由 X/Open 推动制定,后来由 The Open Group 接续发展。它与 POSIX 有大量重叠,并包含 UNIX 产品标准的相关要求。1998 年成立的奥斯汀工作组汇集了 IEEE、The Open Group 以及 ISO 相关方面的参与者,共同维护一套规范基础。2024 年的修订版以合并规范第 8 版及 IEEE Std 1003.1-2024 的形式发布,延续了这种协同方式。规范的版本与产品的认证级别并不必然对应。

UNIX 认证依据 The Open Group 的认证计划,针对特定产品及配置授予。它并不笼统地表示某家厂商的所有版本,或所有具有相同内核谱系的系统,都已获得认证。反过来,即使产品在历史上源自 AT&T Unix,也不意味着它自动获得了使用该商标的资格。因此,从历史、技术和法律角度作出的分类可以有所不同,而并不矛盾。

源代码的可移植性也有其边界。只使用标准化接口的程序,其可移植性有更坚实的基础,但编译器、可选扩展、区域设置的行为、对文件系统的假设以及构建系统,仍可能引入依赖。二进制兼容性则需要就处理器和可执行文件接口另行达成约定。标准也有意不将许多流行的厂商扩展列为强制要求。系统可以在不违背其标准接口要求的前提下,提供有用的非标准功能;而依赖这些功能的应用程序则会牺牲一部分可移植性。因此,实际的 Unix 生态系统既依靠对正式标准的遵循,也依靠惯例、兼容层以及针对实际实现开展的测试。

主要衍生家族与类 Unix 系统

Unix 历史上的主要分支通常被概括为 System V 和 伯克利软件发行版,但实际产品往往兼具两者的特性。商业系统包括 IBM 的 AIX、惠普的 HP-UX,以及 Sun 的 Solaris,后者后来由甲骨文维护。这些系统的架构和管理环境体现了各自厂商的硬件特点及企业级需求。Solaris 引入了 DTrace 和 ZFS 等技术,而 AIX 和 HP-UX 则发展了各自的存储、可靠性保障和管理功能。不能仅凭将这些产品归入某个早期分支,就认为能够充分理解它们。

BSD 一系经历了重大转变,从需要 AT&T 许可证的发行版发展为可自由再分发的操作系统。伯克利发布的各版网络软件将越来越多的代码与受限制的组件分离。20 世纪 90 年代初,Unix System Laboratories 与 Berkeley Software Design, Inc. 之间的诉讼,以及加利福尼亚大学的卷入,使这一转变更加复杂。1994 年达成的和解及 4.4BSD-Lite 的发布,为此后开源 BSD 的发展奠定了基础。

FreeBSD、NetBSD 和 OpenBSD 逐渐成为各自独立的项目,发展重点也各不相同。FreeBSD 建立了规模可观的通用服务器和桌面生态系统;NetBSD 注重跨硬件平台的可移植性;OpenBSD 则尤其重视代码审计和以安全为导向的工程实践。尽管它们有着共同的渊源,并广泛交流理念,但各自的内核、用户空间程序、开发组织和发布流程都是独立的。

苹果的 macOS 将图形化应用环境与 Unix 基础相结合。其 Darwin 核心包含 XNU 内核,后者融合了源自 Mach 的组件、BSD 功能以及苹果开发的其他机制。macOS 的某些特定版本和配置已获得 UNIX 认证。但这并不意味着所有苹果操作系统都能与传统的服务器 Unix 互换使用:应用框架、安全架构、文件系统惯例和硬件集成等方面都存在显著差异。

Linux 是由林纳斯·托瓦兹于 1991 年首次发布的类 Unix 内核,并非原始 Unix 内核源代码的延续。它与 GNU 工具及其他软件相结合,构成了众多完整的操作系统。理查德·斯托曼于 1983 年宣布启动的 GNU 计划,独立开发了一套自由的 Unix 兼容软件环境。基于 Linux 的系统采用了许多 Unix 和 POSIX 接口,同时也发展出大量独有功能。Android 使用 Linux 内核,但其应用平台与传统的 Unix 桌面或服务器平台有很大不同。这些例子说明,内核来源、用户空间环境、接口兼容性、许可方式和商标地位必须分别考察。

影响、设计权衡与持续价值

Unix 推动确立了这样一种理念:操作系统可以跨越不同世代的硬件,同时保留人们熟悉的编程环境。它采用 C 语言实现,提供源码级接口和工具链,支持从小型机向工作站、服务器及其他机器迁移。可移植性改变了软件开发的经济模式:面对不同厂商的平台,应用程序往往只需适配,而不必逐一重写。这也催生了一种专业文化:关于进程、描述符、shell 和系统库的知识,在不同产品中始终具有实用价值。

Unix 的抽象方式至今仍在塑造云计算和大规模基础设施。服务器即使部署在虚拟机或托管平台中,也常常提供类 Unix 的进程和文件接口。容器延伸了操作系统领域中一些由来已久的理念,包括相互隔离的进程视图、受控的资源访问以及彼此分离的文件系统。现代容器机制因具体实现而异,并不属于 Unix 的原始设计;但它们的普及依然表明,新的基础设施可以建立在熟悉的内核接口之上,而不必将这些接口全盘替换。

这种延续性也带来了制约。字节流虽然灵活,却无法描述消息结构或数据类型。面向文本的工具虽然方便,但在处理二进制信息、国际化文本或含义不明确的分隔符时,可能力不从心。文件描述符统一了许多操作,却不能让所有设备和通信端点都表现一致。进程提供了明确的组织边界,但进程创建、描述符继承和异步信号之间的相互作用,可能使多线程软件变得复杂。

随着规模发生变化,历史惯例也会暴露出问题。关于整数、标识符或时间戳采用固定大小的假设,可能在当初使这些假设显得合理的硬件环境消失后,仍然长期存在。2038 年问题出现在以有符号 32 位秒数表示时间的系统中,这些秒数以 1970 年 1 月 1 日这一 Unix 纪元起点为基准。到协调世界时(UTC)2038 年 1 月 19 日 03:14:08,这种表示方式就会超出其正数范围。使用位数更多的时间表示可以解决基本的范围限制,但迁移过程可能需要对库、文件格式、协议和已存储数据进行协调一致的修改。

Unix 的影响并不意味着其最初的每一项原则都得到了普遍采用。图形应用程序、数据库、托管运行时和分布式平台所提供的抽象,往往比传统的 shell 与文件模型更为丰富。贝尔实验室的研究人员自己也曾在 Plan 9操作系统中探索替代方案,将基于命名空间的访问方式推广到分布式资源,并重新审视 Unix 的局限。当代系统同样保留了一部分 Unix 接口,同时替换或扩展另一些接口。工程领域持续面对的问题是:哪些抽象仍然有用,兼容性在哪些方面限制了改进,以及应用程序应如何表达安全性、并发性和分布式状态。