try ai
科普
编辑
分享
反馈
  • 可计算可枚举性

可计算可枚举性

SciencePedia玻尔百科
核心要点
  • 如果一个算法可以列出集合的所有成员,那么该集合就是可计算可枚举的 (c.e.),这允许确认成员身份,但不一定能否定它。
  • 停机问题提供了一个典型的例子,即一个集合是可计算可枚举但不是可判定的,证明了并非所有可列出的集合都是完全可解的。
  • 根据波斯特定理,一个集合是可判定的,当且仅当该集合及其补集都是可计算可枚举的。
  • 可计算可枚举性是一个统一的概念,它解释了希尔伯特第十问题的不可解性以及哥德尔不完备定理的基础。

引言

计算的绝对极限是什么?虽然计算机科学通常关注我们能解决什么问题,但更深的理解来自于探索我们不能解决什么问题。这一探索揭示了一个由精确逻辑规则支配的、结构化的不可解问题宇宙。在这个领域的中心,存在一个关键的区别:我们能明确回答的问题(“可判定的”)和我们只能确认肯定实例的问题(“可计算可枚举的”)。本文旨在探讨可计算可枚举性的基本性质,这一概念定义了算法知识的边界。我们将首先回顾这一思想的核心原理和机制,从基础的停机问题到由弗里德伯格-穆奇尼克定理揭示的不可解性的复杂结构。随后,我们将看到这个源于可计算性理论的单一概念,如何为理解数学和逻辑学中一些最深刻的成果(包括哥德尔不完备性和希尔伯特第十问题的不可解性)提供了统一的钥匙。

原理与机制

要真正把握计算的本质,我们必须超越我们能计算的事物,去探索我们不能计算的广阔领域。这段旅程并非坠入黑暗,而是进入一个充满惊人结构和深邃之美的世界。我们的探索始于对两种知识的一种简单而有力的区分。

可判定与可枚举:两种知识

想象一下你有一个关于数的问题——例如,某个给定的数是否是素数。你可能会求助于两个神奇的设备之一。

第一个设备是​​神谕机​​(Oracle)。你给它任何一个数,比如17,它会立刻闪烁“是”。你给它21,它会闪烁“否”。它从不出错,从不犹豫。对于宇宙中的任何数,它都能在有限时间内给出一个明确的是或否的答案。用逻辑的语言来说,对于这个神谕机而言,素数集合是一个​​可判定​​集(也称为​​可计算​​集或​​递归​​集)。如果存在一个算法——一台图灵机——能够对任何输入停机并正确判断其成员关系,那么这个集合就是可判定的,就像我们这个万无一失的神谕机一样。该算法计算的是集合的​​特征函数​​ χA\chi_AχA​,对于集合内的成员输出 111,对非成员输出 000。一个集合要成为可判定的,其特征函数必须是我们所说的​​全可计算函数​​——一个对每个可能的输入都能完成计算的程序。

第二个设备是​​打印机​​(Printer)。这台机器更简单。它只是开始按某种顺序一个接一个地打印出所有素数:2, 3, 5, 7, 11,如此继续,永不停歇。如果你想知道17是否是素数,你可以观察这个列表。最终,17会出现,你就得到了“是”的答案。但如果你想知道21的情况呢?你观察着,等待着。几分钟、几小时、几天过去了……21始终没有出现。你能断定它不是素数吗?不能完全确定。也许它就是下一个要打印的数。你永远无法绝对确信一个“否”的答案,因为你可能只是等待得不够久。

这第二种情景描述了一个​​可计算可枚举​​(computably enumerable, c.e.)集(也称为​​递归可枚举​​集或​​半可判定​​集)。如果存在一个算法,对于集合中的每个成员,它都会停机并回答“是”,那么这个集合就是c.e.的。然而,对于非成员,该算法可能会永远运行下去,永不给出答案。这是一条单行道:你可以确认成员身份,但不一定能否定它。这等价于该集合是一个​​部分可计算函数​​的定义域——一个只对集合内的输入有定义的函数。

每个可判定集也都是可计算可枚举的。如果你有神谕机,你可以轻易地造出一台打印机:只需逐一遍历所有数,向神谕机询问每一个数,然后打印出那些得到“是”的数。开启了整个领域的关键问题是:反过来是否也成立?是否每一份能由机器打印出来的列表,也都能由某个神谕机来判定?

普适的障碍:停机问题

对那个问题的答案是一个响亮的“不”,其原因在于计算机科学中所有问题中最著名、最基本的一个:​​停机问题​​。

想一想你写过的任何计算机程序。有时,一个错误可能会导致它陷入无限循环。如果能有一个万能的调试工具,一个能分析任何其他程序及其输入,并确定地告诉你“这个程序会停机”或“这个程序会永远循环”的程序,那该多好?这就是停机问题。让我们把它形式化。我们可以给每个可能的图灵机(程序)分配一个唯一的编号,即索引 eee。停机集,我们称之为 HALTHALTHALT,是所有序对 ⟨e,x⟩\langle e, x \rangle⟨e,x⟩ 的集合,其中程序 eee 在给定输入 xxx 时最终会停机。

HALTHALTHALT 是可计算可枚举的吗?当然!我们可以为它构建一台“打印机”。过程很简单:模拟程序 eee 在输入 xxx 上的运行。如果模拟过程停下来了,我们就在列表上打印出 ⟨e,x⟩\langle e, x \rangle⟨e,x⟩。这完全符合c.e.集的定义。

但 HALTHALTHALT 是可判定的吗?我们能为它构建一个神谕机吗?由 Alan Turing 发现的答案是“否”。其证明是一个自指的杰作,一次逻辑上的柔道翻转。为了论证,假设存在这样一个神谕机,我们称之为 Halts(e, x)。然后我们可以用它来构建一个淘气的小程序,我们称之为 Contrarian,它以自己的代码 ccc 作为输入:

Contrarian($c$):

  1. 询问神谕机:Halts($c, c$)?
  2. 如果神谕机回答“是”(意味着 Contrarian 被预测会在自己的代码上停机),那么 Contrarian 就故意进入一个无限循环。
  3. 如果神谕机回答“否”(意味着 Contrarian 被预测会永远循环),那么 Contrarian 就立刻停机。

现在,当我们在 Contrarian 上运行它自己的代码时会发生什么?

  • 如果 Contrarian 停机了,这意味着神谕机必定预测它会永远循环。但神谕机本应是正确的!矛盾。
  • 如果 Contrarian 永远循环,这意味着神谕机必定预测它会停机。神谕机又错了!矛盾。

由于每种可能性都会导致矛盾,我们最初的假设必定是错误的。这样的神谕机不可能存在。停机问题是不可判定的。它是一个集合是可计算可枚举但不是可计算的典型例子。我们找到了一个我们的打印机可以生成,但任何全知的神谕机都永远无法构建的列表。

波斯特的美妙对称性

那么,一个仅仅是可枚举的集合(如 HALTHALTHALT)与一个完全可判定的集合之间,根本的区别是什么?答案是一个被称为​​波斯特定理​​的优美对称的结果。

让我们回到我们的设备。想象一下你想判断某个元素是否属于集合 AAA。你有一台用于 AAA 的打印机,并且关键是,你还有一台用于其补集 A‾\overline{A}A(所有不在 AAA 中的元素的集合)的打印机。现在你能构建一个神谕机吗?可以!要确定一个数 xxx 是否在 AAA 中,你只需同时启动两台打印机,并观察它们的输出。由于每个数要么在 AAA 中,要么在 A‾\overline{A}A 中,你绝对可以保证 xxx 最终会出现在其中一个列表上。如果它从 AAA-打印机出来,你的答案就是“是”。如果它从 A‾\overline{A}A-打印机出来,你的答案就是“否”。这个过程总是会停机并给出正确答案。它是一个判定器。

所以,波斯特定理阐述如下:​​一个集合 AAA 是可判定的,当且仅当 AAA 和它的补集 A‾\overline{A}A 都是可计算可枚举的。​​

这个定理以惊人的清晰度阐明了停机问题的本质。我们知道 HALTHALTHALT 是c.e.的。我们也知道它不是可判定的。根据波斯特定理,这只能意味着一件事:它的补集 HALT‾\overline{HALT}HALT——所有会永远循环的程序-输入对的集合——是​​不可计算可枚举的​​。没有任何机器能够成功地列出所有不停机的计算。这是一个深刻的限制,是数学中一个无法被任何计算过程系统性地照亮的“黑暗”区域。这些集合有时被称为​​余-c.e.​​集,它们在所谓的​​算术谱系​​中的形式化定义是 Π10\Pi_1^0Π10​,与c.e.集(它们是 Σ10\Sigma_1^0Σ10​)形成对比。

不可解性地图

我们现在已经建立了问题的基本地理:可判定问题的平原(000)和第一个不可计算问题的高峰——停机问题(其“难度级别”或​​图灵度​​记为 0′0'0′)。我们可以使用​​可归约性​​来形式化这种“难度”的概念。我们说 AAA ​​图灵可归约​​于 BBB,记作 A≤TBA \le_T BA≤T​B,如果我们有一个用于问题 BBB 的神谕机,就能解决问题 AAA。这意味着 AAA 的难度“不高于” BBB。

事实证明,HALTHALTHALT 是一种非常特殊的难题。任何可计算可枚举的问题,无论它是什么,都可以归约到停机问题。这使得 HALTHALTHALT 成为了一个​​c.e.完全​​问题。所有c.e.集都位于这个高峰或其下方;它们的度小于或等于 0′0'0′。

这一发现在20世纪40年代引导伟大的逻辑学家 Emil Post 提出了一个重大的问题。我们有可计算集(度为 000)和停机问题(度为 0′0'0′)。仅此而已吗?是否每个不可计算的c.e.问题都只是停机问题的一个伪装版本,具有相同的最终难度?或者,是否存在一个丰富、复杂的不可解性景观,其中存在着中等难度的问题——那些不可解,但本质上比停机问题更容易的问题?这就是​​波斯特问题​​:是否存在一个严格介于 000 和 0′0'0′ 之间的c.e.度?

弗里德伯格-穆奇尼克革命:无穷的度

十多年来,这个问题一直悬而未决。答案在1957年出现时,带来了一场革命。Richard Friedberg 和 Albert Muchnik 独立地证明了,不可解性的景观不是一个简单的两层系统,而是一个无限丰富和多样的领域。他们证明了存在​​不可比较​​的c.e.集 AAA 和 BBB:两者都不能用来解决对方(A≰TBA \nleq_T BA≰T​B 且 B≰TAB \nleq_T AB≰T​A)。

该证明是一项惊人的构造性成就,被称为​​优先方法​​。它就像一出令人叹为观止的复杂编舞。目标是逐步构建两个c.e.集 AAA 和 BBB。为确保它们是不可比较的,我们必须满足一个无限的需求列表:

  • 对于每个可能从 BBB 计算 AAA 的程序 eee,我们必须确保它失败。(Re:ΦeB≠AR_e: \Phi_e^B \neq ARe​:ΦeB​=A)
  • 对于每个可能从 AAA 计算 BBB 的程序 eee,我们也必须确保它失败。(Se:ΨeA≠BS_e: \Psi_e^A \neq BSe​:ΨeA​=B)

构造分阶段进行。在每个阶段,我们可能需要向集合 AAA 添加一个数来挫败某个 ReR_eRe​ 需求。但向 AAA 添加一个数会改变用于 SeS_eSe​ 需求的神谕机!为一个需求采取的行动可能会破坏为另一个需求取得的进展。这被称为​​损害​​(injury)。

优先方法的精妙之处在于其处理这些冲突的系统。需求被赋予一个优先顺序(R0,S0,R1,S1,…R_0, S_0, R_1, S_1, \dotsR0​,S0​,R1​,S1​,…)。高优先级的需求被允许损害低优先级的需求。然而,构造被巧妙地安排,使得任何单个需求只被损害有限次。它可能会被击倒,但最终总有机会站起来并采取永久行动以确保其满足。最终,每一个需求都得到了满足。

其结果是两个集合 AAA 和 BBB,它们都是可计算可枚举的,但生活在不同的不可计算性世界中。两者都不可判定,但也没有停机问题那么强大。它们代表了一个新的、中间的难度级别。这一突破揭示了c.e.度的结构不是一条简单的线,而是一个密集的、偏序的、具有难以想象复杂性的宇宙,拥有无限多个不同层次的不可解性。对“什么不可计算”的探索,并未导向虚空,而是导向了一个宇宙。

应用与跨学科联系

我们已经探讨了可计算可枚举集的精确、机械的定义——一个可由算法生成的数列表。乍一看,这似乎是一个相当枯燥的概念,只是逻辑学家和计算机科学先驱们的好奇心所在。但事实远非如此。这个“有效列举”的简单思想并非狭隘的专业知识;它是一把万能钥匙,解锁了横跨数学、逻辑学和哲学领域一些最深刻、最惊人的真理。它揭示了现实的一种基本纹理,一道介于我们能系统地了解什么与那些恰好超出我们算法掌握范围的事物之间的界限。

现在,让我们踏上一段旅程,看看这一个思想如何将图灵机的抽象转动与纯粹理性的极限联系起来。

知识的特性:半可判定性

我们世界上的许多问题是完全可判定的。这个数是素数吗?这个语法句子有效吗?我们有能够回答“是”或“否”并保证停机的算法。这些对应于可判定(或递归)集。然而,可计算可枚举(c.e.)集引入了一类更微妙、更有趣的问题:半可判定问题。

对于一个半可判定问题,我们有一个算法,如果答案是“是”,它保证会停机并给出肯定的答复。但如果真正的答案是“否”,算法可能会永远运行下去,让我们处于一种永恒的不确定状态。

考虑一个来自计算机科学的非常实际的问题:哪些计算机程序是“有用的”,即它们不会在每一个可能的输入上都陷入无限循环?那些至少在一个输入上会停机的程序集合,是一个经典的c.e.集但不可判定的例子。我们如何检查一个给定的程序是否属于这个集合?我们不能简单地运行它,因为我们不知道哪个输入可能让它停机。但我们可以使用一个巧妙的技巧,称为交错模拟法(dovetailing):我们在第一个输入上模拟程序一步,然后在前两个输入上各模拟一步,再在前三个输入上各模拟一步,依此类推。如果程序在任何输入上停机,这个庞大的过程最终会发现它,我们就可以自信地喊出“是!”。但如果程序永不停机,我们的模拟将永远运行下去。我们可以确认一个“是”,但永远无法确认一个“否”。

这种“半可知性”有一个优美的逻辑推论。如果一个集合 SSS 是c.e.但不可判定的,那么它的补集——所有不在 SSS 中的项的集合——不可能是可计算可枚举的。为什么?因为如果我们能半判定 SSS(等待“是”),并且也能半判定它的补集(等待关于 SSS 的“否”),我们就可以简单地并行运行这两个程序。其中一个必然会停机,从而为我们提供一个关于 SSS 的完整决策程序,而我们知道这是不可能的。这揭示了我们对某些领域的潜在知识存在一种根本的不对称性。

真理的逻辑:一个半可判定的宇宙

这种不对称性不仅是计算机程序的特性;它位于数学的核心。考虑所有在一阶逻辑中普遍有效——即在每个可能的数学结构中都为真——的句子的集合。我们称之为 VAL\mathrm{VAL}VAL。是否存在一个算法来判定一个给定的句子是否属于 VAL\mathrm{VAL}VAL?

这个问题将我们引向20世纪逻辑学的两个里程碑式的成果。首先,哥德尔完备性定理告诉我们,一个句子是普遍有效的,当且仅当它有一个形式证明。证明是有限的、句法性的对象。我们可以编写一个算法,系统地生成所有可能的符号串,并检查每一个是否是有效的证明。通过这样做,我们可以创建一个所有可证明的——因此也是所有有效的——句子的列表。这意味着集合 VAL\mathrm{VAL}VAL 是可计算可枚举的!。如果一个陈述是普遍真理,我们的证明生成机最终会找到它的证明并加以确认。

但反过来呢?如果一个句子不是普遍有效的呢?在这里,丘奇定理给出了一个惊人的打击:集合 VAL\mathrm{VAL}VAL 是不可判定的。不存在一个通用的算法,可以接受任何逻辑句子并判定它是否普遍有效。

综合来看,这两个定理描绘了一幅关于数学真理的深刻图景。普遍真理的领域是半可判定的。我们有一个可以确认任何真理的机械过程,但没有相应的过程可以反驳任何谬误。对于任何给定的谬误,必然存在一个反例——一个它不成立的数学结构——但我们没有普遍的、算法性的保证能找到它。

算术之钥:将计算转化为数

我们如何将这些关于计算的思想应用于那些看似与机器无关的领域,比如关于整数的理论?其通道是一项天才的创举,称为算术化(arithmetization),这是由 Gödel 和 Turing 完善的一项技术。

核心思想是将计算的每个方面都表示为一个数。将一次计算想象成一系列步骤。每一步都是机器的一个构型——比如,指令指针和寄存器内容。我们可以将每个构型编码成一个数。然后,这些数的序列可以通过使用连续素数的指数等方法,被编码成一个单一的、巨大的数。突然之间,整个计算——一个动态过程——被一个静态的自然数所捕获。

一旦完成此操作,“机器 eee 在输入 xxx 上停机”这个陈述就变成了一个关于存在一个特殊数 yyy 的断言,这个 yyy 编码了整个有效的计算过程。而计算的规则——比如“步骤 i+1i+1i+1 中寄存器的值比步骤 iii 中大一”——可以仅用加法和乘法表示为方程。整个计算逻辑都可以被翻译成初等算术的语言。这就是解开数论和形式系统最深层秘密的钥匙。

伟大的不可解问题

借助算术化的力量,我们现在可以攻克数学史上一些最著名的问题。

希尔伯特第十问题

1900年,David Hilbert 提出了一个著名的包含23个问题的列表,以指导未来一个世纪的数学发展。他的第十个问题表面上简单而具体:寻找一个通用算法,该算法可以判断任何一个丢番图方程——一个具有整数系数的多项式方程——是否具有整数解。几个世纪以来,数学家们一直在寻求这样一种通用方法。

事实证明,答案是“否”。原因就是可计算可枚举性。具有里程碑意义的 Matiyasevich–Robinson–Davis–Putnam (MRDP) 定理建立了一个惊人的等价关系:一个自然数集合是可计算可枚举的,当且仅当它是一个丢番图集(某个多项式方程的解集)。

两个世界——算法的可计算性世界和古老的数论世界——原来是同一个。其影响是即时且惊天动地的。我们已经知道存在不可判定的c.e.集,比如停机问题。根据MRDP定理,必然存在一个多项式 PPP,其解集与这个不可判定集完全对应。如果存在解决希尔伯特第十问题的算法,我们就可以用它来判定这个不可判定集的成员关系——这是一个逻辑上的不可能。因此,这样的通用算法不可能存在。希尔伯特第十问题是不可解的。对于关于数的最基本问题之一,不存在通用方法,其原因可以追溯到计算的极限。

哥德尔不完备性

同样的工具揭示了形式数学系统本身的内在局限。像皮亚诺算术(PA)这样的形式系统由一组公理定义,我们从这些公理推导出定理。如果我们能编写一个算法来列出这些公理,那么这个理论就是“递归公理化的”。一个直接的推论是,在该系统中所有可证明的定理的集合是可计算可枚举的。我们可以简单地枚举所有可能的证明,并列出它们所证明的定理。

如果PA也是完备的——意味着对于每个陈述 φ\varphiφ,它都能证明 φ\varphiφ 或其否定 ¬φ\neg \varphi¬φ——那么它的定理集将是可判定的。我们只需运行我们的定理列举器,等待 φ\varphiφ 或 ¬φ\neg \varphi¬φ 出现即可。

但 Gödel 使用算术化表明,这是不可能的。MRDP定理甚至可以使其结果有一个更具体的表述。我们可以构造一个特定的多项式 q(z⃗)q(\vec{z})q(z),使得“PA是相容的”这一陈述等价于一个为真的数论陈述:“方程 q(z⃗)=0q(\vec{z})=0q(z)=0 在自然数中无解”。哥德尔第二不完备定理表明,如果PA是相容的,它就不能证明自身的相容性。因此,PA不能证明这个关于多项式 q(z⃗)q(\vec{z})q(z) 的真陈述。

我们得到了这个结论:一个关于整数的、具体的、为真的陈述,永远超出了我们标准算术系统的证明范围。该系统必然是不完备的。正是那些不可判定的可计算可枚举集的存在,迫使任何足够强大、相容且可公理化的算术理论都是不完备的。

一个概念的统一性

从一个程序是否停机的实际问题,到逻辑有效性的抽象性质,从一个有着2000年历史的关于方程的问题,到数学证明本身的极限,贯穿它们所有的是可计算可枚举性这一条线索。这个概念定义了通过算法过程所能知晓事物的基本边界。它告诉我们,在许多深刻而重要的领域,知识是不对称的:确认或许可能,但反驳并非总能得到保证。用机器创建一个列表这个简单的行为,当被推到其逻辑结论时,揭示了我们逻辑宇宙深刻而美丽的结构。