この記事はChatGPTによって中国語から翻訳されたもので、いくつかの誤りが含まれているかもしれません。不正確な部分があればご了承ください。
関数型プログラミングの愛好者であれば、Churchと彼の計算については知っているでしょう。再帰理論を学んでいれば、定義可能性、計算の各種性質(Church-Rosser定理、不動点定理など)、そしてそれらがどのように組み合わさって等価性の不可決定性証明を与えるのかも知っているかもしれません。
もちろん、これらの言葉が何を意味しているのか全く知らないかもしれませんが、それでも大丈夫です。もし少しでもコンピューターサイエンスを学んでいれば、チューリングマシン(Turing Machine)については知っているはずです。チューリングと彼の論文をコンピューターサイエンスの起源と見なす人もいますが、実際には、Churchと彼の計算はチューリングマシンよりも早く、また優れていました1。今日私たちが話す話は、実際には理論コンピューターサイエンスの起源の一つです。
ほとんどの人は知らないのですが、Churchが当初計算を発明した理由、そして彼が当初発明したシステムが現在私たちが知っている計算と何が違うのか。実際には、Churchのシステムは現在の計算よりもはるかに複雑です。なぜChurchのシステムは忘れ去られ、現在の計算がコンピューターサイエンスの基礎となったのでしょうか?
これは非常に興味深い話です。私は2023年のSICPクラス2でこの話を学生たちと共有しましたが、今、私はこれを書き留め、この歴史をより多くの人々に知ってもらうべきだと思います。
この記事にはいくつかの技術的な詳細が含まれていますが、重要なのは物語です。理解できない部分はスキップしても、物語の理解に影響はありません。ただし、少なくとも最初のセクションの内容を理解しておくことをお勧めします。そうすれば、Churchが何をしていたのかを大まかに理解することができます。
❖形式システム
Churchが1932年に発表したシステム3は、現在では「形式システム」(formal system)と呼ばれています。簡単に言えば、形式システムには以下の三つの要素があります:
- 構文(syntax)- 合法的な表現(formula)を記述するための一連の記号と規則。ここでの「構文」はプログラミング言語の「構文」と同じで、システム内の表現がどのような形をしているかを規定しています。
- 公理群(axioms)- 真であるとされる一連の表現。これらの公理はシステムの基礎であり、他のすべての定理はこれらの公理から導き出されます。
- 推論規則(inference rules)- 既知の公理と定理から新たな定理を導き出すための一連の規則。
私は非常に単純な形式システム(と表記)を提供することができます:
- 文法 - と から成る文字列。例えば 、、、 など
- 公理 - 、
- 推論規則
- (I.) もし が定理であれば、 と も定理である。
このシステムのすべての定理はいわゆる 回文
(palindrome)です。例えば、 は定理であり、その導出過程(これを 証明
、proofと呼びます)は次のようになります:
- (公理)
- (I.)
論理学では、 はシステム の定理である
は と書くことができます。ここでの は 導出
を意味します。
逆に、 は定理ではありません。なぜなら、それを導出する規則が存在しないからです。これは と書くことができます。
ここで言及している 公理
、定理
、証明
はすべて形式システムの用語です。それらは厳密な数学的意味を持ち、例えばこの場合、公理
は と を指し、定理
は回文を指し、証明
は導出規則を満たす文字列の列を指します。しかし、明らかに、私たちは幼少期から数学教育を受けており、公理
、定理
、証明
はすでに自然言語の意味を持っています。私が少し時間をかけて、それらの関係を説明させてください。
自然言語の 公理
は、以下では 公理 と表記します。一方、形式システムの 公理
は 公理
と表記します。他の概念も同様に扱います。
私たちは幼少期から様々な 定理 を学んできました。例えば などです。これらの 定理 のほとんどは、現代の論理が確立する前に 証明 されました。したがって、論理学が存在する前から、証明 や 定理 といった概念が存在していました。これらの自然言語で記述され構築された数学は、ほとんどの場合、それが 存在し
正しいと考えられています。
一方、形式システムの 定理
は、厳密な数学的オブジェクトであることをすでに述べました。その性質を知り、それがどのように公理から導出されるかを知っています。この導出過程は、コンピュータで検証することができます。要するに、これらの数学的オブジェクトは明確で厳密です。しかし、自然言語の数学は、少なくともそのような厳密さはありません。例えば、数学の教科書をランダムに選んで、その中のすべての証明を簡単に検証できるプログラムが存在すると想像できますか?
だから私の見解では、形式システムの主な目的は、厳密な数学的オブジェクトを用いて自然言語の数学を 固定化
することです。固定化
とは、より学術的な言葉で表現すると 形式化
ということです。
自然言語で記述された数学と形式システムで記述された数学は、アルゴリズムとプログラムのようなものです。アルゴリズムは非形式的なプログラムであり、プログラムは形式化されたアルゴリズムです。
自然言語の数学的証明を形式システムで形式化することは、非常に難しい問題です。この問題を解決するためには、より複雑で面倒な形式システムが必要です。では、どのような形式システムを選ぶべきでしょうか?
この難問に対して、多くの数学者は19世紀後半に発展した別の学問分野である集合論が答えだと考えています。ほとんどの数学的なオブジェクトは集合論で記述することができ、集合論は形式システムで記述することができます。Russellが1910-1913年に発表した Principia Mathematica や Zermelo-Fraenkel 集合論(1908, 1922)は、このアプローチの実践例です。ZF集合論は基本的に現代数学の基礎となっています。
❖Churchのシステム
Churchは1920年代に、集合論ではない方法で形式システムを提供しようと試みました。Churchは1932年の論文で、Russellの Principia Mathematica やZF集合論が、有名な”Russell’s Paradox”を処理するために”不自然な”方法を採用していると述べています。
彼が提案した方法は、「排中律の使用を制限する」というものです。技術的には、私は彼のこの方法がむしろ「不自然」であると感じており、この記事の範囲内で明確な説明を提供するのは難しいです。とにかく、彼は37の(そう、あなたが読んだ通り、37の)公理と5つの推論規則を持つ形式システムを設計しました。これら5つの推論規則は、現代の計算につながっています。このシステムは、1932年に発表された A Set of Postulates for the Foundation of Logic で提供されました。
Churchのシステムでは、文法に集合やクラスは存在せず、以下の記号で構成されています:
- 定義されていない用語。私たちは今、私たちの形式論理の未定義の用語のリストを作成する準備ができました。それらは次のとおりです:
ここで、 は現代の 計算での「適用」(apply、いわゆる関数呼び出し)を表し、は自然に抽象を表します。は比較的複雑な文法で、は大体4を表します。は存在を表し、は論理積、は論理否定を表します。 は再帰関数の中の 演算子に似ており、は「 を満たす 」を指します。 については、この記号は特に抽象的で、ここでは議論しません。
その後、Churchはいくつかのシンタックスシュガー、つまり「マクロ」を定義しました。例えば、彼はを定義しました。これは現代の論理学でのに相当し、定義は以下のようになります:
今日の記号で表現すると:
注目すべきは、Churchが当時流行していた、Russellが採用していた「ドット記法」(dot notation)を使用して論理演算を表現していたことです。簡単に言えば、は「優先順位」を決定し、これにより括弧を少なく書くことができます。例えば、はの省略形です。しかし、私の知る限りでは、Principia Mathematicaのドット記号はこのような使用を許可していないようで、この命題はPMではとなるはずです。(もちろん、ここでの誤解もあり得ます。私が参考にしたのはThe Notation in Principia Mathematicaです).
また、Churchは含意記号もマクロとして定義しました。
とにかく、Churchのシステムの文法は大体こんな感じです。彼の37の公理は、さらに複雑です。15.のようなものは比較的理解しやすいかもしれません:
これはを指しています。しかし、大部分の公理は非常に理解しにくいです。例えば、第1条:
は前提がなくても成り立つはずです(として理解すると)。しかし、Churchの制限により、ここではが保証されていなければなりません。
37の難解な公理と比べて、今日の我々にとって、彼の5つの推論規則は非常にシンプルに見えます。これら5つの規則は現代の計算と非常に似ています。これら5つの規則(私の再表現を含むが、Churchの原著とは違いはない)は:
I. 真公式 の中で、
- のすべての出現が束縛出現である
- が の中で自由に出現しない
場合、 の中で を で置き換える( と表記)と、結果の も真公式となります。
II. もし
- が真公式 の部分公式である
- が の中で束縛出現しない
- が の中で自由に出現する (*)
- が の中で自由に出現しない
場合、 の中で特定の を で置き換えると、結果の も真公式となります。
III. もし
- が真公式 の部分公式である
- が の中で束縛出現しない
- が の中で自由に出現する (*)
- が の中で自由に出現しない
場合、 の中で特定の を で置き換えると、結果の も真公式となります。
IV. もし ならば、。
V. もし かつ ならば、。
これら5つのルール、IV. と V. は一階論理の「存在量化子の導入」とmodus ponensに似ています。主役は I., II., III.:
- I. は 等価性
- II. は 等価性の一方向で、 簡約と見なすことができます
- III. は 等価性のもう一方向で、 抽象と見なすことができます
これら三つのルールは、現代の 計算の核心を形成しています。(*) のルールは現代の 計算には存在しませんが、これは一旦置いておき、興味があれば自分で考えてみてください。
❖Kleeneと定義可能性
上記の複雑な記号の中で、何が理解できたでしょうか。もし数年前の私に見せられたら、私は確かに混乱していたでしょう。さらに、Churchのシステムには37の公理があり、このシステムで証明を行うことを考えるだけで頭が痛くなります。ZF集合論と比較して、Churchのシステムは明らかに過度に複雑です。さらに、彼が一階論理を飛ばしてしまった方法は、学習の難易度をさらに高めています。
幸運なことに、ChurchにはKleeneという学生がいました。
Kleeneは1931年、22歳で学士を取得した後、Princeton大学でChurchの博士課程に進学しました。驚くべきことに、彼は1934年に博士号を取得し、その時点で25歳でした。彼はまさに「天才、超天才」5と言えるでしょう!
1931年の秋学期に、ChurchはKleeneと他の学生に彼の新しい発明–つまり、上で述べたシステム–を教えました。Kleeneの回想によれば、Churchはすでに簡約のアイデアを持っていました。簡約とは何かと言うと、簡単に言えば、を関数呼び出しと見なし、それをに置き換えることです。つまり、彼のシステム内の一つの公式に対して、公理 II. を用いて推論することです。
重要なのは、この推論は一種の「計算」であると見なすことができるということです。項が与えられ、任意の回数簡約を行ってを得た場合、これは計算の「計算」と見なすことができます。実際、この「計算」は関係を定義します。これは、が簡約によってを得ることができるという意味です。
当時の講義でChurchは、彼のシステムで正の整数を定義する方法をすでに見つけているとも述べていました。これは今日でいうChurch数です。は次のように定義されます:
上述のの考え方と組み合わせて、Churchは、いくつかの関数が項で表現できることを発見しました。例えば、後続関数は、項で次のように表現できます:
これは性質を持っています。より一般的に、Churchは定義可能性( definability)の概念を提唱しました。彼の考え方は、関数が項で表現できるなら、は定義可能であるというものです。
形式的に言えば、ある(偏)関数 に対して、ある 項 が存在し、 の定義域内の自然数 に対して
が成り立つなら、 は で定義可能であると言えます。上記の は、 (自然数)に対応する Church 数を指します。
Church は、後続関数だけでなく、加法関数 も で定義可能であることを発見しました。しかし、Church は 前任者
関数()が で定義可能かどうかを知りませんでした。もちろん、彼のシステムでは、 の定義性を使わずに チート
をして前任者関数を得ることができました。彼の定義は次のようなものでした:
この の定義は前のセクションで見たもので、簡単に言えば、Church は ” を満たす ” を用いて の前任者を定義しました。
1932年初頭、ChurchはKleeneに自然数の公理(Peano Axioms)を彼のシステムで証明する方法を考えるように頼みました。Kleeneは、ここには前任者関数が必要であることを発見し、Churchの チート
には特に満足していませんでした。そこで、彼は前任者関数が で定義可能かどうかを研究し始めました。
Kleeneの回想によると([Kleene 1981]参照)、彼は最初、自然数の定義を少し変えようと考えましたが、Churchは彼のChurch数を使い続けたいと思っていました。そこで、彼はどのようにして前任者関数を提供するかを考え尽くしました。そして、1932年1月末または2月初に、Kleeneは歯科医院で待っている間に、で前任者関数を定義する問題を解決する方法を突然思いつきました。その結果、Kleeneは 項を提供し、前任者関数を で定義しました。具体的な定義はここでは示しませんが、興味のある方は自分で考えてみてください。
Kleeneがこの発明をChurchに伝えたとき、Churchはほとんど諦めていたと言いました:
私がこの結果を Church に持って行ったとき、彼は前任者関数の - 定義が存在しないとほとんど確信していたと言いました。
元々 で定義できないと考えられていた関数が、Kleeneによって定義可能であることが証明されました。KleeneとChurchは新たな問題を考え始めました:
一体どのような関数が で定義可能なのか?
この問題に対して、90年後の今日、我々はすぐに答えます:関数 が で定義可能であるとは、 が計算可能であるとき、そしてそのときに限る。
当時、Kleeneの主な仕事はChurchのシステム内で数学的な命題を証明することでした。副業として の定義可能性を研究していました。彼は、直感的に計算可能な自然数関数のほとんどすべてが で定義可能であることを発見しました。1933年にGödelがPrincetonに来て、1934年に彼は再帰関数の定義方法を報告しました。これが現在のHerbrand-Gödel計算可能関数です。Kleeneはこの報告を見て、この方法が彼の の定義可能性と関連していることに気づきました。
最終的に、KleeneとChurchは1935-36年に発表した論文で、一連の問題を証明しました:
- 、つまり 等価性は、 で定義できない
- で定義可能な関数とGödelの計算可能関数は等価である
その後の話は我々が非常によく知っています。Turingは1936年に彼の論文を発表し、Turing Machineを提案し、Turing MachineとChurchの 演算が等価であることを証明しました。理論計算機科学はそこから生まれました。
残念なことに、当時の多くの人々は 演算があまり 数学的
でないと感じていたため、Kleeneの後の偉大な仕事はすべて彼が定義した -再帰関数に基づいており、 計算
モデルについても、人々はTuring Machineを好んでいました。
❖Churchのシステムはどのようにして忘れ去られたのか
の定義可能性の研究は現代の計算機科学の扉を開きましたが、Churchのシステムはどうなったのでしょうか?
Kleeneは回顧録で、いくぶん皮肉っぽく言っています:
この論文には、Gödel の有名な証明、つまり通常の初等数理論を体現する形式システムにおける決定不能な文の存在証明と、そのようなシステム自体の無矛盾性の証明の不可能性に関する
第二の定理が含まれています。 Church の直接的な反応は、私がこれから詳しく説明する彼の形式システムが、 Gödel が扱ったシステムとは十分に異なるため、 Gödel の第二の定理がそれに適用されないかもしれないというものでした( Church 1933 top p. 843 を参照)。実際、 Church は正しかった!
Churchは自身のシステムがGödelの制約を受けないと思っていたようです(現在ではそれは不可能であることがわかっています)。そしてKleeneもそれに賛成?これはどういうことなのでしょうか?
ああ、実はKleeneの次の文でその理由が説明されています:
彼のシステムでは、その無矛盾性の証明が存在します。なぜなら、実際にはそれは無矛盾性がない(したがって、そのすべての文は証明可能)であり、 Church が可能だと考えていた( 1933 年上部 p.842 )こと、そして私たちが後に示した( KleeneとRosser 1935 )ことです。
Kleeneさん、先生のシステムをこんなに冗談にするなんて。これは少し「地獄のジョーク」のような感じですね。そうです、Churchのシステムは実際にGödelの制約を超えています。なぜなら、それは根本的に無矛盾性がないからです!
「無矛盾性がない」とは、つまり、このシステムは、ある命題を証明することができ、同時にも証明することができるということです。これは直感的には非常にまずい:このシステムにはある種の「矛盾性」があります。技術的にはさらにまずい、なぜならこれはこのシステムが任意の命題を証明できることを意味するからです。とがあると仮定し、任意の命題を証明するために次のような推論を行うことができます:
この推論で使用される推論規則は「または」の導入と消去で、ほとんどの形式システムにこの規則があります。したがって、システムが無矛盾性がない場合、それは任意の命題を証明できます。一般的に、このようなシステムは意味がないと考えられます。
KleeneとChurchのもう一人の学生であるRosserは、1935年にChurchのシステムが無矛盾性がないことを証明しました。彼らの証明は「Kleene-Rosserパラドックス」と呼ばれています。このパラドックスは技術的には複雑ですが、直感的には、Churchのシステムがすでに任意の計算可能な関数をエンコードできるようになっていることが、無矛盾性がないことを強く示唆しています。
1984年にRosserが書いた論文では、Curryが発明した技術を使ってChurchのシステムの無矛盾性がないことを証明する方法も紹介されています。この証明は非常にシンプルです。
実際、Churchは1933年に発表した同名(および1932年の同名)の論文で、自身のシステムが無矛盾性がないことを発見しました。この無矛盾性のなさを解決するために、彼は公理19を削除し、2つの公理を追加しました。これにより公理の数は38になりました。彼はこの新しいシステムが一貫していると考えていましたが、現在では、このシステムも無矛盾性がないことがわかっています。
それで、簡単に言えば、Churchのシステムは無矛盾性がなく、非常に複雑であるため、人々に忘れられてしまったのです。
❖結論
Churchの最初の目的は、彼のシステムを使って数学を形式化することでしたが、そのシステムは今ではすでに誰も注目していません。しかし、彼のシステムの副産物である計算は、コンピュータ科学の基礎となりました。これらの偉大な名前、Church、Kleene、Turing、Gödel、…、は永遠にコンピュータ科学の歴史に刻まれています。
彼らの仕事は、全体としては「再帰論」と呼ばれるべきです。特にKleeneの多くの研究は、計算不能集合とその間の関係を研究しています。しかし、私はやはり、「計算理論」という学問が計算や再帰関数を教えず、自動機を教えるのであれば、それは確かに多くの面白いものを欠いていると感じます。もし、あなたの「計算理論」も一群の自動機であるなら、この記事があなたに計算に対する興味を持つきっかけになれば幸いです。
❖クイズ
- Church数は最初にChurchの1933年の論文で発表され、この論文では彼のシステムでのPeanoの公理の表現も示されています。しかし、彼が表現したChurch数もPeanoの公理も、から始まり、から始まらない。なぜChurchはを彼のシステムに入れなかったのでしょうか?これは彼の好みだけでなく、より技術的な問題です。
- 現代の計算では、我々は一般的に(二)タプルのコンストラクタ(constructor)を次のように定義します。 fstとsndは次のように定義されます。タプルの定義はKleeneが前任関数を定義するための重要なステップですが、Kleeneはこのようにタプルを定義できますか?なぜですか?もしできないなら、Kleeneが使用できるタプルの定義を提供できますか?(ヒント:答えは[Kleene 1981]を参照)
- もしChurchの元のシステムが無矛盾性がないとしたら、なぜ計算自体はこの問題に影響されないのでしょうか?誰もが計算も「無矛盾性がない」と思うことはありませんか?
❖追加読み物
- Kleene, S. C. (1981). Origins of recursive function theory. Annals of the History of Computing, 3(1), 52-67.
- Church, A. (1933). A set of postulates for the foundation of logic. Annals of Mathematics, 34(4), 839-864.
- Church A. (1936). An unsolvable problem of elementary number theory. American Journal of Mathematics, 58(2), 345-363.
- Church A. (1941). The Calculi of Lambda-Conversion. Princeton University Press.
- Church A. (1932). A set of postulates for the foundation of logic. Annals of Mathematics, 33(2), 346-366.
- Rosser J. B. (1984). Highlights of the history of the lambda calculus. Annals of the History of Computing, 6(4), 337-349.
❖付録:Church の 37 の公理
深層学習技術のおかげで、私は簡単に Church の 37 の公理の latex コードを抽出することができました。
- .
- ’ .
- .
- . .
- .
- ’ .
- .
- . .
- ’ .
- .
- .
- .
- .
- .
- .
- .
- .
- .
- .
- .
- .
- .
- .
- .
- . .
- .
- .
- .
- .
- ’ .
- .
- .
- . .
- . .
- .
- .
- .