Die Wurzeln der KI
Wie beeinflusst die Geschichte der KI ihre Zukunft? Heute ist mit KI die Methode der Neuronalen Netze gemeint. Dies ist eine ganz spezielle Form der Maschinenintelligenz, die auf der statistische Auswertung von riesigen Datenmengen beruht. Der geschichtliche Blick sieht sich neben dieser sehr erfolgreichen, statistischen Methode die Maschinenintelligenz ganz allgemein. Wie hat sich diese entwickelt? Was sind ihre Wurzlen. Wohin führt sie? Heutige, offene Denker stellen der 'traditionellen' Vergangenheit gern eine neue 'originelle' Zukunft gegenüber. Doch wir wissen alle nicht, was in der Zukunft wirklich sein wird - auch wenn ich selber darüber gern spekuliere. Die Tradition ist für die
Entropie zwischen Mikro- und Makroebene
Unter Energie kann sich jedermann etwas vorstellen, unter dem noch wichtigeren Begriff Entropie jedoch die wenigsten. Dabei spielt Entropie in der allgemeinen Physik, der Informationstheorie und der Biologie eine entscheidende Rolle. Und: Es gibt Gründe, weshalb der Begriff so schwierig zu verstehen ist. Das hat vor allem damit zu tun, dass Entropie physikalisch und informationstheoretisch als Abstand zwischen der Mikro- und Makroebene eines untersuchten Objekts definiert ist.
Entropie und Information
Der Begriff Entropie wird gerne vermieden, weil er eine gewisse Komplexität enthält, die sich nicht wegdiskutieren lässt. Doch wenn wir über Information sprechen, müssen wir auch über Entropie sprechen. Denn Entropie ist das Mass für die Informationsmenge. Wir können nicht verstehen, was Information ist, ohne zu verstehen, was Entropie ist. 1948: Claude E. Shannon erfindet den Begriff "Bit" und verbindet ihn mit Information und Entropie Das Bit ist immer relativ. Wir glauben, dass wir Information packen können, so wie wir Bits in einem Speichermedium ablegen. Die Bits sind dann die Information, die objektiv verfügbar ist. Wir haben uns so
Das Bit hat keine Bedeutung
Unsere Informationstechnologie baut auf dem Bit auf. Alles, was in unseren Computern geschieht, basiert auf diesem kleinsten Basiselement der Information. Wenn Sie gefragt werden, was ein einzelnes Bit bedeutet, werden Sie möglicherweise antworten, dass das Bit zwei Zustände einnehmen kann, von denen der eine 0 ist und der andere 1 bedeutet. Aber stimmt das auch? Bedeutet wirklich der eine Zustand im Bit 0 und der andere 1? Können die beiden Zustände nicht auch ganz andere Bedeutungen annehmen?
Die Unterscheidung (nach Spencer-Brown) und das Bit
Georg Spencer-Brown versuchte, Mathematik auf eine neue Grundlage zu stellen. Seine Ansichten wurden von der mathematischen Community grossenteils abgelehnt. Als Nicht-Mathematiker kann ich die mathematischen Überlegungen von Spencer-Brown nicht beurteilen. Als Logiker und Informatiker erscheint mir aber sein Begriff der "Distinction" sehr einleuchtend und seine Beschreibung des "Re-Entry" für logische Prozesse fundamental. Ich gehe hier auf die fundamentale Ähnlichkeit von Bit und Unterscheidung ein und verweise dabei auf ihre ebenfalls grundlegenden Unterschiede. Zwei Basis-Bausteine für Information Besonders interessant ist es, die Grundform der Distinction (Unterscheidung) mit der viel bekannteren Grundform der Informationstheorie zu vergleichen, nämlich dem Bit. Das ermöglich
Das Bit hat keine Bedeutung
Haben Sie sich schon einmal überlegt, was ein einzelnes Bit bedeutet? Bedeutet es wirklich 0 oder 1? Die Wahrheit ist, dass das Bit völlig abstrakt ist und an sich keine Bedeutung besitzt. Eine solche wird stets von aussen gegeben. Das Bit ist die Basis der IT Unsere Informationstechnologie baut auf dem Bit auf. Alles, was in unseren Computern geschieht, basiert auf diesem kleinsten Basiselement der Information. Wenn Sie gefragt werden, was ein einzelnes Bit bedeutet, werden Sie möglicherweise antworten, dass das Bit zwei Zustände einnehmen kann, von denen der eine 0 ist und der andere 1 bedeutet. Auf diese Weise
Welche Information trägt ein Bit?
Die Frage erscheint Ihnen vermutlich banal. Schliesslich weiss jedermann, was ein Bit ist, nämlich die Möglichkeit einmal aus zwei Zuständen auszuwählen. Doch woraus wird gewählt? Was ist die Bedeutung der beiden Zustände des Bits? Diese Information steckt nicht im Bit, sondern in seiner Umgebung. Was die beiden Zustände des Bits wirklich bedeuten Das Bit kann zwei Zustände unterscheiden, doch was ist die Bedeutung der beiden? Die Frage nach der Information im Bit ist mit der Wahl von einem der beiden Zustände noch nicht beantwortet ist. Welche Information in einem Bit enthalten ist, hat nämlich auch mit der Frage zu
