Mainframes, Synthesizer und 16mm-Spulen: Die Kunst-Kollaborationen von Richard Moore und Lillian Schwartz bei Bell Labs

Im April 1971 veröffentlichte der Komponist und Forscher F. Richard Moore einen Essay in Ausgabe 6 des vierten Jahrgangs des Filmmakers Newsletter. Darin stellte er die Frage, ob Großrechner als gemeinsames Medium dienen könnten, um mathematische Gleichungen zu modellieren oder eine Symphonie zu verwandeln. Bei den Bell Telephone Laboratories ging Moore dieser Idee an der Seite der Filmemacherin Lillian F. Schwartz nach. Innerhalb der Forschungsgruppe von Max Mathews verwandelte das Duo raumfüllende Computer in ein Atelier für experimentellen Film und verknüpfte bahnbrechende Computeranimationen mit neuartiger digitaler Soundsynthese.

Ein unerwartetes Atelier bei den Bell Telephone Laboratories

Die Zusammenarbeit begann 1970, als Schwartz ihren ersten Bell-Labs-Film Pixillation schuf. Für die computeranimierten Sequenzen arbeitete sie mit dem Bell-Labs-Forscher Ken Knowlton zusammen, der zuvor eine spezielle Programmiersprache für die Animationsausgabe auf Großrechnern entwickelt hatte. Schwartz schichtete, kolorierte und bearbeitete diese computergenerierten Abfolgen von Hand mit gemalten Elementen und herkömmlichem Filmmaterial. Für die Musik der ersten Fassung des Films griff Moore auf digitale Systeme zurück, die sich damals im Labor in der Entwicklung befanden, um Großrechner-Grafiken mit elektronischen Klängen zu verbinden.

Echtzeit-Performance und digitale Mainframes: GROOVE und MUSIC V

Für die Vertonung von Pixillation nutzte Moore das System GROOVE, eine Echtzeit-Computermusik-Umgebung, die er zusammen mit Max Mathews entwickelt hatte. Das System ermöglichte es einer bedienenden Person, über physische Eingabegeräte – darunter Drehregler, Schalter, eine elektrische Schreibmaschine, ein Joystick und später eine Klaviertastatur – interaktive digitale Steuerbefehle in den Rechner einzugeben. Der Mainframe zeichnete die Performance-Eingaben auf und leitete die Befehlssignale an ein großes Rack aus analogen Moog-Synthesizern, Oszillatoren, Filtern und Verstärkern weiter.

Für den Film Affinities aus dem Jahr 1972, der ausschließlich aus computeranimierten Sequenzen bestand, wechselte Moore zu einer anderen Softwareumgebung namens MUSIC V. Die auf FORTRAN IV basierende Software erforderte es, dass Nutzer Noten und vorprogrammierte digitale Klanggeneratoren über Lochkarten oder Terminals einprogrammierten. Der Großrechner erzeugte daraufhin ein Magnetband, das über Konvertierungsgeräte in eine Audioaufnahme übertragen wurde. Moore nutzte MUSIC V, um Beethovens Variation von Mozarts Duett „Là ci darem la mano“ umzusetzen. Als Kritiker die digitale Tonspur rezensierten, lehnten sie die Musik ab und bezeichneten den synthetisierten Klang als zu rein und zu perfekt.

Transformation medizinischer Scans und optisches Flimmern

In den folgenden Projekten verschob das Duo die visuellen und akustischen Grenzen weiter. Für den Film Apotheosis aus dem Jahr 1972 wandte sich Schwartz von Großrechnergrafiken ab und manipulierte Aufnahmen einer Positronen-Emissions-Tomographie (PET-Scans), die aus der Praxis ihres Mannes stammten, einem Kinderarzt. Unter dem Credit „Starring David Stirling“ wurden die Scans der inneren Strahlungszerfälle des jungen Patienten mithilfe optischer Filmtechniken in eine niedrig aufgelöste visuelle Geometrie verwandelt, begleitet von Moores elektronischer Komposition.

Simulation von Galaxien auf NASA-Mainframes

Im Jahr 1974 blickte Schwartz für den Film Galaxies über Bell Labs hinaus und adaptierte astrophysikalische Simulationen von Dr. Frank Hohl vom Langley Research Center der NASA. Hohl nutzte NASA-Großrechner, um galaktische Dynamiken mit Tausenden einzeln bewegten Sternen zu simulieren. Moore stimmte seine Musik auf Hohls dynamische Animationen ab, indem er Wirbel flüchtiger, kurzer Noten komponierte, die analog zu den sich bewegenden Sternenpunkten stiegen und fielen.

Heute gehören digitale Audiosynthese und Computeranimation zu den grundlegenden Werkzeugen des Kinos und moderner Medien. Die erhaltenen 16mm-Filmkopien, die Moores Familie dem Computer History Museum spendete, dokumentieren, wie diese frühen digitalen Werkzeuge raumfüllende Großrechner erstmals in gemeinsame Instrumente für Klang und Film verwandelten.

KI-generierte redaktionelle Illustration; kein Dokumentarfoto.

Quelle: Music-Film-Computers