A-Kristin Jakubek: Difference between revisions

Line 58:

Der Verarbeitungsprozess durch den Computer wird zunehmend herunter gebrochen.

Für die zweite Visualisierungsebene verwende ich im Schaffungsprozess neuronale Netzwerke die mit Bildverarbeitung zutuen haben. Es werden 'FlowNet2' und 'VGG16 visualisation' genutzt um einen tatsächlichen Einblick in die Verarbeitung durch den Computer zugeben. Das verwenden der Netzwerke selbst gibt einen Einblick in Bildgebendeverfahren der Computer Vision und somit einen 'echten Bezug' zu wie Video/Bild durch künstlische ~~neurale~~ Netze verarbeitet werden.

Für die zweite Visualisierungsebene verwende ich im Schaffungsprozess neuronale Netzwerke die mit Bildverarbeitung zutuen haben. Es werden 'FlowNet2' und 'VGG16 visualisation' genutzt um einen tatsächlichen Einblick in die Verarbeitung durch den Computer zugeben. Das verwenden der Netzwerke selbst gibt einen Einblick in Bildgebendeverfahren der Computer Vision und somit einen 'echten Bezug' zu wie Video/Bild durch künstlische neuronale Netze verarbeitet werden.

In der reduziertesten Visualiserungsebene wird die binäre Verarbeitung durch den Computer auf Level der 'maschinellen Sprache' dargestellt. Der Computer selbst funktioniert im Grunde nur durch Code der sich zuletzt auf 1 und 0 reduziert. Diese Binärität wird mittels eines reduzierten Schwarz-Weiß Animationsstil aufgegriffen und künstlerisch weitergedacht. Dies entsteht in Zusammenarbeit mit August Guccione im Programm TouchDesigner. Die Wahl des Programm war wichtig, da dieses durch seine generativ 'Node' basierte Funktionsweise ebenfalls sehr nah am Computer selbst ist.

//

The film is composed of, on the one hand filmed footage i.e. 'animal perception' interpreted through a subjective camera in characteristic habitats and on the other, the data processing by an artificial neural network(ANNs). The dataset and it's processing through the AI network will be visualised via animations. The Visualisation has different 'stages' to introduce the viewer to the topic and to make the initially abstract data processing tangible.

The first level is a kind of visualisation level in which the dataset of the animal perspectives (filmed footage) is shown in a digital 3D view. In a digital 'void-space' we see the dataset and then the artificial neural network. First from the outside, then the camera view flies through the dataset and the network. Through this digital 'void space' the film narrative navigates into the different files of the dataset i.e. film recordings.

/ ~~Animation~~ of the ~~AI data-~~processing '

The processing by the computer will be increasingly broken down throughout the different 'stages' of visualisation.

For the second level of visualisation, I use actual neural networks used for image processing in the computer science field. 'FlowNet2' and 'VGG16 visualization' are used to give an actual insight into the processing by the computer. By using ANNs themselves an actual insight into computer vision imaging techniques and thus a 'real reference' to how video/images are processed by artificial neural networks is inserted into the film.

In the most reduced level of visualisation, the binary processing by the computer is represented at the level of 'machine language'. The computer itself basically works only by code which at its core reduces to 1 and 0. This binary is interpreted in a reduced black and white animation style. These animations are created in collaboration with August Guccione in the program TouchDesigner. The choice of the program was important because this program is also very close to the computer itself through its generative 'Node' based functionality.

== Exhibition plans ==

@@ Line 58: / Line 58: @@
 Der Verarbeitungsprozess durch den Computer wird zunehmend herunter gebrochen.
-Für die zweite Visualisierungsebene verwende ich im Schaffungsprozess neuronale Netzwerke die mit Bildverarbeitung zutuen haben. Es werden 'FlowNet2' und 'VGG16 visualisation' genutzt um einen tatsächlichen Einblick in die Verarbeitung durch den Computer zugeben. Das verwenden der Netzwerke selbst gibt einen Einblick in Bildgebendeverfahren der Computer Vision und somit einen 'echten Bezug' zu wie Video/Bild durch künstlische neurale Netze verarbeitet werden.
+Für die zweite Visualisierungsebene verwende ich im Schaffungsprozess neuronale Netzwerke die mit Bildverarbeitung zutuen haben. Es werden 'FlowNet2' und 'VGG16 visualisation' genutzt um einen tatsächlichen Einblick in die Verarbeitung durch den Computer zugeben. Das verwenden der Netzwerke selbst gibt einen Einblick in Bildgebendeverfahren der Computer Vision und somit einen 'echten Bezug' zu wie Video/Bild durch künstlische neuronale Netze verarbeitet werden.
 In der reduziertesten Visualiserungsebene wird die binäre Verarbeitung durch den Computer auf Level der 'maschinellen Sprache' dargestellt. Der Computer selbst funktioniert im Grunde nur durch Code der sich zuletzt auf 1 und 0 reduziert. Diese Binärität wird mittels eines reduzierten Schwarz-Weiß Animationsstil aufgegriffen und künstlerisch weitergedacht. Dies entsteht in Zusammenarbeit mit August Guccione im Programm TouchDesigner. Die Wahl des Programm war wichtig, da dieses durch seine generativ 'Node' basierte Funktionsweise ebenfalls sehr nah am Computer selbst ist.
+//
+The film is composed of, on the one hand filmed footage i.e. 'animal perception' interpreted through a subjective camera in characteristic habitats and on the other, the data processing by an artificial neural network(ANNs). The dataset and it's processing through the AI network will be visualised via animations. The Visualisation has different 'stages' to introduce the viewer to the topic and to make the initially abstract data processing tangible.
+The first level is a kind of visualisation level in which the dataset of the animal perspectives (filmed footage) is shown in a digital 3D view. In a digital 'void-space' we see the dataset and then the artificial neural network. First from the outside, then the camera view flies through the dataset and the network. Through this digital 'void space' the film narrative navigates into the different files of the dataset i.e. film recordings.
-/ Animation of the AI data-processing '
+The processing by the computer will be increasingly broken down throughout the different 'stages' of visualisation.
+For the second level of visualisation, I use actual neural networks used for image processing in the computer science field. 'FlowNet2' and 'VGG16 visualization' are used to give an actual insight into the processing by the computer. By using ANNs themselves an actual insight into computer vision imaging techniques and thus a 'real reference' to how video/images are processed by artificial neural networks is inserted into the film.
+In the most reduced level of visualisation, the binary processing by the computer is represented at the level of 'machine language'. The computer itself basically works only by code which at its core reduces to 1 and 0. This binary is interpreted in a reduced black and white animation style. These animations are created in collaboration with August Guccione in the program TouchDesigner. The choice of the program was important because this program is also very close to the computer itself through its generative 'Node' based functionality.
 == Exhibition plans ==