Image, Video, and Multidimensional Signal Processing (IVMSP)5 ECTS
(englische Bezeichnung: Image, Video, and Multidimensional Signal Processing)

Lehrveranstaltungen:

• • Image, Video, and Multidimensional Signal Processing
    (Vorlesung, 3 SWS, André Kaup, Mo, 12:15 - 13:45, H6; Di, 10:15 - 11:45, H6)
  • Supplements for Image, Video, and Multidimensional Signal Processing
    (Übung, 1 SWS, Andreas Spruck, Mi, 10:15 - 11:45, Raum n.V.; Raum 03.215 (Wetterkreuz 15, Erlangen-Tennenlohe))

Empfohlene Voraussetzungen:

Vorlesung Signale und Systeme I und II

Inhalt:

Point operations
Histogram equalization, gamma correction

Binary operations
Morphological filters, erosion, dilation, opening, closing

Color spaces
Trichromacy, red-green-blue color spaces, color representation using hue, saturation and value of intensity

Multidimensional signals and systems
Theory of multidimensional signals and systems, impulse response, linear image filtering, power spectrum, Wiener filtering

Interpolation of image signals
Bi-linear interpolation, bi-cubic interpolation, spline interpolation

Image feature detection
Image features, edge detection, Hough transform, Harris corner detector, texture features, co-occurrence matrix

Scale space representation
Laplacian of Gaussian, difference of Gaussian, scale invariant feature transform, speeded-up robust feature transform

Image matching
Projective transforms, block matching, optical flow, feature-based matching using SIFT and SURF, random sample consensus algorithm

Image segmentation
Amplitude thresholding, k-means clustering, Bayes classification, region-based segmentation, combined segmentation and motion estimation, temporal segmentation of video

Transform domain image processing
Unitary transform, Karhunen-Loeve transform, separable transform, Haar and Hadamard transform, DFT, DCT

Lernziele und Kompetenzen:

Die Studierenden

• verstehen Punktoperationen an Bilddaten und Gamma-Korrektur

• testen die Wirkung von Rangordnungs- und Medianfiltern an Bilddaten

• unterscheiden und bewerten verschiedene Farbräume für Bilddaten

• erklären das Prinzip der zwei-dimensionalen linearen Filterung für Bildsignale

• berechnen und bewerten die zweidimensionale diskrete Fourier-Transformierte eines Bildsignales

• bestimmen vergrößerte diskrete Bildsignale mit Methoden der bilinearen und Spline-Interpolation

• überprüfen Bilddaten auf ausgewählte Textur-, Kanten- und Bewegungsmerkmale

• analysieren Bild- und Videodaten auf Merkmale in unterschiedlichen Scale-Spaces

• erläutern und beurteilen Methoden für das Matching von Bilddaten

• segmentieren Bilddaten durch Programmierung von einfachen Klassifikations- oder Clustering-Verfahren

• verstehen das Prinzip von Transformation auf Bilddaten und können diese an Beispielen anwenden.

The students

• understand point operations for image data and gamma correction

• test the effects of rank order and median filters for image data

• evaluate and differentiate between different color spaces for image data

• explain the principle of two-dimensional linear filtering for image signals

• calculate and evaluate the two-dimensional discrete Fourier transform of an image signal

• determine enlarged discrete image signals by bi-linear and spline interpolation

• verify image data for selected texture, edge and motion features

• analyze image and video data for features in different scale spaces

• explain and evaluate methods for the matching of image data

• segment image data by implementing basic classification and clustering methods

• understand the principle of transformations on image data and apply them exemplarily

Literatur:

J.-R. Ohm: Multimedia Content Analysis, Springer, 2016
J. W. Woods: Multidimensional Signal, Image, and Video Processing and Coding, Academic Press, 2^nd edition, 2012

Bemerkung:

This lecture replaces the previous lecture Visual Computing for Communication (VCC).

Verwendbarkeit des Moduls / Einpassung in den Musterstudienplan:
Das Modul ist im Kontext der folgenden Studienfächer/Vertiefungsrichtungen verwendbar:

1. Advanced Signal Processing & Communications Engineering (Master of Science)
   (Po-Vers. 2016w | TechFak | Advanced Signal Processing & Communications Engineering (Master of Science) | Masterprüfung | Wahlmodule | Technical Electives)
2. Communications and Multimedia Engineering (Master of Science)
   (Po-Vers. 2011 | TechFak | Communications and Multimedia Engineering (Master of Science) | Masterprüfung | Wahlpflichtmodule | Technische Wahlpflichtmodule)
3. Communications and Multimedia Engineering (Master of Science)
   (Po-Vers. 2011 | TechFak | Communications and Multimedia Engineering (Master of Science) | Masterprüfung | Wahlmodule | Technische Wahlmodule)
4. Computational Engineering (Rechnergestütztes Ingenieurwesen) (Master of Science)
   (Po-Vers. 2013 | TechFak | Computational Engineering (Rechnergestütztes Ingenieurwesen) (Master of Science) | Wahlpflichtbereich Technisches Anwendungsfach | Information Technology - DSP)
5. Informations- und Kommunikationstechnik (Master of Science)
   (Po-Vers. 2010 | TechFak | Informations- und Kommunikationstechnik (Master of Science) | Schwerpunkte im Masterstudium | Schwerpunkt Eingebettete Systeme | Wahlpflichtmodule | Wahlpflichtmodul aus EEI im Schwerpunkt Eingebettete Systeme)
6. Informations- und Kommunikationstechnik (Master of Science)
   (Po-Vers. 2010 | TechFak | Informations- und Kommunikationstechnik (Master of Science) | Schwerpunkte im Masterstudium | Schwerpunkt Kommunikationsnetze | Wahlpflichtmodule | Wahlpflichtmodul aus EEI im Schwerpunkt Kommunikationsnetze)
7. Informations- und Kommunikationstechnik (Master of Science)
   (Po-Vers. 2010 | TechFak | Informations- und Kommunikationstechnik (Master of Science) | Schwerpunkte im Masterstudium | Schwerpunkt Multimediasysteme | Wahlpflichtmodule | Wahlpflichtmodul aus EEI im Schwerpunkt Multimediasysteme)
8. Informations- und Kommunikationstechnik (Master of Science)
   (Po-Vers. 2010 | TechFak | Informations- und Kommunikationstechnik (Master of Science) | Schwerpunkte im Masterstudium | Schwerpunkt Realisierung von Informations- und Kommunikationssystemen | Wahlpflichtmodule | Wahlpflichtmodul aus EEI im Schwerpunkt Realisierung von Informations- und Kommunikationssystemen)
9. Medizintechnik (Master of Science)
   (Po-Vers. 2013 | TechFak | Medizintechnik (Master of Science) | Studienrichtung Medizinische Bild- und Datenverarbeitung | M5 Medizintechnische Vertiefungsmodule (BDV))
10. Medizintechnik (Master of Science)
    (Po-Vers. 2013 | TechFak | Medizintechnik (Master of Science) | Studienrichtung Medizinelektronik | M5 Medizintechnische Vertiefungsmodule (MEL))

Studien-/Prüfungsleistungen:

Image, Video, and Multidimensional Signal Processing (Prüfungsnummer: 447324)

(englischer Titel: Image, Video, and Multidimensional Signal Processing)

Prüfungsleistung, mündliche Prüfung, Dauer (in Minuten): 30, benotet, 5 ECTS

Anteil an der Berechnung der Modulnote: 100.0 %

Erstablegung: WS 2017/2018, 1. Wdh.: SS 2018

1. Prüfer:

André Kaup