Regensky, Andy
Andy Regensky, M. Sc.
Seit Februar 2020 beschäftige ich mich mit der effizienten Kompression von Fisheye- und 360°-Videodaten. Besonderer Fokus liegt dabei auf einer effektiven Inter-Prädiktion, bei welcher das aktuelle Bild aus bereits decodierten, zeitlich davor oder danach liegenden Bildern prädiziert wird. Bisherige Methoden zur Inter-Prädiktion sind auf Videos mit perspektivischer Projektion ausgelegt, welche dem Lochkameramodell folgen. Die besonderen Projektionen von Fisheye- und 360°-Bildern, welche nicht mehr durch das Lochkameramodell beschrieben werden können, führen zu einer deutlich verminderten Effizienz dieser Methoden. Durch eine geschickte Einbeziehung der Projektionsfunktion in den Prozess der Inter-Prädiktion kann deren Effektivität deutlich gesteigert werden. Dabei ist der projektionsbasierte Ansatz nicht auf die Inter-Prädiktion beschränkt und kann potentiell bei vielen weiteren Methoden der Videocodierung und -signalverarbeitung angewandt werden.
Mehr Informationen zum breit aufgestellten Thema der Videokommunikation 2.0 am Lehrstuhl sind hier zu finden: Videokommunikation 2.0
Auf dem Gebiet der projektionsbasierten Fisheye- und 360°-Videocodierung biete ich jederzeit Abschlussarbeiten an. Besonderen Wert lege ich auf eine ausreichende Erfahrung im Umgang mit Python oder C++ und Grundkenntnisse im Bereich der Bild- und Videosignalverarbeitung. Natürlich skaliert sich die notwendige Erfahrung entlang der bisherigen Studienerfahrung: Für eine Bachelorarbeit werden weniger Vorkenntnisse erwartet als für ein Forschungspraktikum oder eine Masterarbeit. Bei Interesse genügt eine Mail mit einer kurzen Vorstellung eurer Interessen und gegebenenfalls euren bisherigen Erfahrungen im Bereich der Softwareentwicklung beziehungsweise der Bild- und Videosignalverarbeitung (z.B. Vorlesungen, Praktika, Berufserfahrung, Private Projekte).
- Generation of 3D Models from 360° Images (2020)
- Coding of Distortion-Corrected Fisheye Video Sequences using H.266/VVC (2021)
- Development of a Projection-based Intra Prediction Method for Fisheye Images (2021)
- Improving Resampling in Viewport-Adaptive Fisheye Motion Compensation (2021)
- Sphärische Bewegungsmodelle für die Blockbasierte Bewegungskompensation von 360°-Video (2021)
- Investigation of a Rendering Pipeline for the Automatic Generation of Training Data for Checkerboard Segmentation (2022)
- An Overview of the State of the Art in 360-Degree Image and Video Stitching (2022)
- Comparison of the Resampling Quality for Non-Perspective Image Formats (2022)
- Referenzfreie Brennweitenschätzung für perspektivische Videosequenzen (2022)
- Aiding Learned Camera Calibration through Known Reference Patterns (2022)
- Development of a Viewport-Adaptive 360-Degree Image Resampling Technique (2022)
- Development of a Stitching Framework for a Quad-Fisheye 360-Degree Camera (2023)
- Projection-Aware End-to-End Learned Video Compression for 360-Degree Video (2023)
- : Best Presentation Award (9th VDE/ITG Summer School on Video Compression and Processing) – 2024
- : Best Presentation Award (7th VDE/ITG Summer School on Video Compression and Processing) – 2022
- : Luise Prell-Preis (Luise Prell Stiftung) – 2021
2024
The Bjøntegaard Bible - Why your Way of Comparing Video Codecs May Be Wrong
In: IEEE Transactions on Image Processing 33 (2024), S. 987 - 1001
ISSN: 1057-7149
DOI: 10.1109/TIP.2023.3346695
BibTeX: Download
, , , , , , , , , , :
Analysis of Neural Video Compression Networks for 360-Degree Video Coding
Picture Coding Symposium (PCS) (Taichung, 12. Juni 2024 - 14. Juni 2024)
BibTeX: Download
, , :
Geometry-Corrected Geodesic Motion Modeling with Per-Frame Camera Motion for 360-Degree Video Compression
IEEE International Conference on Acoustics, Speech, and Signal Processing (ICASSP) (Seoul, 14. April 2024 - 19. April 2024)
DOI: 10.1109/ICASSP48485.2024.10446915
URL: https://arxiv.org/abs/2312.09266
BibTeX: Download
, :
2023
Image Super-Resolution Using T-Tetromino Pixels
Proceedings of the IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR)
BibTeX: Download
, , , :
Processing Energy Modeling for Neural Network Based Image Compression
accepted for IEEE International Conference on Image Processing (ICIP) (Kuala Lumpur, 8. Oktober 2023 - 11. Oktober 2023)
URL: https://arxiv.org/abs/2306.16755
BibTeX: Download
, , , , :
Improving Spherical Image Resampling through Viewport-Adaptivity
IEEE International Conference on Image Processing (ICIP) (Kuala Lumpur, 8. Oktober 2023 - 11. Oktober 2023)
DOI: 10.1109/ICIP49359.2023.10222645
URL: https://arxiv.org/abs/2306.13692
BibTeX: Download
, , , :
Motion Plane Adaptive Motion Modeling for Spherical Video Coding in H.266/VVC
IEEE International Conference on Image Processing (ICIP) (Kuala Lumpur, 8. Oktober 2023 - 11. Oktober 2023)
DOI: 10.1109/ICIP49359.2023.10222661
URL: https://arxiv.org/abs/2306.13694
BibTeX: Download
, , :
Multi-Model Motion Prediction for 360-Degree Video Compression
In: IEEE Access 11 (2023), S. 117004-117017
ISSN: 2169-3536
DOI: 10.1109/ACCESS.2023.3326717
BibTeX: Download
, , :
2022
Fast Reconstruction of Three-Quarter Sampling Measurements Using Recurrent Local Joint Sparse Deconvolution and Extrapolation
In: IEEE Transactions on Circuits and Systems II: Express Briefs 69 (2022), S. 2398-2402
ISSN: 1057-7130
DOI: 10.1109/TCSII.2022.3160012
BibTeX: Download
, , , , :
2021
A Novel Viewport-Adaptive Motion Compensation Technique for Fisheye Video
IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP) (Toronto, 6. Juni 2021 - 11. Juni 2021)
DOI: 10.1109/ICASSP39728.2021.9413576
URL: https://arxiv.org/abs/2202.13892
BibTeX: Download
, , :
2020
Boosting Compressed Sensing Using Local Measurements and Sliding Window Reconstruction
In: IEEE Transactions on Image Processing 29 (2020), S. 7931 - 7944
ISSN: 1057-7149
DOI: 10.1109/TIP.2020.3007822
BibTeX: Download
, , , :
Real-Time Frequency Selective Reconstruction through Register-Based Argmax Calculation
IEEE International Workshop on Multimedia Signal Processing (MMSP) (Tampere, 21. September 2020 - 24. September 2020)
DOI: 10.1109/MMSP48831.2020.9287071
URL: https://arxiv.org/abs/2202.13926
BibTeX: Download
, , , :
FishUI: Interactive Fisheye Distortion Visualization
IEEE International Conference on Visual Communications and Image Processing (VCIP) (Macau, 1. Dezember 2020 - 4. Dezember 2020)
DOI: 10.1109/VCIP49819.2020.9301754
BibTeX: Download
, , :
2019
Probabilistic modeling for learning-based distance estimation
23rd International Congress on Acoustics (ICA) (Aachen)
BibTeX: Download
, , :