TUM-RGBD derinlik görüntülerinin Gaussian Splat tabanlı (SPLATAM) medyan filtresi optimizasyonu ile 3B rekonstrüksiyon performansının artırılması
Enhancing 3D reconstruction performance of TUM-RGBD depth images using Gaussian Splat-based (SPLATAM) median filter optimization
- Tez No: 959669
- Danışmanlar: DOÇ. DR. ALİ FURKAN KAMANLI
- Tez Türü: Yüksek Lisans
- Konular: Elektrik ve Elektronik Mühendisliği, Electrical and Electronics Engineering
- Anahtar Kelimeler: Belirtilmemiş.
- Yıl: 2025
- Dil: Türkçe
- Üniversite: Sakarya Uygulamalı Bilimler Üniversitesi
- Enstitü: Lisansüstü Eğitim Enstitüsü
- Ana Bilim Dalı: Elektrik-Elektronik Mühendisliği Ana Bilim Dalı
- Bilim Dalı: Belirtilmemiş.
- Sayfa Sayısı: Belirtilmemiş.
Özet
Görsel Eş Zamanlı Lokalizasyon ve Haritalama yöntemleri, otonom sistemlerin bilinmeyen ortamlarda konumlarını belirleyerek bu ortamların haritasını çıkarmalarına ve otonom bir şekilde hareket edebilmelerine olanak tanımaktadır. Bu yöntemler, robotik, otonom araçlar ve AR/VR gibi çeşitli alanlarda yaygın olarak kullanılmaktadır. Görsel SLAM yöntemleri, kamera sensörlerinden alınan görüntüleri işleyerek ortamın haritasını oluşturan ve kamera poz tahmini gerçekleştiren yöntemlerdir. Son yıllarda, sahne temsilinde 3D Gauss yapılarını kullanan Gaussian Splatting tabanlı Görsel SLAM yöntemleri düşük bellek kullanımı, hızlı render ve yüksek kaliteli rekonstrüksiyon avantajlarıyla öne çıkmaktadır. Gaussian Splatting yöntemi, diğer yöntemlere göre düşük bellek kullanımı, hızlı render ve yüksek kaliteli rekonstrüksiyon sağlayan bir yöntemdir. Ancak bu yöntemlerin performansı, kullanılan derinlik görüntülerinin kalitesine büyük ölçüde bağlıdır. Derinlik sensörlerinden elde edilen verilerdeki bozulmalar ve hatalar, 3D rekonstrüksiyon kalitesini doğrudan etkilemekte ve Gauss yapılarının hatalı konumlandırılmasına yol açabilmektedir. Görsel SLAM yöntemlerinin değerlendirilmesi ve test edilmesinde TUM-RGBD, Replica ve ScanNet vb. popüler veri setleri kullanılmaktadır. Bu veri setleri, farklı ortamlarda kaydedilmiş RGB ve derinlik görüntülerinden oluşmakta ve sistemlerin performansını çeşitli koşullar altında değerlendirebilme imkânı sağlamaktadır. Ancak, TUM-RGBD veri setindeki derinlik görüntüleri, kullanılan Kinect sensörünün teknik kısıtlamaları ve düşük kaliteli olması nedeniyle diğer veri setlerine kıyasla daha düşük kalitelidir. Bu durum, derinlik verilerinin doğruluğunu olumsuz etkilemekte ve haritalama sonuçlarının kalitesini düşürmektedir. Özellikle keskin kenar geçişlerindeki bozulmalar ve pürüzlü yüzeyler, bu sistemlerin performansını önemli ölçüde sınırlandırmaktadır. Bu çalışmada, TUM-RGBD veri setinin“fr1/desk”ve“fr1/desk2”alt veri setlerindeki derinlik görüntülerine, kenar ve köşe özelliklerini koruyarak iyileştirme sağlayan medyan filtresi uygulanmıştır. Filtrelenmiş derinlik görüntüleri, SplaTAM yöntemi kullanılarak işlenmiş ve elde edilen sonuçlar PSNR, SSIM ve LPIPS metrikleriyle değerlendirilmiştir.“fr1/desk”alt veri setinde orijinal görüntülere kıyasla PSNR değerinde %8.08, SSIM değerinde %6.83 ve LPIPS değerinde %26.14 oranında iyileştirme sağlanmıştır. Benzer şekilde,“fr1/desk2”alt veri setinde de PSNR değerinde %4.93 ve SSIM değerinde %6.27 iyileştirme elde edilmiştir. Ayrıca, kamera poz tahmin doğruluğunda da sırasıyla %2.09 ve %7.80 oranında artış gözlenmiştir.
Özet (Çeviri)
Visual Simultaneous Localization and Mapping methods allow autonomous systems to determine their locations and create maps of unknown environments, enabling them to move autonomously without the need for external intervention. These methods are widely used in various fields such as robotics, autonomous vehicles, unmanned aerial vehicles, and AR/VR. Visual SLAM methods process images taken from camera sensors to create maps of environments and perform camera pose estimation. In recent years, Gaussian Splatting-based Visual SLAM methods, which use 3D Gaussian structures in scene representation, have stood out with their advantages of low memory usage, fast rendering, and high-quality reconstruction. The Gaussian Splatting approach provides significant benefits compared to other visual SLAM methods in terms of computational efficiency and reconstruction quality. However, the performance of these methods is highly dependent on the quality of the depth images used. Distortions and errors in the data obtained from depth sensors directly affect the quality of 3D reconstruction and can lead to incorrect positioning of Gaussian structures. Popular datasets such as TUM-RGBD, Replica and ScanNet are used in the evaluation and testing of visual SLAM methods. These datasets consist of RGB and depth images recorded in different environments and provide the opportunity to evaluate the performance of systems under various conditions. However, the depth images in the TUM-RGBD dataset are of lower quality compared to other datasets due to the technical limitations and low resolution of the Kinect sensor used. This negatively affects the accuracy of the depth data and reduces the quality of the mapping results. Especially the distortions in sharp edge transitions and rough surfaces significantly limit the performance of these systems. In this study, a median filter is applied to the depth images in“fr1/desk”and“fr1/desk2”subdatasets of the TUM-RGBD dataset, which provides improvement by preserving the edge and corner features. Filtered depth images are processed using the SplaTAM method and the obtained results are evaluated with PSNR, SSIM and LPIPS metrics. In the“fr1/desk”subdataset, an 8.08% improvement is achieved in PSNR value, a 6.83% in SSIM value and a 26.14% in LPIPS value compared to the original images. Similarly, in the“fr1/desk2”subdataset, a 4.93% improvement is achieved in PSNR value and a 6.27% in SSIM value. Additionally, increases of 2.09% and 7.80% in camera pose estimation accuracy are observed, respectively.
Benzer Tezler
- Diyabetus mellitus'da gözlenen mikrovasküler komplikasyonların prostaglandinler ile olan ilişkisi
The Relation of microvaskular complications observed in diabetes mellitus with prostoglandins
CANAN NEBİGİL
Doktora
Türkçe
1985
Eczacılık ve FarmakolojiCumhuriyet ÜniversitesiFarmakoloji Ana Bilim Dalı
YRD. DOÇ. DR. YUSUF SARIOĞLU
- Kuyruk modelleri ve analizi üzerine bir uygulama
Başlık çevirisi yok
DİDEM ÖZPULAT
Yüksek Lisans
Türkçe
1985
İstatistikEge ÜniversitesiBilgisayar Bilimleri ve Mühendisliği Ana Bilim Dalı
DOÇ. DR. FİKRET İKİZ
- 1950-1975 dönemi sosyal yapı değişiminin konut tasarımına etkisi Ankara-Kavaklıdere örneği
1950-1975 period effects of changes in social structure on planning of residences -Ankara, Kavaklıdere eraple
ADNAN AKSU
- Hastanelerde acil servis hizmetleri
Başlık çevirisi yok
CİHAN SEVİM
Yüksek Lisans
Türkçe
1986
HastanelerGazi ÜniversitesiKazaların Çevresel ve Teknik Araştırması Ana Bilim Dalı (disiplinlerarası)
DOÇ. DR. MEHMET ALİ BUMİN
- Katı yakıtların akışkan yatakta yakılması ve katı miktarının yatak yüksekliğine etkisi
Combustion of solid fuels in the fkuidized beds and the effects of solid quantity to the height of bed
KAMİL BEKİR KOÇ
Yüksek Lisans
Türkçe
1987
Makine MühendisliğiGazi ÜniversitesiMakine Eğitimi Ana Bilim Dalı
YRD. DOÇ. DR. ALİ YÜCEL UYAREL