Tez No İndirme Tez Künye Durumu
768530
Stochastic action and scene estimation system for multi robot teleoperation environments / Çok robotlu teleoperasyon ortamları için stokastik eylem ve sahne tahmin sistemi
Yazar:ABDULLAH AKAY
Danışman: PROF. DR. YUSUF SİNAN AKGÜL
Yer Bilgisi: Gebze Teknik Üniversitesi / Fen Bilimleri Enstitüsü / Bilgisayar Mühendisliği Ana Bilim Dalı
Konu:Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrol = Computer Engineering and Computer Science and Control
Dizin:Bilgisayarla görme = Computer vision ; Endüstriyel robotlar = Industrial robots ; Yapay zeka = Artificial intelligence
Onaylandı
Doktora
İngilizce
2022
116 s.
Teleoperasyon sistemleri, onlarca yıldır birçok uygulama alanında yoğun olarak çalışılmaktadır. Bununla birlikte, klasik teleoperasyon sistemleri, doğal geri bildirim eksikliği, gecikme ve operatör verimsizliği gibi sorunlardan muzdariptir. Bu çalışmada, teleoperasyonun bu sorunlarını azaltmak için operatörlerin teleoperasyon görevlerini yarı otonom olarak gerçekleştirmelerini sağlayan uçtan uca Stokastik Yardımcı Teleoperasyon Sistemi (SATS) tanıtılmıştır. Tele-operasyon görevleri sırasında SATS her zaman aktif olarak çalışmakta, uygulanabilir eylemleri olasılıklarıyla birlikte tanımakta ve operatörler tarafından herhangi bir tetikleme olmaksızın bu eylemlerin her biri için görsel sahne tahminleri üretmektedir. Operatörler, SATS tarafından önerilen eylemlerden birini seçerek uzak robotları manipüle edebilmekte ve teleoperasyon görevlerini yarı otonom bir şekilde gerçekleştirebilmektedirler. Önerilen sistem, geleceğe ait görüntü dizilerini ve sahne konfigürasyonlarını uygun algoritmalarla stokastik olarak tahmin etmek için Markov süreçlerinden ve tekrarlayan sinir ağlarından fikirleri içeren yeni teknikler kullanmaktadır. Gerçek ve simülatif teleoperasyon ortamlarında bir grup operatörle gerçekleştirilen deneyler ile operatörlerin alternatif yöntemlere kıyasla SATS'ın yardımıyla çok daha az sayıda komut vererek operasyonları tamamladığı gösterilmiştir. Teleoperasyon görevlerini SATS yardımıyla yarı otonom olarak gerçekleştirmek, gecikmenin olumsuz etkilerini ve doğal geri bildirim eksikliğini önemsiz hale getirerek operatör verimliliğinin artmasını sağlamıştır. Ayrıca operatörlerin önerilen teknik sayesinde aynı anda birden fazla robotu kullanarak verimliliklerini yüksek oranda arttırdığı gerçekleştirilen deneylerle gösterilmiştir.
There has been great interest in teleoperation systems from many application fields for decades. Despite this interest, conventional teleoperation systems still have serious issues such as latency, lack of natural feedback, and inefficiency in operator performance. In this work, we introduced an end-to-end Stochastic Assistive Teleoperation System (SATS) enabling operators to perform teleoperation missions semi-autonomously to mitigate the problems of teleoperation. During teleoperation missions, SATS always stays in the loop, recognizes applicable actions along with their likelihoods, and generates visual scene predictions for each of these actions without any triggering by operators. Operators can manipulate remote robots and carry out teleoperation missions in a semi-autonomous manner by just choosing one of the suggested actions generated by SATS. The proposed system employs novel techniques incorporating ideas from Markov processes and recurrent neural networks to predict future sequences and scene configurations stochastically with feasible algorithms. We conducted experiments with a group of operators in real and simulated teleoperation scenes demonstrating that operators issue significantly fewer commands compared to alternative methods in the literature to complete teleoperation missions thanks to assistive control of teleoperation robots with SATS. Conducting teleoperation missions semi-autonomously with the help of SATS makes the negative effects of the latency and lack of natural feedback insignificant resulting in improved operator efficiency. In addition, we showed that our system further increases operator efficiency and productivity by allowing operators to control more than one robot simultaneously.