Objektumok autonóm elhelyezése gépi tanulás segítségével

Konzulens:
Fehér Tamás Márk
Tárgy:
Önálló laboratórium 1 - Irányító és látórendszerek MSc. főspec.
Önálló laboratórium 1 - Vizuális informatika MSc. főspec.
Önálló laboratórium 2 - Irányító és látórendszerek MSc. főspec.
Önálló laboratórium 2 - Vizuális informatika MSc. főspec.
Önálló laboratórium - Irányítórendszerek ágazat, BSc Vill.
Önálló laboratórium - Szoftverfejlesztés és rendszertervezés specializáció, BSc Info.
Hallgatói létszám:
1
Folytatás:
Szakdolgozat / Diplomaterv
TDK dolgozat
Leírás:
Ma már sok generatív modellel módosíthatók a tárgyak a fényképeken és videókon. Ennek több felhasználása is van, például:
  • Kiterjesztett valóság
  • Adatkészletek bővítése veszélyes vagy ritka mintákkal
  • Autonóm járművek és robotok rugalmas tesztelése
A módosításra használt modellek viszont nehezen irányíthatók. A feladat ezért egy másik megközelítést néz. Utóbbi a hagyományos kiterjesztett valóságra alapul. Ilyenkor meg van határozva egy pont a képen. Ha ennek a pontnak tudjuk a térbeli helyét, az objektum a pont fölé rajzolható. Ekkor viszont figyelni kell, hogy a képre "odaférjen" az objektum. Az objektum elforgatásának is realisztikusnak kell lennie. Arra is figyelni kell, hogy az objektumot mi takarja.

A feladat egy eszköz készítése. Az eszköz képes mély neurális hálózatokkal tetszőleges objektumnak megfelelő helyeket és elforgatásokat javasolni tetszőleges képeken. Az eszköz a takarásokat is figyelembe veszi.