Objektumok autonóm elhelyezése gépi tanulás segítségével

Supervisor:
Fehér Tamás Márk
Subject:
Project Laboratory 1 - Control and vision systems, MSc Elec.
Project Laboratory 1 - Visual informatics, MSc IT.
Project Laboratory 2 - Control and vision systems, MSc Elec.
Project Laboratory 2 - Visual informatics, MSc IT.
Project Laboratory - Control systems study specialization, BSc Elec.
Project Laboratory - Software development study specialization, BSc IT.
Students count:
1
Continue:
Szakdolgozat / Diplomaterv
TDK dolgozat
Description:
Ma már sok generatív modellel módosíthatók a tárgyak a fényképeken és videókon. Ennek több felhasználása is van, például:
  • Kiterjesztett valóság
  • Adatkészletek bővítése veszélyes vagy ritka mintákkal
  • Autonóm járművek és robotok rugalmas tesztelése
A módosításra használt modellek viszont nehezen irányíthatók. A feladat ezért egy másik megközelítést néz. Utóbbi a hagyományos kiterjesztett valóságra alapul. Ilyenkor meg van határozva egy pont a képen. Ha ennek a pontnak tudjuk a térbeli helyét, az objektum a pont fölé rajzolható. Ekkor viszont figyelni kell, hogy a képre "odaférjen" az objektum. Az objektum elforgatásának is realisztikusnak kell lennie. Arra is figyelni kell, hogy az objektumot mi takarja.

A feladat egy eszköz készítése. Az eszköz képes mély neurális hálózatokkal tetszőleges objektumnak megfelelő helyeket és elforgatásokat javasolni tetszőleges képeken. Az eszköz a takarásokat is figyelembe veszi.