Tanszéki konzulens: 

Szántó Péter mesteroktató Szoba: IE336 Tel.: +36 1 463-2066 Email: szanto (*) mit * bme * hu

A Gamma Műszaki Zrt. 1920 óta működő, budapesti székhelyű, magyar tulajdonban lévő műszaki fejlesztő cég. Katonai, katasztrófavédelmi és környezetvédelmi feladatokra specializált rendszerek, eszközök fejlesztésével foglalkozik. Az elmúlt időszak egyik jelentősebb fejlesztése a könnyű páncélvédettségű Komondor járműcsalád megvalósítása volt.

A feladat részletezése:

Napjainkban a konvolúciós neurális hálózatokat (CNN) előszeretettel alkalmazzák a gépi látás algoritmusokban azok nagy kapacitású mintafelismerő tulajdonságai miatt. Beágyazott környezetben ezek az algoritmusok csupán szoftveres megvalósítással sokszor nem képesek valós idejű képfeldolgozásra, ezért a megfelelő működésre FPGA-kban célhardver készíthető.

A megvalósítás során a kamerát MIPI interfészen keresztül illesztjük az FPGA-hoz, melyben a rendszám felismerésre alkalmas algoritmus kerülne implementálásra. A hallgató munkája során megismerkedik az FPGA-kra történő hardverfejlesztéssel, deep learning és neurális hálózatok működésével és tanításával.

A teljes projekt végigvitele során a hallgató hallgató feladatai:

• Kamera FPGA-hoz való illesztése MIPI interfészen
• A szükséges előfeldolgozó lépések meghatározása és implementációja
• CNN tanítása vagy megfelelő előre tanított modell kiválasztása
• A megfelelő algoritmus implementálása FPGA-n

Továbbfejlesztési lehetőségek:

• Objektumdetektálás (feliratok, matricák) mozgó járművön

A teljes projekt időtartama több félév, az egyes részfeladatok ütemezése pedig a hallgató képzési szintjétől is függ. 

Lehetőség van gyakornoki pozíció betöltésére.

Részletekről érdeklődni a gamma@gammatech.hu címen lehet.