Descrizione

Titolo del progetto di ricerca: Robot-assisted Assembling and Disassembling of Color Bars (ROBOASSIST)
EG2327-C ROBOASSIST 2024
CUP: H89J24000320004

Gate-Shift-Fuse (GSF) [Sudhakaran et.al, TPAMI 2023] e' un modello neurale per la classificazione di video clip. La prestazione prevede:
1. Porting del codice sorgente ufficiale https://github.com/ swathikirans/GSF da PyTorch 1.7 a PyTorch 2.4. Deliverable: codice sorgente in PyTorch 2.4.
2. Estensione dell'implementazione di GSF modalita' RGB (ufficiale) a modalita' skeleton+RGB tramite early fusion; per l'estrazione di skeleton si utilizza trtpose https://github.com/NVIDIA-AI-IOT/trt_pose. Deliverable: codice sorgente in PyTorch 2.4.
3. Deployment di GSF modalita' skeleton+RGB in TensorRT per Nvidia Jetson AGX Orin incluso trtpose. Deliverable: dimostratore installato su Nvidia Jetson AGX Orin fornito da unibz, e documentazione istruzioni per replicare il deployment del dimostratore.

Richiedente: Professor Lanz Oswald