Rilevamento di dati fuori distribuzione (OOD) per Vision Transformers in tempo reale

I Vision Transformer (ViT) e i modelli BEV sono ormai lo standard nella percezione automotive. Tuttavia, le matrici di attenzione falliscono rovinosamente contro camuffamenti, riflessi violenti o ostacoli bizzarri. Vediamo come costruire un wrapper di sicurezza certificabile attorno all'IA.

Entropia dei token di attenzione come indicatore di incertezza

In un Vision Transformer, ingressi nitidi concentrano l'attenzione su fari e strisce. In presenza di fango sulla lente o nebbia fitta, l'attenzione si disperde ovunque e l'entropia di Shannon schizza alle stelle. Il wrapper vigila su questo valore: se sfora 4,2 nats, l'output visivo viene azzerato.

Esplora il portafoglio di domini