Display QML rettangoli in streaming video basato sul riconoscimento di oggetti

Ho appena modificato il buffer originale creazione, debayered da una fotocamera, per disegnare rettangoli di me stesso, in formato RGBA. Si evita il problema di sincronizzazione dei frame video con l'oggetto dei dati di posizione. Non ho usato alfa, ma solo la sostituzione di pixel. Per i miei contenuti, la quantità di scatole di contro l'area video non è stato grande. Con alfa rettangoli e un sacco di oggetti, può essere più efficace per coinvolgere una GPU. In realtà, si potrebbe fissa piazze dimensioni e non il CCL delimitata regione, e questo potrebbe essere significativamente più veloce con una GPU.

Un QML soluzione sarebbe più elegante, ma questa soluzione funziona.

Opzioni Alternative sono QVideoFrame::setMetaDataquesto può legare il CCL QRect elenco al telaio, in modo che l'associazione è chiaro e legato al telaio. Il metodo onNewVideoContentReceived() del MyVideoProducer potrebbe rendere i rettangoli da C++.

Un'altra opzione è QAbstractVideoFilter, che permetterà di modificare il buffer originale per aggiungere ulteriori dati per le immagini presentate. Questo è facile per attivare/disattivare tramite il QML front-end.

Tutte le soluzioni si basano su C++, quindi non è facile cambiare la colorazione, ecc in QML. Per esempio, se l'oggetto ha una proprietà riconosciuta come "maschio", "femmina", "gatto", "veicolo", ecc il QML in grado di aggiornare l'evidenziazione in modo appropriato e mantenere una contabilità dei tipi di oggetto.