Didascalia immagine - Kannaiyan, Kanchana;R, Meenatchi
29,99 €
inkl. MwSt.
Versandkostenfrei*
Versandfertig in 6-10 Tagen
  • Broschiertes Buch

La didascalia delle immagini con l'audio è emersa come un compito impegnativo ma promettente nel campo del deep learning. Il presente lavoro propone un approccio innovativo per affrontare questo compito, integrando reti neurali convoluzionali (CNN) per l'estrazione delle caratteristiche delle immagini e reti neurali ricorrenti (RNN) per l'analisi audio sequenziale. In particolare, utilizziamo CNN pre-addestrate come VGG per estrarre le caratteristiche visive dalle immagini e impieghiamo rappresentazioni dello spettrogramma accoppiate con RNN come LSTM o GRU per elaborare gli input audio. Il…mehr

Andere Kunden interessierten sich auch für
Produktbeschreibung
La didascalia delle immagini con l'audio è emersa come un compito impegnativo ma promettente nel campo del deep learning. Il presente lavoro propone un approccio innovativo per affrontare questo compito, integrando reti neurali convoluzionali (CNN) per l'estrazione delle caratteristiche delle immagini e reti neurali ricorrenti (RNN) per l'analisi audio sequenziale. In particolare, utilizziamo CNN pre-addestrate come VGG per estrarre le caratteristiche visive dalle immagini e impieghiamo rappresentazioni dello spettrogramma accoppiate con RNN come LSTM o GRU per elaborare gli input audio. Il modello proposto si basa non solo sul contenuto visivo, ma anche sugli spunti audio che lo accompagnano. Valutiamo le prestazioni del nostro modello su set di dati di riferimento e dimostriamo la sua efficacia nel generare didascalie coerenti e contestualmente rilevanti per le immagini con gli input audio corrispondenti. Inoltre, abbiamo condotto studi di tablatura per analizzare il contributo di ciascuna modalità alle prestazioni complessive delle didascalie. I nostri risultati mostrano che la fusione delle modalità visive e uditive migliora significativamente la qualità delle didascalie rispetto all'utilizzo di una delle due modalità in modo isolato.
Autorenporträt
Sou a Sra. K.Kanchana, que trabalha como Professora Assistente no Departamento de Informática e Engenharia da Faculdade de Engenharia de Kathir. Estou interessada na área da aprendizagem automática e da aprendizagem profunda