Remerciez-le!

Remerciez @Admin pour avoir partagé cet document gratuitement, de la manière la plus simple, en partageant sur les réseaux sociaux.

Indexation et recherche des documents multimédia Introduction RECHERCHE D’INFOR

Indexation et recherche des documents multimédia Introduction RECHERCHE D’INFORMATIONS MULTIMÉDIA Université Batna 2 département d’Informatique Master II : Intelligence Artificiel et Multimédia (IAM) 2021/2022 Recherche d’informations multimédia MasterII IAM 2021/2022 2 Introduction • Définition : • (larousse ) Procédé permettant la distribution, la diffusion ou la communication d'œuvres, de documents, ou de messages sonores ou audiovisuels (presse, cinéma, affiche, radiodiffusion, télédiffusion, vidéographie, télédistribution, télématique, télécommunication). • (wiki) Le terme média désigne précisément tout moyen de communication, naturel ou technique, qui permet la transmission d'un message. soit un moyen de diffusion collectif, permettant de rapidement communiquer à un public vaste et hétérogène ( Le langage, l'écriture, musique, la presse, la radio, la télévision ou encore Internet). Recherche d’informations multimédia MasterII IAM 2021/2022 3 Multimédia : contexte d’étude • Des contenus pouvant être de différents types, en particulier : – Texte – Son – Image – Vidéo Recherche d’informations multimédia MasterII IAM 2021/2022 4 Recherche d’informations multimédia MasterII IAM 2021/2022 5 Moteur de recherche • Google possède 92,9 % du marché mondial dans ce domaine (contre 2,7 % pour Bing, et 2,2 % pour Yahoo!). • Requêtes Google • 30 000 milliards de pages sont indexées par Google. • 20 milliards de sites sont visitées (crawlées) par Google, chaque jour. • 3,3 milliards de requêtes sont effectuées chaque jour (100 milliards par mois). • 15% des requêtes sont de nouvelles requêtes (500 millions par jour) ! Recherche d’informations multimédia MasterII IAM 2021/2022 6 Statistique YouTube • 2,291 milliards d’utilisateurs utilisent YouTube chaque mois dans le monde (MAU) • Plus de 90 000 vidéos sont vues en une seconde sur YouTube • Plus d’1 milliard d’heures de vidéos visionnées sur YouTube par les internautes à travers le monde chaque jour • Plusieurs milliards de vues par jour • Plus de 70 % des vidéos YouTube sont vues sur mobile • Nombre de vidéos ajoutées sur YouTube 720 000 heures de vidéos sont ajoutées sur YouTube par jour 500 heures de vidéos chaque minute 30 000 heures de vidéos chaque heure Recherche d’informations multimédia MasterII IAM 2021/2022 7 L’e-mail en chiffres • Nombre d’utilisateurs (source http://www.arobase.org) Nombre d’utilisateurs de l’email dans le monde: Plus de la moitié de la population mondial. 3,9 milliards d’individus en 2019. Ce nombre devrait atteindre les 4,3 milliards en 2023. • Nombre de mails envoyés par jour: Le nombre total d’email envoyés et reçus dans le monde est de plus de 306.4 milliards en 2020 et devrait atteindre plus de 361.6 milliards en 2024. • Le spam : le spam représente entre 55 et 95 % du trafic total de l’e-mail. La majeure partie (près de 90%) est filtrée en amont par les outils anti-spam des messageries. Recherche d’informations multimédia MasterII IAM 2021/2022 8 Chaque minute sur Internet Recherche d’informations multimédia MasterII IAM 2021/2022 9 Indexation et recherche multimédia Objets Multimédia Archivage Indexation Archive Index Utilisateur Appariement Requête Résultats Recherche d’informations multimédia MasterII IAM 2021/2022 10 Annotation manuelle • Annotation textuelle : est une description textuelle du contenu d’un document multimédia. • La recherche des documents multimédia qui se base sur les annotations textuelles, utilise des requêtes en langages naturel. • Une description textuelle. – Couteuse en temps. – Subjectives et non complète. Recherche d’informations multimédia MasterII IAM 2021/2022 11 Descripteurs • Extraction de manière automatique des descripteurs (indexes) qui caractérisent le contenu de documents multimédia. • Pour chaque type de média des méthodes spécifiques. • Le processus d’indexation peut être automatique semi- automatique. • La recherche se base sur un processus de similarité entre les descripteurs de la requête et ceux des documents multimédia. Recherche d’informations multimédia MasterII IAM 2021/2022 12 Audio • Signal de parole Bonjour Recherche d’informations multimédia MasterII IAM 2021/2022 13 Variabilité de la parole • La première caractéristique d’un signal de parole est sa variabilité – une personne ne prononce jamais deux fois le même son de la même façon – deux personnes ne prononcent pas le même son de la même façon • pourtant, ce son est parfaitement reconnu et compris par un auditeur humain !! Recherche d’informations multimédia MasterII IAM 2021/2022 14 • Même sons, même personne, même conditions d’enregistrement • Même sons, même conditions d’enregistrement, deux personnes différents Recherche d’informations multimédia MasterII IAM 2021/2022 15 Différents domaines d’application • Bureautique : logiciels de dictée vocale. • Enseignement des langues : évaluation de la prononciation • Services télécom (ou serveurs vocaux). • Transports : commande vocale pour l’aide au pilotage • Aide aux handicapés : ouverture porte,… • Archivage & recherche d ’informations : recherche d’informations dans des BD audiovisuelles. • Reconnaissance automatique du locuteur : serrure vocale, transactions à distance • Applications judiciaires : recherche de suspects Recherche d’informations multimédia MasterII IAM 2021/2022 16 Image • D'un point de vue humain : – Une image contient plusieurs informations sémantiques. • D'un point de vue mathématique : – Une image est un matrice de nombres représentant un signal • Une image est avant tout un signal 2D (x,y), souvent, cette image représente une réalité 3D (x,y,z). • Matrice(s) où la valeur de chaque élément (pixel) représente l’intensité discrète de la lumière Recherche d’informations multimédia MasterII IAM 2021/2022 17 Types d’images • Trois principaux types d’images : Image en niveau de gris Image binaire Image couleurs I(x,y)∈[0..255] I(x,y)∈[0,1] IR(x,y) IG(x,y) IB(x,y) Recherche d’informations multimédia MasterII IAM 2021/2022 18 Indexation d’image • Sémantique • Avocat , porte du voile Recherche d’informations multimédia MasterII IAM 2021/2022 19 Indexation d’image • Signal Vecteurs de caractéristiques de haute dimension Extraction de descripteurs Recherche d’informations multimédia MasterII IAM 2021/2022 20 Différents domaines d’application • Archivage & recherche d ’informations : recherche d’informations dans des bases des images. • Reconnaissance automatique du visage, d’empreinte humaine, d’objets, caractères… • Recherche d’image à l’exacte, les k plus proches. • Détection de plagiat. • Applications judiciaires : recherche de suspects. • Application médicales. • Application industrielles. Recherche d’informations multimédia MasterII IAM 2021/2022 21 Vidéo • Une vidéo = suite d’images • Différents genres de documents • Besoins: organiser, accéder à, retrouver des documents (ou des morceaux de documents) vidéo Journal télévisé Émission sportive Vidéosurveillance Recherche d’informations multimédia MasterII IAM 2021/2022 22 Vidéo (2) • Aspects spécifiques à la vidéo – Contenu multimodal (image, audio, texte) – Temps – Événements • Indexation vidéo : Annotations Descripteurs Segmentation Analyse Représentation (Indexation) Recherche d’informations multimédia MasterII IAM 2021/2022 23 Différents domaines d’application • Archivage & recherche d ’informations : recherche d’informations dans des bases des vidéos. • Systèmes d’informations géographiques (géo- localisation) • vidéosurveillance • Enseignement • Militaire • Application industrielle • Informations médicales uploads/Science et Technologie/ iam-indexation-et-recherche-des-documents-multimedia.pdf