Remerciez-le!

Remerciez @Admin pour avoir partagé cet document gratuitement, de la manière la plus simple, en partageant sur les réseaux sociaux.

1 ANNEE UNIVERSITAIRE 2018 ‘’ 2019 PROJET DE FIN D’ETUDES ENCADREMENT DE : PR.

1 ANNEE UNIVERSITAIRE 2018 ‘’ 2019 PROJET DE FIN D’ETUDES ENCADREMENT DE : PR. YOUNESS OUBENAALLA REALISATION PAR REDA OUCHAIN OUHJA MOHA LA DATA N’EST PAS L’INFORMATION, L’INFORMATION N’EST PAS LA CONNAISSANCE, LA CONNAISSANCE N’EST PAS LA COMPREHENSION, LA COMPREHENSION N’EST PAS LA SAGESSE CLIFFORD STOLL TABLE DE MATIERS INTRODUCTION GENERALE 6 METHODOLOGIE 7 MERCI A VOUS-REFERENCE A VOUS 8 CHAPITRE I : QUE SAIS-JE SUR LE BIG DATA ? 9 SECTION 1 : BIG DATA ENTRE ORIGINES ET IMPACT 10 1 CONCEPT DU BIG DATA 10 2 LE BIG DATA, SI NOUS EN PARLIONS ? 10 2.1 DEFINITION DU BIG DATA 10 2.2 EXPLOSION, TSUNAMI OU DÉLUGE DE DONNÉES NUMÉRIQUES ? 11 2.3 BIG DATA MATRICE 5V 11 2.4 LE SMART DATA : TRIER ET VALORISER LE BIG DATA 11 2.5 AU DELA DES 5V, LES 3P 12 3 LA DATA AU SERVICE DE LA PERSONNALISATION 13 4 LE BIG DATA AU CENTRE DE L’AMELIORATION DE L’EFFICACITRE DE L’INTERMEDIATION 13 5 VOCABULAIRE DE BASE : UNITES DE MESURES DE CAPACITE DU STOCKAGE 14 6 LES CINQ DEFIS DU BIG DATA 15 SECTION 2 : OUTILS D’ANALYSE ET PLATEFORMES DU BIG DATA 16 1 TYPE DE PRODUIT ET CARACTÉRISTIQUES D'HADOOP BIG DATA : 16 1.1 PRÉSENTATION ET CONCEPT D'HADOOP : 16 1.2 FONCTIONNALITÉS PRINCIPALES D'HADOOP : 16 2 DANS QUELS CAS UTILISER HADOOP ? 17 SECTION 3 : FACE AU BIG DATA ET EMERGENCE DU SECTEUR NTIC 18 1 Y’EN A DE LIMITES FACE AU BIG DATA : 18 1.1 DES ENTREPRISES METTENT NOTRE QUOTIDIEN SOUS SURVEILLANCE 18 1.2 COMMERCE DE VOS DONNEES GENETIQUES 19 1.3 PROTECTION DES DONNEES PERSONNELLES : UN RESPECT LIMITE 21 2 LE SECTEUR NTIC 22 2.1 L’UTILISATION DE LA TECHNOLOGIE DE L’INFORMATION ET DE COMMUNICATION DANS LE SECTEUR AGRICOLE 23 2.2 LE POTENTIEL DE L’AGRICULTURE DU SAVOIR POUR REDUIRE LA PAUVRETE ET AMELIORER LA SECURITE ALIMENTAIRE 23 CHAPITRE 2 : LE MAROC LORGNE LE DEVELOPPEMENT DE LA CULTURE DATA 24 SECTION 1 : EMERGENCE DU SECTEUR NTIC AU MAROC : 25 DATACENTER ET CLOUD COMPUTING, DE QUOI PARLONS-NOUS EXACTEMENT ? 26 1 NOUVELLE REVOLUTION INFORMATIQUE : CENTRE DE DONNEES 26 1.1EVOLUTION DE L’OFFRE DATACENTER LE MARCHE DU DATACENTER 26 1.2 TENDANCES GENERALES D’ADOPTION AU MAROC 27 2 CLOUD COMPUTING : 28 2.1 EXPLOSION DU MARCHE DU CLOUD 29 2.2 LE CLOUD, UNE OPPORTUNITE EMERGENTE POUR LE MAROC 29 SECTION 2 : LA VAGUE DU BIG DATA DÉFERLE SUR LE SECTEUR AGRICOLE 30 1.1.1 LA TRANSFORMATION DIGITALE POUR BOOSTER L’AGRICULTURE AU MAROC 31 1.1.2 POURQUOI LE MAROC ? 31 1.1.3STARTUP AU NIVEAU NATIONAL : « SECTEUR AGRICOLE » 32 CHAPITRE 3 : ETUDE DE CAS : RENDEMENT DE CATEGORIES DE 33 CEREALES AU MAROC « 2018-2013 » 1-L’INTRODUCTION DE LA PLATEFORME DE CLOUDERA 34 1.1 PLATEFORME CLOUDERA 34 1.2 CONDITIONS PREALABLES 35 2- OUTILS COMPLEMENTAIRES 35 2-1 INTERFACE FILEZILLA 35 3- L’EXECUTION SUR LA MACHINE VIRTUELLE 39 3.1 PREMIERS PAS AVEC HADOOP 39 3.2 MAPREDUCE 40 3.2.1 MAPPER 41 3.2.2 REDUCER 41 4- CAS D’APPLICATION A CLOUDERA 42 4.1 TOTALITE DE RENDEMENT DES CEREALES PAR VILLE 42 4.2 « MAXIMUM-MINIMUM-MOYENNE » DE RENDEMENT DES CERREALES 43 PAR VILLE 4.3 TOTALITE RENDEMENT PAR CATEGORIES DE CULTURES 45 4.4 TOTALITE DE RENDEMENT DES CEREALES PAR ANNEE 46 4.5 TOTALITE DE RENDEMENT DES CEREALES PAR MOIS 47 CONCLUSION GENERALE 48 TABLE DES BIBLIOGRAPHIE 50 LISTE DES TABLEAUX 51 INTRODUCTION GENERALE Depuis l'introduction d'Internet, nous passons progressivement des communications textuelles à des données plus riches comprenant des images, des vidéos et des cartes interactives, ainsi que des métadonnées associées telles que des informations de géolocalisation et des horodatages. Il y a vingt ans, les lignes RNIS ne pouvaient pas gérer beaucoup plus que des graphiques de base, mais les réseaux de communication à grande vitesse actuels permettent la transmission de types de données nécessitant beaucoup de stockage. Par exemple, les utilisateurs de smartphones peuvent prendre des photos et des vidéos de haute qualité et les télécharger directement sur des sites de réseaux sociaux via les réseaux Wi-Fi et 3G ou 4G. Les mégadonnées peuvent révéler les comportements cachés des personnes et même éclairer leurs intentions. Plus précisément, il peut combler le fossé entre ce que les gens veulent faire et ce qu'ils font réellement, ainsi que la manière dont ils interagissent avec les autres et leur environnement. Si les mégadonnées peuvent fournir des informations extrêmement utiles, elles posent également de nouveaux problèmes en ce qui concerne la quantité de données à stocker, leur coût, leur sécurité, et leur durée de conservation. Beaucoup de questions se posent : Pourquoi le Big Data ? Comment ces données sont collectées ? Comment les rendre utiles ? Est le phénomène du Big data domine notre société ? Est-ce qu’il a d’influence sur de nombreux secteurs ? Ça nous rend à notre sujet de recherche comment Le traitement et l’analyse de ces Mégadonnées va influencer et va apporter de la valeur ajoutée au secteur agricole. Surtout le secteur agricole national. Finalement on va reposer sur les outils analytiques nécessaires pour en rendre ces mégadonnées utiles et efficaces sur quoi que ce soit le secteur étudié. NB : BEAUCOUP QUI VONT RENSEIGNES CE PROJET. VONT REMARQUES LE LOGO PREMIEREMENT. ET VONT CE POSEZ LA QUESTION POUR QUOI Y’A DE LETTRES EN VERT. C’EST PARCE QUE EN 2019 ON EST FACE A UN DILEMME NATUREL C’EST QUE CHAQUE ANNEE ON CONSTATE UNE DISPARITION DES TERRES AGRICOLES. METHODOLOGIE : D’initiation il est en nécessaire de mettre en avant la définition du terme Big Data, son apparition comme concept. Liée par une définition globale du terme. Ajoutant Le Big Data ne bouleverse pas seulement les entreprises de toutes les industries, mais change aussi nos vies, nos sociétés, et le monde dans son ensemble. D’après le premier chapitre intitulé « que sais-je sur le big data ». On va découvrir comment les analyses des mégadonnées transforment le monde. Déterminant les avantages et limites du big data sur différents secteurs d’applications. Le deuxième chapitre sous « le Maroc lorgne le développement de la culture data ». Comment le Maroc influence et émerge la culture du data sur les différents domaines ou secteurs. Comment le pays va s’adapter à la prise du défi de demain. Finalisant par une étude de cas qui va étaler l’application des outils analytiques du big data et leurs efficacités. Ces outils sont nombreux mais on a choisi de travailler avec Hadoop et MapReduce. Maîtrisant ça sur la plateforme de Cloudera. MERCI A VOUS-REFERENCE A VOUS. Un respect mutuel à mes parents pour leur soutien financier et psychologique. De même, j’appréciai le travail collectif et individuel de chacun de nous deux. Malgré les obstacles, je l’ai gardé en mouvement et je ne me suis jamais plié. Je dirais aux futurs étudiants et étudiantes, ne vous rendez jamais, cela peut paraître complexe en début mais il en faut de la persévérance. Vous penserez que vous n’êtes pas chanceux si vous êtes surtout seul. Mais gardez vraiment la tête en haut et continuez d'avancer vers votre objectif : C'est d'accomplir votre projet. En termes d’informations, essayez d’être diversifiées, en particularité dans la vague du Big Data sur différents secteurs et industries. Je sais que ça serait difficile de travailler avec le software. Mais notre professeur va vous disposez de l’assistance technique pourquoi pas académique aussi. Ils vous suffiront d'écouter et de garder l'attention sur les directives renseignées par le professeur pour terminer le travail avec efficacité. En passant, je voudrais remercier le professeur pour la diversité de ces suggestions en matière de choix des sujets. Surtout en avoir de l'audace a attiré les étudiants encadrés, à ce champ de recherche qui est en tendance. C’est vraiment un enrichissement et un élargissement de tâches et de compétences. Ajoutant comme disent les Anglais « Props to me too for putting the work » CHAPITRE I QUE SAIS-JE SUR LE BIG DATA. CHAPITRRE 1 : QUE SAIS-JE SUR LE BIG DATA BIG DATA ENTRE ORIGINE ET IMPACT : I-LE CONCEPT BIG DATA: On est dans l’ère du capitalisme de la donnée, une nouvelle vision du monde, où la technologie n’est pas un GADGET mais un assistant permettant de gagner du temps. Dans le présent ou l’information est l’arme fatale de ce siècle, celui qui détient l’information a le pouvoir. On parle beaucoup de la notion de la donnée mais c’est juste une frange d’individus qui savent et observent son impact. La donnée est hyper nécessaire pour construire la société du savoir. Les données sont considérées comme la NOUVELLE DEVISE. Reprônons que son exploitation génère et fourmille d’enjeux. Finissant cette introduction par une addition disant que FAIRE PRODUIRE LA DONNEE C’EST BIEN MAIS LA FAIRE PARLER C’EST MIEUX. LE BIG DATA, SI NOUS EN PARLIONS ? I-DEFINITION DU BIG DATA: Fait référence à de grandes quantités de données produites très rapidement par un grand nombre de sources diverses. La création de valeur aux différentes étapes de la chaîne de valeur des données sera au centre de la future économie de la connaissance. Big c’est uploads/Geographie/ 11-vol.pdf