Accueil Finances personnelles Comment hiérarchiser la qualité du Big Data - les nuls

Comment hiérarchiser la qualité du Big Data - les nuls

Vidéo: LA GOUVERNANCE DE LA DONNEE, C'EST QUOI ? 2025

Vidéo: LA GOUVERNANCE DE LA DONNEE, C'EST QUOI ? 2025
Anonim

Trouver le bon point de vue sur la qualité des données peut être très difficile dans le monde des données volumineuses. Avec la majorité des grandes sources de données, vous devez supposer que vous travaillez avec des données qui ne sont pas propres. En fait, l'abondance de données apparemment aléatoires et déconnectées dans les flux de données de médias sociaux est l'une des choses qui les rendent si utiles aux entreprises.

Vous commencez par rechercher des pétaoctets de données sans savoir ce que vous pourriez trouver après avoir commencé à rechercher des modèles dans les données. Vous devez accepter le fait qu'il y a beaucoup de bruit dans les données. Ce n'est qu'en cherchant et en faisant correspondre les motifs que vous pourrez trouver des étincelles de vérité au milieu de données très sales.

Phase 1

: Rechercher des tendances dans les données volumineuses sans se soucier de la qualité des données.

Phase 2:

Après avoir localisé vos modèles et établi des résultats importants pour l'entreprise, appliquez les mêmes normes de qualité que celles que vous appliquez à vos sources de données traditionnelles. Vous voulez éviter de collecter et de gérer les mégadonnées qui ne sont pas importantes pour l'entreprise et qui peuvent potentiellement corrompre d'autres éléments de données dans Hadoop ou d'autres plates-formes de Big Data. Lorsque vous commencez à incorporer les résultats de votre analyse de données volumineuses dans votre processus métier, sachez que des données de haute qualité sont essentielles pour qu'une entreprise prenne de bonnes décisions. Ceci est vrai pour les big data ainsi que pour les données traditionnelles.

La qualité des données se réfère aux caractéristiques des données, y compris la cohérence, l'exactitude, la fiabilité, l'exhaustivité, la rapidité, le caractère raisonnable et la validité. Le logiciel de qualité des données s'assure que les éléments de données sont représentés de la même manière dans différents magasins de données ou systèmes afin d'améliorer la cohérence des données.

Par exemple, un magasin de données peut utiliser deux lignes pour l'adresse d'un client et un autre magasin de données peut utiliser une ligne. Cette différence dans la façon dont les données sont représentées peut aboutir à des informations inexactes sur les clients, par exemple un client identifié comme deux clients différents.

Une société peut utiliser des dizaines de variantes du nom de son entreprise lorsqu'elle achète des produits.Un logiciel de qualité des données peut être utilisé pour identifier toutes les variantes du nom de l'entreprise dans vos différents magasins de données et vous assurer que vous savez tout ce que ce client achète de votre entreprise.

Ce processus s'appelle

et fournit une vue unique du client ou du produit. Le logiciel de qualité des données fait correspondre les données entre différents systèmes et nettoie ou supprime les données redondantes. Le processus de qualité des données fournit à l'entreprise des informations plus faciles à utiliser, à interpréter et à comprendre. Les outils de profilage de données sont utilisés dans le processus de qualité des données pour vous aider à comprendre le contenu, la structure et l'état de vos données. Ils collectent des informations sur les caractéristiques des données dans une base de données ou dans un autre magasin de données pour commencer à transformer les données en une forme plus fiable. Les outils analysent les données pour identifier les erreurs et les incohérences.

Ils peuvent faire des ajustements pour ces problèmes et corriger les erreurs. Les outils vérifient les valeurs, les modèles et les plages acceptables et aident à identifier les données qui se chevauchent. Le processus de profilage des données, par exemple, vérifie si les données doivent être alpha ou numériques. Les outils vérifient également les dépendances ou voient comment les données se rapportent aux données d'autres bases de données.

Les outils de profilage de données pour les mégadonnées ont une fonction similaire à celle des outils de profilage de données pour les données traditionnelles. Les outils de profilage de données pour Hadoop vous fourniront des informations importantes sur les données des clusters Hadoop. Ces outils peuvent être utilisés pour rechercher des correspondances et supprimer les doublons. Par conséquent, vous pouvez vous assurer que vos données volumineuses sont cohérentes. Les outils Hadoop comme HiveQL et Pig Latin peuvent être utilisés pour le processus de transformation.

Comment hiérarchiser la qualité du Big Data - les nuls

Le choix des éditeurs

Comment envoyer une vidéo et des photos avec Flip Video - Dummies

Comment envoyer une vidéo et des photos avec Flip Video - Dummies

Après avoir pris photos et vidéos d'événements dans votre vie avec votre caméra Flip Video, vous pouvez les envoyer par e-mail à vos amis et aux membres de votre famille. Le partage de films et d'images que vous capturez et créez en envoyant un message e-mail vous permet de toucher et de toucher quelqu'un avec vos créations, même si vous êtes à proximité ...

Comment enregistrer le son séparément pour votre film numérique - Les mannequins

Comment enregistrer le son séparément pour votre film numérique - Les mannequins

Ont parfois besoin d'un réalisateur enregistrer le son en utilisant un appareil séparé de l'appareil photo, enregistrer le son séparément, puis synchroniser le son sur la vidéo plus tard, lors de l'édition. Habituellement, la raison en est d'augmenter la qualité du son enregistré car de nombreuses caméras n'enregistrent pas le son aussi bien que ...

Comment enregistrer une vidéo avec un caméscope Flip - Les nuls

Comment enregistrer une vidéo avec un caméscope Flip - Les nuls

Enregistrant des vidéos avec votre caméra Flip est comme facile comme 1-2-3 (et 4). Avant d'enregistrer une vidéo, vérifiez les indicateurs d'état de votre Flip pour vous assurer que votre caméra est complètement chargée et qu'elle a suffisamment de temps d'enregistrement pour capturer la vidéo que vous voulez filmer. Pour vérifier le niveau de charge de la batterie de votre Flip (ou ...

Le choix des éditeurs

Mot Raccourcis des symboles 2016 - des mannequins

Mot Raccourcis des symboles 2016 - des mannequins

Dans Word 2016 vous pouvez insérer des symboles communs en utilisant ces raccourcis clavier. Utilisez ces raccourcis clavier au lieu de la commande Insérer → Symbole pour insérer des symboles typographiques communs. Symbole Raccourci Tableau de bord Alt + Ctrl + signe moins En tableau Ctrl + signe moins Copyright Alt + Ctrl + C Marque déposée Alt + Ctrl + R Marque Alt + Ctrl + T Ellipsis Alt + Ctrl + période

Mot Raccourcis des symboles 2016 - mannequins

Mot Raccourcis des symboles 2016 - mannequins

En fonction de la manière dont vous choisissez d'utiliser Word 2016, vous risquez de devoir faire face pour un symbole spécial. Avec ces raccourcis clavier, vous pouvez insérer des symboles communs dans Word 2016. Utilisez ces raccourcis clavier au lieu de la commande Insérer → Symbole pour insérer des symboles typographiques communs. Symbole Raccourci Tableau de bord Alt + Ctrl + signe moins En tiret ...

Mot Trucs et astuces pour les tables 2013 - mannequins

Mot Trucs et astuces pour les tables 2013 - mannequins

Dans Word 2013, le texte se déverse dans un tableau sur une cellule base de la cellule. Vous pouvez taper un mot, une phrase ou même un paragraphe. Tout ce texte reste dans la cellule, bien que la cellule change de taille pour accueillir de plus grandes quantités de texte. Vous pouvez mettre en forme la cellule d'une table comme n'importe quel paragraphe de Word, en ajoutant même des marges ...

Le choix des éditeurs

Sexe For Dummies Cheat Sheet - les nuls

Sexe For Dummies Cheat Sheet - les nuls

Que vous vous considériez comme un Don Juan, une Lady Chatterly, ou un novice sexuel , tout le monde peut tirer le meilleur parti du sexe avec un peu plus de connaissances. Vous devriez savoir que les préliminaires sont quelque chose que vous devriez prendre en considération avec chaque interaction que vous et votre partenaire avez, ainsi que la façon de garder les choses ...

Mots et significations liés à la ménopause - mannequins

Mots et significations liés à la ménopause - mannequins

Bien que ce soit loin d'être une liste complète des termes que vous pourriez entendre être utilisé lorsque la ménopause est discutée, les cinq termes essentiels suivants devraient vous aider à comprendre les bases. HRT (hormonothérapie substitutive): Un traitement pour compléter les hormones que vous perdez pendant la ménopause - généralement une combinaison d'œstrogènes, ...

Symptômes qui indiquent que la ménopause est proche - mannequins

Symptômes qui indiquent que la ménopause est proche - mannequins

La plupart des femmes commencent à éprouver des symptômes de ménopause déséquilibrés, alors qu'ils ont encore des règles. Si vous ressentez un ou plusieurs des symptômes suivants, consultez votre médecin - vous pouvez être en train d'aborder le changement. Peau sèche ou cheveux Pensée floue (difficulté à se concentrer) Flutters du cœur (battements de cœur rapides) ...