Comment fabriquer des ressources de données - des nuls

Un entrepôt de données héberge vos données de grande valeur, ou vos données . La plupart des organisations construisent un entrepôt de données pour les données manufacturées de manière relativement simple, en suivant ces étapes: L'équipe de stockage de données (généralement les analystes et programmeurs informatiques) sélectionne une zone

1. , telle que suivre et rapporter l'activité de vente de produits de l'entreprise par rapport à celle de ses concurrents.

   L'équipe en charge de la construction de l'entrepôt de données affecte un groupe d'utilisateurs professionnels et d'autres personnes clés au sein de l'entreprise pour jouer le rôle d'experts en la matière.

2. Ensemble, l'équipe d'entreposage de données et les experts en la matière établissent une liste de différents types d'informations qui peuvent leur permettre d'utiliser l'entrepôt de données pour suivre l'activité de vente (ou quel que soit l'objectif du projet).

   Le groupe parcourt ensuite la liste des informations (actifs de données), élément par élément, et détermine où l'entrepôt de données peut obtenir cette donnée particulière (matière première).

3. Dans la plupart des cas, le groupe peut obtenir les données d'au moins une base de données ou fichier interne (interne à l'entreprise), tel que celui utilisé par l'application pour traiter les commandes sur Internet ou la base de données principale de tous les clients. adresses actuelles.

   Dans d'autres cas, une information n'est pas disponible dans les applications informatiques de la société, mais vous pouvez l'obtenir en l'achetant auprès d'une autre société. Bien qu'une banque n'ait pas les notes de crédit et l'encours total de la dette pour tous ses clients à l'interne, par exemple, elle peut acheter cette information auprès d'un tiers - un bureau de crédit.

   Après avoir renseigné le détail des informations que l'entreprise peut obtenir pour chaque information, l'équipe d'entreposage de données crée des programmes d'extraction.

4. Les programmes d'extraction

   collectent des données de diverses bases de données et fichiers internes, copient certaines données dans une zone de transit (une zone de travail en dehors de l'entrepôt de données), nettoient les données pour s'assurer qu'elles erreurs, puis copiez les données de meilleure qualité (actifs de données) dans l'entrepôt de données. Les programmes d'extraction sont créés à la main (codage personnalisé) ou à l'aide de produits spécialisés d'entreposage de données - outils ETL (extraire, transformer et charger). Vous pouvez créer un entrepôt de données performant en consacrant suffisamment de temps aux deux premières étapes de cette liste (analyser le besoin d'un entrepôt de données et comment l'utiliser), ce qui fait les deux étapes suivantes (conception et implémentation des données entrepôt pour le rendre prêt à utiliser) beaucoup plus facile à réaliser.

Il est intéressant de noter que les étapes d'analyse (déterminer l'objectif de l'entrepôt de données et travailler en étroite collaboration avec les utilisateurs professionnels pour déterminer quelles informations sont importantes) sont presque identiques aux étapes de tout autre type d'application informatique. La plupart des applications informatiques créent des données à la suite d'une transaction ou d'un ensemble de transactions lorsqu'une application particulière est utilisée pour exécuter l'entreprise, par exemple pour remplir la commande d'un client.

La principale différence entre les applications run-the-business et un entrepôt de données est qu'un entrepôt de données repose exclusivement sur des données provenant d'autres applications et sources. Cette figure montre la différence entre ces deux types d'environnements.