Accueil Finances personnelles Social Sentiment Analysis avec Hadoop - mannequins

Social Sentiment Analysis avec Hadoop - mannequins

Vidéo: Censio - HANA & HADOOP - Analyse des sentiments Twitter 2025

Vidéo: Censio - HANA & HADOOP - Analyse des sentiments Twitter 2025
Anonim

L'analyse du sentiment social est facilement la plus les utilisations Hadoop, ce qui ne devrait pas être une surprise, étant donné que le monde est constamment connecté et la population expressive actuelle. Ce cas d'utilisation tire parti du contenu des forums, des blogs et d'autres ressources de médias sociaux pour développer ce que les gens font (par exemple, les événements de la vie) et comment ils réagissent au monde qui les entoure (sentiment).

Parce que les données textuelles ne s'intègrent pas naturellement dans une base de données relationnelle, Hadoop est un endroit pratique pour explorer et exécuter des analyses sur ces données.

La langue est difficile à interpréter, même pour les êtres humains à certains moments - surtout si vous lisez un texte écrit par des personnes appartenant à un groupe social différent du vôtre. Ce groupe de personnes parle peut-être votre langue, mais leurs expressions et leur style sont complètement étrangers, vous n'avez donc aucune idée s'ils parlent d'une bonne expérience ou d'une mauvaise expérience.

Par exemple, si vous entendez le mot bombe en référence à un film, cela pourrait signifier que le film était mauvais (ou bon, si vous faites partie de la jeunesse mouvement qui interprète "It's da bomb" comme un compliment); Bien sûr, si vous êtes dans le domaine de la sécurité aérienne, le mot bomb a une signification tout à fait différente. Le fait est que la langue est utilisée de différentes manières et évolue constamment.

Lorsque vous analysez le sentiment sur les médias sociaux, vous pouvez choisir parmi plusieurs approches. La méthode de base analyse par programme le texte, extrait les chaînes et applique les règles. Dans des situations simples, cette approche est raisonnable. Mais à mesure que les exigences évoluent et que les règles deviennent plus complexes, le codage manuel des extractions de texte devient rapidement impossible du point de vue de la maintenance du code, en particulier pour l'optimisation des performances.

Les approches grammaticales et basées sur des règles pour le traitement de texte sont coûteuses en termes de calcul, ce qui est important dans l'extraction à grande échelle dans Hadoop. Plus les règles sont impliquées (ce qui est inévitable à des fins complexes telles que l'extraction de sentiment), plus le traitement est nécessaire.

Alternativement, une approche basée sur les statistiques devient de plus en plus courante pour l'analyse des sentiments. Plutôt que d'écrire manuellement des règles complexes, vous pouvez utiliser les modèles d'apprentissage automatique axés sur la classification dans Apache Mahout. La capture ici est que vous aurez besoin de former vos modèles avec des exemples de sentiments positifs et négatifs. Plus vous fournissez de données d'entraînement (par exemple, du texte issu des tweets et de votre classification), plus vos résultats sont précis.

Le cas d'utilisation de l'analyse du sentiment social peut s'appliquer à un large éventail d'industries. Par exemple, considérons la salubrité des aliments: Tenter de prévoir ou d'identifier l'éclosion de maladies d'origine alimentaire le plus rapidement possible est extrêmement important pour les responsables de la santé.

La figure suivante montre une application ancrée par Hadoop qui ingère des tweets en utilisant des extracteurs basés sur la maladie potentielle: l'EMPOISONNEMENT par GRIPPE ou ALIMENTAIRE.

Voyez-vous la carte de chaleur générée qui montre l'emplacement géographique des tweets? Une caractéristique des données dans un monde de données volumineuses est que la plupart d'entre elles sont spatialement enrichies: Elles ont des informations sur les localités (et des attributs temporels aussi). Dans ce cas, le profil Twitter a été inversé en recherchant l'emplacement publié.

Il s'avère que beaucoup de comptes Twitter ont des emplacements géographiques dans leurs profils publics (ainsi que des avertissements indiquant clairement que leurs opinions sont les leurs plutôt que de parler pour leurs employeurs).

Quelle est la qualité d'un moteur de prédiction pour les médias sociaux en cas d'épidémie de grippe ou d'intoxication alimentaire? Considérez les exemples de données anonymisés présentés. Vous pouvez voir que les signaux des médias sociaux ont éclipsé tous les autres indicateurs pour prédire une épidémie de grippe dans un comté spécifique des États-Unis à la fin de l'été et au début de l'automne.

Cet exemple montre un autre avantage découlant de l'analyse des médias sociaux: Il vous donne une occasion sans précédent d'examiner les informations d'attribut dans les profils des affiches. Certes, ce que les gens disent d'eux-mêmes dans leurs profils Twitter est souvent incomplet (par exemple, le code d'emplacement n'est pas renseigné) ou non significatif (le code d'emplacement peut dire cloud neuf ).

Mais vous pouvez en apprendre beaucoup sur les gens au fil du temps, en fonction de ce qu'ils disent. Par exemple, un client peut avoir tweeté (posté sur Twitter) l'annonce de la naissance de son bébé, une photo Instagram de son dernier tableau ou un message sur Facebook indiquant qu'elle ne peut pas croire le comportement de Walter White dans la finale Breaking Bad de la nuit dernière.

Dans cet exemple omniprésent, votre société peut extraire un événement de vie qui remplit un graphique de famille (un nouvel enfant est une mise à jour utile pour un profil de gestion de données de base), un hobby (peinture) et un attribut d'intérêt (vous aimez le spectacle Breaking Bad ).

En analysant les données sociales de cette manière, vous avez la possibilité d'étoffer les attributs personnels avec des informations telles que les loisirs, les anniversaires, les événements de la vie, les lieux géographiques (pays, état et ville, etc.). statut, et plus encore.

Supposons que vous soyez le DSI d'une compagnie aérienne. Vous pouvez utiliser les messages de voyageurs fréquents heureux ou en colère non seulement pour déterminer le sentiment, mais aussi pour compléter les profils de clients pour votre programme de fidélisation en utilisant les informations sur les médias sociaux.

Imaginez combien vous pourriez mieux cibler les clients potentiels avec l'information qui vient d'être partagée - par exemple, un courriel indiquant au client que la saison 5 de Breaking Bad est maintenant disponible sur le système média de l'avion ou annoncer que les enfants de moins de deux ans voyagent gratuitement.

C'est aussi un bon exemple de la façon dont les systèmes d'enregistrement (disons les bases de données de vente ou d'abonnement) peuvent répondre aux systèmes d'engagement (par exemple, les canaux de soutien). Bien que l'historique d'échange et de voyage des membres fidèles se trouve dans une base de données relationnelle, le système d'engagement peut mettre à jour les enregistrements (par exemple, une colonne).

Social Sentiment Analysis avec Hadoop - mannequins

Le choix des éditeurs

Purifier l'eau pendant le camping - les mannequins

Purifier l'eau pendant le camping - les mannequins

Ne présument pas que l'eau d'un terrain de camping est potable, même si ça vient d'un robinet. L'eau dans les lacs, les rivières et les sources peut sembler cristalline, mais contient souvent diverses bactéries qui peuvent causer des maladies. À moins qu'il ne soit affiché ou qu'un représentant du camping vous ait dit que l'eau est ...

Coaching Kids For Dummies Cheat Sheet - les nuls

Coaching Kids For Dummies Cheat Sheet - les nuls

En tant qu'entraîneur pour les sports d'enfants, vous voulez sortir de la saison Pour commencer, organisez une première réunion d'équipe avec les parents et les enfants pour couvrir les informations importantes. Pour se connecter avec les enfants et entraîner avec succès, comprendre les raisons pour lesquelles les enfants décident de jouer, et parfois quitter, les équipes sportives.

En choisissant la meilleure chaussure de marche pour vous - les mannequins

En choisissant la meilleure chaussure de marche pour vous - les mannequins

Vous offre une bonne paire de chaussures de marche 100 $ Ils devraient avoir une bonne absorption des chocs et devraient être plus rigides et plus favorables que les chaussures de course, malgré un avant-pied flexible. Les semelles intermédiaires sont plus minces que celles des chaussures de course pour accommoder le roulis plus lent lorsque vous marchez. Ils sont ...

Le choix des éditeurs

Ajouter des fichiers vidéo QuickTime à une page Web - des mannequins

Ajouter des fichiers vidéo QuickTime à une page Web - des mannequins

Existent avec ses propres forces et faiblesses. Mais aucun autre format multimédia n'est aussi largement accepté, capable ou pris en charge par autant d'outils multimédia et de création de pages Web différents que QuickTime. L'ajout de contenu multimédia à votre page Web est facile avec QuickTime, et l'utilisation de multimédia basé sur QuickTime est susceptible d'être facile ...

10 Façons d'augmenter vos abonnés Micro-entrepreneurs Ezine - mannequins

10 Façons d'augmenter vos abonnés Micro-entrepreneurs Ezine - mannequins

Créer une liste des personnes intéressées par ce que votre entreprise micro-entrepreneur a à offrir, puis la croissance de la liste des abonnés est essentielle pour un ezine réussie. Construire votre liste d'abonnés ezine signifie plus d'argent (potentiellement) pour votre entreprise. Offrir quelque chose de gratuit avec votre newsletter email Jetez un oeil à la façon dont d'autres éditeurs ezine commercialisent leur ...

Le choix des éditeurs

Vacances wiccan: Célébrer la Lune sur les Esbats - mannequins

Vacances wiccan: Célébrer la Lune sur les Esbats - mannequins

Les Esbats, ou jours saints wiccans lunaires Célébrez le passage de la lune autour de la Terre. Les Esbats offrent aux Wiccans une chance de mettre régulièrement de côté le temps de s'éloigner du monde ordinaire et de consacrer du temps à la réflexion spirituelle ou au travail magique. L'approche des jours saints n'est pas exhaustive.

Qu'est-ce que Pourim? - des mannequins

Qu'est-ce que Pourim? - des mannequins

Purim célèbre l'histoire racontée dans le livre biblique d'Esther, dans lequel le méchant Haman complote pour exterminer le peuple juif de l'ancienne Perse, mais est déjoué par la reine Esther et son cousin Mordecai, qui sont juifs. Prenez le cortège chrétien de Noël, ajoutez un Halloween à la maison et quelques bouteilles de vin, et vous ...

Personnes de grande importance religieuse - mannequins

Personnes de grande importance religieuse - mannequins

Toutes les religions ont des personnes importantes dont les enseignements et la vie incarnent l'esprit de foi et modèles actuels de la promesse de la foi. Ce tableau montre les fondateurs, les enseignants et les principaux dirigeants des principales religions: Personne Rôle Religion Bouddha Fondateur du bouddhisme Bouddhisme Confucius Philosophe et enseignant; fondateur du confucianisme Guru Nanak Premier gourou (chef divin) ...