Accueil Finances personnelles Apprendre à connaître les limites du biais dans l'apprentissage automatique - Les nuls

Apprendre à connaître les limites du biais dans l'apprentissage automatique - Les nuls

Vidéo: Henri Broch - L'art du doute (Les Lois de l'Attraction Mentale) 2024

Vidéo: Henri Broch - L'art du doute (Les Lois de l'Attraction Mentale) 2024
Anonim

L'apprentissage automatique dépend beaucoup des données de l'échantillon. Cette partie de vos données est importante parce que vous voulez découvrir un point de vue du monde, et comme avec tous les points de vue, il peut être faux, déformé, ou tout simplement partiel. Vous savez également que vous avez besoin d'un exemple hors échantillon pour vérifier si le processus d'apprentissage fonctionne. Cependant, ces aspects ne forment qu'une partie de l'image.

Lorsque vous faites fonctionner un algorithme d'apprentissage automatique sur des données pour deviner une certaine réponse, vous prenez effectivement un risque et ce pari n'est pas uniquement dû à l'échantillon que vous utilisez pour l'apprentissage. Il y a plus. Pour le moment, imaginez que vous ayez librement accès à des données appropriées, impartiales et dans l'échantillon, de sorte que les données ne constituent pas le problème. Au lieu de cela, vous devez vous concentrer sur la méthode d'apprentissage et de prédiction.

D'abord, vous devez considérer que vous pariez que l'algorithme peut raisonnablement deviner la réponse. Vous ne pouvez pas toujours faire cette hypothèse parce que déterminer certaines réponses n'est pas possible, peu importe ce que vous savez à l'avance.

Par exemple, vous ne pouvez pas entièrement déterminer le comportement des êtres humains en connaissant leur histoire et leur comportement antérieurs. Peut-être un effet aléatoire est-il impliqué dans le processus génératif de notre comportement (la partie irrationnelle de nous, par exemple), ou peut-être que le problème revient au libre arbitre (le problème est aussi philosophique / religieux et il y a beaucoup d'opinions discordantes). Par conséquent, vous pouvez deviner seulement certains types de réponses, et pour beaucoup d'autres, comme lorsque vous essayez de prédire le comportement des gens, vous devez accepter un certain degré d'incertitude qui, avec de la chance, est acceptable pour vos objectifs.

Deuxièmement, vous devez considérer que vous pariez que la relation entre l'information que vous avez et la réponse que vous voulez prédire peut être exprimée comme une formule mathématique quelconque, et que votre apprentissage automatique algorithme est en fait capable de deviner cette formule. La capacité de votre algorithme à deviner la formule mathématique derrière une réponse est intrinsèquement intégrée dans les rouages ​​de l'algorithme.

Certains algorithmes peuvent presque tout deviner; d'autres ont en fait un ensemble limité d'options. La gamme de formulations mathématiques possibles qu'un algorithme peut deviner est l'ensemble de ses hypothèses possibles. Par conséquent, une hypothèse est un algorithme unique, spécifié dans tous ses paramètres et donc capable d'une seule formulation spécifique.

Les mathématiques sont fantastiques. Il peut décrire une grande partie du monde réel en utilisant une notation simple, et c'est le cœur de l'apprentissage automatique car tout algorithme d'apprentissage a une certaine capacité à représenter une formulation mathématique.Certains algorithmes, tels que la régression linéaire, utilisent explicitement une formulation mathématique spécifique pour représenter comment une réponse (par exemple, le prix d'une maison) se rapporte à un ensemble d'informations prédictives (informations sur le marché, localisation de la maison, surface de la propriété, etc).

Certaines formulations sont si complexes et complexes que, même si leur représentation sur papier est possible, cela est trop difficile en pratique. Certains autres algorithmes sophistiqués, tels que les arbres de décision, n'ont pas de formulation mathématique explicite, mais sont tellement adaptables qu'ils peuvent être réglés pour se rapprocher facilement d'une large gamme de formulations. À titre d'exemple, considérons une formulation simple et facilement expliquée. La régression linéaire est juste une ligne dans un espace de coordonnées donné par la réponse et tous les prédicteurs. Dans l'exemple le plus simple, vous pouvez avoir une réponse, y, et un seul prédicteur, x, avec une formulation de

y = β 1 x 1 + β 0

Dans une situation simple d'une réponse prédite par une caractéristique unique, un tel modèle est parfait lorsque vos données s'organisent en une ligne. Cependant, que se passe-t-il si ce n'est pas le cas et se forme comme une courbe? Pour représenter la situation, observez simplement les représentations bidimensionnelles suivantes.

Exemple d'un modèle linéaire qui peine à cartographier une fonction de courbe.

Lorsque les points ressemblent à une ligne ou à un nuage, une erreur se produit lorsque vous déterminez que le résultat est une ligne droite; par conséquent, la cartographie fournie par la formulation précédente est en quelque sorte imprécise. Cependant, l'erreur n'apparaît pas systématiquement mais de manière aléatoire car certains points sont au-dessus de la ligne mappée et d'autres en dessous. La situation avec le nuage de points courbé et formé est différente, parce que cette fois, la ligne est parfois exacte mais à d'autres moments elle est systématiquement erronée. Parfois, les points sont toujours au-dessus de la ligne; parfois ils sont en dessous.

Compte tenu de la simplicité de sa cartographie de la réponse, votre algorithme a tendance à surestimer ou à sous-estimer systématiquement les règles réelles qui sous-tendent les données, ce qui représente leur biais. Le biais est caractéristique des algorithmes plus simples qui ne peuvent pas exprimer des formulations mathématiques complexes.

Apprendre à connaître les limites du biais dans l'apprentissage automatique - Les nuls

Le choix des éditeurs

Création de graphiques avec Fireworks CS5 Outils vectoriels - dummies

Création de graphiques avec Fireworks CS5 Outils vectoriels - dummies

Les outils Vector dans Adobe Fireworks Creative Suite 5 sont similaires à celles auxquelles vous êtes habitué dans Illustrator ou Photoshop. Vous devriez remarquer dès le départ dans Fireworks qu'à chaque fois que vous créez une nouvelle forme vectorielle avec l'un des outils vectoriels (comme Line, Pen, Shape ou Type), Fireworks crée ...

Comment exporter des tranches dans Fireworks CS5 - les nuls

Comment exporter des tranches dans Fireworks CS5 - les nuls

Découpage est une technique permettant de fractionner des fichiers volumineux en paquets plus petits ils téléchargent plus vite. Une fois que vous avez découpé votre illustration dans Adobe Fireworks Creative Suite 5, vous pouvez exporter les coupes finales pour les utiliser sur une page Web. Vous pouvez exporter des tranches Fireworks sous forme de tableaux html ou de feuilles de style en cascade (CSS). Pour exporter en tranches ...

Comment créer des images avec des outils Bitmap dans Adobe Fireworks CS6 - des mannequins

Comment créer des images avec des outils Bitmap dans Adobe Fireworks CS6 - des mannequins

Adobe Photoshop CS6 a certains outils qui fonctionnent différemment des outils similaires dans d'autres applications Adobe: les outils bitmap de Flou, Pinceau, Gomme, Lasso, Baguette magique, Marquee, Crayon et Rubber Stamp. Si vous ne voyez pas le panneau Outils, choisissez Fenêtre → Outils. Comment sélectionner des pixels avec des outils bitmap Les outils de sélection vous permettent de saisir ...

Le choix des éditeurs

ISO et Image Noise avec le Nikon D3300 - mannequins

ISO et Image Noise avec le Nikon D3300 - mannequins

Idéalement, vous devez toujours utiliser le réglage ISO le plus bas sur votre Nikon D3300 pour assurer une qualité d'image optimale. À mesure que l'ISO augmente, rendant le capteur d'image plus réactif à la lumière, vous augmentez le risque de produire du bruit. Le bruit est un défaut qui ressemble à des grains de sable et ressemble ...

Comment afficher les paramètres d'image sur le Nikon D3300 - dummies

Comment afficher les paramètres d'image sur le Nikon D3300 - dummies

Votre appareil photo Nikon D3300 conserve une trace de paramètres de prise de vue et vous permet de les voir pendant la prise de vue. Votre appareil photo vous propose les moyens suivants pour surveiller les paramètres de prise de vue les plus importants: Écran d'information (photographie du viseur): L'écran de gauche de la figure vous donne un aperçu de l'écran d'informations disponible pour la photographie du viseur. ...

Le choix des éditeurs

Où placer un numéro de page dans Word 2007 - mot de passe

Où placer un numéro de page dans Word 2007 - mot de passe

Mot 2007 peut numéroter automatiquement vos pages et vous permet de placer le numéro de page n'importe où sur la page (en haut, en bas ou sur les côtés) dans une variété de formats. Si vous supprimez ou renumérotez une page, Word les renumérote automatiquement pour vous.

En mode plein écran dans Word pour Mac 2011 - pour les nuls

En mode plein écran dans Word pour Mac 2011 - pour les nuls

, Il existe une nouvelle vue Plein écran dans Word pour Mac 2011 qui vous permet de modifier ou simplement de lire un document sans l'encombrement du ruban Office 2011 pour Mac, des règles et autres distractions. La vue Plein écran est en fait deux vues en une: Vous pouvez choisir le mode Lecture ou le mode Ecriture. Passage en plein écran ...

À L'aide de l'option Imprimer la mise en page dans Word pour Mac 2011 - dummies

À L'aide de l'option Imprimer la mise en page dans Word pour Mac 2011 - dummies

Mac est un bon point de départ pour les débutants car ce que vous voyez à l'écran est le plus proche de ce que vous obtenez lorsque vous imprimez. La vue Imprimer la mise en page est également utile à titre d'exemple pour expliquer la disposition générale de l'interface de Word. Les vues Brouillon et Contour dans ...