Croisements de caractéristiques

Un croisement de caractéristiques est une caractéristique synthétique résultant de la multiplication (croisement) de plusieurs caractéristiques. Le croisement de combinaisons de caractéristiques peut offrir des capacités prédictives supérieures à celles de chaque caractéristique prise individuellement.

Croisements de caractéristiques

Croisements de caractéristiques

  • Cette méthode est désignée sous le nom de croisements de caractéristiques.
  • Ces croisements définissent les modèles de la forme [A x B].
  • Ils peuvent être complexes : [A x B x C x D x E].
  • Si A et B sont des caractéristiques booléennes, comme des classes, les croisements qui en résultent peuvent être extrêmement creux.

Croisements de caractéristiques : quelques exemples

  • Prédicteur des prix sur le marché de l'immobilier :

    [latitude X num_bedrooms]

Croisements de caractéristiques : quelques exemples

  • Prédicteur des prix sur le marché de l'immobilier :

    [latitude X num_bedrooms]

  • Prédicteur du jeu de morpion :

    [pos1 x pos2 x ... x pos9]

Croisements de caractéristiques : à quoi cela sert-il ?

  • Les systèmes d'apprentissage linéaires s'adaptent bien aux données volumineuses. Par exemple : vowpal-wabit et sofia-ml.
  • Cependant, sans croisements de caractéristiques, l'expressivité de ces modèles serait limitée.
  • L'utilisation combinée de croisements de caractéristiques et de données volumineuses est une stratégie efficace pour entraîner des modèles très complexes.
    • Préfiguration : les réseaux de neurones constituent une autre stratégie.

Envoyer des commentaires concernant…

Cours d'initiation au machine learning