Combien de données peuvent être des données de masse? Combien de dimensions peuvent être de haute dimension?

Question

Je vais devenir un maître maintenant, et la direction de recherche de mon professeur est l'extraction de données pour les données de masse de haute dimension.

mais je ne peux toujours pas imaginer ce que sont les données de masse, et combien de dimension peut être appelée de haute dimension.

tks ~

Answer 1

Données de masse? Eh bien, vous pouvez considérer que toutes les requêtes de Google, considérées comme un flux, contiennent des données de masse.

Dimensions de masse? Imaginez un ingénieur de Google en considérant quelques sujets comme «chiens à cinq pattes». Il peut penser que chaque utilisateur représente une dimension et calculer des choses de corrélation. Et il y a beaucoup d'utilisateurs. Maintenant, revenons au point, il n'y a pas de définitions claires des données de masse ou de grandes dimensions. Cependant, vous pouvez considérer que:

• Si vous avez tellement de données que vous ne pouvez pas charger tous en mémoire (je parle de disque dur, pas seulement RAM), ses données de masse
• Si vos algorithmes commence à échouer à cause de la malédiction de la dimensionnalité, c'est une dimension élevée. 1.000.000 dimensions est sûrement de haute dimension. Vous pouvez souvent considérer que 1.000 est une dimension élevée aussi.