Des réseaux de neurones formés pour détecter l'émotion?

Question

Existe-t-il des réseaux de neurones open source formés pour détecter les émotions?

Je voudrais voir si je peux utiliser un pour détecter la négativité des clips vidéo/audio et/ou du texte.

Answer 1

Vous pouvez en faire un pour l'audio ou la vidéo, mais je dois dire que je ne crois pas que ce serait particulièrement efficace. Les réseaux de neurones sont excellents pour la reconnaissance des formes. Quel serait le schéma d'un réseau? Quel est le son du «bonheur» ou de la «colère»?

Answer 2

C'est ainsi que je l'imagine pour les clips - séparer le problème en plus petits:

1. Vous pouvez vous concentrer sur vérifier si les gens sourient dans la vidéo. Utilisez d'abord un algorithme qui détecte les visages. Ensuite, vous créez plusieurs échantillons aléatoires (dans le temps) de ces faces. Ensuite, vous utilisez un autre algorithme (réseau de neurones formés) pour vérifier s'ils sourient sous la forme d'un nombre: p de n échantillons de sourire détectés.

2. Utilisez la reconnaissance vocale pour vérifier s'ils rient ou pleurent.

3. Vérifiez hochant la tête (attention dans certains pays, il est à l'opposé, mais vous pouvez sauter cette partie pour l'instant)

4. Vérifiez que le clip commence fort et se termine de cette façon.

Une fois que vous avez reconnu ces 4 (ceux, par exemple), vous pouvez essayer de former un réseau de neurones sur eux:

sourire, un signe de tête positif, début fort -> positif

Un bon échantillon les données seront des commentateurs sportifs annonçant une équipe gagnante/perdue.

En fait tout cela est bon quand vous ne savez pas ce qu'ils disent et c'est le cas lorsque vous voulez vérifier toutes les vidéos YouTube, mais vous ne voulez pas apprendre toutes les langues dans le monde.