Partager la mémoire entre plusieurs instances d'application

Question

J'ai un modèle qui prend environ 6 Go de mémoire et j'ai une machine de 16 Go. Maintenant, dans cette machine, je veux exécuter plusieurs instances de l'application python. Maintenant, si j'instancie ce modèle pour chaque instance, je ne pourrai guère exécuter 2 instances. Cependant, si nous pouvons partager ce modèle entre instances, il n'y aura pas de limitation telle qu'en dehors de ce modèle, l'encombrement de l'application restante est d'environ 400 mb pour chaque instance. Donc, devrais-je augmenter la mémoire de l'application ou existe-t-il un moyen de partager ce modèle entre les instances.

Answer 1

Découvrez multiprocessing — Process-based parallelism. Avec cela, vous pouvez partager votre modèle entre les processus.

Les gestionnaires fournissent un moyen de créer des données qui peuvent être partagées entre processus différents, y compris le partage sur un réseau entre processus en cours d'exécution sur des machines différentes. Un objet manager contrôle un processus serveur qui gère les objets partagés. D'autres processus peuvent accéder aux objets partagés en utilisant des proxies.