Comment pouvons-nous provisionner le nombre d'instances principales dans le travail AWS Data Pipeline?

Question

Condition requise: Restaurez la table DynamoDB à partir de l'emplacement de sauvegarde S3.

Nous avons créé un travail de pipeline de données, puis édité la section Ressources dans l'assistant d'architecture.

Nous avons placé 20 instances sous le nombre d'instances de base, mais après l'activation du travail de pipeline de données, le cluster EMR a été créé avec une seule instance maître et une instance principale.

Pourriez-vous s'il vous plaît nous suggérer, comment augmenter le nombre de cœurs en section Ressources

Answer 1

Vous pourriez atteindre la limite totale des ressources EC2. Vous ne pouvez avoir que 20 instances EC2 à la demande, sauf si vous avez demandé une augmentation de limite. Datapipeline reconnaît cette limite. Vous devez augmenter la limite de ressources EC2 Ondemand en utilisant le lien ci-dessous.

Un scénario similaire de la docs:

Si vous configurez AWS données Pipeline pour créer automatiquement un 20 nœuds Amazon groupe DME pour traiter les données et votre compte AWS a une limite EC2 instance réglé sur 20 , vous pouvez par inadvertance épuiser vos ressources de remplissage disponibles. Par conséquent, considérez ces restrictions de ressources dans votre conception ou augmentez vos limites de compte en conséquence.

Si vous avez besoin d'une capacité supplémentaire, vous pouvez utiliser le Amazon Web Services Support Center request form pour augmenter votre capacité.