AWS Lambda - utilise Kinesis sous VPC

Question

J'ai une fonction AWS Lambda qui utilise un cluster ElastiCache Redis. Étant donné que le cluster Redis est «verrouillé» dans un VPC, la fonction Lambda doit également se trouver dans cette zone .

Pour une raison quelconque, si le Lambda est attribué un IP d'un public subnet, qui a une Internet gateway - il ne peut toujours pas faire des liens vers l'extérieur (Internet), rendant ainsi impossible l'utilisation Kinesis.

Pour cela, ils suggèrent d'utiliser une passerelle NAT qui permet au Lambda de se connecter à l'extérieur. Fondamentalement, cela fonctionne pour moi - mais mon problème est l'argent. Cette solution est coûteuse pour une grande quantité de transferts de données et je cherche un moyen de le rendre moins cher.

Pour un petit POC que j'ai fait, j'ai payé ~$10.

C'est trop pour ~30GB que mon pipeline de production se déroulera sur des centaines de gigabytes/mois.

Comment suggérez-vous que la fonction Lambda connecte l'extérieur (en particulier Kinesis) sans utiliser de passerelle NAT?

Merci!

Answer 1

sans utiliser de passerelle NAT?

Utilisez une instance NAT .

Vous devez avoir une de ces deux choses pour n'importe quoi dans VPC pour accéder à Internet à partir d'une adresse IP privée.

Les instances NAT correspondaient exactement à ce qui était toujours fait dans VPC, jusqu'à ce que le service de passerelle NAT relativement nouveau soit déployé.

Vous pouvez également utiliser une passerelle NAT, qui est un service NAT géré offrant une meilleure disponibilité, une bande passante plus élevée et nécessitant moins d'efforts administratifs. Pour les cas d'utilisation courants, nous vous recommandons d'utiliser une passerelle NAT plutôt qu'une instance NAT.

http://docs.aws.amazon.com/AmazonVPC/latest/UserGuide/VPC_NAT_Instance.html

Bien sûr, il est plus facile, mais cela coûte plus cher. Beaucoup plus. La différence la plus significative dans ce cas est qu'avec une instance NAT, vous payez un tarif forfaitaire pour l'utilisation du matériel, qui peut être un t2.nano peu coûteux, 5 $/mois. Le service de passerelle NAT est une solution à haute puissance avec une capacité de mise à l'échelle presque infinie, dont le prix est calculé en conséquence. Une instance NAT est seulement aussi bonne que le matériel sur lequel vous avez choisi de l'exécuter, mais je trouve que t2.nano et t2.micro sont tout à fait adéquats pour les charges de travail nécessitant moins de 250 Mbit/s de connectivité Internet.

Utilisez le lien ci-dessus pour en savoir plus.

Answer 2

Aucune adresse IP publique ne sera affectée aux instances de la fonction Lambda, quel que soit le type de sous-réseau VPC utilisé. Une passerelle NAT est la seule solution à fournir une fonction Lambda dans un VPC avec accès aux ressources externes. le VPC (comme Kinesis). Si cela ne fonctionne pas pour vous en raison du coût, vous pouvez envisager d'exécuter un serveur Redis sur une instance EC2 avec une adresse IP Elastic, ce qui permettrait à la fonction Lambda de se connecter sans être à l'intérieur du VPC. Une alternative similaire serait d'utiliser RedisLabs au lieu d'ElastiCache.