Bibliothèque de client de stockage google cloud - derrière proxy - accéder aux objets du compartiment en utilisant le code python?

Question

Centos Linux sur vmware - gsutil fonctionne mais j'essaie de télécharger des objets à partir du stockage google cloud en utilisant le code python. L'exécution en dessous du code python échoue car je suis derrière un serveur proxy. J'ai essayé d'exporter http_proxy et https_proxy, en l'ajoutant également via .boto (bien que j'imagine que seul gsutil l'utilise). Mais aucun ne fonctionne.

Je ne trouve aucune mention des paramètres de proxy dans la documentation.

from google.cloud import storage 

storage_client = storage.Client() 
bucket = storage_client.get_bucket('my-bucket') 
blobs=bucket.list_blobs() 

OSError: [Errno 101] Le réseau est inaccessible

* MISE À JOUR 24 JUILLET-17 - RÉSOLU *

re-installed google cloud storage library and my script works fine with HTTP_PROXY set in the env. Not sure about the root cause for initial troubles and I was not able to reproduce the error again unfortunately.

Answer 1

Le google-cloud python library ne prend pas en charge pour les serveurs proxy. La prise en charge de proxy de gsutil provient de l'utilisation de la bibliothèque boto, vous pouvez donc envisager d'utiliser cette bibliothèque si vous avez besoin d'un support proxy.

Answer 2

Bien que, google-cloud python library n'a pas de support pour les proxies directement, il honore HTTPS_PROXY variable d'environnement si elle est définie.

Soit:

export HTTPS_PROXY=https://mycustomproxy.example.com:12345 
python your_python_script.py 

Ou:

export https_proxy=https://mycustomproxy.example.com:12345 
python your_python_script.py 

Vous pouvez également paramétrer directement dans votre script python aussi (de préférence au début):

import os 
os.environ['https_proxy'] = 'https://mycustomproxy.example.com:12345' 

from google.cloud import storage 
storage_client = storage.Client() 
bucket = storage_client.get_bucket('my-bucket') 
blobs=bucket.list_blobs() 

BTW, https_proxy est pris en charge dans le module urllib et par conséquent toutes les bibliothèques (comme google-cloud ici) en utilisant urllib peut utiliser de manière transparente les proxies pour les demandes.