comment obtenir des données volumineuses (json) à partir d'une URL spécifiée en PHP

Question

J'ai une application php et j'en ai besoin pour prendre une grande réponse json depuis une URL. Avec curl, quand je l'utilise depuis le terminal tout se passe comme prévu. Mais php curl n'obtient pas le fichier entier. On dirait que c'est tronqué.

La commande curl-je utiliser à partir du terminal est:

curl -v -H 'Accept-Encoding:gzip,deflate,sdch' resultsURL --compressed 

où resultsURL est l'URL que je veux obtenir le JSON.

Cela me donne généralement environ 10.000kb (9-10mb), mais à partir de php curl je reçois au plus 400-500kb.

Comment puis-je obtenir le fichier entier?

(exec est pas une option)

Answer 1

set_time_limit(0); 
    $url = 'http://www.example.com/a-large-file.json'; 
    $path = '/path/to/a-large-file.json'; 
    $fp = fopen($path, 'w+'); 

    $ch = curl_init($url); 
    curl_setopt($ch, CURLOPT_FILE, $fp); 

    $data = curl_exec($ch); 

    curl_close($ch); 
    fclose($fp);