Python: trancher un très gros fichier binaire

Question

Dites que j'ai un fichier binaire de 12 Go et je veux trancher 8 Go du milieu de celui-ci. Je connais les indices de position que je veux couper.

Comment faire? Évidemment, 12 Go ne rentrera pas dans la mémoire, c'est bien, mais 8 Go non plus ... Ce que je pensais bien, mais il semble binaire ne semble pas aimer si vous le faites en morceaux! J'ajoutais 10 Mo à la fois à un nouveau fichier binaire et il y a des discontinuités sur les bords de chaque morceau de 10 Mo dans le nouveau fichier.

Existe-t-il un moyen de faire cela facilement?

Answer 1

Voici un exemple rapide. Adapter au besoin:

def copypart(src,dest,start,length,bufsize=1024*1024): 
    with open(src,'rb') as f1: 
     f1.seek(start) 
     with open(dest,'wb') as f2: 
      while length: 
       chunk = min(bufsize,length) 
       data = f1.read(chunk) 
       f2.write(data) 
       length -= chunk 

if __name__ == '__main__': 
    GIG = 2**30 
    copypart('test.bin','test2.bin',1*GIG,8*GIG)