Meilleure méthode pour lire les fichiers délimités par des lignes de nouvelle ligne en Python et supprimer les retours à la ligne?

Question

J'essaye de déterminer la meilleure manière de manipuler se débarrasser des nouvelles lignes en lisant dans les fichiers délimités de nouvelle ligne dans Python.

Ce que j'ai trouvé est le code suivant, inclure le code throwaway à tester.

import os 

def getfile(filename,results): 
    f = open(filename) 
    filecontents = f.readlines() 
    for line in filecontents: 
    foo = line.strip('\n') 
    results.append(foo) 
    return results 

blahblah = [] 

getfile('/tmp/foo',blahblah) 

for x in blahblah: 
    print x 

Suggestions?

Answer 1

lines = open(filename).read().splitlines() 

Answer 2

for line in file('/tmp/foo'): 
    print line.strip('\n') 

Answer 3

Je ferais comme ça:

f = open('test.txt') 
l = [l for l in f.readlines() if l.strip()] 
f.close() 
print l 

Answer 4

est ici un générateur qui fait ce que vous avez demandé. Dans ce cas, l'utilisation de rstrip est suffisante et légèrement plus rapide que la bande.

lines = (line.rstrip('\n') for line in open(filename)) 

Toutefois, vous souhaiterez probablement l'utiliser pour vous débarrasser également des espaces de fin.

lines = (line.rstrip() for line in open(filename)) 

Answer 5

J'utilise cette

def cleaned(aFile): 
    for line in aFile: 
     yield line.strip() 

Ensuite, je peux faire des choses comme ça.

lines = list(cleaned(open("file","r"))) 

Ou, je peux étendons nettoyé avec des fonctions supplémentaires, par exemple, déposer des lignes vides ou sauter des lignes de commentaires ou autre chose.

Answer 6

Il suffit d'utiliser les expressions du générateur:

blahblah = (l.rstrip() for l in open(filename)) 
for x in blahblah: 
    print x 

aussi je veux vous déconseiller la lecture de fichier entier en mémoire - en boucle sur des générateurs est beaucoup plus efficace sur les grands ensembles de données.

Answer 7

Que pensez-vous de cette approche?

with open(filename) as data: 
    datalines = (line.rstrip('\r\n') for line in data) 
    for line in datalines: 
     ...do something awesome... 

expression du générateur évite le chargement de fichier en mémoire et with assure la fermeture du fichier