golang convertir iso8859-1 en UTF8

Question

Je suis en train de convertir une chaîne encodée ISO 8859-1 en UTF-8.

La fonction suivante fonctionne avec mon testdata qui contient tréma allemand, mais je ne suis pas tout à fait sûr de ce que la source codant pour la rune (b) cast suppose. Est-ce qu'il suppose une sorte de codage par défaut, par ex. ISO8859-1 ou est-il possible de lui dire quel encodage utiliser?

func toUtf8(iso8859_1_buf []byte) string { 
    var buf = bytes.NewBuffer(make([]byte, len(iso8859_1_buf)*4)) 
    for _, b := range(iso8859_1_buf) { 
     r := rune(b) 
     buf.WriteRune(r) 
    } 
    return string(buf.Bytes()) 
} 

Answer 1

rune est un alias pour int32, et en ce qui concerne le codage, une rune est supposé avoir une valeur de caractère Unicode (point de code). La valeur b dans rune(b) doit donc être une valeur Unicode. Pour 0x00 - 0xFF, cette valeur est identique à Latin-1, vous n'avez donc pas à vous en soucier.

Ensuite, vous devez encoder les runes en UTF8. Mais ce codage est simplement fait en convertissant un []rune en string.

Voici un exemple de votre fonction sans utiliser le package octets:

func toUtf8(iso8859_1_buf []byte) string { 
    buf := make([]rune, len(iso8859_1_buf)) 
    for i, b := range iso8859_1_buf { 
     buf[i] = rune(b) 
    } 
    return string(buf) 
} 

Answer 2

L'effet de

r := rune(expression) 

est:

• Déclarez la variable r de type rune (alias pour int32).
• Initialiser variables r avec la valeur de expresion.

Aucun (re) encodage n'est impliqué et le fait de dire lequel devrait être utilisé en option n'est possible qu'en écrivant/manipulant explicitement un recodage dans le code. Heureusement, dans ce cas, aucun (ré) encodage n'est nécessaire, Unicode a incorporé ces codes de l'ISO 8859-1 d'une manière comparable à ASCII. (Si j'ai vérifié correctement here)