Question

我有一个exe，用于打印utf-8个编码字符串，其中包含特殊字符。
由于该exe用于从控制台窗口使用，因此其输出被破坏，因为Windows使用ibm850编码（aka code page 850）。

如何确保go exe为控制台窗口打印正确编码的字符串，例如打印：

éèïöîôùòèìë

而不是（没有任何向右charset的翻译）

├®├¿├»├Â├«├┤├╣├▓├¿├¼├½

Answer 1

// Alert: This is Windows-specific, uses undocumented methods, does not
// handle stdout redirection, does not check for errors, etc.
// Use at your own risk.
// Tested with Go 1.0.2-windows-amd64.

package main

import "unicode/utf16"
import "syscall"
import "unsafe"

var modkernel32 = syscall.NewLazyDLL("kernel32.dll")
var procWriteConsoleW = modkernel32.NewProc("WriteConsoleW")

func consolePrintString(strUtf8 string) {
    var strUtf16 []uint16
    var charsWritten *uint32

    strUtf16 = utf16.Encode([]rune(strUtf8))
    if len(strUtf16) < 1 {
        return
    }

    syscall.Syscall6(procWriteConsoleW.Addr(), 5,
        uintptr(syscall.Stdout),
        uintptr(unsafe.Pointer(&strUtf16[0])),
        uintptr(len(strUtf16)),
        uintptr(unsafe.Pointer(charsWritten)),
        uintptr(0),
        0)
}

func main() {
    consolePrintString("Hello ☺\n")
    consolePrintString("éèïöîôùòèìë\n")
}

Answer 2

在线图书＆＃34; Network programming with Go＆＃34; （CC BY-NC-SA 3.0）有一章关于字符集（Managing character sets and encodings），其中Jan Newmarch详细说明了conversion of one charset to another。但这似乎很麻烦。

这是一个解决方案（我可能错过了一个更简单的解决方案），使用库go-charset （来自Roger Peppe）。
我将utf-8字符串翻译为ibm850编码字符串，允许我在DOS窗口中打印：

éèïöîôùòèìë

翻译功能详述如下：

package main

import (
    "bytes"
    "code.google.com/p/go-charset/charset"
    _ "code.google.com/p/go-charset/data"
    "fmt"
    "io"
    "log"
    "strings"
)

func translate(tr charset.Translator, in string) (string, error) {
    var buf bytes.Buffer
    r := charset.NewTranslatingReader(strings.NewReader(in), tr)
    _, err := io.Copy(&buf, r)
    if err != nil {
        return "", err
    }
    return string(buf.Bytes()), nil
}

func Utf2dos(in string) string {
    dosCharset := "ibm850"
    cs := charset.Info(dosCharset)
    if cs == nil {
        log.Fatal("no info found for %q", dosCharset)
    }
    fromtr, err := charset.TranslatorTo(dosCharset)
    if err != nil {
        log.Fatal("error making translator from %q: %v", dosCharset, err)
    }
    out, err := translate(fromtr, in)
    if err != nil {
        log.Fatal("error translating from %q: %v", dosCharset, err)
    }
    return out
}

func main() {
    test := "éèïöîôùòèìë"
    fmt.Println("utf-8:\n", test)
    fmt.Println("ibm850:\n", Utf2dos(test))
}

Answer 3

自2016年起，您现在可以（2017年）考虑golang.org/x/text，encoding charmap附带Go Quickly - Converting Character Encodings In Golang，包括ISO-8859系列以及Windows 1252字符集。

请参阅“Nov. 2018 reddit thread”

r := charmap.ISO8859_1.NewDecoder().Reader(f)
io.Copy(out, r)

这是打开ISO-8859-1源文本（my_isotext.txt），创建目标文件（my_utf.txt），并将第一个复制到第二个的示例的摘录。
但是要从ISO-8859-1解码为UTF-8，我们用解码器包装原始文件阅读器（f）。

我刚测试过（用于说明的伪代码）：

package main

import (
    "fmt"

    "golang.org/x/text/encoding"
    "golang.org/x/text/encoding/charmap"
)

func main() {
    t := "string composed of character in cp 850"
    d := charmap.CodePage850.NewDecoder()
    st, err := d.String(t)
    if err != nil {
        panic(err)
    }
    fmt.Println(st)
}

结果是Windows CMD中可读的字符串请参阅此{{3}}。

中的详情

Answer 4

Go仍然无法开箱即用 - 请参阅http://code.google.com/p/go/issues/detail?id=3376#c6。

亚历

如何使用go在Windows控制台中正确输出字符串？

4 个答案: