我有以下代码,尝试将UUID原始16字节(内部为0x0A)保存为CSV格式
package main
import (
"encoding/csv"
"github.com/satori/go.uuid"
"log"
"os"
)
func main() {
u, err := uuid.FromString("e1393c62-877a-4adc-8ffb-f1bf0a337c5f")
if err != nil {
log.Fatal(err)
}
csv_file, err := os.OpenFile("csv_wtf.csv", os.O_WRONLY|os.O_CREATE, 0644)
if err != nil {
log.Fatal(err)
}
s := string(u.Bytes())
log.Printf("len(s)=%d",len(s))
csv_writer := csv.NewWriter(csv_file)
csv_writer.UseCRLF = false
csv_writer.Write([]string{s})
csv_writer.Flush()
finfo, err := csv_file.Stat()
if err != nil {
log.Fatal(err)
}
log.Printf("size csv_wtf.csv = %d", finfo.Size())
csv_file.Close()
}
此代码将数据输出到csv并添加额外的字节
2017/04/16 12:37:14 len(s)=16
2017/04/16 12:37:14 size csv_wtf.csv = 29
为什么在跟踪我的字符串超出范围时,为什么encoding / csv会添加额外的字节(请参阅https://golang.org/src/encoding/csv/writer.go#L38,https://golang.org/src/encoding/csv/writer.go#L50和https://golang.org/src/encoding/csv/writer.go#L76)?
有人可以帮我找到那些不做奇怪转换的CSV包吗?
答案 0 :(得分:3)
这是因为CSV格式不适合存储原始二进制数据,这不太可能是有效的utf-8序列。
当csv_writer.Write
iterates a string with range
loop时,每次遇到无效的utf-8序列时,符文r1
等于65533,编码为3个字节:{ {1}}。
说明性示例:
0xef, 0xbf, 0xbd
输出结果为:
package main
import (
"bytes"
"fmt"
)
func main() {
invalidString := string([]byte{0xff, 0xfe, 0xfd})
var b bytes.Buffer
for _, r := range invalidString {
fmt.Printf("current rune: %v\n", r)
b.WriteRune(r)
}
fmt.Printf("total data: %v\n", b.Bytes())
}
所以你应该放弃CSV而不是其他格式(适合存储二进制数据),或者以字符串形式存储UUID。