如何在lua中将UTF8字节数组转换为字符串

时间:2013-09-09 08:18:53

标签: utf-8 lua bytearray unpack

我有一张这样的表

table = {57,55,0,15,-25,139,130,-23,173,148,-24,136,158}

是php解包函数的utf8编码字节数组

unpack('C*',$str);

如何将其转换为utf-8字符串,我可以在lua中阅读?

2 个答案:

答案 0 :(得分:5)

Lua没有提供直接函数来将数字形式的utf-8字节表转换为utf-8字符串文字。但是在string.char

的帮助下,为此写一些东西很容易
function utf8_from(t)
  local bytearr = {}
  for _, v in ipairs(t) do
    local utf8byte = v < 0 and (0xff + v + 1) or v
    table.insert(bytearr, string.char(utf8byte))
  end
  return table.concat(bytearr)
end

请注意,lua的标准函数或提供的字符串工具都不支持utf-8。如果你尝试从上面的函数返回的print utf-8编码字符串,你会看到一些时髦的符号。如果您需要更广泛的utf-8支持,您需要查看lua wiki中提到的一些库。

答案 1 :(得分:3)

这是一个全面的解决方案,适用于RFC 3629限制的UTF-8字符集:

do
  local bytemarkers = { {0x7FF,192}, {0xFFFF,224}, {0x1FFFFF,240} }
  function utf8(decimal)
    if decimal<128 then return string.char(decimal) end
    local charbytes = {}
    for bytes,vals in ipairs(bytemarkers) do
      if decimal<=vals[1] then
        for b=bytes+1,2,-1 do
          local mod = decimal%64
          decimal = (decimal-mod)/64
          charbytes[b] = string.char(128+mod)
        end
        charbytes[1] = string.char(vals[2]+decimal)
        break
      end
    end
    return table.concat(charbytes)
  end
end

function utf8frompoints(...)
  local chars,arg={},{...}
  for i,n in ipairs(arg) do chars[i]=utf8(arg[i]) end
  return table.concat(chars)
end

print(utf8frompoints(72, 233, 108, 108, 246, 32, 8364, 8212))
--> Héllö €—