Question

我需要在wstring和string之间进行转换。我想，使用codecvt facet应该可以解决问题，但它似乎不适用于utf-8语言环境。

我的想法是，当我将utf-8编码文件读取到字符时，一个utf-8字符被读入两个普通字符（这就是utf-8的工作原理）。我想从我在代码中使用的库的wstring表示创建这个utf-8字符串。

有人知道怎么做吗？

我已经尝试过了：

  locale mylocale("cs_CZ.utf-8");
  mbstate_t mystate;

  wstring mywstring = L"čřžýáí";

  const codecvt<wchar_t,char,mbstate_t>& myfacet =
    use_facet<codecvt<wchar_t,char,mbstate_t> >(mylocale);

  codecvt<wchar_t,char,mbstate_t>::result myresult;  

  size_t length = mywstring.length();
  char* pstr= new char [length+1];

  const wchar_t* pwc;
  char* pc;

  // translate characters:
  myresult = myfacet.out (mystate,
      mywstring.c_str(), mywstring.c_str()+length+1, pwc,
      pstr, pstr+length+1, pc);

  if ( myresult == codecvt<wchar_t,char,mbstate_t>::ok )
   cout << "Translation successful: " << pstr << endl;
  else cout << "failed" << endl;
  return 0;

为cs_CZ.utf-8语言环境返回'failed'，并且对cs_CZ.iso8859-2语言环境正常工作。

Answer 1

以下代码可能对您有所帮助：）

#include <codecvt>
#include <string>

// convert UTF-8 string to wstring
std::wstring utf8_to_wstring (const std::string& str)
{
    std::wstring_convert<std::codecvt_utf8<wchar_t>> myconv;
    return myconv.from_bytes(str);
}

// convert wstring to UTF-8 string
std::string wstring_to_utf8 (const std::wstring& str)
{
    std::wstring_convert<std::codecvt_utf8<wchar_t>> myconv;
    return myconv.to_bytes(str);
}

Answer 2

你的平台是什么？请注意，Windows不支持UTF-8语言环境，因此这可以解释您失败的原因。

要以平台相关的方式完成此操作，您可以在Windows上使用MultiByteToWideChar / WideCharToMultiByte，在Linux上使用iconv。您可以使用一些增强魔法以独立于平台的方式完成此操作，但我自己没有尝试过，所以我无法添加此选项。

Answer 3

您可以使用boost的utf_to_utf转换器获取char格式以存储在std :: string中。

std::string myresult = boost::locale::conv::utf_to_utf<char>(mywstring);

Answer 4

区域设置的作用是它为程序提供有关外部编码的信息，但假设内部编码没有改变。如果您想输出UTF-8，则需要从wchar_t而不是char*进行输出。

您可以做的是将其作为原始数据（而非字符串）输出，如果系统区域设置为UTF-8，则应正确解释。

使用(w)cout / (w)cerr / (w)cin时，您需要在流上添加区域设置。

Answer 5

Lexertl library有一个迭代器，可以让你这样做：

std::string str;
str.assign(
  lexertl::basic_utf8_out_iterator<std::wstring::const_iterator>(wstr.begin()),
  lexertl::basic_utf8_out_iterator<std::wstring::const_iterator>(wstr.end()));

Answer 6

C ++不知道Unicode。使用ICU（UnicodeString class）或Qt（QString class）等外部库，都支持Unicode，包括UTF-8。

将wstring转换为以UTF-8编码的字符串

6 个答案: