Chuyển đổi UTF-16 sang UTF-8 trong Windows và Linux, trong C

Question

Tôi đã tự hỏi liệu có phương pháp 'chéo' Windows và Linux được đề xuất cho mục đích chuyển đổi chuỗi từ UTF-16LE sang UTF-8 không? hoặc một nên sử dụng các phương pháp khác nhau cho mỗi môi trường?

Tôi đã quản lý để google tham chiếu đến 'iconv', nhưng đối với somreason tôi không thể tìm thấy mẫu chuyển đổi cơ bản, chẳng hạn như - chuyển đổi wchar_t UTF-16 thành UTF-8.

Bất kỳ ai cũng có thể đề xuất một phương pháp 'chéo' và nếu bạn biết tài liệu tham khảo hoặc hướng dẫn với mẫu, sẽ rất đánh giá cao.

Cảm ơn, Doori Bar

Answer 1

Thanks guys, đây là cách tôi quản lý để giải quyết các cửa sổ 'chéo' và yêu cầu linux:

1. Downloaded và cài đặt: MinGW, và MSYS
2. Downloaded gói libiconv nguồn
3. Biên soạn libiconv qua MSYS.

Về điều đó.

Answer 2

Các mã nguồn mở ICU library được sử dụng rất phổ biến.

Answer 3

wchar_t *src = ...; 
int srclen = ...; 
char *dst = ...; 
int dstlen = ...; 
iconv_t conv = iconv_open("UTF-8", "UTF-16"); 
iconv(conv, (char*)&src, &srclen, &dst, &dstlen); 
iconv_close(conv); 

Answer 4

Nếu bạn không muốn sử dụng ICU,

1. Windows: WideCharToMultiByte
2. Linux: iconv (Glibc)

Answer 5

Ngoài ra còn có utfcpp, là thư viện chỉ dành cho tiêu đề.

Answer 6

tôi đã chạy vào vấn đề này quá, tôi giải quyết nó bằng cách sử dụng boost locale library

try 
{   
    std::string utf8 = boost::locale::conv::utf_to_utf<char, short>(
         (short*)wcontent.c_str(), 
         (short*)(wcontent.c_str() + wcontent.length())); 
    content = boost::locale::conv::from_utf(utf8, "ISO-8859-1"); 
} 
catch (boost::locale::conv::conversion_error e) 
{ 
    std::cout << "Fail to convert from UTF-8 to " << toEncoding << "!" << std::endl; 
    break; 
} 

Các boost :: locale :: conv :: utf_to_utf chức năng cố gắng để chuyển đổi từ một bộ đệm đó được mã hóa bởi UTF- 16LE to UTF-8, Tăng cường chức năng: :: locale :: conv :: from_utf cố gắng chuyển đổi từ bộ đệm được mã hóa theo UTF-8 thành ANSI, đảm bảo mã hóa là đúng (Ở đây tôi sử dụng mã hóa cho tiếng Latin- 1, ISO-8859-1).

Một lời nhắc khác là, trong Linux std :: wstring dài 4 byte, nhưng trong Windows std :: wstring dài 2 byte, vì vậy bạn nên sử dụng std :: wstring để chứa bộ đệm UTF-16LE.

Answer 7

Thay đổi mã hóa sang UTF-8 với PowerShell:

powershell -Command "Get-Content PATH\temp.txt -Encoding Unicode | Set-Content -Encoding UTF8 PATH2\temp.txt"