성태의 닷넷 이야기
홈 주인
모아 놓은 자료
프로그래밍
질문/답변
사용자 관리
사용자
메뉴
아티클
외부 아티클
유용한 코드
온라인 기능
MathJax 입력기
최근 덧글
[정성태] VT sequences to "CONOUT$" vs. STD_O...
[정성태] NetCoreDbg is a managed code debugg...
[정성태] Evaluating tail call elimination in...
[정성태] What’s new in System.Text.Json in ....
[정성태] What's new in .NET 9: Cryptography ...
[정성태] 아... 제시해 주신 "https://akrzemi1.wordp...
[정성태] 다시 질문을 정리할 필요가 있을 것 같습니다. 제가 본문에...
[이승준] 완전히 잘못 짚었습니다. 댓글 지우고 싶네요. 검색을 해보...
[정성태] 우선 답글 감사합니다. ^^ 그런데, 사실 저 예제는 (g...
[이승준] 수정이 안되어서... byteArray는 BYTE* 타입입니다...
글쓰기
제목
이름
암호
전자우편
HTML
홈페이지
유형
제니퍼 .NET
닷넷
COM 개체 관련
스크립트
VC++
VS.NET IDE
Windows
Team Foundation Server
디버깅 기술
오류 유형
개발 환경 구성
웹
기타
Linux
Java
DDK
Math
Phone
Graphics
사물인터넷
부모글 보이기/감추기
내용
<div style='display: inline'> <h1 style='font-family: Malgun Gothic, Consolas; font-size: 20pt; color: #006699; text-align: center; font-weight: bold'>C/C++ - 리눅스 환경에서 u16string 문자열을 출력하는 방법</h1> <p> 우선, u16string은 직접적으로 cout에 출력 지원이 안 됩니다.<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > std::u16string text = u"test"; cout << text << endl; </pre> <br /> 위와 같이 하면 이런 식으로 컴파일 오류가 발생합니다.<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > message : cannot convert ‘text’ (type ‘std::u16string’ {aka ‘std::__cxx11::basic_string<char16_t>’}) to type ‘const unsigned char*’ </pre> <br /> 보통, 이런 경우 c_str() 함수의 결과를 출력하는데, u16string 계열은 이것마저도 단순히 해당 문자열의 주솟값을 출력할 뿐입니다.<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > cout << text.c_str() << endl; // 출력 결과: 0x7fffffffe330 </pre> <br /> 답답하군요. ^^ 그럼, 어차피 <a target='tab' href='https://devblogs.microsoft.com/oldnewthing/20161201-00/?p=94836'>16비트니까 wchar_t</a>로 형변환하면 되지 않을까요? 그런데 실제로 해보면 정상적인 출력이 안 나옵니다.<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > const wchar_t* result = (wchar_t*)text.c_str(); wcout << result << endl; // 출력 결과: ts U U </pre> <br /> text의 메모리 표현이 "74 00 65 00 73 00 74 00 00"으로 나오는데, 왜 wchar_t로 정상적으로 받을 수 없는 걸까요? 그것은 리눅스에서 wchar_t 타입이 윈도우처럼 2바이트가 아닌 4바이트이기 때문입니다. 그로 인해 "74 00 65 00"이 한 글자를 표현하게 되고 결국 4바이트 유니코드에 해당하는 문자를 나타내 의도치 않은 결과가 나옵니다.<br /> <br /> 그래서 검색해 보면, u16string을 utf8로 변환 후 출력하라는 글들이 나옵니다.<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > how to print u32string and u16string to the console in c++ ; <a target='tab' href='https://stackoverflow.com/questions/45874857/how-to-print-u32string-and-u16string-to-the-console-in-c'>https://stackoverflow.com/questions/45874857/how-to-print-u32string-and-u16string-to-the-console-in-c</a> </pre> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > std::wstring_convert<std::codecvt_utf8<char16_t>, char16_t> converter; std::cout << converter.to_bytes(text) << std::endl; // 출력 결과: test </pre> <br /> <hr style='width: 50%' /><br /> <br /> 한 가지 유의할 사항은, converter.to_bytes 함수가 변환할 수 없는 문자를 포함하고 있으면 std::range_error 예외를 발생한다는 점입니다. 대개의 경우 정상적으로 초기화하지 않은 버퍼가 입력으로 들어간 경우에 발생할 텐데요, 이 외에도 Surrogate Pair를 지원하지 않아,<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > 유니코드의 Surrogate Pair, Supplementary Characters가 뭘까요? ; <a target='tab' href='https://www.sysnet.pe.kr/2/0/1710'>https://www.sysnet.pe.kr/2/0/1710</a> </pre> <br /> 정상적인 UTF-16 인코딩 문자열이라도 예외가 발생할 수 있음에 주의해야 합니다.<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > std::u16string text = u"\xd800\xdc00"; // U+10000에 대한 Surrogate Pair std::wstring_convert<std::codecvt_utf8<char16_t>, char16_t> converter; std::cout << converter.to_bytes(text) << std::endl; // 예외 발생 /* terminate called after throwing an instance of 'std::range_error' what(): wstring_convert::to_bytes */ </pre> <br /> 그래서, 가능한 try/catch로 to_bytes를 보호하는 것이 좋습니다.<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > try { std::u16string text = u"\xd800\xdc00"; std::wstring_convert<std::codecvt_utf8<char16_t>, char16_t> converter; std::cout << converter.to_bytes(text) << std::endl; // 예외 발생 } catch (std::range_error& e) { // 예외 처리 } </pre> <br /> 사실 이에 대해서는 문서에 명시돼 있긴 합니다.<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > codecvt_utf8 ; <a target='tab' href='https://learn.microsoft.com/en-us/cpp/standard-library/codecvt-utf8-class'>https://learn.microsoft.com/en-us/cpp/standard-library/codecvt-utf8-class</a> </pre> <br /> <div style='BACKGROUND-COLOR: #ccffcc; padding: 10px 10px 5px 10px; MARGIN: 0px 10px 10px 10px; FONT-FAMILY: Malgun Gothic, Consolas, Verdana; COLOR: #005555'> Represents a locale facet that converts between wide characters encoded as <span style='color: blue; font-weight: bold'>UCS-2 or UCS-4</span>, and a byte stream encoded as UTF-8. </div><br /> <br /> 보는 바와 같이 UTF-16이 아닌 UCS-2를 지원할 뿐입니다. 그런데, u16string의 value_type이 char16_t이고, char16_t가 UTF-16 인코딩을 받는 것을 보면,<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > char16_t ; <a target='tab' href='https://en.cppreference.com/w/c/string/multibyte/char16_t'>https://en.cppreference.com/w/c/string/multibyte/char16_t</a> </pre> <br /> 뭔가 잘 안 맞는 부분이 있는 듯합니다. 단지, UCS-4는 지원하기 때문에 다음과 같이 변환할 수는 있습니다.<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > // How to decode surrogate characters encoded as UTF8? // ; <a target='tab' href='https://stackoverflow.com/questions/38293373/how-to-decode-surrogate-characters-encoded-as-utf8'>https://stackoverflow.com/questions/38293373/how-to-decode-surrogate-characters-encoded-as-utf8</a> const wchar_t* text = L"\U00010000"; std::wstring_convert<std::codecvt_utf8_utf16<wchar_t>> converter; std::string utf8str = converter.to_bytes(text); // F0 90 80 80 </pre> <br /> 결국 surrogate-pair에 해당하는 d800, dc00 바이트 스트림을 utf-8로 변환하는 방법은...? 직접 그에 대한 처리를 해야 합니다. (잘 찾아보면 누군가 만들어 둔 것이 있을지도... ^^)<br /> </p><br /> <br /><hr /><span style='color: Maroon'>[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]</span> </div>
첨부파일
스팸 방지용 인증 번호
1568
(왼쪽의 숫자를 입력해야 합니다.)