Microsoft MVP성태의 닷넷 이야기
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일

한글이 포함된 바이트 배열을 나눈 경우 한글이 깨지지 않도록 다시 조합하는 방법

다음과 같은 질문이 있군요. ^^

TextBox에 관해 질문 드립니다.
; https://www.sysnet.pe.kr/3/0/4909

서버로부터 수신받은 데이터가 100Byte단위로 내려옵니다.
그 데이터들을 모두 수신 받은 후 TextBox에 저장하고 있는데요.
(Multiline = true 설정 해두었습니다.)

1. 수신받은 데이터에는 한글, 숫자, 기호, 영어, 특수문자 등이 모두 포함되어 있는 상황이고 100바이트 단위로 끊어지는 구간에 다른 문자가 포함되면 TextBox에 정상적으로 출력이 되지만 한글의 경우 2바이트가 기본 단위이다보니 한글이 포함되면 "?柰′피求募?" 이런식으로 깨져서 출력되는데 어떻게 해야 해결할 수 있을지 궁금합니다.

2. ...


1번 문제를 간략하게 정리/재현해 보면 다음과 같은 코드가 됩니다.

using System;
using System.Text;

namespace ConsoleApp1
{
    class Program
    {
        static void Main(string[] args)
        {
            byte [] buffer = Encoding.UTF8.GetBytes("한글 테스트입니다.");

            int splitOffset = 8;

            byte[] buf1 = new byte[splitOffset];
            Array.Copy(buffer, buf1, splitOffset);

            byte[] buf2 = new byte[buffer.Length - splitOffset];
            Array.Copy(buffer, splitOffset, buf2, 0, buffer.Length - splitOffset);

            SendBuffer(buf1);
            SendBuffer(buf2);
        }

        private static void SendBuffer(byte[] buffer)
        {
            string txt1 = Encoding.UTF8.GetString(buffer);
            Console.WriteLine(txt1);

            string txt2 = Encoding.UTF8.GetString(buffer);
            Console.WriteLine(txt2);
        }
    }
}

/*
// 출력 결과
한글 ?
한글 ?
??스트입니다.
??스트입니다.
*/

왜냐하면, 8번째 위치를 기준으로 바이트 분할을 해서 클라이언트로 전송했기 때문에 디코딩 과정에서 '테' 글자가 정상적으로 조합이 되지 않아 깨진 것입니다.

어쩔 수 없습니다. 이런 경우에 한글의 시작 위치를 판별해 디코딩을 뒤로 미뤄 처리하는 방법을 사용해야 합니다. 그런데, 이 작업을 범용적으로 구현하는 것이 꽤나 귀찮은 작업일 수 있는데요. 바로 이런 코드를 닷넷 BCL에서 Decoder를 이용해 제공하고 있습니다. 따라서, 위의 코드를 다음과 같이 변경할 수 있습니다.

static void Main(string[] args)
{
    byte [] buffer = Encoding.UTF8.GetBytes("한글 테스트입니다.");

    // ...[생략]...
    Decoder utf8Decoder = Encoding.UTF8.GetDecoder();
    SendBuffer(utf8Decoder, buf1);
    SendBuffer(utf8Decoder, buf2);
}

private static void SendBuffer(Decoder utf8, byte[] buffer)
{
    int len = utf8.GetCharCount(buffer, 0, buffer.Length);

    char[] textBuf = new char[len];
    utf8.GetChars(buffer, 0, buffer.Length, textBuf, 0);

    string txt = new string(textBuf);

    Console.WriteLine(txt);
}

위의 코드에서 utf8Decoder 인스턴스는 GetChars 메서드 호출 시 하나의 char로 조합을 할 수 없는 바이트는 내부 버퍼에 보관해 둔 후 다음 번 호출에 이어서 조합하는 기능을 구현합니다.

따라서 해당 바이트 배열 전체를 처리해 주는 Decoder 인스턴스를 함께 유지해주면 한글 디코딩 시 경계 문제를 해결할 수 있습니다.

(첨부 파일은 위의 예제 코드를 포함합니다.)




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]

[연관 글]





[최초 등록일: ]
[최종 수정일: 11/30/2017 ]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer@outlook.com

비밀번호

댓글 쓴 사람
 



2017-12-01 12시17분
한글이 포함된 바이트 배열을 나눈 경우 한글이 깨지지 않도록 다시 조합하는 방법(두 번째 이야기)
; http://www.sysnet.pe.kr/2/0/11381
정성태

... 31  32  33  34  35  36  [37]  38  39  40  41  42  43  44  45  ...
NoWriterDateCnt.TitleFile(s)
11434정성태1/15/20184954개발 환경 구성: 350. 사용자 정의 웹 서버(EXE)를 IIS에서 호스팅하는 방법 - HttpPlatformHandler (Reverse Proxy)파일 다운로드2
11433정성태1/15/20184221개발 환경 구성: 349. dotnet ef 명령어 사용을 위한 준비
11432정성태1/11/20185926.NET Framework: 726. WPF + Direct2D + SharpDX 출력 C# 예제파일 다운로드2
11431정성태1/11/20184967.NET Framework: 725. C# - 동기 방식이면서 비동기 메서드처럼 구현한 사례
11430정성태1/10/20187746.NET Framework: 724. WPF + Direct2D 출력 C# 예제 [1]파일 다운로드1
11429정성태1/9/20183185개발 환경 구성: 348. ASP.NET Core 2.1 Preview 버전 적용 방법
11428정성태1/7/20184466개발 환경 구성: 347. WinForm 프로젝트를 WPF 프로젝트 유형으로 변경하는 방법파일 다운로드1
11427정성태1/5/20183926오류 유형: 445. vcpkg 빌드 오류 - Starting the CLR failed with HRESULT 80040153
11426정성태10/19/20187298오류 유형: 444. curl로 호출할 때 발생하는 오류 정리
11425정성태1/4/20183234개발 환경 구성: 346. ASP.NET Core Web Application을 IIS에서 호스팅하는 방법 (2)
11424정성태1/4/20183580개발 환경 구성: 345. ASP.NET Core 프로젝트를 명령행에서 빌드하는 방법
11423정성태1/4/201813281VC++: 123. 내가 만든 코드보다 OpenCV의 속도가 월등히 빠른 이유 [5]파일 다운로드2
11422정성태1/3/20187674.NET Framework: 723. C# - OpenCvSharp 사용 시 C/C++을 이용한 속도 향상 (for 루프 연산) [4]파일 다운로드1
11421정성태1/2/20182997오류 유형: 443. Visual Studio - nuget configuration is invalid
11420정성태12/30/20174992.NET Framework: 722. C# - Windows 10 운영체제의 데스크톱 앱에서 음성인식(SpeechRecognizer) 사용하는 방법 [2]파일 다운로드1
11419정성태6/15/20205796.NET Framework: 721. WebClient 타입의 ...Async 메서드 호출은 왜 await + 동기 호출 시 hang 현상이 발생할까요? [2]파일 다운로드1
11418정성태1/10/20188214.NET Framework: 720. 비동기 메서드 내에서 await 시 ConfigureAwait 호출 의미파일 다운로드1
11417정성태12/22/20173960.NET Framework: 719. Task를 포함하는 async 메서드의 동작 방식
11416정성태12/21/20173698.NET Framework: 718. AsyncTaskMethodBuilder.Create() 메서드 동작 방식
11415정성태12/22/20174775.NET Framework: 717. Task를 포함하지 않는 async 메서드의 동작 방식 [1]
11414정성태1/10/20185484.NET Framework: 716. async 메서드의 void 반환 타입 사용에 대하여파일 다운로드1
11413정성태12/20/20175640개발 환경 구성: 344. 윈도우 10 - TTS 및 음성 인식을 위한 환경 설정
11412정성태12/20/20175670.NET Framework: 715. C# - Windows 10 운영체제의 데스크톱 앱에서 TTS(SpeechSynthesizer) 사용하는 방법 [1]파일 다운로드1
11411정성태8/9/20184764사물인터넷: 15. 라즈베리 파이 용 C++ 프로젝트에 SSL Socket 적용
11410정성태12/20/201712099.NET Framework: 714. SSL Socket 예제 - C/C++ 서버, C# 클라이언트파일 다운로드1
11409정성태6/6/201916015VC++: 122. 오픈 소스 라이브러리를 쉽게 빌드해 주는 "C++ Package Manager for Windows: vcpkg" [6]
... 31  32  33  34  35  36  [37]  38  39  40  41  42  43  44  45  ...