Microsoft MVP성태의 닷넷 이야기
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일

한글이 포함된 바이트 배열을 나눈 경우 한글이 깨지지 않도록 다시 조합하는 방법

다음과 같은 질문이 있군요. ^^

TextBox에 관해 질문 드립니다.
; https://www.sysnet.pe.kr/3/0/4909

서버로부터 수신받은 데이터가 100Byte단위로 내려옵니다.
그 데이터들을 모두 수신 받은 후 TextBox에 저장하고 있는데요.
(Multiline = true 설정 해두었습니다.)

1. 수신받은 데이터에는 한글, 숫자, 기호, 영어, 특수문자 등이 모두 포함되어 있는 상황이고 100바이트 단위로 끊어지는 구간에 다른 문자가 포함되면 TextBox에 정상적으로 출력이 되지만 한글의 경우 2바이트가 기본 단위이다보니 한글이 포함되면 "?柰′피求募?" 이런식으로 깨져서 출력되는데 어떻게 해야 해결할 수 있을지 궁금합니다.

2. ...


1번 문제를 간략하게 정리/재현해 보면 다음과 같은 코드가 됩니다.

using System;
using System.Text;

namespace ConsoleApp1
{
    class Program
    {
        static void Main(string[] args)
        {
            byte [] buffer = Encoding.UTF8.GetBytes("한글 테스트입니다.");

            int splitOffset = 8;

            byte[] buf1 = new byte[splitOffset];
            Array.Copy(buffer, buf1, splitOffset);

            byte[] buf2 = new byte[buffer.Length - splitOffset];
            Array.Copy(buffer, splitOffset, buf2, 0, buffer.Length - splitOffset);

            SendBuffer(buf1);
            SendBuffer(buf2);
        }

        private static void SendBuffer(byte[] buffer)
        {
            string txt1 = Encoding.UTF8.GetString(buffer);
            Console.WriteLine(txt1);

            string txt2 = Encoding.UTF8.GetString(buffer);
            Console.WriteLine(txt2);
        }
    }
}

/*
// 출력 결과
한글 ?
한글 ?
??스트입니다.
??스트입니다.
*/

왜냐하면, 8번째 위치를 기준으로 바이트 분할을 해서 클라이언트로 전송했기 때문에 디코딩 과정에서 '테' 글자가 정상적으로 조합이 되지 않아 깨진 것입니다.

어쩔 수 없습니다. 이런 경우에 한글의 시작 위치를 판별해 디코딩을 뒤로 미뤄 처리하는 방법을 사용해야 합니다. 그런데, 이 작업을 범용적으로 구현하는 것이 꽤나 귀찮은 작업일 수 있는데요. 바로 이런 코드를 닷넷 BCL에서 Decoder를 이용해 제공하고 있습니다. 따라서, 위의 코드를 다음과 같이 변경할 수 있습니다.

static void Main(string[] args)
{
    byte [] buffer = Encoding.UTF8.GetBytes("한글 테스트입니다.");

    // ...[생략]...
    Decoder utf8Decoder = Encoding.UTF8.GetDecoder();
    SendBuffer(utf8Decoder, buf1);
    SendBuffer(utf8Decoder, buf2);
}

private static void SendBuffer(Decoder utf8, byte[] buffer)
{
    int len = utf8.GetCharCount(buffer, 0, buffer.Length);

    char[] textBuf = new char[len];
    utf8.GetChars(buffer, 0, buffer.Length, textBuf, 0);

    string txt = new string(textBuf);

    Console.WriteLine(txt);
}

위의 코드에서 utf8Decoder 인스턴스는 GetChars 메서드 호출 시 하나의 char로 조합을 할 수 없는 바이트는 내부 버퍼에 보관해 둔 후 다음번 호출에 이어서 조합하는 기능을 구현합니다.

따라서 해당 바이트 배열 전체를 처리해 주는 Decoder 인스턴스를 함께 유지해주면 한글 디코딩 시 경계 문제를 해결할 수 있습니다.

(첨부 파일은 위의 예제 코드를 포함합니다.)




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]

[연관 글]


donaricano-btn



[최초 등록일: ]
[최종 수정일: 7/12/2021

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 쓴 사람
 



2017-12-01 12시17분
한글이 포함된 바이트 배열을 나눈 경우 한글이 깨지지 않도록 다시 조합하는 방법(두 번째 이야기)
; http://www.sysnet.pe.kr/2/0/11381
정성태

[1]  2  3  4  5  6  7  8  9  10  11  12  13  14  15  ...
NoWriterDateCnt.TitleFile(s)
12739정성태7/28/202114오류 유형: 746. Azure Active Directory - IDW10106: The 'ClientId' option must be provided.
12738정성태7/28/202113오류 유형: 745. Azure Active Directory - Client credential flows must have a scope value with /.default suffixed to the resource identifier (application ID URI).
12737정성태7/28/202118오류 유형: 744. Azure Active Directory - The resource principal named api://...[client_id]... was not found in the tenant
12736정성태7/28/202117오류 유형: 743. Active Azure Directory에서 "API permissions"의 권한 설정이 "Not granted for ..."로 나오는 문제
12735정성태7/27/202158.NET Framework: 1081. C# - Azure AD 인증을 지원하는 데스크톱 애플리케이션 예제(Windows Forms)파일 다운로드1
12734정성태7/26/202173스크립트: 20. 특정 단어로 시작하거나/끝나는 문자열을 포함/제외하는 정규 표현식 - Look-around
12733정성태7/23/202178.NET Framework: 1081. Self-Contained/SingleFile 유형의 .NET Core/5+ 실행 파일을 임베딩한다면?파일 다운로드2
12732정성태7/23/202128오류 유형: 742. SharePoint - The super user account utilized by the cache is not configured.
12731정성태7/23/202137개발 환경 구성: 584. Add Internal URLs 화면에서 "Save" 버튼이 비활성화 된 경우
12730정성태7/23/202145개발 환경 구성: 583. Visual Studio Code - Go 코드에서 입력을 받는 경우
12729정성태7/22/202158.NET Framework: 1080. xUnit 단위 테스트에 메서드/클래스 수준의 문맥 제공 - Fixture
12728정성태7/22/202162.NET Framework: 1079. MSTestv2 단위 테스트에 메서드/클래스/어셈블리 수준의 문맥 제공
12727정성태7/21/2021120.NET Framework: 1078. C# 단위 테스트 - MSTestv2/NUnit의 Assert.Inconclusive 사용법(?)
12726정성태7/21/202185VS.NET IDE: 169. 비주얼 스튜디오 - 단위 테스트 선택 시 MSTestv2 외의 xUnit, NUnit 사용법
12725정성태7/21/202135오류 유형: 741. Failed to find the "go" binary in either GOROOT() or PATH
12724정성태7/21/2021105개발 환경 구성: 582. 윈도우 환경에서 Visual Studio Code + Go (Zip) 개발 환경 [1]
12723정성태7/21/202145오류 유형: 740. SharePoint - Alternate access mappings have not been configured 경고
12722정성태7/20/202196오류 유형: 739. MSVCR110.dll이 없어 exe 실행이 안 되는 경우
12721정성태7/20/202151오류 유형: 738. The trust relationship between this workstation and the primary domain failed. - 세 번째 이야기
12720정성태7/19/202187Linux: 43. .NET Core/5+ 응용 프로그램의 Ubuntu (Debian) 패키지 준비
12719정성태7/19/202187오류 유형: 737. SharePoint 설치 시 "0x800710D8 The object identifier does not represent a valid object." 오류 발생
12718정성태7/19/2021119개발 환경 구성: 581. Windows에서 WSL로 파일 복사 시 root 소유권으로 적용되는 문제파일 다운로드1
12717정성태7/18/202196Windows: 195. robocopy에서 파일의 ADS(Alternate Data Stream) 정보 복사를 제외하는 방법
12716정성태7/17/202184개발 환경 구성: 580. msbuild의 Exec Task에 robocopy를 사용하는 방법파일 다운로드1
12715정성태7/17/202180오류 유형: 736. Windows - MySQL zip 파일 버전의 "mysqld --skip-grant-tables" 실행 시 비정상 종료
[1]  2  3  4  5  6  7  8  9  10  11  12  13  14  15  ...