Microsoft MVP성태의 닷넷 이야기
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
(연관된 글이 2개 있습니다.)
(시리즈 글이 7개 있습니다.)
.NET Framework: 248. 닷넷에서 지원되는 문자열 인코딩 이름 목록
; https://www.sysnet.pe.kr/2/0/1147

.NET Framework: 368. Encoding 타입의 대체(fallback) 메카니즘
; https://www.sysnet.pe.kr/2/0/1446

.NET Framework: 373. C# 문자열의 인코딩이란?
; https://www.sysnet.pe.kr/2/0/1461

.NET Framework: 701. 한글이 포함된 바이트 배열을 나눈 경우 한글이 깨지지 않도록 다시 조합하는 방법
; https://www.sysnet.pe.kr/2/0/11378

.NET Framework: 702. 한글이 포함된 바이트 배열을 나눈 경우 한글이 깨지지 않도록 다시 조합하는 방법(두 번째 이야기)
; https://www.sysnet.pe.kr/2/0/11381

.NET Framework: 867. C# - Encoding.Default 값을 바꿀 수 있을까요?
; https://www.sysnet.pe.kr/2/0/12037

닷넷: 2190. C# - 닷넷 코어/5+에서 달라지는 System.Text.Encoding 지원
; https://www.sysnet.pe.kr/2/0/13506




한글이 포함된 바이트 배열을 나눈 경우 한글이 깨지지 않도록 다시 조합하는 방법

다음과 같은 질문이 있군요. ^^

TextBox에 관해 질문 드립니다.
; https://www.sysnet.pe.kr/3/0/4909

서버로부터 수신받은 데이터가 100Byte단위로 내려옵니다.
그 데이터들을 모두 수신 받은 후 TextBox에 저장하고 있는데요.
(Multiline = true 설정 해두었습니다.)

1. 수신받은 데이터에는 한글, 숫자, 기호, 영어, 특수문자 등이 모두 포함되어 있는 상황이고 100바이트 단위로 끊어지는 구간에 다른 문자가 포함되면 TextBox에 정상적으로 출력이 되지만 한글의 경우 2바이트가 기본 단위이다보니 한글이 포함되면 "?柰′피求募?" 이런식으로 깨져서 출력되는데 어떻게 해야 해결할 수 있을지 궁금합니다.

2. ...


1번 문제를 간략하게 정리/재현해 보면 다음과 같은 코드가 됩니다.

using System;
using System.Text;

namespace ConsoleApp1
{
    class Program
    {
        static void Main(string[] args)
        {
            byte [] buffer = Encoding.UTF8.GetBytes("한글 테스트입니다.");

            int splitOffset = 8;

            byte[] buf1 = new byte[splitOffset];
            Array.Copy(buffer, buf1, splitOffset);

            byte[] buf2 = new byte[buffer.Length - splitOffset];
            Array.Copy(buffer, splitOffset, buf2, 0, buffer.Length - splitOffset);

            SendBuffer(buf1);
            SendBuffer(buf2);
        }

        private static void SendBuffer(byte[] buffer)
        {
            string txt1 = Encoding.UTF8.GetString(buffer);
            Console.WriteLine(txt1);

            string txt2 = Encoding.UTF8.GetString(buffer);
            Console.WriteLine(txt2);
        }
    }
}

/*
// 출력 결과
한글 ?
한글 ?
??스트입니다.
??스트입니다.
*/

왜냐하면, 8번째 위치를 기준으로 바이트 분할을 해서 클라이언트로 전송했기 때문에 디코딩 과정에서 '테' 글자가 정상적으로 조합이 되지 않아 깨진 것입니다.

어쩔 수 없습니다. 이런 경우에 한글의 시작 위치를 판별해 디코딩을 뒤로 미뤄 처리하는 방법을 사용해야 합니다. 그런데, 이 작업을 범용적으로 구현하는 것이 꽤나 귀찮은 작업일 수 있는데요. 바로 이런 코드를 닷넷 BCL에서 Decoder를 이용해 제공하고 있습니다. 따라서, 위의 코드를 다음과 같이 변경할 수 있습니다.

static void Main(string[] args)
{
    byte [] buffer = Encoding.UTF8.GetBytes("한글 테스트입니다.");

    // ...[생략]...
    Decoder utf8Decoder = Encoding.UTF8.GetDecoder();
    SendBuffer(utf8Decoder, buf1);
    SendBuffer(utf8Decoder, buf2);
}

private static void SendBuffer(Decoder utf8, byte[] buffer)
{
    int len = utf8.GetCharCount(buffer, 0, buffer.Length);

    char[] textBuf = new char[len];
    utf8.GetChars(buffer, 0, buffer.Length, textBuf, 0);

    string txt = new string(textBuf);

    Console.WriteLine(txt);
}

위의 코드에서 utf8Decoder 인스턴스는 GetChars 메서드 호출 시 하나의 char로 조합을 할 수 없는 바이트는 내부 버퍼에 보관해 둔 후 다음번 호출에 이어서 조합하는 기능을 구현합니다.

따라서 해당 바이트 배열 전체를 처리해 주는 Decoder 인스턴스를 함께 유지해주면 한글 디코딩 시 경계 문제를 해결할 수 있습니다.

(첨부 파일은 위의 예제 코드를 포함합니다.)




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]

[연관 글]






[최초 등록일: ]
[최종 수정일: 7/12/2021]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 



2017-12-01 12시17분
한글이 포함된 바이트 배열을 나눈 경우 한글이 깨지지 않도록 다시 조합하는 방법(두 번째 이야기)
; http://www.sysnet.pe.kr/2/0/11381
정성태

... 76  77  [78]  79  80  81  82  83  84  85  86  87  88  89  90  ...
NoWriterDateCnt.TitleFile(s)
11985정성태7/17/201917009개발 환경 구성: 452. msbuild - csproj에 환경 변수 조건 사용 [1]
11984정성태7/9/201925538개발 환경 구성: 451. Microsoft Edge (Chromium)을 대상으로 한 Selenium WebDriver 사용법 [1]
11983정성태7/8/201914891오류 유형: 556. nodemon - 'mocha' is not recognized as an internal or external command, operable program or batch file.
11982정성태7/8/201914980오류 유형: 555. Visual Studio 빌드 오류 - result: unexpected exception occured (-1002 - 0xfffffc16)
11981정성태7/7/201918075Math: 64. C# - 3층 구조의 신경망(분류)파일 다운로드1
11980정성태7/7/201928175개발 환경 구성: 450. Visual Studio Code의 Java 확장을 이용한 간단한 프로젝트 구축파일 다운로드1
11979정성태7/7/201918428개발 환경 구성: 449. TFS에서 gitlab/github등의 git 서버로 마이그레이션하는 방법
11978정성태7/6/201917688Windows: 161. 계정 정보가 동일하지 않은 PC 간의 인증을 수행하는 방법 [1]
11977정성태7/6/201922290오류 유형: 554. git push - error: RPC failed; HTTP 413 curl 22 The requested URL returned error: 413 Request Entity Too Large
11976정성태7/4/201916624오류 유형: 553. (잘못 인증 한 후) 원격 git repo 재인증 시 "remote: HTTP Basic: Access denied" 오류 발생
11975정성태7/4/201925424개발 환경 구성: 448. Visual Studio Code에서 콘솔 응용 프로그램 개발 시 "입력"받는 방법
11974정성태7/4/201921156Linux: 22. "Visual Studio Code + Remote Development"로 윈도우 환경에서 리눅스(CentOS 7) C/C++ 개발
11973정성태7/4/201919898Linux: 21. 리눅스에서 공유 라이브러리가 로드되지 않는다면?
11972정성태7/3/201923677.NET Framework: 847. JAVA와 .NET 간의 AES 암호화 연동 [1]파일 다운로드1
11971정성태7/3/201919970개발 환경 구성: 447. Visual Studio Code에서 OpenCvSharp 개발 환경 구성
11970정성태7/2/201918569오류 유형: 552. 웹 브라우저에서 파일 다운로드 후 "Running security scan"이 끝나지 않는 문제
11969정성태7/2/201919034Math: 63. C# - 3층 구조의 신경망파일 다운로드1
11968정성태7/1/201925728오류 유형: 551. Visual Studio Code에서 Remote-SSH 연결 시 "Opening Remote..." 단계에서 진행되지 않는 문제 [1]
11967정성태7/1/201919777개발 환경 구성: 446. Synology NAS를 Windows 10에서 iSCSI로 연결하는 방법
11966정성태6/30/201918720Math: 62. 활성화 함수에 따른 뉴런의 출력을 그리드 맵으로 시각화파일 다운로드1
11965정성태6/30/201919308.NET Framework: 846. C# - 2차원 배열을 1차원 배열로 나열하는 확장 메서드파일 다운로드1
11964정성태6/30/201920861Linux: 20. C# - Linux에서의 Named Pipe를 이용한 통신
11963정성태6/29/201920603Linux: 19. C# - .NET Core Unix Domain Socket 사용 예제
11962정성태6/27/201918287Math: 61. C# - 로지스틱 회귀를 이용한 선형분리 불가능 문제의 분류파일 다운로드1
11961정성태6/27/201917820Graphics: 37. C# - PLplot - 출력 모음(Family File Output)
11960정성태6/27/201918868Graphics: 36. C# - PLplot의 16색 이상을 표현하는 방법과 subpage를 이용한 그리드 맵 표현
... 76  77  [78]  79  80  81  82  83  84  85  86  87  88  89  90  ...