Microsoft MVP성태의 닷넷 이야기
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일

(시리즈 글이 7개 있습니다.)
.NET Framework: 248. 닷넷에서 지원되는 문자열 인코딩 이름 목록
; https://www.sysnet.pe.kr/2/0/1147

.NET Framework: 368. Encoding 타입의 대체(fallback) 메카니즘
; https://www.sysnet.pe.kr/2/0/1446

.NET Framework: 373. C# 문자열의 인코딩이란?
; https://www.sysnet.pe.kr/2/0/1461

.NET Framework: 701. 한글이 포함된 바이트 배열을 나눈 경우 한글이 깨지지 않도록 다시 조합하는 방법
; https://www.sysnet.pe.kr/2/0/11378

.NET Framework: 702. 한글이 포함된 바이트 배열을 나눈 경우 한글이 깨지지 않도록 다시 조합하는 방법(두 번째 이야기)
; https://www.sysnet.pe.kr/2/0/11381

.NET Framework: 867. C# - Encoding.Default 값을 바꿀 수 있을까요?
; https://www.sysnet.pe.kr/2/0/12037

닷넷: 2190. C# - 닷넷 코어/5+에서 달라지는 System.Text.Encoding 지원
; https://www.sysnet.pe.kr/2/0/13506




한글이 포함된 바이트 배열을 나눈 경우 한글이 깨지지 않도록 다시 조합하는 방법(두 번째 이야기)

지난 글에서 Decoder 타입의 사용법을 알아봤는데요.

한글이 포함된 바이트 배열을 나눈 경우 한글이 깨지지 않도록 다시 조합하는 방법
; https://www.sysnet.pe.kr/2/0/11378

그런데, 실제 통신 환경에서 Decoder 타입을 유지하는 것은 왠지 오버헤드 같습니다. 그보다, 한글 조합이 안 된 상태의 바이트 배열을 다음번 조합으로 미루는 방법을 사용하는 것도 괜찮을 것 같습니다.

Decoder 타입을 보면, GetChars 메서드의 호출로 미완성의 char가 있는 경우 내부의 HasState 속성 값이 true로 바뀌면서 bits 필드로 상태 값을 유지하는데 모두 internal 접근자를 갖고 있습니다. 따라서 Reflection을 이용해 다음과 같이 처리하는 것도 가능합니다.

static void Test()
{
    int bits = 0;

    {
        Decoder utf8Decoder = Encoding.UTF8.GetDecoder();
        SendBuffer(utf8Decoder, buf1);
        bits = GetBits(utf8Decoder);
    }

    {
        Decoder utf8Decoder = Encoding.UTF8.GetDecoder();
        SetBits(utf8Decoder, bits);

        SendBuffer(utf8Decoder, buf2);
    }
}

private static void SetBits(Decoder utf8Decoder, int bits)
{
    FieldInfo fi = GetFieldInfo(utf8Decoder);
    fi.SetValue(utf8Decoder, bits);
}

private static FieldInfo GetFieldInfo(Decoder decoder)
{
    return decoder.GetType().GetField("bits", System.Reflection.BindingFlags.NonPublic | System.Reflection.BindingFlags.Instance);
}

private static int GetBits(Decoder utf8Decoder)
{
    FieldInfo fi = GetFieldInfo(utf8Decoder);
    return (int)fi.GetValue(utf8Decoder);
}

보는 바와 같이 decoder 인스턴스를 유지하지 않아도 bits 값을 보존하는 것만으로 디코딩을 정상적으로 수행할 수 있습니다.




그런데, 왠지 public 접근자가 아닌 것이 좀 걸립니다. 그런 경우라면 그냥 Decoder 인스턴스를 직렬화해서 통신 간에 들고 있으면 됩니다.

byte[] buf = null;
{
    Decoder utf8Decoder = Encoding.UTF8.GetDecoder();
    SendBuffer(utf8Decoder, buf1);

    MemoryStream ms = new MemoryStream();
    BinaryFormatter formatter = new BinaryFormatter();
    formatter.Serialize(ms, utf8Decoder);

    buf = ms.ToArray();
}

{
    BinaryFormatter formatter = new BinaryFormatter();
    Decoder utf8Decoder = formatter.Deserialize(new MemoryStream(buf)) as Decoder;

    SendBuffer(utf8Decoder, buf2);
}

유지해야 할 값이 직접적인 Decoder 인스턴스에서 byte 배열로 바뀌었습니다.




그 외에, 또 다른 방법으로는 디코딩 시에 아직 char로 변환되지 못한 바이트 배열(UTF8의 경우 최대 6개의 바이트)이 있는 경우 다음번 디코딩 과정에 참여하도록 만드는 것입니다. 그러니까 대충 다음과 같은 과정을 거치는 것입니다.

byte[] remains = null;

{
    remains = SendBuffer(buf1);
}

{
    List<byte> buf = new List<byte>();

    if (remains != null)
    {
        buf.AddRange(remains);
    }

    buf.AddRange(buf2);

    SendBuffer(buf.ToArray());
}

이 글을 쓰기 위해 급조한 코드라 별로 마음에 들지 않아 이것은 첨부 파일로 대신합니다. 나중에 실제로 쓰게 되면 그때나 다듬어야 겠습니다. ^^; 끝!




첨부 파일은 위의 예제 순서에 따라 decoder_sample1, decoder_sample2, decoder_sample3 폴더로 나뉩니다.




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]







[최초 등록일: ]
[최종 수정일: 12/27/2022]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 




[1]  2  3  4  5  6  7  8  9  10  11  12  13  14  15  ...
NoWriterDateCnt.TitleFile(s)
14000정성태8/18/20256오류 유형: 979. ERROR: failed to solve: failed to read dockerfile: open Dockerfile: no such file or directory
13999정성태8/15/2025665닷넷: 2355. C# 14 - (8) null 조건부 연산자 개선 - 대입문에도 사용 가능파일 다운로드1
13998정성태8/14/2025766닷넷: 2354. C# 14 - (7) 확장 메서드에 정적 메서드와 속성 지원을 위한 전용 구문 추가파일 다운로드1
13997정성태8/14/2025901Linux: 120. docker 컨테이너로 매핑된 볼륨에 컨테이너 측의 사용자 ID를 유지하면서 복사하는 방법
13996정성태8/13/2025555오류 유형: 978. Unable to find the requested .Net Framework Data Provider.
13995정성태8/13/2025604개발 환경 구성: 754. Visual C++ - 리눅스 빌드를 위한 Ubuntu 18 docker 컨테이너 설정
13994정성태8/12/2025636오류 유형: 977. SQL Server - User, group, or role '...' already exists in the current database. (Microsoft SQL Server, Error: 15023)
13993정성태8/11/2025954오류 유형: 976. Microsoft.ML.OnnxRuntimeGenAI 패키지 사용 시 "cublasLt64_12.dll" which is missing. (Error 126: "The specified module could not be found.") 오류
13992정성태8/11/20251128닷넷: 2353. C# - Foundry Local을 이용한 gpt-oss-20b 모델 사용파일 다운로드1
13991정성태8/9/20251058오류 유형: 975. winget - Foundry Local 패키지 업데이트가 안 되는 문제
13990정성태8/8/2025820Windows: 283. Time zone 설정이 없는 Windows Server 2025
13989정성태8/8/20251203닷넷: 2352. C# - Windows S-mode 환경인지 체크하는 방법파일 다운로드1
13988정성태8/8/20251342오류 유형: 974. 비주얼 스튜디오 업데이트 시 잠김 파일 경고 - Visual Studio Standard Collector Service 150 (VSStandardCollectorService150)
13987정성태8/7/20251004닷넷: 2351. C# 14 - (6) event와 생성자에도 partial 메서드 적용파일 다운로드1
13986정성태8/6/20251093닷넷: 2350. C# 14 - (5) 람다 매개 변수에 접근자가 있는 경우에도 타입 생략 가능파일 다운로드1
13985정성태8/6/20251439오류 유형: 973. "wsl --install" 명령어 수행 시 "The server name or address could not be resolved"
13984정성태8/6/20251213Windows: 282. 윈도우 운영체제에 추가된 ssh 서버(Win32-OpenSSH)
13983정성태8/4/20251299오류 유형: 972. Microsoft.Data.SqlClient 6.1.0 버전부터 .NET 8 이상만 지원
13982정성태8/2/20251701개발 환경 구성: 753. CentOS 7 컨테이너 내에서 openssh 서버 호스팅
13981정성태8/1/20251382오류 유형: 971. CentOS 7에서 yum 사용 시 "Could not resolve host: mirrorlist.centos.org; Unknown error"
13980정성태7/31/20251558Linux: 119. eBPF - BPF_PROG_TYPE_CGROUP_SOCK 유형에서 정상 동작하지 않는 BPF_CORE_READ (2)
13979정성태7/30/20251866Linux: 118. eBPF - BPF_PROG_TYPE_CGROUP_SOCK 유형에서 정상 동작하지 않는 BPF_CORE_READ
13978정성태7/29/20251700오류 유형: 970. 파일 복사 시 "Data error (cyclic redundancy check). (0x80070017)" 에러
13977정성태7/28/20252017닷넷: 2349. C# 14 - (4) 문자열 리터럴을 utf-8 인코딩으로 저장파일 다운로드1
13976정성태7/25/20251864닷넷: 2348. C# - 카카오 카나나 모델 + Microsoft.ML.OnnxRuntimeGenAI 예제파일 다운로드1
[1]  2  3  4  5  6  7  8  9  10  11  12  13  14  15  ...