Microsoft MVP성태의 닷넷 이야기
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일

(시리즈 글이 7개 있습니다.)
.NET Framework: 248. 닷넷에서 지원되는 문자열 인코딩 이름 목록
; https://www.sysnet.pe.kr/2/0/1147

.NET Framework: 368. Encoding 타입의 대체(fallback) 메카니즘
; https://www.sysnet.pe.kr/2/0/1446

.NET Framework: 373. C# 문자열의 인코딩이란?
; https://www.sysnet.pe.kr/2/0/1461

.NET Framework: 701. 한글이 포함된 바이트 배열을 나눈 경우 한글이 깨지지 않도록 다시 조합하는 방법
; https://www.sysnet.pe.kr/2/0/11378

.NET Framework: 702. 한글이 포함된 바이트 배열을 나눈 경우 한글이 깨지지 않도록 다시 조합하는 방법(두 번째 이야기)
; https://www.sysnet.pe.kr/2/0/11381

.NET Framework: 867. C# - Encoding.Default 값을 바꿀 수 있을까요?
; https://www.sysnet.pe.kr/2/0/12037

닷넷: 2190. C# - 닷넷 코어/5+에서 달라지는 System.Text.Encoding 지원
; https://www.sysnet.pe.kr/2/0/13506




한글이 포함된 바이트 배열을 나눈 경우 한글이 깨지지 않도록 다시 조합하는 방법(두 번째 이야기)

지난 글에서 Decoder 타입의 사용법을 알아봤는데요.

한글이 포함된 바이트 배열을 나눈 경우 한글이 깨지지 않도록 다시 조합하는 방법
; https://www.sysnet.pe.kr/2/0/11378

그런데, 실제 통신 환경에서 Decoder 타입을 유지하는 것은 왠지 오버헤드 같습니다. 그보다, 한글 조합이 안 된 상태의 바이트 배열을 다음번 조합으로 미루는 방법을 사용하는 것도 괜찮을 것 같습니다.

Decoder 타입을 보면, GetChars 메서드의 호출로 미완성의 char가 있는 경우 내부의 HasState 속성 값이 true로 바뀌면서 bits 필드로 상태 값을 유지하는데 모두 internal 접근자를 갖고 있습니다. 따라서 Reflection을 이용해 다음과 같이 처리하는 것도 가능합니다.

static void Test()
{
    int bits = 0;

    {
        Decoder utf8Decoder = Encoding.UTF8.GetDecoder();
        SendBuffer(utf8Decoder, buf1);
        bits = GetBits(utf8Decoder);
    }

    {
        Decoder utf8Decoder = Encoding.UTF8.GetDecoder();
        SetBits(utf8Decoder, bits);

        SendBuffer(utf8Decoder, buf2);
    }
}

private static void SetBits(Decoder utf8Decoder, int bits)
{
    FieldInfo fi = GetFieldInfo(utf8Decoder);
    fi.SetValue(utf8Decoder, bits);
}

private static FieldInfo GetFieldInfo(Decoder decoder)
{
    return decoder.GetType().GetField("bits", System.Reflection.BindingFlags.NonPublic | System.Reflection.BindingFlags.Instance);
}

private static int GetBits(Decoder utf8Decoder)
{
    FieldInfo fi = GetFieldInfo(utf8Decoder);
    return (int)fi.GetValue(utf8Decoder);
}

보는 바와 같이 decoder 인스턴스를 유지하지 않아도 bits 값을 보존하는 것만으로 디코딩을 정상적으로 수행할 수 있습니다.




그런데, 왠지 public 접근자가 아닌 것이 좀 걸립니다. 그런 경우라면 그냥 Decoder 인스턴스를 직렬화해서 통신 간에 들고 있으면 됩니다.

byte[] buf = null;
{
    Decoder utf8Decoder = Encoding.UTF8.GetDecoder();
    SendBuffer(utf8Decoder, buf1);

    MemoryStream ms = new MemoryStream();
    BinaryFormatter formatter = new BinaryFormatter();
    formatter.Serialize(ms, utf8Decoder);

    buf = ms.ToArray();
}

{
    BinaryFormatter formatter = new BinaryFormatter();
    Decoder utf8Decoder = formatter.Deserialize(new MemoryStream(buf)) as Decoder;

    SendBuffer(utf8Decoder, buf2);
}

유지해야 할 값이 직접적인 Decoder 인스턴스에서 byte 배열로 바뀌었습니다.




그 외에, 또 다른 방법으로는 디코딩 시에 아직 char로 변환되지 못한 바이트 배열(UTF8의 경우 최대 6개의 바이트)이 있는 경우 다음번 디코딩 과정에 참여하도록 만드는 것입니다. 그러니까 대충 다음과 같은 과정을 거치는 것입니다.

byte[] remains = null;

{
    remains = SendBuffer(buf1);
}

{
    List<byte> buf = new List<byte>();

    if (remains != null)
    {
        buf.AddRange(remains);
    }

    buf.AddRange(buf2);

    SendBuffer(buf.ToArray());
}

이 글을 쓰기 위해 급조한 코드라 별로 마음에 들지 않아 이것은 첨부 파일로 대신합니다. 나중에 실제로 쓰게 되면 그때나 다듬어야 겠습니다. ^^; 끝!




첨부 파일은 위의 예제 순서에 따라 decoder_sample1, decoder_sample2, decoder_sample3 폴더로 나뉩니다.




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]







[최초 등록일: ]
[최종 수정일: 12/27/2022]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 




... 16  17  18  19  20  21  22  23  24  25  26  27  28  [29]  30  ...
NoWriterDateCnt.TitleFile(s)
12903정성태1/7/20227278.NET Framework: 1130. C# - ELEMENT_TYPE_INTERNAL 유형의 사용 예
12902정성태1/7/20227334오류 유형: 779. SQL 서버 로그인 에러 - provider: Shared Memory Provider, error: 0 - No process is on the other end of the pipe.
12901정성태1/5/20227374오류 유형: 778. C# - .NET 5+에서 warning CA1416: This call site is reachable on all platforms. '...' is only supported on: 'windows' 경고 발생
12900정성태1/5/20229044개발 환경 구성: 622. vcpkg로 ffmpeg를 빌드하는 경우 생성될 구성 요소 제어하는 방법
12899정성태1/3/20228537개발 환경 구성: 621. windbg에서 python 스크립트 실행하는 방법 - pykd (2)
12898정성태1/2/20229097.NET Framework: 1129. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 비디오 인코딩 예제(encode_video.c) [1]파일 다운로드1
12897정성태1/2/20227983.NET Framework: 1128. C# - 화면 캡처한 이미지를 ffmpeg(FFmpeg.AutoGen)로 동영상 처리 [4]파일 다운로드1
12896정성태1/1/202210835.NET Framework: 1127. C# - FFmpeg.AutoGen 라이브러리를 이용한 기본 프로젝트 구성파일 다운로드1
12895정성태12/31/20219314.NET Framework: 1126. C# - snagit처럼 화면 캡처를 연속으로 수행해 동영상 제작 [1]파일 다운로드1
12894정성태12/30/20217265.NET Framework: 1125. C# - DefaultObjectPool<T>의 IDisposable 개체에 대한 풀링 문제 [3]파일 다운로드1
12893정성태12/27/20218834.NET Framework: 1124. C# - .NET Platform Extension의 ObjectPool<T> 사용법 소개파일 다운로드1
12892정성태12/26/20216815기타: 83. unsigned 형의 이전 값이 최댓값을 넘어 0을 지난 경우, 값의 차이를 계산하는 방법
12891정성태12/23/20216751스크립트: 38. 파이썬 - uwsgi의 --master 옵션
12890정성태12/23/20216883VC++: 152. Golang - (문자가 아닌) 바이트 위치를 반환하는 strings.IndexRune 함수
12889정성태12/22/20219311.NET Framework: 1123. C# - (SharpDX + DXGI) 화면 캡처한 이미지를 빠르게 JPG로 변환하는 방법파일 다운로드1
12888정성태12/21/20217476.NET Framework: 1122. C# - ImageCodecInfo 사용 시 System.Drawing.Image와 System.Drawing.Bitmap에 따른 Save 성능 차이파일 다운로드1
12887정성태12/21/20219539오류 유형: 777. OpenCVSharp4를 사용한 프로그램 실행 시 "The type initializer for 'OpenCvSharp.Internal.NativeMethods' threw an exception." 예외 발생
12886정성태12/20/20217458스크립트: 37. 파이썬 - uwsgi의 --enable-threads 옵션 [2]
12885정성태12/20/20217732오류 유형: 776. uwsgi-plugin-python3 환경에서 MySQLdb 사용 환경
12884정성태12/20/20216782개발 환경 구성: 620. Windows 10+에서 WMI root/Microsoft/Windows/WindowsUpdate 네임스페이스 제거
12883정성태12/19/20217633오류 유형: 775. uwsgi-plugin-python3 환경에서 "ModuleNotFoundError: No module named 'django'" 오류 발생
12882정성태12/18/20216746개발 환경 구성: 619. Windows Server에서 WSL을 위한 리눅스 배포본을 설치하는 방법
12881정성태12/17/20217256개발 환경 구성: 618. WSL Ubuntu 20.04에서 파이썬을 위한 uwsgi 설치 방법 (2)
12880정성태12/16/20217039VS.NET IDE: 170. Visual Studio에서 .NET Core/5+ 역어셈블 소스코드 확인하는 방법
12879정성태12/16/202113283오류 유형: 774. Windows Server 2022 + docker desktop 설치 시 WSL 2로 선택한 경우 "Failed to deploy distro docker-desktop to ..." 오류 발생
12878정성태12/15/20218333개발 환경 구성: 617. 윈도우 WSL 환경에서 같은 종류의 리눅스를 다중으로 설치하는 방법
... 16  17  18  19  20  21  22  23  24  25  26  27  28  [29]  30  ...