Microsoft MVP성태의 닷넷 이야기
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
 
(연관된 글이 2개 있습니다.)

C# - byte * (바이트 포인터)를 FileStream으로 쓰는 방법

C/C++ 코드를 C#으로 포팅하는 등의 작업을 하다 보면 바이트 포인터를 FileStream에 직접 쓰는 방법이 아쉬울 때가 있습니다. 예를 들어, 아래의 ffmpeg 코드에서도,

decode_video.c
; https://ffmpeg.org/doxygen/trunk/decode_video_8c-example.html

static void pgm_save(unsigned char *buf, int wrap, int xsize, int ysize,
                     char *filename)
{
    FILE *f;
    int i;
 
    f = fopen(filename,"wb");
    fprintf(f, "P5\n%d %d\n%d\n", xsize, ysize, 255);
    for (i = 0; i < ysize; i++)
        fwrite(buf + i * wrap, 1, xsize, f);
    fclose(f);
}

"unsigned char*"가 담은 바이트 스트림을 직접 fwrite에 쓰는 작업을 하고 있습니다. 이런 코드를 C#으로 바꾸려고 하면, 가장 걸림돌이 FileStream.Write 메서드에서 포인터를 받는 버전을 제공하지 않는다는 점입니다.

그래서, 기존에는 어쩔 수 없이 다시 byte []를 할당해 복사한 다음 쓰는 방법으로 우회했는데요,

// C# - Convert unsafe byte* to byte[]
// ; https://stackoverflow.com/questions/17569419/c-sharp-convert-unsafe-byte-to-byte

byte[] arr = new byte[len];
Marshal.Copy((IntPtr)ptr, arr, 0, len);

당연히 필요 없는 부하가 발생할 수밖에 없습니다.




이런 비효율성이 C# 7.2의 Span이 나오면서 해결됩니다.

C# 7.2 - Span<T>
; https://www.sysnet.pe.kr/2/0/11534

그렇긴 해도 Span 타입 자체는 .NET Core 2.1부터 추가되었지만, 이 타입을 기존의 BCL에 정의된 코드에서 채택하는 것은 시간이 걸렸습니다. 실제로 FileStream에서 이 타입을 지원하는 것은 .NET Core 3.0에서 이뤄졌습니다.

Write(ReadOnlySpan<Byte>)
; https://learn.microsoft.com/en-us/dotnet/api/system.io.filestream.write#system-io-filestream-write(system-readonlyspan((system-byte)))

어쨌든, 이 덕분에 포인터 버퍼를 Span으로 감싼 후에 곧바로 FileStream에 전달하는 것이 가능합니다. 따라서, 위에서 예제로 든 C 코드의 경우 다음과 같이 C#으로 포팅할 수 있습니다.

private static unsafe void pgm_save(byte* buf, int wrap, int xsize, int ysize, string filename)
{
    using FileStream fs = new FileStream(filename, FileMode.Create);

    byte [] header = Encoding.ASCII.GetBytes($"P5\n{xsize} {ysize}\n255\n");
    fs.Write(header);

    for (int i = 0; i < ysize; i ++)
    {
        byte* ptr = buf + (i * wrap);
        ReadOnlySpan<byte> pos = new Span<byte>(ptr, xsize);

        fs.Write(pos);
    }
}

멋지죠? ^^

참고로, .NET Framework은 4.8까지도 저 버전을 지원하지 않기 때문에 어쩔 수 없이 PInvoke 과정으로 해결해야 합니다.




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]

[연관 글]






[최초 등록일: ]
[최종 수정일: 4/5/2023]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 



2022-07-29 06시18분
[kos] 한 가지 참고할 점은 corefx 구현체에서 Span 객체를 인자로 받는 Read/Write 메소드가 array pool을 활용하여 버퍼를 복사하고 다시 Read(byte[], int, int)와 Write(byte[], int, int)를 호출하므로, 특정 크기 이상의 버퍼는 GC 할당이 발생할 수도 있다는 것일 듯합니다.

corefx 소스코드를 참고한다면 net framework에서도 P/Invoke 없이 array pool 만으로도 유사한 구현을 사용할 수 있다는 것도 참고할 수 있을 듯하네요.
[guest]

[1]  2  3  4  5  6  7  8  9  10  11  12  13  14  15  ...
NoWriterDateCnt.TitleFile(s)
13945정성태6/7/2025365오류 유형: 960. 파이썬 + conda - mysqlclient 사용 시 "NameError: name '_mysql' is not defined" 에러
13944정성태6/7/2025368오류 유형: 959. The trust relationship between this workstation and the primary domain failed. - 네 번째 이야기
13943정성태6/6/2025510개발 환경 구성: 748. Windows + Foundry Local - 로컬에서 AI 모델 활용
13942정성태6/5/2025711오류 유형: 958. winget 설치 시 "0x80d02002 : unknown error"
13941정성태6/2/2025941닷넷: 2334. C# - cpuid 명령어를 이용한 CPU 제조사 문자열 가져오기파일 다운로드1
13940정성태6/1/20251357C/C++: 188. C++의 32비트 + Release 어셈블리 코드를 .NET으로 포팅할 때 주의할 점파일 다운로드1
13939정성태5/29/20251635오류 유형: 957. NVIDIA Triton Inference Server - version `GLIBCXX_3.4.32' not found (required by /opt/tritonserver/backends/python/triton_python_backend_stub)
13938정성태5/29/20251371개발 환경 구성: 747. 파이썬 - WSL/docker에 구성한 Triton 예제 개발 환경
13937정성태5/24/20251348개발 환경 구성: 746. Windows + WSL2 환경에서 (tensorflow 등의) NVIDIA GPU 인식
13936정성태5/23/20251176개발 환경 구성: 745. Linux / WSL 환경에 Miniconda 설치하기
13935정성태5/20/20251197파이썬 - pip 사용 시 "ImportError: cannot import name 'html5lib' from 'pip._vendor'" 오류
13934정성태5/20/20251705스크립트: 77. 파이썬 - 'urllib.request' 모듈의 명시적/암시적 로딩 차이
13933정성태5/19/20251275오류 유형: 956. Visual Studio 2022가 17.12 버전부터 업데이트 되지 않는다면?
13932정성태5/18/20251481스크립트: 76. 파이썬 - Version 문자열 다루기(semver 패키지)
13931정성태5/17/20251770스크립트: 75. 파이썬 - Cython 기본 예제 및 컴파일
13930정성태5/17/20251458개발 환경 구성: 744. 파이썬 - Windows embeddable package 환경에서 외부 패키지 사용하는 방법(ex: UFO² 환경 구성)
13929정성태5/16/20251480오류 유형: 955. 파이썬 - "Windows embeddable package" REPL 환경에서 "NameError: name 'exit' is not defined"
13928정성태5/15/20251532오류 유형: 954. UFO² - "'Invalid URL (POST /v1/chat/completions/chat/completions)'"
13927정성태5/15/20251525오류 유형: 953. OpenAI - The API request of HOST_AGENT failed: OpenAI API request exceeded rate limit: Error code: 429
13926정성태5/14/20251900개발 환경 구성: 743. LLM과 윈도우의 만남 - Desktop AgentOS UFO² 기본 환경 구성
13925정성태5/12/20252000닷넷: 2333. C# - (Console 유형의 프로젝트에서) Clipboard 연동파일 다운로드1
13924정성태5/8/20251736닷넷: 2332. C# - (JetBrains Omea Reader 대상으로) 런타임 시에 메서드 가로채기 [2]파일 다운로드1
13923정성태5/5/20251490스크립트: 74. 파이썬 - C# - Python.NET의 RunSimpleScript, Exec, Eval 차이점파일 다운로드1
13922정성태5/3/20251732스크립트: 73. 파이썬 - Windows embeddable package 버전에서 tkinter 환경 구성
13921정성태5/3/20252231오류 유형: 952. 듀얼 채널 메모리 정렬을 지키지 않은 컴퓨터의 Windows 비정상 종료 현상(Blue Screen) [2]
[1]  2  3  4  5  6  7  8  9  10  11  12  13  14  15  ...