Microsoft MVP성태의 닷넷 이야기
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
 
(연관된 글이 2개 있습니다.)

C# - byte * (바이트 포인터)를 FileStream으로 쓰는 방법

C/C++ 코드를 C#으로 포팅하는 등의 작업을 하다 보면 바이트 포인터를 FileStream에 직접 쓰는 방법이 아쉬울 때가 있습니다. 예를 들어, 아래의 ffmpeg 코드에서도,

decode_video.c
; https://ffmpeg.org/doxygen/trunk/decode_video_8c-example.html

static void pgm_save(unsigned char *buf, int wrap, int xsize, int ysize,
                     char *filename)
{
    FILE *f;
    int i;
 
    f = fopen(filename,"wb");
    fprintf(f, "P5\n%d %d\n%d\n", xsize, ysize, 255);
    for (i = 0; i < ysize; i++)
        fwrite(buf + i * wrap, 1, xsize, f);
    fclose(f);
}

"unsigned char*"가 담은 바이트 스트림을 직접 fwrite에 쓰는 작업을 하고 있습니다. 이런 코드를 C#으로 바꾸려고 하면, 가장 걸림돌이 FileStream.Write 메서드에서 포인터를 받는 버전을 제공하지 않는다는 점입니다.

그래서, 기존에는 어쩔 수 없이 다시 byte []를 할당해 복사한 다음 쓰는 방법으로 우회했는데요,

// C# - Convert unsafe byte* to byte[]
// ; https://stackoverflow.com/questions/17569419/c-sharp-convert-unsafe-byte-to-byte

byte[] arr = new byte[len];
Marshal.Copy((IntPtr)ptr, arr, 0, len);

당연히 필요 없는 부하가 발생할 수밖에 없습니다.




이런 비효율성이 C# 7.2의 Span이 나오면서 해결됩니다.

C# 7.2 - Span<T>
; https://www.sysnet.pe.kr/2/0/11534

그렇긴 해도 Span 타입 자체는 .NET Core 2.1부터 추가되었지만, 이 타입을 기존의 BCL에 정의된 코드에서 채택하는 것은 시간이 걸렸습니다. 실제로 FileStream에서 이 타입을 지원하는 것은 .NET Core 3.0에서 이뤄졌습니다.

Write(ReadOnlySpan<Byte>)
; https://learn.microsoft.com/en-us/dotnet/api/system.io.filestream.write#system-io-filestream-write(system-readonlyspan((system-byte)))

어쨌든, 이 덕분에 포인터 버퍼를 Span으로 감싼 후에 곧바로 FileStream에 전달하는 것이 가능합니다. 따라서, 위에서 예제로 든 C 코드의 경우 다음과 같이 C#으로 포팅할 수 있습니다.

private static unsafe void pgm_save(byte* buf, int wrap, int xsize, int ysize, string filename)
{
    using FileStream fs = new FileStream(filename, FileMode.Create);

    byte [] header = Encoding.ASCII.GetBytes($"P5\n{xsize} {ysize}\n255\n");
    fs.Write(header);

    for (int i = 0; i < ysize; i ++)
    {
        byte* ptr = buf + (i * wrap);
        ReadOnlySpan<byte> pos = new Span<byte>(ptr, xsize);

        fs.Write(pos);
    }
}

멋지죠? ^^

참고로, .NET Framework은 4.8까지도 저 버전을 지원하지 않기 때문에 어쩔 수 없이 PInvoke 과정으로 해결해야 합니다.




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]

[연관 글]






[최초 등록일: ]
[최종 수정일: 4/5/2023]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 



2022-07-29 06시18분
[kos] 한 가지 참고할 점은 corefx 구현체에서 Span 객체를 인자로 받는 Read/Write 메소드가 array pool을 활용하여 버퍼를 복사하고 다시 Read(byte[], int, int)와 Write(byte[], int, int)를 호출하므로, 특정 크기 이상의 버퍼는 GC 할당이 발생할 수도 있다는 것일 듯합니다.

corefx 소스코드를 참고한다면 net framework에서도 P/Invoke 없이 array pool 만으로도 유사한 구현을 사용할 수 있다는 것도 참고할 수 있을 듯하네요.
[guest]

1  2  3  4  [5]  6  7  8  9  10  11  12  13  14  15  ...
NoWriterDateCnt.TitleFile(s)
13854정성태12/27/20245872C/C++: 186. Golang - 콘솔 응용 프로그램을 NT 서비스를 지원하도록 변경파일 다운로드1
13853정성태12/26/20244811디버깅 기술: 213. Windbg - swapgs 명령어와 (Ring 0 커널 모드의) FS, GS Segment 레지스터
13852정성태12/25/20245901디버깅 기술: 212. Windbg - (Ring 3 사용자 모드의) FS, GS Segment 레지스터파일 다운로드1
13851정성태12/23/20245100디버깅 기술: 211. Windbg - 커널 모드 디버깅 상태에서 사용자 프로그램을 디버깅하는 방법
13850정성태12/23/20246224오류 유형: 940. "Application Information" 서비스를 중지한 경우, "This file does not have an app associated with it for performing this action."
13849정성태12/20/20246200디버깅 기술: 210. Windbg - 논리(가상) 주소를 Segmentation을 거쳐 선형 주소로 변경
13848정성태12/18/20245691디버깅 기술: 209. Windbg로 알아보는 Prototype PTE파일 다운로드2
13847정성태12/18/20245762오류 유형: 939. golang - 빌드 시 "unknown directive: toolchain" 오류 빌드 시 이런 오류가 발생한다면?
13846정성태12/17/20246320디버깅 기술: 208. Windbg로 알아보는 Trans/Soft PTE와 2가지 Page Fault 유형파일 다운로드1
13845정성태12/16/20245170디버깅 기술: 207. Windbg로 알아보는 PTE (_MMPTE)
13844정성태12/14/20246678디버깅 기술: 206. Windbg로 알아보는 PFN (_MMPFN)파일 다운로드1
13843정성태12/13/20245195오류 유형: 938. Docker container 내에서 빌드 시 error MSB3021: Unable to copy file "..." to "...". Access to the path '...' is denied.
13842정성태12/12/20245384디버깅 기술: 205. Windbg - KPCR, KPRCB
13841정성태12/11/20246021오류 유형: 937. error MSB4044: The "ValidateValidArchitecture" task was not given a value for the required parameter "RemoteTarget"
13840정성태12/11/20245272오류 유형: 936. msbuild - Your project file doesn't list 'win' as a "RuntimeIdentifier"
13839정성태12/11/20246239오류 유형: 936. msbuild - error CS1617: Invalid option '12.0' for /langversion. Use '/langversion:?' to list supported values.
13838정성태12/4/20245961오류 유형: 935. Windbg - Breakpoint 0's offset expression evaluation failed.
13837정성태12/3/20246754디버깅 기술: 204. Windbg - 윈도우 핸들 테이블 (3) - Windows 10 이상인 경우
13836정성태12/3/20245312디버깅 기술: 203. Windbg - x64 가상 주소를 물리 주소로 변환 (페이지 크기가 2MB인 경우)
13835정성태12/2/20246729오류 유형: 934. Azure - rm: cannot remove '...': Directory not empty
13834정성태11/29/20246711Windows: 275. C# - CUI 애플리케이션과 Console 윈도우 (Windows 10 미만의 Classic Console 모드인 경우) [1]파일 다운로드1
13833정성태11/29/20246084개발 환경 구성: 737. Azure Web App에서 Scale-out으로 늘어난 리눅스 인스턴스에 SSH 접속하는 방법
13832정성태11/27/20245722Windows: 274. Windows 7부터 도입한 conhost.exe
13831정성태11/27/20245068Linux: 111. eBPF - BPF_MAP_TYPE_PERF_EVENT_ARRAY, BPF_MAP_TYPE_RINGBUF에 대한 다양한 용어들
13830정성태11/25/20246570개발 환경 구성: 736. 파이썬 웹 앱을 Azure App Service에 배포하기
13829정성태11/25/20246693스크립트: 67. 파이썬 - Windows 버전에서 함께 설치되는 py.exe
1  2  3  4  [5]  6  7  8  9  10  11  12  13  14  15  ...