Microsoft MVP성태의 닷넷 이야기
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
 
(연관된 글이 2개 있습니다.)

C# - byte * (바이트 포인터)를 FileStream으로 쓰는 방법

C/C++ 코드를 C#으로 포팅하는 등의 작업을 하다 보면 바이트 포인터를 FileStream에 직접 쓰는 방법이 아쉬울 때가 있습니다. 예를 들어, 아래의 ffmpeg 코드에서도,

decode_video.c
; https://ffmpeg.org/doxygen/trunk/decode_video_8c-example.html

static void pgm_save(unsigned char *buf, int wrap, int xsize, int ysize,
                     char *filename)
{
    FILE *f;
    int i;
 
    f = fopen(filename,"wb");
    fprintf(f, "P5\n%d %d\n%d\n", xsize, ysize, 255);
    for (i = 0; i < ysize; i++)
        fwrite(buf + i * wrap, 1, xsize, f);
    fclose(f);
}

"unsigned char*"가 담은 바이트 스트림을 직접 fwrite에 쓰는 작업을 하고 있습니다. 이런 코드를 C#으로 바꾸려고 하면, 가장 걸림돌이 FileStream.Write 메서드에서 포인터를 받는 버전을 제공하지 않는다는 점입니다.

그래서, 기존에는 어쩔 수 없이 다시 byte []를 할당해 복사한 다음 쓰는 방법으로 우회했는데요,

// C# - Convert unsafe byte* to byte[]
// ; https://stackoverflow.com/questions/17569419/c-sharp-convert-unsafe-byte-to-byte

byte[] arr = new byte[len];
Marshal.Copy((IntPtr)ptr, arr, 0, len);

당연히 필요 없는 부하가 발생할 수밖에 없습니다.




이런 비효율성이 C# 7.2의 Span이 나오면서 해결됩니다.

C# 7.2 - Span<T>
; https://www.sysnet.pe.kr/2/0/11534

그렇긴 해도 Span 타입 자체는 .NET Core 2.1부터 추가되었지만, 이 타입을 기존의 BCL에 정의된 코드에서 채택하는 것은 시간이 걸렸습니다. 실제로 FileStream에서 이 타입을 지원하는 것은 .NET Core 3.0에서 이뤄졌습니다.

Write(ReadOnlySpan<Byte>)
; https://learn.microsoft.com/en-us/dotnet/api/system.io.filestream.write#system-io-filestream-write(system-readonlyspan((system-byte)))

어쨌든, 이 덕분에 포인터 버퍼를 Span으로 감싼 후에 곧바로 FileStream에 전달하는 것이 가능합니다. 따라서, 위에서 예제로 든 C 코드의 경우 다음과 같이 C#으로 포팅할 수 있습니다.

private static unsafe void pgm_save(byte* buf, int wrap, int xsize, int ysize, string filename)
{
    using FileStream fs = new FileStream(filename, FileMode.Create);

    byte [] header = Encoding.ASCII.GetBytes($"P5\n{xsize} {ysize}\n255\n");
    fs.Write(header);

    for (int i = 0; i < ysize; i ++)
    {
        byte* ptr = buf + (i * wrap);
        ReadOnlySpan<byte> pos = new Span<byte>(ptr, xsize);

        fs.Write(pos);
    }
}

멋지죠? ^^

참고로, .NET Framework은 4.8까지도 저 버전을 지원하지 않기 때문에 어쩔 수 없이 PInvoke 과정으로 해결해야 합니다.




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]

[연관 글]






[최초 등록일: ]
[최종 수정일: 4/5/2023]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 



2022-07-29 06시18분
[kos] 한 가지 참고할 점은 corefx 구현체에서 Span 객체를 인자로 받는 Read/Write 메소드가 array pool을 활용하여 버퍼를 복사하고 다시 Read(byte[], int, int)와 Write(byte[], int, int)를 호출하므로, 특정 크기 이상의 버퍼는 GC 할당이 발생할 수도 있다는 것일 듯합니다.

corefx 소스코드를 참고한다면 net framework에서도 P/Invoke 없이 array pool 만으로도 유사한 구현을 사용할 수 있다는 것도 참고할 수 있을 듯하네요.
[guest]

... 46  47  48  49  50  51  52  53  54  55  [56]  57  58  59  60  ...
NoWriterDateCnt.TitleFile(s)
12535정성태2/9/202117270개발 환경 구성: 541. Wireshark로 확인하는 LSO(Large Send Offload), RSC(Receive Segment Coalescing) 옵션
12534정성태2/8/202117778개발 환경 구성: 540. Wireshark + C/C++로 확인하는 TCP 연결에서의 closesocket 동작 [1]파일 다운로드1
12533정성태2/8/202116781개발 환경 구성: 539. Wireshark + C/C++로 확인하는 TCP 연결에서의 shutdown 동작파일 다운로드1
12532정성태2/6/202117981개발 환경 구성: 538. Wireshark + C#으로 확인하는 ReceiveBufferSize(SO_RCVBUF), SendBufferSize(SO_SNDBUF) [3]
12531정성태2/5/202116766개발 환경 구성: 537. Wireshark + C#으로 확인하는 PSH flag와 Nagle 알고리듬파일 다운로드1
12530정성태2/4/202120581개발 환경 구성: 536. Wireshark + C#으로 확인하는 TCP 통신의 Receive Window
12529정성태2/4/202118452개발 환경 구성: 535. Wireshark + C#으로 확인하는 TCP 통신의 MIN RTO [1]
12528정성태2/1/202118030개발 환경 구성: 534. Wireshark + C#으로 확인하는 TCP 통신의 MSS(Maximum Segment Size) - 윈도우 환경
12527정성태2/1/202118125개발 환경 구성: 533. Wireshark + C#으로 확인하는 TCP 통신의 MSS(Maximum Segment Size) - 리눅스 환경파일 다운로드1
12526정성태2/1/202114921개발 환경 구성: 532. Azure Devops의 파이프라인 빌드 시 snk 파일 다루는 방법 - Secure file
12525정성태2/1/202113907개발 환경 구성: 531. Azure Devops - 파이프라인 실행 시 빌드 이벤트를 생략하는 방법
12524정성태1/31/202115105개발 환경 구성: 530. 기존 github 프로젝트를 Azure Devops의 빌드 Pipeline에 연결하는 방법 [1]
12523정성태1/31/202116034개발 환경 구성: 529. 기존 github 프로젝트를 Azure Devops의 Board에 연결하는 방법
12522정성태1/31/202118229개발 환경 구성: 528. 오라클 클라우드의 리눅스 VM - 9000 MTU Jumbo Frame 테스트
12521정성태1/31/202117330개발 환경 구성: 527. 이더넷(Ethernet) 환경의 TCP 통신에서 MSS(Maximum Segment Size) 확인 [1]
12520정성태1/30/202116069개발 환경 구성: 526. 오라클 클라우드의 VM에 ping ICMP 여는 방법
12519정성태1/30/202114802개발 환경 구성: 525. 오라클 클라우드의 VM을 외부에서 접근하기 위해 포트 여는 방법
12518정성태1/30/202132898Linux: 37. Ubuntu에 Wireshark 설치 [2]
12517정성태1/30/202120608Linux: 36. 윈도우 클라이언트에서 X2Go를 이용한 원격 리눅스의 GUI 접속 - 우분투 20.04
12516정성태1/29/202117095Windows: 188. Windows - TCP default template 설정 방법
12515정성태1/28/202118733웹: 41. Microsoft Edge - localhost에 대해 http 접근 시 무조건 https로 바뀌는 문제 [3]
12514정성태1/28/202118860.NET Framework: 1021. C# - 일렉트론 닷넷(Electron.NET) 소개 [1]파일 다운로드1
12513정성태1/28/202116039오류 유형: 698. electronize - User Profile 디렉터리에 공백 문자가 있는 경우 빌드가 실패하는 문제 [1]
12512정성태1/28/202116416오류 유형: 697. The program can't start because VCRUNTIME140.dll is missing from your computer. Try reinstalling the program to fix this problem.
12511정성태1/27/202116144Windows: 187. Windows - 도스 시절의 8.3 경로를 알아내는 방법
12510정성태1/27/202116992.NET Framework: 1020. .NET Core Kestrel 호스팅 - Razor 지원 추가 [1]파일 다운로드1
... 46  47  48  49  50  51  52  53  54  55  [56]  57  58  59  60  ...