Microsoft MVP성태의 닷넷 이야기
닷넷: 2255. C# 배열을 Numpy ndarray 배열과 상호 변환 [링크 복사], [링크+제목 복사],
조회: 11012
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
 

(시리즈 글이 5개 있습니다.)
스크립트: 11. 파이썬(Python) 윈도우 개발 환경
; https://www.sysnet.pe.kr/2/0/1343

닷넷: 2245. C# - IronPython을 이용한 파이썬 소스코드 연동
; https://www.sysnet.pe.kr/2/0/13603

닷넷: 2246. C# - Python.NET을 이용한 파이썬 소스코드 연동
; https://www.sysnet.pe.kr/2/0/13605

닷넷: 2255. C# 배열을 Numpy ndarray 배열과 상호 변환
; https://www.sysnet.pe.kr/2/0/13615

스크립트: 74. 파이썬 - C# - Python.NET의 RunSimpleScript, Exec, Eval 차이점
; https://www.sysnet.pe.kr/2/0/13923




C# 배열을 Numpy ndarray 배열과 상호 변환

Python.NET과 C#을 연동해 tensorflow를 사용하는 경우 Numpy ndarray 배열로의 변환이 자주 발생하게 됩니다.

예를 들기 위해, MNIST의 테스트 이미지 데이터를 1개 반환하는 파이썬 코드를 아래와 같이 만들면,

# ndarray_test.py

import setuptools.dist
from tensorflow.keras.datasets import mnist
(_, _), (test_images, _) = mnist.load_data()

test_images = test_images.reshape((10000, 28 * 28)) # 이미지를 28 * 28 크기로 변경
test_images = test_images.astype('float32') / 255

def get_test_image():
    return test_images[0]

C#에서 get_test_image 함수를 호출해 이미지 데이터를 가져올 수 있습니다.

PyObject test_image = pyFile.InvokeMethod("get_test_image");

// ndarray를 C# 배열로 가져오는 코드
// Span<float> arr = ToSpan<float>(test_image);

PyObject 형식으로 가져왔으니 이제 C# 배열 형식으로 바꿔야 할 텐데요, 당연히 최대한 성능 손실을 없애기 위해서는 복사가 아닌 포인터 그대로 활용하는 것이 좋습니다. 그럼, 이럴 때 Span을 활용하는 것이 좋겠죠? ^^

static unsafe Span<T> ToSpan<T>(PyObject test_image)
{
    PyBuffer buffer = test_image.GetBuffer();
    nint ptr = buffer.Buffer;
    int bufferSize = (int)(buffer.Length / buffer.ItemSize);
    return new Span<T>(ptr.ToPointer(), bufferSize);
}

이를 활용해 Numpy 배열을 Span으로 바꿀 수 있고, 만약 배열이 필요하다면 (아쉽게도 메모리 복사가 발생하지만) Span으로부터 언제든 ToArray()를 호출해 C# 배열로 자유롭게 활용할 수 있습니다.

PyObject test_image = pyFile.InvokeMethod("get_test_image");
Span<float> arr = ToSpan<float>(test_image);

foreach (var value in arr)
{
    Console.Write($"{value},"); // 784(28 x 28)개의 요소 나열
}

float[] floatArrays = arr.ToArray(); // 필요하다면 배열로 변환

반대로, C# 배열을 numpy 배열로 만드는 것은 Python의 Numpy 모듈을 이용해 다음과 같이 변환할 수 있습니다.

float[] floatArrays = ...;

dynamic npModule = Py.Import("numpy");
dynamic npArray = npModule.array(floatArrays);




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]







[최초 등록일: ]
[최종 수정일: 5/3/2024]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 




1  2  3  4  5  6  7  [8]  9  10  11  12  13  14  15  ...
NoWriterDateCnt.TitleFile(s)
13778정성태10/21/20247111C/C++: 181. C/C++ - 소스코드 파일의 인코딩, 바이너리 모듈 상태의 인코딩
13777정성태10/20/20245533Windows: 265. Win32 API의 W(유니코드) 버전은 UCS-2일까요? UTF-16 인코딩일까요?
13776정성태10/19/20246549C/C++: 180. C++ - 고수준 FILE I/O 함수에서의 Unicode stream 모드(_O_WTEXT, _O_U16TEXT, _O_U8TEXT)파일 다운로드1
13775정성태10/19/20246594개발 환경 구성: 728. 윈도우 환경의 개발자를 위한 UTF-8 환경 설정
13774정성태10/18/20246140Linux: 91. Container 환경에서 출력하는 eBPF bpf_get_current_pid_tgid의 pid가 존재하지 않는 이유
13773정성태10/18/20245938Linux: 90. pid 네임스페이스 구성으로 본 WSL 2 + docker-desktop
13772정성태10/17/20246165Linux: 89. pid 네임스페이스 구성으로 본 WSL 2 배포본의 계층 관계
13771정성태10/17/20245920Linux: 88. WSL 2 리눅스 배포본 내에서의 pid 네임스페이스 구성
13770정성태10/17/20246384Linux: 87. ps + grep 조합에서 grep 명령어를 사용한 프로세스를 출력에서 제거하는 방법
13769정성태10/15/20247487Linux: 86. Golang + bpf2go를 사용한 eBPF 기본 예제파일 다운로드1
13768정성태10/15/20246764C/C++: 179. C++ - _O_WTEXT, _O_U16TEXT, _O_U8TEXT의 Unicode stream 모드파일 다운로드2
13767정성태10/14/20245676오류 유형: 929. bpftrace 수행 시 "ERROR: Could not resolve symbol: /proc/self/exe:BEGIN_trigger"
13766정성태10/14/20245150C/C++: 178. C++ - 파일에 대한 Text 모드의 "translated" 동작파일 다운로드1
13765정성태10/12/20246393오류 유형: 928. go build 시 "package maps is not in GOROOT" 오류
13764정성태10/11/20246937Linux: 85. Ubuntu - 원하는 golang 버전 설치
13763정성태10/11/20245888Linux: 84. WSL / Ubuntu 20.04 - bpftool 설치
13762정성태10/11/20246070Linux: 83. WSL / Ubuntu 22.04 - bpftool 설치
13761정성태10/11/20245765오류 유형: 927. WSL / Ubuntu - /usr/include/linux/types.h:5:10: fatal error: 'asm/types.h' file not found
13760정성태10/11/20246848Linux: 82. Ubuntu - clang 최신(stable) 버전 설치
13759정성태10/10/20247891C/C++: 177. C++ - 자유 함수(free function) 및 주소 지정 가능한 함수(addressable function) [6]
13758정성태10/8/20246591오류 유형: 926. dotnet tools를 sudo로 실행하는 경우 command not found
13757정성태10/8/20246868닷넷: 2306. Linux - dotnet tool의 설치 디렉터리가 PATH 환경변수에 자동 등록이 되는 이유
13756정성태10/8/20247059오류 유형: 925. ssh로 docker 접근을 할 때 "... malformed HTTP status code ..." 오류 발생
13755정성태10/7/20247652닷넷: 2305. C# 13 - (9) 메서드 바인딩의 우선순위를 지정하는 OverloadResolutionPriority 특성 도입 (Overload resolution priority)파일 다운로드1
13754정성태10/4/20246722닷넷: 2304. C# 13 - (8) 부분 메서드 정의를 속성 및 인덱서에도 확대파일 다운로드1
13753정성태10/4/20246400Linux: 81. Linux - PATH 환경변수의 적용 규칙
1  2  3  4  5  6  7  [8]  9  10  11  12  13  14  15  ...