Microsoft MVP성태의 닷넷 이야기
닷넷: 2255. C# 배열을 Numpy ndarray 배열과 상호 변환 [링크 복사], [링크+제목 복사],
조회: 9644
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
 

(시리즈 글이 4개 있습니다.)
스크립트: 11. 파이썬(Python) 윈도우 개발 환경
; https://www.sysnet.pe.kr/2/0/1343

닷넷: 2245. C# - IronPython을 이용한 파이썬 소스코드 연동
; https://www.sysnet.pe.kr/2/0/13603

닷넷: 2246. C# - Python.NET을 이용한 파이썬 소스코드 연동
; https://www.sysnet.pe.kr/2/0/13605

닷넷: 2255. C# 배열을 Numpy ndarray 배열과 상호 변환
; https://www.sysnet.pe.kr/2/0/13615




C# 배열을 Numpy ndarray 배열과 상호 변환

Python.NET과 C#을 연동해 tensorflow를 사용하는 경우 Numpy ndarray 배열로의 변환이 자주 발생하게 됩니다.

예를 들기 위해, MNIST의 테스트 이미지 데이터를 1개 반환하는 파이썬 코드를 아래와 같이 만들면,

# ndarray_test.py

import setuptools.dist
from tensorflow.keras.datasets import mnist
(_, _), (test_images, _) = mnist.load_data()

test_images = test_images.reshape((10000, 28 * 28)) # 이미지를 28 * 28 크기로 변경
test_images = test_images.astype('float32') / 255

def get_test_image():
    return test_images[0]

C#에서 get_test_image 함수를 호출해 이미지 데이터를 가져올 수 있습니다.

PyObject test_image = pyFile.InvokeMethod("get_test_image");

// ndarray를 C# 배열로 가져오는 코드
// Span<float> arr = ToSpan<float>(test_image);

PyObject 형식으로 가져왔으니 이제 C# 배열 형식으로 바꿔야 할 텐데요, 당연히 최대한 성능 손실을 없애기 위해서는 복사가 아닌 포인터 그대로 활용하는 것이 좋습니다. 그럼, 이럴 때 Span을 활용하는 것이 좋겠죠? ^^

static unsafe Span<T> ToSpan<T>(PyObject test_image)
{
    PyBuffer buffer = test_image.GetBuffer();
    nint ptr = buffer.Buffer;
    int bufferSize = (int)(buffer.Length / buffer.ItemSize);
    return new Span<T>(ptr.ToPointer(), bufferSize);
}

이를 활용해 Numpy 배열을 Span으로 바꿀 수 있고, 만약 배열이 필요하다면 (아쉽게도 메모리 복사가 발생하지만) Span으로부터 언제든 ToArray()를 호출해 C# 배열로 자유롭게 활용할 수 있습니다.

PyObject test_image = pyFile.InvokeMethod("get_test_image");
Span<float> arr = ToSpan<float>(test_image);

foreach (var value in arr)
{
    Console.Write($"{value},"); // 784(28 x 28)개의 요소 나열
}

float[] floatArrays = arr.ToArray(); // 필요하다면 배열로 변환

반대로, C# 배열을 numpy 배열로 만드는 것은 Python의 Numpy 모듈을 이용해 다음과 같이 변환할 수 있습니다.

float[] floatArrays = ...;

dynamic npModule = Py.Import("numpy");
dynamic npArray = npModule.array(floatArrays);




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]







[최초 등록일: ]
[최종 수정일: 5/3/2024]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 




... 151  152  153  154  [155]  156  157  158  159  160  161  162  163  164  165  ...
NoWriterDateCnt.TitleFile(s)
1177정성태11/18/201130004.NET Framework: 272. 소켓 연결 시간 제한 - 두 번째 이야기 [1]파일 다운로드1
1176정성태11/17/201129271.NET Framework: 271. C#에서 확인해 보는 관리 힙의 인스턴스 구조 [3]파일 다운로드1
1175정성태11/16/201127239.NET Framework: 270. .NET 참조 개체 인스턴스의 Object Header를 확인하는 방법 [1]파일 다운로드1
1174정성태11/15/201126626.NET Framework: 269. 일반 참조형의 기본 메모리 소비는 얼마나 될까요? [4]
1173정성태11/14/201122812.NET Framework: 268. .NET Array는 왜 12bytes의 기본 메모리를 점유할까? [1]
1172정성태11/13/201119829.NET Framework: 267. windbg - GC Heap에서 .NET 타입에 대한 배열을 찾는 방법
1171정성태11/12/201136506.NET Framework: 266. StringBuilder에서의 OutOfMemoryException 오류 원인 분석 [4]파일 다운로드1
1170정성태11/10/201125738.NET Framework: 265. Named 동기화 개체 생성 시 System.UnauthorizedAccessException 예외 발생하는 경우
1169정성태11/10/201129485.NET Framework: 264. 다중 LAN 카드 환경에서 Dns.GetHostAddresses(local)가 반환해 주는 IP의 우선순위는 어떻게 될까요? [4]
1168정성태11/6/201125345오류 유형: 139. TlbImp : error TI0000 : A single valid machine type compatible with the input type library must be specified
1167정성태11/5/201137142개발 환경 구성: 133. Registry 등록 과정 없이 COM 개체 사용 - 두 번째 이야기 [5]파일 다운로드4
1166정성태11/5/201123239.NET Framework: 263. byte[] pData = new byte[100000]로 인한 성능 차이? [1]파일 다운로드1
1165정성태11/3/201128115개발 환경 구성: 132. "Visual Studio Command Prompt (2010)" 명령행에서 2.0 버전의 MSBuild를 구동하는 방법 [2]파일 다운로드1
1164정성태11/1/201126325.NET Framework: 262. .NET 스레드 콜 스택 덤프 (4) - .NET 4.0을 지원하지 않는 MSE 응용 프로그램 원인 분석
1163정성태10/31/201125823.NET Framework: 261. .NET 스레드 콜 스택 덤프 (3) - MSE 소스 코드 개선파일 다운로드1
1162정성태10/30/201125902.NET Framework: 260. .NET 스레드 콜 스택 덤프 (2) - Managed Stack Explorer 소스 코드를 이용한 스택 덤프 구하는 방법파일 다운로드1
1161정성태10/29/201122760.NET Framework: 259. Type.GetMethod - System.Reflection.AmbiguousMatchException파일 다운로드1
1159정성태10/28/201126196.NET Framework: 258. Roslyn 맛보기 - SyntaxTree 조작 [2]
1158정성태10/24/201125515.NET Framework: 257. Roslyn 맛보기 - Roslyn Symbol / Binding API파일 다운로드1
1157정성태10/23/201129915.NET Framework: 256. Roslyn 맛보기 - Syntax Analysis (Roslyn Syntax API) [2]
1156정성태10/23/201128439.NET Framework: 255. Roslyn 맛보기 - Roslyn Services APIs를 이용한 Code Issue 및 Code Action 기능 소개 [1]
1155정성태10/22/201126478.NET Framework: 254. Roslyn 맛보기 - C# Interactive (2)
1154정성태10/22/201133217.NET Framework: 253. Roslyn 맛보기 - C# Interactive (1)
1153정성태10/21/201142102.NET Framework: 252. Roslyn 맛보기 - C# 소스 코드를 스크립트처럼 다루는 방법 [7]파일 다운로드1
1152정성태10/20/201123747.NET Framework: 251. string.GetHashCode는 hash 값을 cache 할까?
1151정성태10/18/201122668Java: 13. 자바도 64비트에서 (2GB) OutOfMemoryException 예외가 발생할까?
... 151  152  153  154  [155]  156  157  158  159  160  161  162  163  164  165  ...