Microsoft MVP성태의 닷넷 이야기
닷넷: 2255. C# 배열을 Numpy ndarray 배열과 상호 변환 [링크 복사], [링크+제목 복사],
조회: 9721
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
 

(시리즈 글이 4개 있습니다.)
스크립트: 11. 파이썬(Python) 윈도우 개발 환경
; https://www.sysnet.pe.kr/2/0/1343

닷넷: 2245. C# - IronPython을 이용한 파이썬 소스코드 연동
; https://www.sysnet.pe.kr/2/0/13603

닷넷: 2246. C# - Python.NET을 이용한 파이썬 소스코드 연동
; https://www.sysnet.pe.kr/2/0/13605

닷넷: 2255. C# 배열을 Numpy ndarray 배열과 상호 변환
; https://www.sysnet.pe.kr/2/0/13615




C# 배열을 Numpy ndarray 배열과 상호 변환

Python.NET과 C#을 연동해 tensorflow를 사용하는 경우 Numpy ndarray 배열로의 변환이 자주 발생하게 됩니다.

예를 들기 위해, MNIST의 테스트 이미지 데이터를 1개 반환하는 파이썬 코드를 아래와 같이 만들면,

# ndarray_test.py

import setuptools.dist
from tensorflow.keras.datasets import mnist
(_, _), (test_images, _) = mnist.load_data()

test_images = test_images.reshape((10000, 28 * 28)) # 이미지를 28 * 28 크기로 변경
test_images = test_images.astype('float32') / 255

def get_test_image():
    return test_images[0]

C#에서 get_test_image 함수를 호출해 이미지 데이터를 가져올 수 있습니다.

PyObject test_image = pyFile.InvokeMethod("get_test_image");

// ndarray를 C# 배열로 가져오는 코드
// Span<float> arr = ToSpan<float>(test_image);

PyObject 형식으로 가져왔으니 이제 C# 배열 형식으로 바꿔야 할 텐데요, 당연히 최대한 성능 손실을 없애기 위해서는 복사가 아닌 포인터 그대로 활용하는 것이 좋습니다. 그럼, 이럴 때 Span을 활용하는 것이 좋겠죠? ^^

static unsafe Span<T> ToSpan<T>(PyObject test_image)
{
    PyBuffer buffer = test_image.GetBuffer();
    nint ptr = buffer.Buffer;
    int bufferSize = (int)(buffer.Length / buffer.ItemSize);
    return new Span<T>(ptr.ToPointer(), bufferSize);
}

이를 활용해 Numpy 배열을 Span으로 바꿀 수 있고, 만약 배열이 필요하다면 (아쉽게도 메모리 복사가 발생하지만) Span으로부터 언제든 ToArray()를 호출해 C# 배열로 자유롭게 활용할 수 있습니다.

PyObject test_image = pyFile.InvokeMethod("get_test_image");
Span<float> arr = ToSpan<float>(test_image);

foreach (var value in arr)
{
    Console.Write($"{value},"); // 784(28 x 28)개의 요소 나열
}

float[] floatArrays = arr.ToArray(); // 필요하다면 배열로 변환

반대로, C# 배열을 numpy 배열로 만드는 것은 Python의 Numpy 모듈을 이용해 다음과 같이 변환할 수 있습니다.

float[] floatArrays = ...;

dynamic npModule = Py.Import("numpy");
dynamic npArray = npModule.array(floatArrays);




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]







[최초 등록일: ]
[최종 수정일: 5/3/2024]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 




... 61  62  63  64  65  66  [67]  68  69  70  71  72  73  74  75  ...
NoWriterDateCnt.TitleFile(s)
12264정성태7/9/202028290오류 유형: 628. docker: Error response from daemon: Conflict. The container name "..." is already in use by container "...".
12261정성태7/9/202019494VS.NET IDE: 148. 윈도우 10에서 .NET Core 응용 프로그램을 리눅스 환경에서 실행하는 2가지 방법 - docker, WSL 2 [5]
12260정성태7/8/202017314.NET Framework: 926. C# - ETW를 이용한 ThreadPool 스레드 감시파일 다운로드1
12259정성태7/8/202016480오류 유형: 627. nvlddmkm.sys의 BAD_POOL_HEADER BSOD 문제 [1]
12258정성태7/8/202020328기타: 77. DataDog APM 간략 소개
12257정성태7/7/202016626.NET Framework: 925. C# - ETW를 이용한 Monitor Enter/Exit 감시파일 다운로드1
12256정성태7/7/202017767.NET Framework: 924. C# - Reflection으로 변경할 수 없는 readonly 정적 필드 [4]
12255정성태7/6/202018543.NET Framework: 923. C# - ETW(Event Tracing for Windows)를 이용한 Finalizer 실행 감시파일 다운로드1
12254정성태7/2/202017056오류 유형: 626. git - REMOTE HOST IDENTIFICATION HAS CHANGED!
12253정성태7/2/202019550.NET Framework: 922. C# - .NET ThreadPool의 Local/Global Queue파일 다운로드1
12252정성태7/2/202021319.NET Framework: 921. C# - I/O 스레드를 사용한 비동기 소켓 서버/클라이언트파일 다운로드2
12251정성태7/1/202020084.NET Framework: 920. C# - 파일의 비동기 처리 유무에 따른 스레드 상황 [1]파일 다운로드2
12250정성태6/30/202022256.NET Framework: 919. C# - 닷넷에서의 진정한 비동기 호출을 가능케 하는 I/O 스레드 사용법 [1]파일 다운로드1
12249정성태6/29/202017767오류 유형: 625. Microsoft SQL Server 2019 RC1 Setup - 설치 제거 시 Warning 26003 오류 발생
12248정성태6/29/202015575오류 유형: 624. SQL 서버 오류 - service-specific error code 17051
12247정성태6/29/202017485.NET Framework: 918. C# - 불린 형 상수를 반환값으로 포함하는 3항 연산자 사용 시 단축 표현 권장(IDE0075) [2]파일 다운로드1
12246정성태6/29/202018654.NET Framework: 917. C# - USB 관련 ETW(Event Tracing for Windows)를 이용한 키보드 입력을 감지하는 방법
12245정성태6/24/202019088.NET Framework: 916. C# - Task.Yield 사용법 (2) [2]파일 다운로드1
12244정성태6/24/202019085.NET Framework: 915. ETW(Event Tracing for Windows)를 이용한 닷넷 프로그램의 내부 이벤트 활용 [1]파일 다운로드1
12243정성태6/23/202015530VS.NET IDE: 147. Visual C++ 프로젝트 - .NET Core EXE를 "Debugger Type"으로 지원하는 기능 추가
12242정성태6/23/202017072오류 유형: 623. AADSTS90072 - User account '...' from identity provider 'live.com' does not exist in tenant 'Microsoft Services'
12241정성태6/23/202020242.NET Framework: 914. C# - Task.Yield 사용법파일 다운로드1
12240정성태6/23/202021786오류 유형: 622. 소켓 바인딩 시 "System.Net.Sockets.SocketException: An attempt was made to access a socket in a way forbidden by its access permissions" 오류 발생
12239정성태6/21/202019870Linux: 30. (윈도우라면 DLL에 속하는) .so 파일이 텍스트로 구성된 사례 [1]
12238정성태6/21/202018204.NET Framework: 913. C# - SharpDX + DXGI를 이용한 윈도우 화면 캡처 라이브러리
12237정성태6/20/202017759.NET Framework: 912. 리눅스 환경의 .NET Core에서 "test".IndexOf("\0")가 0을 반환
... 61  62  63  64  65  66  [67]  68  69  70  71  72  73  74  75  ...