Microsoft MVP성태의 닷넷 이야기
닷넷: 2255. C# 배열을 Numpy ndarray 배열과 상호 변환 [링크 복사], [링크+제목 복사],
조회: 9554
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
 

(시리즈 글이 4개 있습니다.)
스크립트: 11. 파이썬(Python) 윈도우 개발 환경
; https://www.sysnet.pe.kr/2/0/1343

닷넷: 2245. C# - IronPython을 이용한 파이썬 소스코드 연동
; https://www.sysnet.pe.kr/2/0/13603

닷넷: 2246. C# - Python.NET을 이용한 파이썬 소스코드 연동
; https://www.sysnet.pe.kr/2/0/13605

닷넷: 2255. C# 배열을 Numpy ndarray 배열과 상호 변환
; https://www.sysnet.pe.kr/2/0/13615




C# 배열을 Numpy ndarray 배열과 상호 변환

Python.NET과 C#을 연동해 tensorflow를 사용하는 경우 Numpy ndarray 배열로의 변환이 자주 발생하게 됩니다.

예를 들기 위해, MNIST의 테스트 이미지 데이터를 1개 반환하는 파이썬 코드를 아래와 같이 만들면,

# ndarray_test.py

import setuptools.dist
from tensorflow.keras.datasets import mnist
(_, _), (test_images, _) = mnist.load_data()

test_images = test_images.reshape((10000, 28 * 28)) # 이미지를 28 * 28 크기로 변경
test_images = test_images.astype('float32') / 255

def get_test_image():
    return test_images[0]

C#에서 get_test_image 함수를 호출해 이미지 데이터를 가져올 수 있습니다.

PyObject test_image = pyFile.InvokeMethod("get_test_image");

// ndarray를 C# 배열로 가져오는 코드
// Span<float> arr = ToSpan<float>(test_image);

PyObject 형식으로 가져왔으니 이제 C# 배열 형식으로 바꿔야 할 텐데요, 당연히 최대한 성능 손실을 없애기 위해서는 복사가 아닌 포인터 그대로 활용하는 것이 좋습니다. 그럼, 이럴 때 Span을 활용하는 것이 좋겠죠? ^^

static unsafe Span<T> ToSpan<T>(PyObject test_image)
{
    PyBuffer buffer = test_image.GetBuffer();
    nint ptr = buffer.Buffer;
    int bufferSize = (int)(buffer.Length / buffer.ItemSize);
    return new Span<T>(ptr.ToPointer(), bufferSize);
}

이를 활용해 Numpy 배열을 Span으로 바꿀 수 있고, 만약 배열이 필요하다면 (아쉽게도 메모리 복사가 발생하지만) Span으로부터 언제든 ToArray()를 호출해 C# 배열로 자유롭게 활용할 수 있습니다.

PyObject test_image = pyFile.InvokeMethod("get_test_image");
Span<float> arr = ToSpan<float>(test_image);

foreach (var value in arr)
{
    Console.Write($"{value},"); // 784(28 x 28)개의 요소 나열
}

float[] floatArrays = arr.ToArray(); // 필요하다면 배열로 변환

반대로, C# 배열을 numpy 배열로 만드는 것은 Python의 Numpy 모듈을 이용해 다음과 같이 변환할 수 있습니다.

float[] floatArrays = ...;

dynamic npModule = Py.Import("numpy");
dynamic npArray = npModule.array(floatArrays);




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]







[최초 등록일: ]
[최종 수정일: 5/3/2024]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 




... 31  32  33  34  35  36  [37]  38  39  40  41  42  43  44  45  ...
NoWriterDateCnt.TitleFile(s)
13011정성태3/21/202215930오류 유형: 802. 윈도우 운영체제에서 웹캠 카메라 인식이 안 되는 경우
13010정성태3/21/202212670오류 유형: 801. Oracle.ManagedDataAccess.Core - GetTypes 호출 시 "Could not load file or assembly 'System.DirectoryServices.Protocols...'" 오류
13009정성태3/20/202215259개발 환경 구성: 640. docker - ibmcom/db2 컨테이너 실행
13008정성태3/19/202214847VS.NET IDE: 176. 비주얼 스튜디오 - 솔루션 탐색기에서 프로젝트를 선택할 때 csproj 파일이 열리지 않도록 만드는 방법
13007정성태3/18/202213254.NET Framework: 1181. C# - Oracle.ManagedDataAccess의 Pool 및 그것의 연결 개체 수를 알아내는 방법파일 다운로드1
13006정성태3/17/202215656.NET Framework: 1180. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 remuxing.c 예제 포팅
13005정성태3/17/202213918오류 유형: 800. C# - System.InvalidOperationException: Late bound operations cannot be performed on fields with types for which Type.ContainsGenericParameters is true.
13004정성태3/16/202213447디버깅 기술: 182. windbg - 닷넷 메모리 덤프에서 AppDomain에 걸친 정적(static) 필드 값을 조사하는 방법
13003정성태3/15/202213772.NET Framework: 1179. C# - (.NET Framework를 위한) Oracle.ManagedDataAccess 패키지의 성능 카운터 설정 방법
13002정성태3/14/202215385.NET Framework: 1178. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 http_multiclient.c 예제 포팅
13001정성태3/13/202215964.NET Framework: 1177. C# - 닷넷에서 허용하는 메서드의 매개변수와 호출 인자의 최대 수
13000정성태3/12/202214915.NET Framework: 1176. C# - Oracle.ManagedDataAccess.Core의 성능 카운터 설정 방법
12999정성태3/10/202214759.NET Framework: 1175. Visual Studio - 프로젝트 또는 솔루션의 Clean 작업 시 응용 프로그램에서 생성한 파일을 함께 삭제파일 다운로드1
12998정성태3/10/202213171.NET Framework: 1174. C# - ELEMENT_TYPE_FNPTR 유형의 사용 예
12997정성태3/10/202222262오류 유형: 799. Oracle.ManagedDataAccess - "ORA-01882: timezone region not found" 오류가 발생하는 이유
12996정성태3/9/202223736VS.NET IDE: 175. Visual Studio - 인텔리센스에서 오버로드 메서드를 키보드로 선택하는 방법
12995정성태3/8/202216088.NET Framework: 1173. .NET에서 Producer/Consumer를 구현한 BlockingCollection<T>
12994정성태3/8/202215166오류 유형: 798. WinDbg - Failed to load data access module, 0x80004002
12993정성태3/4/202214870.NET Framework: 1172. .NET에서 Producer/Consumer를 구현하는 기초 인터페이스 - IProducerConsumerCollection<T>
12992정성태3/3/202217813.NET Framework: 1171. C# - BouncyCastle을 사용한 암호화/복호화 예제파일 다운로드1
12991정성태3/2/202215627.NET Framework: 1170. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 transcode_aac.c 예제 포팅
12990정성태3/2/202215729오류 유형: 797. msbuild - The BaseOutputPath/OutputPath property is not set for project '[...].vcxproj'
12989정성태3/2/202213747오류 유형: 796. mstest.exe - System.IO.FileNotFoundException: Could not load file or assembly 'Microsoft.VisualStudio.QualityTools.Tips.WebLoadTest.Tip
12988정성태3/2/202212158오류 유형: 795. CI 환경에서 Docker build 시 csproj의 Link 파일에 대한 빌드 오류
12987정성태3/1/202214433.NET Framework: 1169. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 demuxing_decoding.c 예제 포팅
12986정성태2/28/202216403.NET Framework: 1168. C# -IIncrementalGenerator를 적용한 Version 2 Source Generator 실습 [1]
... 31  32  33  34  35  36  [37]  38  39  40  41  42  43  44  45  ...