Microsoft MVP성태의 닷넷 이야기
Linux: 26. .NET Core 응용 프로그램을 위한 메모리 덤프 방법 [링크 복사], [링크+제목 복사]
조회: 600
글쓴 사람
홈페이지
첨부 파일
 

linux - .NET Core 응용 프로그램을 위한 메모리 덤프 방법

리눅스 용 ProcDump가 나온 것은 아실 테고, ^^

microsoft/ProcDump-for-Linux
; https://github.com/Microsoft/ProcDump-for-Linux

Minimum OS:
    Red Hat Enterprise Linux / CentOS 7
    Fedora 26
    Ubuntu 14.04 LTS
gdb >= 7.6.1
zlib (build-time only)


설치 방법은 아래의 링크에서 자세하게 설명하지만,

Ubuntu 18.04 Package Manager - Install .NET Core
; https://docs.microsoft.com/en-us/dotnet/core/install/linux-package-manager-ubuntu-1804

(Ubuntu 18.04의 경우) 어차피 Microsoft Key와 Feed 등록은,

$ wget -q https://packages.microsoft.com/config/ubuntu/18.04/packages-microsoft-prod.deb -O packages-microsoft-prod.deb
$ sudo dpkg -i packages-microsoft-prod.deb

.NET Core SDK를 이미 설치한 경우 함께 등록했을 것이므로 그냥 곧바로 procdump를 설치해도 됩니다.

[설치] 
$ sudo apt-get install procdump

[제거]
$ sudo apt-get purge procdump

아쉬운 점이 있다면, procdump의 제어 옵션이 많지 않아서 (대부분의 경우) 그냥 process id 정도만 지정해 실행 중인 응용 프로그램을 덤프하는 용도로 사용할 수 있다는 점입니다.

$ sudo procdump -p 18362

그 외에 특정 예외가 발생했을 때라든지, 비정상 종료할 때와 같은 옵션이 없으므로 현실적으로 봤을 때 아직 사용처가 그다지 많지는 않습니다.




procdump 말고, .NET 런타임이 제공하는 createdump도 있습니다. 사실 현재는 procdump가 아직 크게 장점이 없으므로 그냥 기본 제공하는 createdump를 쓰는 것이 더 나을 수 있습니다.

$ readlink $(which dotnet) -f
/usr/share/dotnet/dotnet

$ $(find /usr/share/dotnet -name createdump)
createdump [options] pid
-f, --name - dump path and file name. The pid can be placed in the name with %d. The default is '/tmp/coredump.%d'
-n, --normal - create minidump.
-h, --withheap - create minidump with heap (default).
-t, --triage - create triage minidump.
-u, --full - create full core dump.
-d, --diag - enable diagnostic messages.

또는 (SCD 방식으로) publish된 .NET Core 응용 프로그램의 경우 배포된 바이너리에도 createdump를 포함하고 있으므로 그것을 사용해도 됩니다. (기본적으로 실행 권한이 없어 사용하기 전 chmod로 권한 변경을 해야 합니다.)

$ chmod u+x /home/tusr/corecorelin/createdump
$ /home/tusr/corecorelin/createdump

닷넷 응용 프로그램을 분석하려면 (Windows에서도 그랬듯이) full memory dump를 받아야 하므로 createdump에 "-u" 옵션을 주는 것을 잊지 말아야 합니다.

$ sudo $(find /usr/share/dotnet -name createdump) -u 55130




어차피 createdump나 procdump는 리눅스의 gcore 방식을 사용한다고 합니다. 그래서 다음의 글에도 나오지만, gcore로 뜬 덤프로도 분석이 가능합니다.

Analyzing .NET Core memory on Linux with LLDB
; https://codeblog.dotsandbrackets.com/net-core-memory-linux/

(따지고 보면 한 가지이지만) 이 3가지 방식의 문제는, 덤프 파일의 크기입니다. Full 메모리 덤프이기 때문에 해당 프로세스와 연관된 모든 메모리를 덤프하는데 pmap이 알려주는 메모리 크기라고 보시면 됩니다.

$ ps -Af | grep dotnet
root       9873      1  1 13:42 ?        00:00:56 /usr/share/dotnet/dotnet /home/tusr/corecorelin/CoreCoreLin.dll
root      17227 102608  0 15:01 pts/2    00:00:00 grep --color=auto dotnet

$ sudo pmap 9873 | grep total
...[생략]...
 total         22161860K

CoreCoreLin.dll은 비주얼 스튜디오가 생성해 주는 ASP.NET Core 기본 예제를 빌드한 것인데 (비록 압축을 하면 70MB 정도로 줄어들기는 하지만) 거의 22GB에 달하는 덤프 파일이 생성됩니다. (Centos 7에서 테스트하면 7GB 정도의 덤프가 생성됩니다.) ^^; 이 때문에 일부 리눅스 설정에서는,

#ulimit -a

ulimit의 "core file size" 제약이 있는 경우 덤프를 뜨기 전 "unlimited"로 풀어줄 필요가 있습니다.

#ulimit -c unlimited

참고로 procdump의 경우에는 향후 크기가 줄어들 여지가 있는데요,

How to reduce the dump file size ?
; https://github.com/Microsoft/ProcDump-for-Linux/issues/33

현재 새롭게 만들고 있는 core dumper가 구현된다면 그때에나 procdump가 createdump에 비해 쓸만할 수 있을 것입니다.




마지막으로 .NET Core 3 이상의 환경이라면 dotnet-dump 도구를 활용하는 방법도 있습니다.

덤프 수집 및 분석 유틸리티(dotnet-dump)
; https://docs.microsoft.com/ko-kr/dotnet/core/diagnostics/dotnet-dump

설치는 별도로 해야 하지만,

# dotnet tool install -g dotnet-dump

# /home/$USER/.dotnet/tools/dotnet-dump --help
Usage:
  dotnet-dump [options] [command]

Options:
  --version    Display version information

Commands:
  collect                Capture dumps from a process
  analyze     Starts an interactive shell with debugging commands to explore a dump
  ps                     Display a list of dotnet processes to create dump from

편리하게도 "ps" 옵션을 주면 실행 중인 프로세스 중에 ".NET Core 3.0" 이상의 런타임을 사용하는 목록만 나열하기 때문에,

$ sudo dotnet-dump ps
     25604 dotnet     /usr/share/dotnet/dotnet

그에 대해 "collect" 명령어로 덤프를 뜨면 됩니다.

$ sudo dotnet-dump collect --process-id 25604

// 만약 .NET Core 3.0 미만의 런타임을 사용하는 프로세스를 지정하면 오류 발생
$ sudo dotnet-dump collect -p 6154
Writing minidump with heap to /home/tusr/temp/core_20191213_101617
Process 6154 not running compatible .NET Core runtime

그런데, 웬일인지 제가 테스트했을 때는,

$ sudo dotnet-dump collect -p 25604
Writing minidump with heap to /home/tusr/temp/core_20191213_094748
Core dump generation FAILED 0x80004005

저렇게 0x80004005 오류가 발생하는 데, Ubuntu 18.04와 Centos 7 모두에서 덤프가 안 됩니다. 실행이 안 되므로 더 이상 실습을 할 수가 없군요. ^^; 일단 문서 상으로 보면,

The dotnet-dump CLI global tool is way to collect and analyze Windows and Linux dumps all without any native debugger involved like lldb on Linux. This is important on platforms like Alpine Linux or Linux ARM32/ARM64 where a fully working lldb isn't available. The dotnet-dump tool will allow you to run SOS commands to analyze crashes and the GC, but it isn't a native debugger so things like displaying the native stack frames isn't supported.

Currently not supported on macOS.


용량이 꽤나 줄어드는 것은 맞겠지만 그에 따라 "native stack frames" 등의 정보가 지원되지 않는다는 걸로 봐서는 웬만한 환경에서는 그냥 createdump로 뜨는 것이 더 나을 수 있습니다. 디버깅 해보신 분들은 알겠지만, 때로는 GC Heap 이외의 정보도 필요하기 때문에 기왕 덤프 뜨는 거 모든 정보를 갖는 파일 하나가... 제 생각에는 더 좋겠다는 생각입니다.




정리해 보면, 현재 시점 기준으로는 createdump가 가장 나은 듯합니다. 다른 덤프 방법들은 상황에 따라 잘 활용하시면 될 것 같고. ^^




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]

[연관 글]





[최초 등록일: ]
[최종 수정일: 12/13/2019 ]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer@outlook.com

비밀번호

댓글 쓴 사람
 



2020-02-13 10시12분
정성태

1  2  3  [4]  5  6  7  8  9  10  11  12  13  14  15  ...
NoWriterDateCnt.TitleFile(s)
12129정성태1/26/2020517.NET Framework: 882. C# - 키움 Open API+ 사용 시 Registry 등록 없이 KHOpenAPI.ocx 사용하는 방법
12128정성태1/26/2020189오류 유형: 591. The code execution cannot proceed because mfc100.dll was not found. Reinstalling the program may fix this problem.
12127정성태1/28/2020257.NET Framework: 881. C# DLL에서 제공하는 Win32 export 함수의 내부 동작 방식(VT Fix up Table)파일 다운로드1
12126정성태1/25/2020227.NET Framework: 880. C# - PE 파일로부터 IMAGE_COR20_HEADER 및 VTableFixups 테이블 분석파일 다운로드1
12125정성태1/24/2020134VS.NET IDE: 141. IDE0019 - Use pattern matching
12124정성태1/24/2020394VS.NET IDE: 140. IDE1006 - Naming rule violation: These words must begin with upper case characters: ...
12123정성태1/23/2020204웹: 39. Google Analytics - gtag 함수를 이용해 페이지 URL 수정 및 별도의 이벤트 생성 방법
12122정성태1/22/2020223.NET Framework: 879. C/C++의 UNREFERENCED_PARAMETER 매크로를 C#에서 우회하는 방법(IDE0060 - Remove unused parameter '...')파일 다운로드1
12121정성태1/24/2020167VS.NET IDE: 139. Visual Studio - Error List: "Could not find schema information for the ..."파일 다운로드1
12120정성태1/20/2020258.NET Framework: 878. C# DLL에서 Win32 C/C++처럼 dllexport 함수를 제공하는 방법 - 네 번째 이야기(IL 코드로 직접 구현)파일 다운로드1
12119정성태1/17/2020282디버깅 기술: 160. Windbg 확장 DLL 만들기 (3) - C#으로 만드는 방법
12118정성태1/17/2020269개발 환경 구성: 466. C# DLL에서 Win32 C/C++처럼 dllexport 함수를 제공하는 방법 - 세 번째 이야기
12117정성태1/15/2020239디버깅 기술: 159. C# - 디버깅 중인 프로세스를 강제로 다른 디버거에서 연결하는 방법파일 다운로드1
12116정성태1/15/2020209디버깅 기술: 158. Visual Studio로 디버깅 시 sos.dll 확장 명령어를 (비롯한 windbg의 다양한 기능을) 수행하는 방법
12115정성태1/14/2020165디버깅 기술: 157. C# - PEB.ProcessHeap을 이용해 디버깅 중인지 확인하는 방법파일 다운로드1
12114정성태1/13/2020363디버깅 기술: 156. C# - PDB 파일로부터 심벌(Symbol) 및 타입(Type) 정보 열거 [1]파일 다운로드3
12113정성태1/12/2020317오류 유형: 590. Visual C++ 빌드 오류 - fatal error LNK1104: cannot open file 'atls.lib'
12112정성태1/12/2020141오류 유형: 589. PowerShell - 원격 Invoke-Command 실행 시 "WinRM cannot complete the operation" 오류 발생
12111정성태3/23/2020518디버깅 기술: 155. C# - KernelMemoryIO 드라이버를 이용해 실행 프로그램을 숨기는 방법(DKOM: Direct Kernel Object Modification) [1]
12110정성태1/12/2020254디버깅 기술: 154. Patch Guard로 인해 블루 스크린(BSOD)가 발생하는 사례파일 다운로드1
12109정성태1/10/2020170오류 유형: 588. Driver 프로젝트 빌드 오류 - Inf2Cat error -2: "Inf2Cat, signability test failed."
12108정성태1/10/2020139오류 유형: 587. Kernel Driver 시작 시 127(The specified procedure could not be found.) 오류 메시지 발생
12107정성태1/10/2020258.NET Framework: 877. C# - 프로세스의 모든 핸들을 열람 - 두 번째 이야기
12106정성태1/8/2020293VC++: 136. C++ - OSR Driver Loader와 같은 Legacy 커널 드라이버 설치 프로그램 제작 [1]
12105정성태1/8/2020207디버깅 기술: 153. C# - PEB를 조작해 로드된 DLL을 숨기는 방법
12104정성태1/9/2020417DDK: 9. 커널 메모리를 읽고 쓰는 NT Legacy driver와 C# 클라이언트 프로그램 [2]
1  2  3  [4]  5  6  7  8  9  10  11  12  13  14  15  ...