Microsoft MVP성태의 닷넷 이야기
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
 
(연관된 글이 1개 있습니다.)

Commit 메모리가 낮은 상황에서도 메모리 부족(Out-of-memory) 예외 발생

사실, 이번 글은 다음 글에 대한 또 다른 버전입니다. ^^

작업 관리자에서의 "Commit size"가 가리키는 메모리의 의미
; https://www.sysnet.pe.kr/2/0/1850

응용 프로그램 실행 중에, 작업 관리자에서 확인한 Working Set, Private Bytes 등의 수치는 물론이고 Commit size 조차도 충분히 여유가 있는데도 불구하고 OOM(Out-of-Memory) 예외(OutOfMemoryException)가 발생할 수 있습니다. (각각의 메모리에 대한 의미는 "작업 관리자에서의 "Commit size"가 가리키는 메모리의 의미" 글을 참고하세요.)

쉬운 예로, 32비트 응용 프로그램에서 스레드를 생성해 보면 됩니다.

using System.Collections.Generic;
using System.Threading;

class Program
{
    static void Main(string[] args)
    {
        List<Thread> list = new List<Thread>();

        for (int i = 0; i < 4500; i++)
        {
            list.Add(new Thread(threadFunc));
            list[i].Start();
        }
    }

    private static void threadFunc()
    {
        Thread.Sleep(1000 * 120);
    }
}

위의 프로그램을 실행하면 OOM 예외가 발생하고, 이때의 메모리 상황을 작업 관리자로 확인해 보면 다음 그림과 유사하게 나옵니다.

virtual_mem_oom_1.png

보는 바와 같이,

Workig set: 132,584K
Memory (private): 118,120K
Commit size: 267,856K

2GB/4GB 근처에도 가지 않았지만 OOM 예외가 발생합니다. 왜냐하면, '가상 주소 공간' 예약을 2GB/4GB를 넘도록 요구했기 때문입니다.

다행히, 64비트 시대로 오면서 가용한 가상 주소 공간이 8TB가 되어 이런 식의 예외가 발생하는 경우는 많이 없어졌지만 아직도 32비트 응용 프로그램을 만드는 분들이라면 알아두시면 도움이 되실 것입니다. ^^




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]

[연관 글]






[최초 등록일: ]
[최종 수정일: 11/17/2016]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 



2022-10-04 02시50분
[taoist] 안녕하세요 위와 유사한 문제로 문제해결 중인데요. 위에서 말씀하신 것처럼 commit size는 굉장히 낮음에도 불구하고 OOM이 발생하고 있습니다. '가상 주소 공간' 예약을 많이 하는 것인지 어떻게 확인 할 수 있을까요?
불필요한 메모리 누수가 있을것 같아서 다른 글에서 알려주신 가상주소 공간을 늘려주는 방식은 따로 고려하지 않았습니다.
[guest]
2022-10-04 06시34분
아래의 글을 참고하세요.

Windows - (commit이 아닌) reserved 메모리 사용량 확인 방법
; https://www.sysnet.pe.kr/2/0/13133
정성태

... [61]  62  63  64  65  66  67  68  69  70  71  72  73  74  75  ...
NoWriterDateCnt.TitleFile(s)
12099정성태1/3/202011357디버깅 기술: 151. Windows 10 - Process Explorer로 확인한 Handle 정보를 windbg에서 조회 [1]
12098정성태1/2/202010967.NET Framework: 874. C# - 커널 구조체의 Offset 값을 하드 코딩하지 않고 사용하는 방법 [3]
12097정성태1/2/20209517디버깅 기술: 150. windbg - Wow64, x86, x64에서의 커널 구조체(예: TEB) 구조체 확인
12096정성태12/30/201911534디버깅 기술: 149. C# - DbgEng.dll을 이용한 간단한 디버거 제작 [1]
12095정성태12/27/201912861VC++: 135. C++ - string_view의 동작 방식
12094정성태12/26/201911042.NET Framework: 873. C# - 코드를 통해 PDB 심벌 파일 다운로드 방법
12093정성태12/26/201911085.NET Framework: 872. C# - 로딩된 Native DLL의 export 함수 목록 출력파일 다운로드1
12092정성태12/25/201910498디버깅 기술: 148. cdb.exe를 이용해 (ntdll.dll 등에 정의된) 커널 구조체 출력하는 방법
12091정성태12/25/201912015디버깅 기술: 147. pdb 파일을 다운로드하기 위한 symchk.exe 실행에 필요한 최소 파일 [1]
12090정성태12/24/201910616.NET Framework: 871. .NET AnyCPU로 빌드된 PE 헤더의 로딩 전/후 차이점 [1]파일 다운로드1
12089정성태12/23/201911374디버깅 기술: 146. gflags와 _CrtIsMemoryBlock을 이용한 Heap 메모리 손상 여부 체크
12088정성태12/23/201910335Linux: 28. Linux - 윈도우의 "Run as different user" 기능을 shell에서 실행하는 방법
12087정성태12/21/201910817디버깅 기술: 145. windbg/sos - Dictionary의 entries 배열 내용을 모두 덤프하는 방법 (do_hashtable.py) [1]
12086정성태12/20/201912847디버깅 기술: 144. windbg - Marshal.FreeHGlobal에서 발생한 덤프 분석 사례
12085정성태12/20/201910541오류 유형: 586. iisreset - The data is invalid. (2147942413, 8007000d) 오류 발생 - 두 번째 이야기 [1]
12084정성태12/19/201911204디버깅 기술: 143. windbg/sos - Hashtable의 buckets 배열 내용을 모두 덤프하는 방법 (do_hashtable.py) [1]
12083정성태12/17/201912477Linux: 27. linux - lldb를 이용한 .NET Core 응용 프로그램의 메모리 덤프 분석 방법 [2]
12082정성태12/17/201912280오류 유형: 585. lsof: WARNING: can't stat() fuse.gvfsd-fuse file system
12081정성태12/16/201914015개발 환경 구성: 465. 로컬 PC에서 개발 중인 ASP.NET Core 웹 응용 프로그램을 다른 PC에서도 접근하는 방법 [5]
12080정성태12/16/201911938.NET Framework: 870. C# - 프로세스의 모든 핸들을 열람
12079정성태12/13/201913141오류 유형: 584. 원격 데스크톱(rdp) 환경에서 다중 또는 고용량 파일 복사 시 "Unspecified error" 오류 발생
12078정성태12/13/201913124Linux: 26. .NET Core 응용 프로그램을 위한 메모리 덤프 방법 [3]
12077정성태12/13/201912636Linux: 25. 자주 실행할 명령어 또는 초기 환경을 "~/.bashrc" 파일에 등록
12076정성태12/12/201910841디버깅 기술: 142. Linux - lldb 환경에서 sos 확장 명령어를 이용한 닷넷 프로세스 디버깅 - 배포 방법에 따른 차이
12075정성태12/11/201911684디버깅 기술: 141. Linux - lldb 환경에서 sos 확장 명령어를 이용한 닷넷 프로세스 디버깅
12074정성태12/10/201911319디버깅 기술: 140. windbg/Visual Studio - 값이 변경된 경우를 위한 정지점(BP) 설정(Data Breakpoint)
... [61]  62  63  64  65  66  67  68  69  70  71  72  73  74  75  ...