Microsoft MVP성태의 닷넷 이야기
.NET Framework: 357. .NET 4.5의 2GB 힙 한계 극복 [링크 복사], [링크+제목 복사],
조회: 36903
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
 

(시리즈 글이 6개 있습니다.)
.NET Framework: 188. .NET 64비트 응용 프로그램에서 왜 (2GB) OutOfMemoryException 예외가 발생할까?
; https://www.sysnet.pe.kr/2/0/946

.NET Framework: 266. StringBuilder에서의 OutOfMemoryException 오류 원인 분석
; https://www.sysnet.pe.kr/2/0/1171

.NET Framework: 357. .NET 4.5의 2GB 힙 한계 극복
; https://www.sysnet.pe.kr/2/0/1403

.NET Framework: 367. LargeAddressAware 옵션이 적용된 닷넷 32비트 프로세스의 가용 메모리
; https://www.sysnet.pe.kr/2/0/1441

.NET Framework: 640. 닷넷 - 배열 크기의 한계
; https://www.sysnet.pe.kr/2/0/11142

.NET Framework: 2105. LargeAddressAware 옵션이 적용된 닷넷 32비트 프로세스의 가용 메모리 - 두 번째
; https://www.sysnet.pe.kr/2/0/13294




.NET 4.5의 2GB 힙 한계 극복


예전에, 닷넷으로 64비트 응용 프로그램을 만든 경우 여전히 2GB 한계에 걸리는 문제를 설명한 적이 있습니다.

.NET 64비트 응용 프로그램에서 왜 (2GB) OutOfMemoryException 예외가 발생할까?
; https://www.sysnet.pe.kr/2/0/946

한 개의 "GC Heap" 자체가 2GB로 제한되어 있기 때문에 하나의 참조형 객체가 2GB 이상의 메모리를 사용할 수 없다는 제약이 있습니다. 물론, 전체적으로 보면 여러 개의 GC Heap을 생성하기 때문에 64비트 윈도우의 경우 운영체제가 허용하는 한 메모리를 사용할 수 있습니다.

이 제한이 .NET 4.5에서 풀렸습니다.

Large matrices and vectors
; http://www.centerspace.net/blog/nmath/large-matrices-and-vectors/

대신 명시적으로 2GB 이상의 힙 사용이 가능하도록 app.config에 <gcAllowVeryLargeObjects enabled="true" /> 옵션을 추가해야 합니다.

<?xml version="1.0"?>
<configuration>
  <runtime>
    <gcAllowVeryLargeObjects enabled="true" />
  </runtime>
</configuration>

테스트를 해볼까요? ^^ 메모리 할당을 무한정 가능하게 만들면 컴퓨터 반응속도가 너무 느려지므로 다음과 같이 for 문의 최대값을 2GB 한계만 좀 넘도록 조정해 보겠습니다.

using System;
using System.Collections.Generic;
using System.Linq;
using System.Text;

namespace ConsoleApplication1
{
    class Program
    {
        static void Main(string[] args)
        {
            long i = 0;

            HashSet<long> t = new HashSet<long>();

            try
            {
                for (i = 0; i < 47995853 + (47995853 / 2); i++)
                {
                    t.Add(i);
                }
            }
            catch
            {
                Console.WriteLine("OOM: " + i);
            }

            Console.ReadLine();
        }
    }
}

이 프로그램을 .NET 4.0/x64 환경에서 구동하면 OOM 오류가 발생하겠지만, 변경된 app.config의 설정과 함께 .NET 4.5/x64에서 구동하면 정상적으로 HashSet 객체가 2GB를 넘어서 관리힙에 할당됩니다.

아래는 위의 프로그램을 실행한 후의 작업 관리자 메모리 상황입니다.

net45_large_gcheap_1.png

그 외에 ^^ .NET 4.5의 개선 사항을 다음의 글에서 참조하세요.

An Overview of Performance Improvements in .NET 4.5
; https://learn.microsoft.com/en-us/archive/msdn-magazine/2012/april/clr-an-overview-of-performance-improvements-in-net-4-5




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]







[최초 등록일: ]
[최종 수정일: 3/22/2023]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 




[1]  2  3  4  5  6  7  8  9  10  11  12  13  14  15  ...
NoWriterDateCnt.TitleFile(s)
14036정성태10/25/20251119디버깅 기술: 224. Visual Studio - 디버깅 시 다른 함수의 소스 코드를 보여주는 사례 (Enable COMDAT Folding 옵션)파일 다운로드1
14035정성태10/24/20251009C/C++: 189. Visual C++ - 디버그 코드에서 빌드 옵션 조정으로 최적화 코드로의 전환파일 다운로드1
14034정성태10/22/20251103닷넷: 2375. C# - dynamic 사용 시 internal 멤버에 대한 RuntimeBinderException 예외가 발생하는 문제파일 다운로드1
14033정성태10/22/20251585닷넷: 2374. C# - dynamic과 "Explicit Interface Implementation"의 문제파일 다운로드1
14032정성태10/21/20251201닷넷: 2373. C# - dynamic 예약어 사용 시 런타임에 "Microsoft.CSharp.RuntimeBinder.RuntimeBinderException" 예외가 발생하는 경우파일 다운로드1
14031정성태10/20/20251122Linux: 128. "USER ..." 설정이 된 Docker 컨테이너의 호스트 측 볼륨 권한 (2)
14030정성태10/20/20251361Linux: 127. "USER ..." 설정이 된 Docker 컨테이너의 호스트 측 볼륨 권한
14029정성태10/17/20251938닷넷: 2372. C# - ssh-ed25519 유형의 Public Key 파일 해석파일 다운로드1
14028정성태10/17/20252021오류 유형: 985. openssh - ssh_host_ed25519_key 파일을 로드하지 못하는 문제
14027정성태10/15/20252044닷넷: 2371. C# - CRC64 (System.IO.Hashing의 약식 버전)파일 다운로드1
14026정성태10/15/20252499닷넷: 2370. 닷넷 지원 정보의 "package-provided" 의미
14025정성태10/14/20252435Linux: 126. eBPF (bpf2go) - tcp_sendmsg 예제
14024정성태10/14/20252942오류 유형: 984. Whisper.net - System.Exception: 'Cannot dispose while processing, please use DisposeAsync instead.'
14023정성태10/12/20252989닷넷: 2369. C# / Whisper 모델 - 동영상의 음성을 인식해 자동으로 SRT 자막 파일을 생성 [1]파일 다운로드1
14022정성태10/10/20253316닷넷: 2368. C# / NAudio - (AI 학습을 위해) 무음 구간을 반영한 오디오 파일 분할파일 다운로드1
14021정성태10/6/20253698닷넷: 2367. C# - Youtube 동영상 다운로드 (YoutubeExplode 패키지) [1]파일 다운로드1
14020정성태10/2/20253102Linux: 125. eBPF - __attribute__((preserve_access_index)) 활용 사례
14019정성태10/1/20253392Linux: 124. eBPF - __sk_buff / sk_buff 구조체
14018정성태9/30/20252480닷넷: 2366. C# - UIAutomationClient를 이용해 시스템 트레이의 아이콘을 열거하는 방법파일 다운로드1
14017정성태9/29/20252926Linux: 123. eBPF (bpf2go) - BPF_PROG_TYPE_SOCKET_FILTER 예제 - SEC("socket")
14016정성태9/28/20253344Linux: 122. eBPF - __attribute__((preserve_access_index)) 사용법
14015정성태9/22/20252622닷넷: 2365. C# - FFMpegCore를 이용한 MP4 동영상으로부터 MP3 음원 추출 예제파일 다운로드1
14014정성태9/17/20252608닷넷: 2364. C# - stun.l.google.com을 사용해 공용 IP 주소와 포트를 알아내는 방법파일 다운로드1
14013정성태9/14/20253746닷넷: 2363. C# - Whisper.NET Library를 이용해 음성을 텍스트로 변환 및 번역하는 예제파일 다운로드1
14012정성태9/9/20253909닷넷: 2362. C# - Windows.Media.Ocr: 윈도우 운영체제에 포함된 OCR(Optical Character Recognition)파일 다운로드1
[1]  2  3  4  5  6  7  8  9  10  11  12  13  14  15  ...