Microsoft MVP성태의 닷넷 이야기
.NET Framework: 357. .NET 4.5의 2GB 힙 한계 극복 [링크 복사], [링크+제목 복사],
조회: 36126
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
 

(시리즈 글이 6개 있습니다.)
.NET Framework: 188. .NET 64비트 응용 프로그램에서 왜 (2GB) OutOfMemoryException 예외가 발생할까?
; https://www.sysnet.pe.kr/2/0/946

.NET Framework: 266. StringBuilder에서의 OutOfMemoryException 오류 원인 분석
; https://www.sysnet.pe.kr/2/0/1171

.NET Framework: 357. .NET 4.5의 2GB 힙 한계 극복
; https://www.sysnet.pe.kr/2/0/1403

.NET Framework: 367. LargeAddressAware 옵션이 적용된 닷넷 32비트 프로세스의 가용 메모리
; https://www.sysnet.pe.kr/2/0/1441

.NET Framework: 640. 닷넷 - 배열 크기의 한계
; https://www.sysnet.pe.kr/2/0/11142

.NET Framework: 2105. LargeAddressAware 옵션이 적용된 닷넷 32비트 프로세스의 가용 메모리 - 두 번째
; https://www.sysnet.pe.kr/2/0/13294




.NET 4.5의 2GB 힙 한계 극복


예전에, 닷넷으로 64비트 응용 프로그램을 만든 경우 여전히 2GB 한계에 걸리는 문제를 설명한 적이 있습니다.

.NET 64비트 응용 프로그램에서 왜 (2GB) OutOfMemoryException 예외가 발생할까?
; https://www.sysnet.pe.kr/2/0/946

한 개의 "GC Heap" 자체가 2GB로 제한되어 있기 때문에 하나의 참조형 객체가 2GB 이상의 메모리를 사용할 수 없다는 제약이 있습니다. 물론, 전체적으로 보면 여러 개의 GC Heap을 생성하기 때문에 64비트 윈도우의 경우 운영체제가 허용하는 한 메모리를 사용할 수 있습니다.

이 제한이 .NET 4.5에서 풀렸습니다.

Large matrices and vectors
; http://www.centerspace.net/blog/nmath/large-matrices-and-vectors/

대신 명시적으로 2GB 이상의 힙 사용이 가능하도록 app.config에 <gcAllowVeryLargeObjects enabled="true" /> 옵션을 추가해야 합니다.

<?xml version="1.0"?>
<configuration>
  <runtime>
    <gcAllowVeryLargeObjects enabled="true" />
  </runtime>
</configuration>

테스트를 해볼까요? ^^ 메모리 할당을 무한정 가능하게 만들면 컴퓨터 반응속도가 너무 느려지므로 다음과 같이 for 문의 최대값을 2GB 한계만 좀 넘도록 조정해 보겠습니다.

using System;
using System.Collections.Generic;
using System.Linq;
using System.Text;

namespace ConsoleApplication1
{
    class Program
    {
        static void Main(string[] args)
        {
            long i = 0;

            HashSet<long> t = new HashSet<long>();

            try
            {
                for (i = 0; i < 47995853 + (47995853 / 2); i++)
                {
                    t.Add(i);
                }
            }
            catch
            {
                Console.WriteLine("OOM: " + i);
            }

            Console.ReadLine();
        }
    }
}

이 프로그램을 .NET 4.0/x64 환경에서 구동하면 OOM 오류가 발생하겠지만, 변경된 app.config의 설정과 함께 .NET 4.5/x64에서 구동하면 정상적으로 HashSet 객체가 2GB를 넘어서 관리힙에 할당됩니다.

아래는 위의 프로그램을 실행한 후의 작업 관리자 메모리 상황입니다.

net45_large_gcheap_1.png

그 외에 ^^ .NET 4.5의 개선 사항을 다음의 글에서 참조하세요.

An Overview of Performance Improvements in .NET 4.5
; https://learn.microsoft.com/en-us/archive/msdn-magazine/2012/april/clr-an-overview-of-performance-improvements-in-net-4-5




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]







[최초 등록일: ]
[최종 수정일: 3/22/2023]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 




[1]  2  3  4  5  6  7  8  9  10  11  12  13  14  15  ...
NoWriterDateCnt.TitleFile(s)
14027정성태10/15/2025489닷넷: 2371. C# - CRC64 (System.IO.Hashing의 약식 버전)파일 다운로드1
14026정성태10/15/2025520닷넷: 2370. 닷넷 지원 정보의 "package-provided" 의미
14025정성태10/14/2025793Linux: 126. eBPF (bpf2go) - tcp_sendmsg 예제
14024정성태10/14/2025829오류 유형: 984. Whisper.net - System.Exception: 'Cannot dispose while processing, please use DisposeAsync instead.'
14023정성태10/12/20251253닷넷: 2369. C# / Whisper 모델 - 동영상의 음성을 인식해 자동으로 SRT 자막 파일을 생성 [1]파일 다운로드1
14022정성태10/10/20252119닷넷: 2368. C# / NAudio - (AI 학습을 위해) 무음 구간을 반영한 오디오 파일 분할파일 다운로드1
14021정성태10/6/20252666닷넷: 2367. C# - Youtube 동영상 다운로드 (YoutubeExplode 패키지) [1]파일 다운로드1
14020정성태10/2/20252302Linux: 125. eBPF - __attribute__((preserve_access_index)) 활용 사례
14019정성태10/1/20252435Linux: 124. eBPF - __sk_buff / sk_buff 구조체
14018정성태9/30/20251799닷넷: 2366. C# - UIAutomationClient를 이용해 시스템 트레이의 아이콘을 열거하는 방법파일 다운로드1
14017정성태9/29/20252262Linux: 123. eBPF (bpf2go) - BPF_PROG_TYPE_SOCKET_FILTER 예제 - SEC("socket")
14016정성태9/28/20252540Linux: 122. eBPF - __attribute__((preserve_access_index)) 사용법
14015정성태9/22/20251982닷넷: 2365. C# - FFMpegCore를 이용한 MP4 동영상으로부터 MP3 음원 추출 예제파일 다운로드1
14014정성태9/17/20251968닷넷: 2364. C# - stun.l.google.com을 사용해 공용 IP 주소와 포트를 알아내는 방법파일 다운로드1
14013정성태9/14/20252611닷넷: 2363. C# - Whisper.NET Library를 이용해 음성을 텍스트로 변환 및 번역하는 예제파일 다운로드1
14012정성태9/9/20252862닷넷: 2362. C# - Windows.Media.Ocr: 윈도우 운영체제에 포함된 OCR(Optical Character Recognition)파일 다운로드1
14011정성태9/7/20253502닷넷: 2361. C# - Linux 환경의 readlink 호출
14010정성태9/1/20253316오류 유형: 983. apt update 시 "The repository 'http://deb.debian.org/debian buster Release' does not have a Release file." 오류
14009정성태8/28/20253777닷넷: 2360. C# 14 - (11) Expression Tree에 선택적 인수와 명명된 인수 허용파일 다운로드1
14008정성태8/26/20254354닷넷: 2359. C# 14 - (10) 복합 대입 연산자의 오버로드 지원파일 다운로드1
14007정성태8/25/20254762닷넷: 2358. C# - 현재 빌드에 적용 중인 컴파일러 버전 확인 방법 (#error version)
14006정성태8/23/20255053Linux: 121. Linux - snap 패키지 관리자로 설치한 소프트웨어의 디렉터리 접근 제한
14005정성태8/21/20254029오류 유형: 982. sudo: unable to load /usr/libexec/sudo/sudoers.so: libssl.so.3: cannot open shared object file: No such file or directory
14004정성태8/21/20254614오류 유형: 981. dotnet 실행 시 No usable version of the libssl was found
14003정성태8/21/20254879닷넷: 2357. C# 14 - (9) 새로운 지시자 추가 (Ignored directives)
[1]  2  3  4  5  6  7  8  9  10  11  12  13  14  15  ...