Microsoft MVP성태의 닷넷 이야기
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
(연관된 글이 2개 있습니다.)

C# - 비동기 소켓 사용 시 메모리 해제가 finalizer 단계에서 발생하는 사례

아래와 같은 질문이 있어서,

Socket 관련 Leak (OverlappedAsyncResult, OverlappedData) 관련 문의
; https://www.sysnet.pe.kr/3/1/5826

한번 메모리 누수가 발생할 것 같은 사례를 정리해 봤습니다. 우선, 서버를 다음과 같이 간단하게 만드는데,

using System.Net;
using System.Net.Sockets;

internal class Program
{
    static void Main(string[] args)
    {
        Socket sock = new Socket(AddressFamily.InterNetwork, SocketType.Stream, ProtocolType.Tcp);
        sock.Bind(new IPEndPoint(IPAddress.Any, 65300));
        sock.Listen(5);

        while (true)
        {
            Socket client = sock.Accept();
            Task.Run(() =>
            {
                Thread.Sleep(16);
                client.Close();
            });
        }
    }
}

보는 바와 같이 하는 일 없이 그냥 16ms 이후에 연결을 바로 종료해버립니다. 그리고 클라이언트는 이렇게 만들어 볼 텐데요,

using System;
using System.Net;
using System.Net.Sockets;
using System.Threading;

internal class Program
{
    static void Main(string[] args)
    {
        string ipAddress = "127.0.0.1";
        int port = 65300;

        while (true)
        {
            Socket socket = new Socket(AddressFamily.InterNetwork, SocketType.Stream, ProtocolType.Tcp);
            socket.Connect(new IPEndPoint(IPAddress.Parse(ipAddress), port));

            byte[] buffer = new byte[4096];
            socket.BeginReceive(buffer, 0, buffer.Length, SocketFlags.None, new AsyncCallback(ReceiveCallback), socket);

            Thread.Sleep(16);
        }
    }

    private static void ReceiveCallback(IAsyncResult ar)
    {
        Socket socket = (Socket)ar.AsyncState;

        socket.EndReceive(ar);
    }
}

역시 하는 일은, 접속한 다음 서버 측이 데이터를 보내주기를 기다리는 것이 전부입니다. 그리고 예상할 수 있듯이, 위와 같이 하면 당분간 메모리 leak과 같은 현상이 발생합니다. 비록 BeginReceive/EndReceive 호출 쌍은 맞췄지만, 서버가 연결을 끊으면서 EndReceive가 0을 반환한 후 클라이언트 측이 Socket.Close를 하지 않아 소켓 자원이 해제되지 않으면서 비동기를 위한 버퍼가 살아 있게 된 것입니다.

실제로 이때 해당 프로세스의 메모리 덤프를 떠서 windbg로 살펴보면

0:000> !dumpheap
...[생략]...
00007ffad3b74d78     1504        96256 System.AsyncCallback
00007ffa89ff98a0     1504        96256 System.Net.Sockets.Socket+CacheSet
00007ffa89ff9dc8      565       103960 System.Net.Sockets.OverlappedAsyncResult
00007ffa89ff7d60     2068       115808 System.Net.IPAddress
00007ffad3b369b8     1460       163520 System.Threading.OverlappedData
00007ffad3b5ea78     2069       182072 System.Threading.ExecutionContext
00007ffad3b606f8     3673       208168 System.String
00007ffa89ff3010     1504       216576 System.Net.Sockets.Socket
000001bdabfec320     4553      1293860      Free
00007ffad3b657a0     3013      6281664 System.Byte[]

보는 바와 같이 OverlappedAsyncResult, OverlappedData 등의 개체와 함께 System.Byte[]가 꽤나 많이 쌓인 것을 볼 수 있습니다. 그럼 System.Byte[]의 경우 일부 데이터를 조사해 볼까요?

0:000> !gcroot 0000024441e09aa8 
Finalizer Queue:
    0000024441e09870
    -> 0000024441e09870 System.Net.Sockets.Socket
    -> 0000024441e09a80 System.Net.SocketAddress
    -> 0000024441e09aa8 System.Byte[]

0:000> !gcroot 0000018551a214b0 
HandleTable:
    000001854fa11e00 (async pinned handle)
    -> 0000018551685d08 System.Threading.OverlappedData
    -> 0000018551a214b0 System.Byte[]

Socket 개체 또는 pinned handle에 의해 잡혀 있어 GC가 되지 못하고 있습니다. 이와 마찬가지로, OverlappedCache 인스턴스 역시 비슷한 양상을 보입니다.

0:000> !gcroot 0000018551927108
HandleTable:
    000001854fa12348 (async pinned handle)
    -> 0000018551505378 System.Threading.OverlappedData
    -> 0000018551926ff8 System.Net.Sockets.OverlappedAsyncResult
    -> 0000018551927108 System.Net.Sockets.OverlappedCache

하지만, 이것이 직접적으로 메모리 누수까지는 이어지지 않습니다. 왜냐하면 Socket은 finalizer를 구현하고 있기 때문에 결국 GC가 반복되면서 비동기 수행 후 닫지 않았던 소켓은 자원이 해제되므로 그와 연관된 비관리 자원까지 모두 해제되기 때문입니다.

실제로, 위의 프로그램을 실행해 놓고 보면 메모리가 일정 수준 증가하다가 주춤하면서 유지되는 경향을 보입니다. 제 경우에는 위의 프로그램에서 대략 180,632K 정도 증가한 후에는 그 수준에서 약간의 변동폭을 보이기만 했습니다.

그나저나... finalizer 때문에 ^^; 완벽한(?) 메모리 누수가 나도록 만들 수가 없습니다.

그래도 쓰지도 않는 소켓이 열려 있는 것은 좋지 않으므로 꼭 Close 시키는 것이 좋습니다. "Socket 관련 Leak (OverlappedAsyncResult, OverlappedData) 관련 문의" 글의 소스 코드를 보면 Socket.Close가 되지 않을 코드 수행 경로가 있기 때문에 저 현상이 발생할 수도 있습니다.




그 외, "Socket 관련 Leak (OverlappedAsyncResult, OverlappedData) 관련 문의" 질문에 첨부한 소스 코드를 보고 언급할 만한 것이 있다면 ReceiveTimeOut의 설정입니다.

사실 Begin/End... 비동기에서 ReceiveTimeOut은 아무런 역할도 하지 않습니다. 예전에도 이와 비슷한 질문을 하신 분이 있는데,

소켓 비동기 ReceiveTimeOut 구현 
; https://www.sysnet.pe.kr/3/0/5282

비동기의 경우 별도로 (Timer 등을 활용해) timeout 설정을 해야 합니다.

마지막으로, Socket.Connecetd 속성으로 IsClientConnected 여부를 판정하고 있는데, 이것도 올바른 방법이 아닙니다. 예전에 이와 관련해 쓴 글에서 소개했으니 더 이상의 설명은 생략합니다. ^^

TCP 소켓 연결의 해제를 알 수 있는 방법
; https://www.sysnet.pe.kr/2/0/1825




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]

[연관 글]






[최초 등록일: ]
[최종 수정일: 3/15/2024]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 




1  2  3  [4]  5  6  7  8  9  10  11  12  13  14  15  ...
NoWriterDateCnt.TitleFile(s)
13843정성태12/13/20244381오류 유형: 938. Docker container 내에서 빌드 시 error MSB3021: Unable to copy file "..." to "...". Access to the path '...' is denied.
13842정성태12/12/20244523디버깅 기술: 205. Windbg - KPCR, KPRCB
13841정성태12/11/20244855오류 유형: 937. error MSB4044: The "ValidateValidArchitecture" task was not given a value for the required parameter "RemoteTarget"
13840정성태12/11/20244429오류 유형: 936. msbuild - Your project file doesn't list 'win' as a "RuntimeIdentifier"
13839정성태12/11/20244858오류 유형: 936. msbuild - error CS1617: Invalid option '12.0' for /langversion. Use '/langversion:?' to list supported values.
13838정성태12/4/20244595오류 유형: 935. Windbg - Breakpoint 0's offset expression evaluation failed.
13837정성태12/3/20245055디버깅 기술: 204. Windbg - 윈도우 핸들 테이블 (3) - Windows 10 이상인 경우
13836정성태12/3/20244623디버깅 기술: 203. Windbg - x64 가상 주소를 물리 주소로 변환 (페이지 크기가 2MB인 경우)
13835정성태12/2/20245055오류 유형: 934. Azure - rm: cannot remove '...': Directory not empty
13834정성태11/29/20245285Windows: 275. C# - CUI 애플리케이션과 Console 윈도우 (Windows 10 미만의 Classic Console 모드인 경우) [1]파일 다운로드1
13833정성태11/29/20244965개발 환경 구성: 737. Azure Web App에서 Scale-out으로 늘어난 리눅스 인스턴스에 SSH 접속하는 방법
13832정성태11/27/20244906Windows: 274. Windows 7부터 도입한 conhost.exe
13831정성태11/27/20244381Linux: 111. eBPF - BPF_MAP_TYPE_PERF_EVENT_ARRAY, BPF_MAP_TYPE_RINGBUF에 대한 다양한 용어들
13830정성태11/25/20245184개발 환경 구성: 736. 파이썬 웹 앱을 Azure App Service에 배포하기
13829정성태11/25/20245156스크립트: 67. 파이썬 - Windows 버전에서 함께 설치되는 py.exe
13828정성태11/25/20244439개발 환경 구성: 735. Azure - 압축 파일을 이용한 web app 배포 시 디렉터리 구분이 안 되는 문제파일 다운로드1
13827정성태11/25/20245091Windows: 273. Windows 환경의 파일 압축 방법 (tar, Compress-Archive)
13826정성태11/21/20245320닷넷: 2313. C# - (비밀번호 등의) Console로부터 입력받을 때 문자열 출력 숨기기(echo 끄기)파일 다운로드1
13825정성태11/21/20245652Linux: 110. eBPF / bpf2go - BPF_RINGBUF_OUTPUT / BPF_MAP_TYPE_RINGBUF 사용법
13824정성태11/20/20244750Linux: 109. eBPF / bpf2go - BPF_PERF_OUTPUT / BPF_MAP_TYPE_PERF_EVENT_ARRAY 사용법
13823정성태11/20/20245288개발 환경 구성: 734. Ubuntu에 docker, kubernetes (k3s) 설치
13822정성태11/20/20245151개발 환경 구성: 733. Windbg - VirtualBox VM의 커널 디버거 연결 시 COM 포트가 없는 경우
13821정성태11/18/20245079Linux: 108. Linux와 Windows의 프로세스/스레드 ID 관리 방식
13820정성태11/18/20245249VS.NET IDE: 195. Visual C++ - C# 프로젝트처럼 CopyToOutputDirectory 항목을 추가하는 방법
13819정성태11/15/20244477Linux: 107. eBPF - libbpf CO-RE의 CONFIG_DEBUG_INFO_BTF 빌드 여부에 대한 의존성
13818정성태11/15/20245267Windows: 272. Windows 11 24H2 - sudo 추가
1  2  3  [4]  5  6  7  8  9  10  11  12  13  14  15  ...