Microsoft MVP성태의 닷넷 이야기
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
(연관된 글이 2개 있습니다.)

C# - 비동기 소켓 사용 시 메모리 해제가 finalizer 단계에서 발생하는 사례

아래와 같은 질문이 있어서,

Socket 관련 Leak (OverlappedAsyncResult, OverlappedData) 관련 문의
; https://www.sysnet.pe.kr/3/1/5826

한번 메모리 누수가 발생할 것 같은 사례를 정리해 봤습니다. 우선, 서버를 다음과 같이 간단하게 만드는데,

using System.Net;
using System.Net.Sockets;

internal class Program
{
    static void Main(string[] args)
    {
        Socket sock = new Socket(AddressFamily.InterNetwork, SocketType.Stream, ProtocolType.Tcp);
        sock.Bind(new IPEndPoint(IPAddress.Any, 65300));
        sock.Listen(5);

        while (true)
        {
            Socket client = sock.Accept();
            Task.Run(() =>
            {
                Thread.Sleep(16);
                client.Close();
            });
        }
    }
}

보는 바와 같이 하는 일 없이 그냥 16ms 이후에 연결을 바로 종료해버립니다. 그리고 클라이언트는 이렇게 만들어 볼 텐데요,

using System;
using System.Net;
using System.Net.Sockets;
using System.Threading;

internal class Program
{
    static void Main(string[] args)
    {
        string ipAddress = "127.0.0.1";
        int port = 65300;

        while (true)
        {
            Socket socket = new Socket(AddressFamily.InterNetwork, SocketType.Stream, ProtocolType.Tcp);
            socket.Connect(new IPEndPoint(IPAddress.Parse(ipAddress), port));

            byte[] buffer = new byte[4096];
            socket.BeginReceive(buffer, 0, buffer.Length, SocketFlags.None, new AsyncCallback(ReceiveCallback), socket);

            Thread.Sleep(16);
        }
    }

    private static void ReceiveCallback(IAsyncResult ar)
    {
        Socket socket = (Socket)ar.AsyncState;

        socket.EndReceive(ar);
    }
}

역시 하는 일은, 접속한 다음 서버 측이 데이터를 보내주기를 기다리는 것이 전부입니다. 그리고 예상할 수 있듯이, 위와 같이 하면 당분간 메모리 leak과 같은 현상이 발생합니다. 비록 BeginReceive/EndReceive 호출 쌍은 맞췄지만, 서버가 연결을 끊으면서 EndReceive가 0을 반환한 후 클라이언트 측이 Socket.Close를 하지 않아 소켓 자원이 해제되지 않으면서 비동기를 위한 버퍼가 살아 있게 된 것입니다.

실제로 이때 해당 프로세스의 메모리 덤프를 떠서 windbg로 살펴보면

0:000> !dumpheap
...[생략]...
00007ffad3b74d78     1504        96256 System.AsyncCallback
00007ffa89ff98a0     1504        96256 System.Net.Sockets.Socket+CacheSet
00007ffa89ff9dc8      565       103960 System.Net.Sockets.OverlappedAsyncResult
00007ffa89ff7d60     2068       115808 System.Net.IPAddress
00007ffad3b369b8     1460       163520 System.Threading.OverlappedData
00007ffad3b5ea78     2069       182072 System.Threading.ExecutionContext
00007ffad3b606f8     3673       208168 System.String
00007ffa89ff3010     1504       216576 System.Net.Sockets.Socket
000001bdabfec320     4553      1293860      Free
00007ffad3b657a0     3013      6281664 System.Byte[]

보는 바와 같이 OverlappedAsyncResult, OverlappedData 등의 개체와 함께 System.Byte[]가 꽤나 많이 쌓인 것을 볼 수 있습니다. 그럼 System.Byte[]의 경우 일부 데이터를 조사해 볼까요?

0:000> !gcroot 0000024441e09aa8 
Finalizer Queue:
    0000024441e09870
    -> 0000024441e09870 System.Net.Sockets.Socket
    -> 0000024441e09a80 System.Net.SocketAddress
    -> 0000024441e09aa8 System.Byte[]

0:000> !gcroot 0000018551a214b0 
HandleTable:
    000001854fa11e00 (async pinned handle)
    -> 0000018551685d08 System.Threading.OverlappedData
    -> 0000018551a214b0 System.Byte[]

Socket 개체 또는 pinned handle에 의해 잡혀 있어 GC가 되지 못하고 있습니다. 이와 마찬가지로, OverlappedCache 인스턴스 역시 비슷한 양상을 보입니다.

0:000> !gcroot 0000018551927108
HandleTable:
    000001854fa12348 (async pinned handle)
    -> 0000018551505378 System.Threading.OverlappedData
    -> 0000018551926ff8 System.Net.Sockets.OverlappedAsyncResult
    -> 0000018551927108 System.Net.Sockets.OverlappedCache

하지만, 이것이 직접적으로 메모리 누수까지는 이어지지 않습니다. 왜냐하면 Socket은 finalizer를 구현하고 있기 때문에 결국 GC가 반복되면서 비동기 수행 후 닫지 않았던 소켓은 자원이 해제되므로 그와 연관된 비관리 자원까지 모두 해제되기 때문입니다.

실제로, 위의 프로그램을 실행해 놓고 보면 메모리가 일정 수준 증가하다가 주춤하면서 유지되는 경향을 보입니다. 제 경우에는 위의 프로그램에서 대략 180,632K 정도 증가한 후에는 그 수준에서 약간의 변동폭을 보이기만 했습니다.

그나저나... finalizer 때문에 ^^; 완벽한(?) 메모리 누수가 나도록 만들 수가 없습니다.

그래도 쓰지도 않는 소켓이 열려 있는 것은 좋지 않으므로 꼭 Close 시키는 것이 좋습니다. "Socket 관련 Leak (OverlappedAsyncResult, OverlappedData) 관련 문의" 글의 소스 코드를 보면 Socket.Close가 되지 않을 코드 수행 경로가 있기 때문에 저 현상이 발생할 수도 있습니다.




그 외, "Socket 관련 Leak (OverlappedAsyncResult, OverlappedData) 관련 문의" 질문에 첨부한 소스 코드를 보고 언급할 만한 것이 있다면 ReceiveTimeOut의 설정입니다.

사실 Begin/End... 비동기에서 ReceiveTimeOut은 아무런 역할도 하지 않습니다. 예전에도 이와 비슷한 질문을 하신 분이 있는데,

소켓 비동기 ReceiveTimeOut 구현 
; https://www.sysnet.pe.kr/3/0/5282

비동기의 경우 별도로 (Timer 등을 활용해) timeout 설정을 해야 합니다.

마지막으로, Socket.Connecetd 속성으로 IsClientConnected 여부를 판정하고 있는데, 이것도 올바른 방법이 아닙니다. 예전에 이와 관련해 쓴 글에서 소개했으니 더 이상의 설명은 생략합니다. ^^

TCP 소켓 연결의 해제를 알 수 있는 방법
; https://www.sysnet.pe.kr/2/0/1825




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]

[연관 글]






[최초 등록일: ]
[최종 수정일: 3/15/2024]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 




1  2  3  4  5  6  [7]  8  9  10  11  12  13  14  15  ...
NoWriterDateCnt.TitleFile(s)
13458정성태11/26/20232353닷넷: 2170. .NET Core/5+ 기반의 COM Server를 tlb 파일을 생성하는 방법(tlbexp)
13457정성태11/25/20232293VS.NET IDE: 187. Visual Studio - 16.9 버전부터 추가된 "Display inline type hints" 옵션
13456정성태11/25/20232596닷넷: 2169. C# - OpenAI를 사용해 PDF 데이터를 대상으로 OpenAI 챗봇 작성 [1]파일 다운로드1
13455정성태11/25/20232488닷넷: 2168. C# - Azure.AI.OpenAI 패키지로 OpenAI 사용파일 다운로드1
13454정성태11/23/20232838닷넷: 2167. C# - Qdrant Vector DB를 이용한 Embedding 벡터 값 보관/조회 (Azure OpenAI) [1]파일 다운로드1
13453정성태11/23/20232338오류 유형: 879. docker desktop 설치 시 "Invalid JSON string. (Exception from HRESULT: 0x83750007)"
13452정성태11/22/20232440닷넷: 2166. C# - Azure OpenAI API를 이용해 사용자가 제공하는 정보를 대상으로 검색하는 방법파일 다운로드1
13451정성태11/21/20232570닷넷: 2165. C# - Azure OpenAI API를 이용해 ChatGPT처럼 동작하는 콘솔 응용 프로그램 제작파일 다운로드1
13450정성태11/21/20232379닷넷: 2164. C# - Octokit을 이용한 GitHub Issue 검색파일 다운로드1
13449정성태11/21/20232458개발 환경 구성: 688. Azure OpenAI 서비스 신청 방법
13448정성태11/20/20232695닷넷: 2163. .NET 8 - Dynamic PGO를 결합한 성능 향상파일 다운로드1
13447정성태11/16/20232578닷넷: 2162. ASP.NET Core 웹 사이트의 SSL 설정을 코드로 하는 방법
13446정성태11/16/20232530닷넷: 2161. .NET Conf 2023 - Day 1 Blazor 개요 정리
13445정성태11/15/20232848Linux: 62. 리눅스/WSL에서 CA 인증서를 저장하는 방법
13444정성태11/15/20232605닷넷: 2160. C# 12 - Experimental 특성 지원
13443정성태11/14/20232629개발 환경 구성: 687. OpenSSL로 생성한 사용자 인증서를 ASP.NET Core 웹 사이트에 적용하는 방법
13442정성태11/13/20232450개발 환경 구성: 686. 비주얼 스튜디오로 실행한 ASP.NET Core 사이트를 WSL 2 인스턴스에서 https로 접속하는 방법
13441정성태11/12/20232766닷넷: 2159. C# - ASP.NET Core 프로젝트에서 서버 Socket을 직접 생성하는 방법파일 다운로드1
13440정성태11/11/20232437Windows: 253. 소켓 Listen 시 방화벽의 Public/Private 제어 기능이 비활성화된 경우
13439정성태11/10/20232967닷넷: 2158. C# - 소켓 포트를 미리 시스템에 등록/예약해 사용하는 방법(Port Exclusion Ranges)파일 다운로드1
13438정성태11/9/20232543닷넷: 2157. C# - WinRT 기능을 이용해 윈도우에서 실행 중인 Media App 제어
13437정성태11/8/20232752닷넷: 2156. .NET 7 이상의 콘솔 프로그램을 (dockerfile 없이) 로컬 docker에 배포하는 방법
13436정성태11/7/20232978닷넷: 2155. C# - .NET 8 런타임부터 (Reflection 없이) 특성을 이용해 public이 아닌 멤버 호출 가능
13435정성태11/6/20232905닷넷: 2154. C# - 네이티브 자원을 포함한 관리 개체(예: 스레드)의 GC 정리
13434정성태11/1/20232684스크립트: 62. 파이썬 - class의 정적 함수를 동적으로 교체
13433정성태11/1/20232397스크립트: 61. 파이썬 - 함수 오버로딩 미지원
1  2  3  4  5  6  [7]  8  9  10  11  12  13  14  15  ...