Microsoft MVP성태의 닷넷 이야기
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
(연관된 글이 2개 있습니다.)

C# - 비동기 소켓 사용 시 메모리 해제가 finalizer 단계에서 발생하는 사례

아래와 같은 질문이 있어서,

Socket 관련 Leak (OverlappedAsyncResult, OverlappedData) 관련 문의
; https://www.sysnet.pe.kr/3/1/5826

한번 메모리 누수가 발생할 것 같은 사례를 정리해 봤습니다. 우선, 서버를 다음과 같이 간단하게 만드는데,

using System.Net;
using System.Net.Sockets;

internal class Program
{
    static void Main(string[] args)
    {
        Socket sock = new Socket(AddressFamily.InterNetwork, SocketType.Stream, ProtocolType.Tcp);
        sock.Bind(new IPEndPoint(IPAddress.Any, 65300));
        sock.Listen(5);

        while (true)
        {
            Socket client = sock.Accept();
            Task.Run(() =>
            {
                Thread.Sleep(16);
                client.Close();
            });
        }
    }
}

보는 바와 같이 하는 일 없이 그냥 16ms 이후에 연결을 바로 종료해버립니다. 그리고 클라이언트는 이렇게 만들어 볼 텐데요,

using System;
using System.Net;
using System.Net.Sockets;
using System.Threading;

internal class Program
{
    static void Main(string[] args)
    {
        string ipAddress = "127.0.0.1";
        int port = 65300;

        while (true)
        {
            Socket socket = new Socket(AddressFamily.InterNetwork, SocketType.Stream, ProtocolType.Tcp);
            socket.Connect(new IPEndPoint(IPAddress.Parse(ipAddress), port));

            byte[] buffer = new byte[4096];
            socket.BeginReceive(buffer, 0, buffer.Length, SocketFlags.None, new AsyncCallback(ReceiveCallback), socket);

            Thread.Sleep(16);
        }
    }

    private static void ReceiveCallback(IAsyncResult ar)
    {
        Socket socket = (Socket)ar.AsyncState;

        socket.EndReceive(ar);
    }
}

역시 하는 일은, 접속한 다음 서버 측이 데이터를 보내주기를 기다리는 것이 전부입니다. 그리고 예상할 수 있듯이, 위와 같이 하면 당분간 메모리 leak과 같은 현상이 발생합니다. 비록 BeginReceive/EndReceive 호출 쌍은 맞췄지만, 서버가 연결을 끊으면서 EndReceive가 0을 반환한 후 클라이언트 측이 Socket.Close를 하지 않아 소켓 자원이 해제되지 않으면서 비동기를 위한 버퍼가 살아 있게 된 것입니다.

실제로 이때 해당 프로세스의 메모리 덤프를 떠서 windbg로 살펴보면

0:000> !dumpheap
...[생략]...
00007ffad3b74d78     1504        96256 System.AsyncCallback
00007ffa89ff98a0     1504        96256 System.Net.Sockets.Socket+CacheSet
00007ffa89ff9dc8      565       103960 System.Net.Sockets.OverlappedAsyncResult
00007ffa89ff7d60     2068       115808 System.Net.IPAddress
00007ffad3b369b8     1460       163520 System.Threading.OverlappedData
00007ffad3b5ea78     2069       182072 System.Threading.ExecutionContext
00007ffad3b606f8     3673       208168 System.String
00007ffa89ff3010     1504       216576 System.Net.Sockets.Socket
000001bdabfec320     4553      1293860      Free
00007ffad3b657a0     3013      6281664 System.Byte[]

보는 바와 같이 OverlappedAsyncResult, OverlappedData 등의 개체와 함께 System.Byte[]가 꽤나 많이 쌓인 것을 볼 수 있습니다. 그럼 System.Byte[]의 경우 일부 데이터를 조사해 볼까요?

0:000> !gcroot 0000024441e09aa8 
Finalizer Queue:
    0000024441e09870
    -> 0000024441e09870 System.Net.Sockets.Socket
    -> 0000024441e09a80 System.Net.SocketAddress
    -> 0000024441e09aa8 System.Byte[]

0:000> !gcroot 0000018551a214b0 
HandleTable:
    000001854fa11e00 (async pinned handle)
    -> 0000018551685d08 System.Threading.OverlappedData
    -> 0000018551a214b0 System.Byte[]

Socket 개체 또는 pinned handle에 의해 잡혀 있어 GC가 되지 못하고 있습니다. 이와 마찬가지로, OverlappedCache 인스턴스 역시 비슷한 양상을 보입니다.

0:000> !gcroot 0000018551927108
HandleTable:
    000001854fa12348 (async pinned handle)
    -> 0000018551505378 System.Threading.OverlappedData
    -> 0000018551926ff8 System.Net.Sockets.OverlappedAsyncResult
    -> 0000018551927108 System.Net.Sockets.OverlappedCache

하지만, 이것이 직접적으로 메모리 누수까지는 이어지지 않습니다. 왜냐하면 Socket은 finalizer를 구현하고 있기 때문에 결국 GC가 반복되면서 비동기 수행 후 닫지 않았던 소켓은 자원이 해제되므로 그와 연관된 비관리 자원까지 모두 해제되기 때문입니다.

실제로, 위의 프로그램을 실행해 놓고 보면 메모리가 일정 수준 증가하다가 주춤하면서 유지되는 경향을 보입니다. 제 경우에는 위의 프로그램에서 대략 180,632K 정도 증가한 후에는 그 수준에서 약간의 변동폭을 보이기만 했습니다.

그나저나... finalizer 때문에 ^^; 완벽한(?) 메모리 누수가 나도록 만들 수가 없습니다.

그래도 쓰지도 않는 소켓이 열려 있는 것은 좋지 않으므로 꼭 Close 시키는 것이 좋습니다. "Socket 관련 Leak (OverlappedAsyncResult, OverlappedData) 관련 문의" 글의 소스 코드를 보면 Socket.Close가 되지 않을 코드 수행 경로가 있기 때문에 저 현상이 발생할 수도 있습니다.




그 외, "Socket 관련 Leak (OverlappedAsyncResult, OverlappedData) 관련 문의" 질문에 첨부한 소스 코드를 보고 언급할 만한 것이 있다면 ReceiveTimeOut의 설정입니다.

사실 Begin/End... 비동기에서 ReceiveTimeOut은 아무런 역할도 하지 않습니다. 예전에도 이와 비슷한 질문을 하신 분이 있는데,

소켓 비동기 ReceiveTimeOut 구현 
; https://www.sysnet.pe.kr/3/0/5282

비동기의 경우 별도로 (Timer 등을 활용해) timeout 설정을 해야 합니다.

마지막으로, Socket.Connecetd 속성으로 IsClientConnected 여부를 판정하고 있는데, 이것도 올바른 방법이 아닙니다. 예전에 이와 관련해 쓴 글에서 소개했으니 더 이상의 설명은 생략합니다. ^^

TCP 소켓 연결의 해제를 알 수 있는 방법
; https://www.sysnet.pe.kr/2/0/1825




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]

[연관 글]






[최초 등록일: ]
[최종 수정일: 3/15/2024]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 




... 61  62  63  64  65  66  67  68  69  70  71  72  [73]  74  75  ...
NoWriterDateCnt.TitleFile(s)
12112정성태1/12/202016838오류 유형: 589. PowerShell - 원격 Invoke-Command 실행 시 "WinRM cannot complete the operation" 오류 발생
12111정성태1/12/202020641디버깅 기술: 155. C# - KernelMemoryIO 드라이버를 이용해 실행 프로그램을 숨기는 방법(DKOM: Direct Kernel Object Modification) [16]파일 다운로드1
12110정성태1/11/202020041디버깅 기술: 154. Patch Guard로 인해 블루 스크린(BSOD)가 발생하는 사례 [5]파일 다운로드1
12109정성태1/10/202016731오류 유형: 588. Driver 프로젝트 빌드 오류 - Inf2Cat error -2: "Inf2Cat, signability test failed."
12108정성태1/10/202017586오류 유형: 587. Kernel Driver 시작 시 127(The specified procedure could not be found.) 오류 메시지 발생
12107정성태1/10/202018766.NET Framework: 877. C# - 프로세스의 모든 핸들을 열람 - 두 번째 이야기
12106정성태1/8/202019762VC++: 136. C++ - OSR Driver Loader와 같은 Legacy 커널 드라이버 설치 프로그램 제작 [1]
12105정성태1/8/202018234디버깅 기술: 153. C# - PEB를 조작해 로드된 DLL을 숨기는 방법
12104정성태1/7/202019502DDK: 9. 커널 메모리를 읽고 쓰는 NT Legacy driver와 C# 클라이언트 프로그램 [4]
12103정성태1/7/202022633DDK: 8. Visual Studio 2019 + WDK Legacy Driver 제작- Hello World 예제 [1]파일 다운로드2
12102정성태1/6/202018907디버깅 기술: 152. User 권한(Ring 3)의 프로그램에서 _ETHREAD 주소(및 커널 메모리를 읽을 수 있다면 _EPROCESS 주소) 구하는 방법
12101정성태1/5/202019291.NET Framework: 876. C# - PEB(Process Environment Block)를 통해 로드된 모듈 목록 열람
12100정성태1/3/202016724.NET Framework: 875. .NET 3.5 이하에서 IntPtr.Add 사용
12099정성태1/3/202019615디버깅 기술: 151. Windows 10 - Process Explorer로 확인한 Handle 정보를 windbg에서 조회 [1]
12098정성태1/2/202019335.NET Framework: 874. C# - 커널 구조체의 Offset 값을 하드 코딩하지 않고 사용하는 방법 [3]
12097정성태1/2/202017452디버깅 기술: 150. windbg - Wow64, x86, x64에서의 커널 구조체(예: TEB) 구조체 확인
12096정성태12/30/201919993디버깅 기술: 149. C# - DbgEng.dll을 이용한 간단한 디버거 제작 [1]
12095정성태12/27/201921747VC++: 135. C++ - string_view의 동작 방식
12094정성태12/26/201919500.NET Framework: 873. C# - 코드를 통해 PDB 심벌 파일 다운로드 방법
12093정성태12/26/201919132.NET Framework: 872. C# - 로딩된 Native DLL의 export 함수 목록 출력파일 다운로드1
12092정성태12/25/201917768디버깅 기술: 148. cdb.exe를 이용해 (ntdll.dll 등에 정의된) 커널 구조체 출력하는 방법
12091정성태12/25/201920184디버깅 기술: 147. pdb 파일을 다운로드하기 위한 symchk.exe 실행에 필요한 최소 파일 [1]
12090정성태12/24/201920220.NET Framework: 871. .NET AnyCPU로 빌드된 PE 헤더의 로딩 전/후 차이점 [1]파일 다운로드1
12089정성태12/23/201919129디버깅 기술: 146. gflags와 _CrtIsMemoryBlock을 이용한 Heap 메모리 손상 여부 체크
12088정성태12/23/201918151Linux: 28. Linux - 윈도우의 "Run as different user" 기능을 shell에서 실행하는 방법
12087정성태12/21/201918575디버깅 기술: 145. windbg/sos - Dictionary의 entries 배열 내용을 모두 덤프하는 방법 (do_hashtable.py) [1]
... 61  62  63  64  65  66  67  68  69  70  71  72  [73]  74  75  ...