Microsoft MVP성태의 닷넷 이야기
.NET Framework: 982. C# - HttpClient에서의 ephemeral port 재사용 [링크 복사], [링크+제목 복사],
조회: 19472
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
(연관된 글이 2개 있습니다.)
(시리즈 글이 9개 있습니다.)
개발 환경 구성: 92. 윈도우 서버 환경에서, 최대 생성 가능한 소켓(socket) 연결 수는 얼마일까?
; https://www.sysnet.pe.kr/2/0/964

Windows: 175. 윈도우 환경에서 클라이언트 소켓의 최대 접속 수
; https://www.sysnet.pe.kr/2/0/12350

Windows: 178. 윈도우 환경에서 클라이언트 소켓의 최대 접속 수 (2) - SO_REUSEADDR
; https://www.sysnet.pe.kr/2/0/12432

Windows: 179. 윈도우 환경에서 클라이언트 소켓의 최대 접속 수 (3) - SO_PORT_SCALABILITY
; https://www.sysnet.pe.kr/2/0/12433

Windows: 181. 윈도우 환경에서 클라이언트 소켓의 최대 접속 수 (4) - ReuseUnicastPort를 이용한 포트 고갈 문제 해결
; https://www.sysnet.pe.kr/2/0/12435

.NET Framework: 981. C# - HttpWebRequest, WebClient와 ephemeral port 재사용
; https://www.sysnet.pe.kr/2/0/12448

.NET Framework: 982. C# - HttpClient에서의 ephemeral port 재사용
; https://www.sysnet.pe.kr/2/0/12449

.NET Framework: 983. C# - TIME_WAIT과 ephemeral port 재사용
; https://www.sysnet.pe.kr/2/0/12450

Linux: 35. C# - 리눅스 환경에서 클라이언트 소켓의 ephemeral port 재사용
; https://www.sysnet.pe.kr/2/0/12459




C# - HttpClient에서의 ephemeral port 재사용

이 글의 테스트는 .NET Framework 4.8 + Windows 10에서 진행했고, 결과는 환경마다 다를 수 있습니다.

DynamicPortRangeStartPort       : 1024
DynamicPortRangeNumberOfPorts   : 977
AutoReusePortRangeStartPort     : 15000
AutoReusePortRangeNumberOfPorts : 1000

지난 글에서,

C# - HttpWebRequest, WebClient와 ephemeral port 재사용
; https://www.sysnet.pe.kr/2/0/12448

다룬 코드를 HttpClient로 바꿔보면 어떻게 될까요? 역시 서버 코드는 그대로 두고 클라이언트만 교체해,

using System;
using System.Collections.Concurrent;
using System.Diagnostics;
using System.Net;
using System.Net.Http;
using System.Threading;
using System.Threading.Tasks;

namespace ConsoleApp2
{
    class Program
    {
        static void Main(string[] args)
        {
            string ipAddr = args[0];
            int port = int.Parse(args[1]);
            int numberOf = int.Parse(args[2]);

            Console.WriteLine(ThreadPool.SetMaxThreads(1100, 1100));
            Console.WriteLine(ThreadPool.SetMinThreads(1000, 1000));

            ServicePointManager.ReusePort = true;

            ConcurrentQueue<Task> clients1 = new ConcurrentQueue<Task>();

            Uri uri = new Uri($"http://{ipAddr}:{port}");
            int exceptionCount = 0;
            try
            {
                for (int i = 0; i < numberOf; i++)
                {
                    try
                    {
                        HttpClient wc = new HttpClient();
                        Task task = wc.GetAsync(uri);
                        clients1.Enqueue(task);
                    }
                    catch (Exception e)
                    {
                        exceptionCount++;
                        Console.WriteLine(e.ToString());
                    }
                }
            }
            catch (Exception e)
            {
                Console.WriteLine(e.ToString());
            }

            while (true)
            {
                Console.WriteLine($"{clients1.Count}, {exceptionCount}, Pid == {Process.GetCurrentProcess().Id}, ServicePointManager.ReusePort = {ServicePointManager.ReusePort}");
                Thread.Sleep(5000);
            }
        }
    }
}

실행하면 다음과 같은 결과가 나옵니다.

// 서버 측 포트 17000, 17001 Listen

D:\temp> ConsoleApp1
# of 17000: 0, 17001: 0
# of 17000: 0, 17001: 0
# of 17000: 68, 17001: 0
# of 17000: 641, 17001: 242
# of 17000: 641, 17001: 242
# of 17000: 641, 17001: 242

// #1 클라이언트 측 - 17000 포트로 1001개 접속 시도
// ConsoleApp2.exe localhost 17000 1001

C:\WINDOWS\system32> netstat -ano | findstr 18476
  TCP    127.0.0.1:1036         127.0.0.1:17000        ESTABLISHED     18476
  TCP    127.0.0.1:1037         127.0.0.1:17000        ESTABLISHED     18476
  TCP    127.0.0.1:1044         127.0.0.1:17000        ESTABLISHED     18476
...[생략]...
  TCP    127.0.0.1:1966         127.0.0.1:17000        ESTABLISHED     18476
  TCP    127.0.0.1:1973         127.0.0.1:17000        ESTABLISHED     18476
  TCP    127.0.0.1:1999         127.0.0.1:17000        ESTABLISHED     18476

// #2 클라이언트 측 - 17001 포트로 1001개 접속 시도
// ConsoleApp2.exe localhost 17001 1001

C:\WINDOWS\system32> netstat -ano | findstr 2708
  TCP    127.0.0.1:1024         127.0.0.1:17001        ESTABLISHED     2708
  TCP    127.0.0.1:1025         127.0.0.1:17001        ESTABLISHED     2708
  TCP    127.0.0.1:1026         127.0.0.1:17001        ESTABLISHED     2708
...[생략]...
  TCP    127.0.0.1:1996         127.0.0.1:17001        ESTABLISHED     2708
  TCP    127.0.0.1:1997         127.0.0.1:17001        ESTABLISHED     2708
  TCP    127.0.0.1:1998         127.0.0.1:17001        ESTABLISHED     2708
  TCP    127.0.0.1:2000         127.0.0.1:17001        ESTABLISHED     2708

사용한 포트가 DynamicPortRangeStartPort/DynamicPortRangeNumberOfPorts 범위이므로, HttpClient는 (ServicePointManager.ReusePort 설정에 상관없이) AutoReuse에 대한 배려가 없습니다. 아마도 소켓 자원에 대한 풀링을 제공하는 탓에,

You're using HttpClient wrong and it is destabilizing your software
; https://aspnetmonsters.com/2016/08/2016-08-27-httpclientwrong/

거기까지는 고려하지 않은 듯합니다. 그렇다고는 해도, 어쨌든 만약 Reverse Proxy 등의 응용 프로그램을 만든다면 HttpClient가 좋은 선택은 아닙니다.




그런데 왠지, .NET Core 환경에서는 HttpClient의 저런 동작이 문제가 될 것만 같습니다. 예전에도 언급했지만,

ServicePointManager.DefaultConnectionLimit와 HttpClient의 관계
; https://www.sysnet.pe.kr/2/0/12023

.NET Framework과는 달리 .NET Core에서는 HttpWebRequest, WebClient는 결국 내부적으로 HttpClient를 생성하기 때문인데, 그렇다면 .NET Core에서는 AutoReuse를 위해 Socket 클래스를 직접 다뤄야 하는 걸까요?

이게 좀 재미있는데요, .NET 5 환경에서 HttpWebRequest를 사용해 위의 코드를 다시 테스트해보면,

using System;
using System.Collections.Concurrent;
using System.Diagnostics;
using System.Net;
using System.Threading;
using System.Threading.Tasks;

namespace ConsoleApp3
{
    class Program
    {
        static void Main(string[] args)
        {
            string ipAddr = args[0];
            int port = int.Parse(args[1]);
            int numberOf = int.Parse(args[2]);

            ThreadPool.SetMaxThreads(1100, 1100);
            ThreadPool.SetMinThreads(1000, 1000);

            ConcurrentQueue<HttpWebRequest> clients1 = new ConcurrentQueue<HttpWebRequest>();

            Uri uri = new Uri($"http://{ipAddr}:{port}");
            int exceptionCount = 0;

            for (int i = 0; i < numberOf; i++)
            {
                Task.Factory.StartNew(() =>
                {
                   var request = (HttpWebRequest)WebRequest.Create(uri);
                   clients1.Enqueue(request);

                   try
                   {
                       request.GetResponse();
                   }
                   catch
                   {
                       Interlocked.Increment(ref exceptionCount);
                   }
                });
            }

            while (true)
            {
                Console.WriteLine("Pid == " + Process.GetCurrentProcess().Id);
                Console.ReadLine();
            }
        }
    }
}

이번엔 .NET Framework의 HttpWebRequest와 동일하게 AutoReuse 영역의 포트를 사용합니다. 아마도 HttpClientHandler가 다른 구현체를 사용하고 있는 것이 아닌가... 예상합니다. (혹시 이에 대해 아시는 분은 덧글 부탁드립니다. ^^)

(첨부 파일은 이 글의 예제 프로젝트를 포함합니다.)




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]

[연관 글]






[최초 등록일: ]
[최종 수정일: 12/16/2020]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 



2020-12-12 04시26분
[ㅇㅇ] 각 운영체제와 버전마다 다른 구현을 사용하는 것으로 압니다
코어 2.1 이상과 닷넷 5는 SocketsHttpHandler(내부적으로 닷넷 Socket 사용)
닷넷 프레임워크는 HttpWebRequest를 사용하는 걸로 알고 있습니다.
코어 2.0 이하는 윈도우는 WinHttp 나머지는 libcurl이구요
[guest]
2020-12-12 04시30분
[ㅇㅇ] 추가로 최신버전에서는 HttpWebRequest가 HttpClient를 사용하는 것 같습니다...
[guest]

... 121  122  123  124  125  126  127  128  129  130  131  [132]  133  134  135  ...
NoWriterDateCnt.TitleFile(s)
1755정성태9/22/201434275오류 유형: 241. Unity Web Player를 설치해도 여전히 설치하라는 화면이 나오는 경우 [4]
1754정성태9/22/201424604VC++: 80. 내 컴퓨터에서 C++ AMP 코드가 실행이 될까요? [1]
1753정성태9/22/201420603오류 유형: 240. Lync로 세미나 참여 시 소리만 들리지 않는 경우 [1]
1752정성태9/21/201441067Windows: 100. 윈도우 8 - RDP 연결을 이용해 VNC처럼 사용자 로그온 화면을 공유하는 방법 [5]
1751정성태9/20/201438932.NET Framework: 464. 프로세스 간 통신 시 소켓 필요 없이 간단하게 Pipe를 열어 통신하는 방법 [1]파일 다운로드1
1750정성태9/20/201423828.NET Framework: 463. PInvoke 호출을 이용한 비동기 파일 작업파일 다운로드1
1749정성태9/20/201423730.NET Framework: 462. 커널 객체를 위한 null DACL 생성 방법파일 다운로드1
1748정성태9/19/201425379개발 환경 구성: 238. [Synergy] 여러 컴퓨터에서 키보드, 마우스 공유
1747정성태9/19/201428422오류 유형: 239. psexec 실행 오류 - The system cannot find the file specified.
1746정성태9/18/201426094.NET Framework: 461. .NET EXE 파일을 닷넷 프레임워크 버전에 상관없이 실행할 수 있을까요? - 두 번째 이야기 [6]파일 다운로드1
1745정성태9/17/201423034개발 환경 구성: 237. 리눅스 Integration Services 버전 업그레이드 하는 방법 [1]
1744정성태9/17/201431049.NET Framework: 460. GetTickCount / GetTickCount64와 0x7FFE0000 주솟값 [4]파일 다운로드1
1743정성태9/16/201420985오류 유형: 238. 설치 오류 - Failed to get size of pseudo bundle
1742정성태8/27/201426956개발 환경 구성: 236. Hyper-V에 설치한 리눅스 VM의 VHD 크기 늘리는 방법 [2]
1741정성태8/26/201421332.NET Framework: 459. GetModuleHandleEx로 알아보는 .NET 메서드의 DLL 모듈 관계파일 다운로드1
1740정성태8/25/201432501.NET Framework: 458. 닷넷 GC가 순환 참조를 해제할 수 있을까요? [2]파일 다운로드1
1739정성태8/24/201426513.NET Framework: 457. 교착상태(Dead-lock) 해결 방법 - Lock Leveling [2]파일 다운로드1
1738정성태8/23/201422042.NET Framework: 456. C# - CAS를 이용한 Lock 래퍼 클래스파일 다운로드1
1737정성태8/20/201419755VS.NET IDE: 93. Visual Studio 2013 동기화 문제
1736정성태8/19/201425568VC++: 79. [부연] CAS Lock 알고리즘은 과연 빠른가? [2]파일 다운로드1
1735정성태8/19/201418158.NET Framework: 455. 닷넷 사용자 정의 예외 클래스의 최소 구현 코드 - 두 번째 이야기
1734정성태8/13/201419822오류 유형: 237. Windows Media Player cannot access the file. The file might be in use, you might not have access to the computer where the file is stored, or your proxy settings might not be correct.
1733정성태8/13/201426350.NET Framework: 454. EmptyWorkingSet Win32 API를 사용하는 C# 예제파일 다운로드1
1732정성태8/13/201434463Windows: 99. INetCache 폴더가 다르게 보이는 이유
1731정성태8/11/201427074개발 환경 구성: 235. 점(.)으로 시작하는 파일명을 탐색기에서 만드는 방법
1730정성태8/11/201422160개발 환경 구성: 234. Royal TS의 터미널(Terminal) 연결에서 한글이 깨지는 현상 해결 방법
... 121  122  123  124  125  126  127  128  129  130  131  [132]  133  134  135  ...