Microsoft MVP성태의 닷넷 이야기
글쓴 사람
조정용
홈페이지
첨부 파일
(연관된 글이 1개 있습니다.)

안녕하세요.
고민 고민하다 처음으로 질문 글을 올리게 되었습니다.

다름이 아니라 이번에 WCF 프로그램을 개발 하는 중에 생각치도 못한 심각한 문제가 발생되었습니다.

시나리오는 다음과 같습니다.

1. WCF 호스트는 주 호스트와 보조 호스트(N개)로 나누어집니다.
2. 클라이언트에서 주 호스트에 요청이 전달되면 처리 도중 조건에 의해 보조 호스트에 동일한 내용을 전파합니다. (복제)
3. 보조 호스트에 대한 요청 처리를 기다릴 필요는 없습니다. (성공을 기반으로 하나 실패하여도 무관, 방화벽 및 네트워크 장애 등등)


문제는 클라이언트에서 다량의 요청을 전달하면 2.번 항목의 복제 작업 때문에 응답에 대한 병목이 발생한다는 것입니다. (클라이언트가 받는 처리 시간이 들쑥날쑥합니다)
2.번 항목의 복제는 Task 클래스를 이용하여 waiting 없는 코드로 수행 하였기에 기대 결과는 호출자에 대한 영향이 없다고 생각했는데(실제로 스톱워치를 찍어봐도 그렇게 나오고)
정작 클라이언트 입장에서는 때때로 느리게 처리되었다...는 결과를 받게 되네요.

테스트 코드가 다량의 요청이라 백그라운드 처리 지연에 의한 리소스 고갈인가 의심도 되긴하는데....

해당 코드는 파일 (visual studio 2013으로 작성)로 첨부해두었습니다. (문제가 되는 부분만 떼어 다시 급하게 작성한거라 엉성하여도 이해부탁드립니다)


도움 부탁드리겠습니다.


[연관 글]






[최초 등록일: ]
[최종 수정일: 8/17/2014]


비밀번호

댓글 작성자
 



2014-08-18 04시56분
보내주신 WCF 서비스를 Visual Studio에서 F5 디버거로 시작하면, Output 창에 예외가 많이 발생하는 것을 볼 수 있습니다. 그것들을 아래의 글에 설명한대로,

First-Chance Exception
; http://www.sysnet.pe.kr/2/0/510

Exceptions 창에서 "Thrown"으로 설정해 두면 예외가 발생한 라인에서 디버거가 멈출 것입니다. 해당 에러들을 모두 수정하신 다음에 다시 소스 코드를 올려주세요. (아마 제 생각에는 그 예외들을 고치다 보면 현상이 해결될 것입니다.)
정성태
2014-08-19 02시32분
[조정용] 답변 감사드립니다.
말씀하신 Exception은 사실 발생할 수밖에 없는 구조입니다.
원격 호스트가 없거나 방화벽등의 장애로 연결 할 수 없을 경우 WCF Channel Open 과정에서 각종 Exception을 발생시키는데 이를 수정하기 위한 조건은 결국 원격 호스트가 정상적으로 열어 있어야만 합니다.
하지만 시나리오 상으로 호스트가 없거나 연결할 수 없는 경우도 있기 때문에 Excepiton을 수정할 수는 없습니다.
예외를 front caller에 throw하지 않고 아무런 처리를 하지 않도록 하여도 클라이언트에 대한 응답 병목현상은 해결이 안되네요 ㅜㅜ;
[guest]
2014-08-19 01시46분
@조정용 그렇다면 ^^ 상황이 달라지는군요. 일단, Task.Run은 스레드 풀을 기반으로 하는데, 이게 무조건 스레드를 늘리는 방식이 아닙니다. 이 때문에 지연 현상이 발생하는 것입니다. 관련해서는 다음의 글을 참고하세요.

ThreadPool.QueueUserWorkItem 의 실행 지연
; http://www.sysnet.pe.kr/2/0/1455

Task의 내부 구현은 살펴봐야겠지만 어쨌든 전체적인 맥락은 위의 글에 따를 것이므로 지연 현상이 발생합니다. 따라서 ReplicaProvider.Transfer 내부의 Task.Run( ... )을 new Thread( () => ... ).Start();로 바꿔주시면 되는데요. 이렇게 해도 문제가 됩니다.

왜냐하면 TestModuleClient.Use 메서드가 잘못 작성되었습니다.

public void Use(...)
{
    try { ... } catch (...) { Use(...); }
}

위와 같이 되어 있는데, 예외가 발생하면 그 내부에서 다시 Use를 호출하기 때문에 서버와 연결이 되지 않으면 무한 재귀 호출 현상에 빠집니다. 따라서, Thread 수가 급격하게 늘어나기 시작하고 예외 처리가 무겁기 때문에 CPU 100% 현상이 발생합니다.

그렇다고 catch 절의 Use를 제거했다고 해서 문제가 해결되는 것은 아닙니다. Socket.Connect TCP 연결 메서드는 내부적으로 연결 시도를 하기 때문에 Connect에서 예외가 발생하기까지 시간이 걸립니다. 따라서, 마찬가지로 급격하게 스레드가 늘어나고 역시 마찬가지로 CPU 100% 현상이 발생합니다.

따라서, 이를 해결하려면 Replica를 호출하는 전용 스레드를 하나만 두고 Queue를 만들어 처리하는 방식으로 바꿔야 합니다. 서버가 연결되지 않는 경우, 마찬가지로 Queue에는 급격하게 요청이 쌓일 것이므로 Queue의 최대 수를 적절하게 조절해서 처리하는 것이 좋습니다.
정성태
2014-08-23 10시39분
[조정용] 자세한 설명과 참고자료 정말 감사드립니다.
스레드의 지연 현상은 정말 의외네요 ^^;
조언 주신데로 장기 사용할 전용 스레드로 수행하도록 해야겠습니다.

다시 한번 감사드립니다.
[guest]

... 31  32  33  34  35  36  37  38  39  40  41  42  43  [44]  45  ...
NoWriterDateCnt.TitleFile(s)
4748Bere...8/3/201610976그냥 생각이 들어서 여기 글 써봅니다. [1]
4746힘찬도약8/2/201611240[asp.net] local에서 cookies값이 읽혀지지 않는 경우 [1]
4747힘찬도약8/3/201611979    답변글 [예제 첨부]: [asp.net] local에서 cookies값이 읽혀지지 않는 경우 [3]파일 다운로드1
4745힘찬도약7/27/201612086.NET 자식창 데이터를 부모창에 전달시 오류 질문드립니다. [4]파일 다운로드1
4744변찬연7/27/201611849안녕하세요 그 edge를 이용하는 데 조금 불편함이 있어서 문의드립니다 [1]
4743딸랑구아빠7/26/201610787IE 사용 시 인증 정보 계속 보내기? [1]
4741차가워7/20/201612427UWP 에서 COM 참조 불가능한가요? [6]
4740luna...7/19/201612848clickonce manifest 파일 질문 [1]
4739윤똘씨7/19/201612333정말 감동적입니다... [7]
4738닷넷초보7/7/201611188안녕하세요. C#의 개체 전달방식(참조)에 관련해서 질문 있습니다. [3]파일 다운로드1
4737beau...7/6/201613513python embedding 한 c++ 프로그램의 배포에 관해서 질문드리고 싶습니다. [1]
4736spow...7/6/201610384Property Lambda에 대한 심층 분석을 의뢰합니다 [7]
4735힘찬도약7/5/201611545.Net/Web.config에서 MSSQL을 쓰는데, MysqlSiteMap 참조오류 [3]파일 다운로드1
4734spow...6/28/201611128Visual Studio 2015 + Windows Forms 환경에서 컴파일 할 때 드물게 개발환경이 Crash 됩니다 [1]
4733feel...6/15/201611594타 서버로 소스 이전 중 [3]파일 다운로드1
4732구봉근6/14/201610331안녕하세요 [1]파일 다운로드1
4731초급개발자6/7/201612792Windows Form Application는 사라질까요? [2]
4730김시현6/4/201610840책으로 공부하던 도중 생성자에 대해서 궁금한게 생겼는데 혹시 답변좀 해주실수 있나요? [1]
4729Jeah...6/3/201612292C#.Net 프로그램에서 C++로 만들어진 dll 파일 이용관련 문의 하나 드립니다. [3]
4727링거5/30/201610944WPF MediaElement 파일 실행 후 삭제시 오류 문의 [1]파일 다운로드1
4728링거5/30/201611323    답변글 [답변]: WPF MediaElement 파일 실행 후 삭제시 오류 문의 [2]파일 다운로드1
4726spow...5/25/201610753덧글을 달고 나서 F5를 눌렀을 때 똑같은 덧글이 달리는 현상 고쳐주세요 [4]
4725Futu...5/23/201611224책 잘보고 있습니다. Task관련 질문을!!! [1]
4724학생15/23/201612500웹소켓과 소켓 관련해서 질문 드립니다. [2]
4722지나가던...5/15/201614339Part 3 pdf파일 그림 재수정 문의 [1]
4723지나가던...5/16/201611578    답변글 [답변]: Part 3 pdf파일 그림 재수정 문의 [1]
... 31  32  33  34  35  36  37  38  39  40  41  42  43  [44]  45  ...