Microsoft MVP성태의 닷넷 이야기
홈 주인모아 놓은 자료프로그래밍질문/답변사용자 관리 RSS OPML Link
.NET Framework: 925. C# - ETW를 이용한 Monitor Enter/Exit 감시 [링크 복사], [링크+제목 복사],
조회: 9344
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
http://www.sysnet.pe.kr
첨부 파일
[etw_clr_thread_contention.zip]    

C# - ETW를 이용한 Monitor Enter/Exit 감시

예전에도, Monitor Enter/Exit를 감시해 보려는 노력이 있었습니다. ^^

실행 시에 메서드 가로채기 - CLR Injection: Runtime Method Replacer 개선 - 세 번째 이야기(Monitor.Enter 후킹)
; https://www.sysnet.pe.kr/2/0/12165

하지만, 저런 것은 특정 프로그램을 대상으로 한다면 수용할 수도 있겠지만, 일반적인 범용 프로그램을 대상으로 하기에는 다소 위험한 코드입니다. 좀 더 시스템적으로 안정적인 방법이 필요한데 다행히 ETW로 목적을 달성할 수 있습니다. 이를 위해 필요한 코드는 지난 글에 설명한 ETW 예제 코드를 약간만 변형시키면 됩니다.

// ...[생략]...

using (var session = new TraceEventSession(sessionName, null))
{
    var restarted = session.EnableProvider(
        ClrTraceEventParser.ProviderGuid, TraceEventLevel.Verbose,
        (ulong)(ClrTraceEventParser.Keywords.Contention));

    Console.CancelKeyPress += delegate (object sender, ConsoleCancelEventArgs e) { session.Dispose(); };

    using (TraceLogEventSource traceLogSource = TraceLog.CreateFromTraceEventSession(session))
    {
        traceLogSource.Clr.ContentionStart += delegate (ContentionStartTraceData data)
        {
            if (data.ProcessID != _processId)
            {
                return;
            }

            Console.WriteLine($"[{data.TimeStamp}] {data.ThreadID} Start");
            _contentionStore.Push(data);
        };

        traceLogSource.Clr.ContentionStop += delegate (ContentionStopTraceData data)
        {
            if (data.ProcessID != _processId)
            {
                return;
            }

            Console.Write($"[{data.TimeStamp}] {data.ThreadID} Stop ");

            ContentionInfo info = _contentionStore.Pop(data);
            if (info == null)
            {
                Console.WriteLine("info == null");
                return;
            }

            Console.WriteLine($"[{data.ContentionFlags}]Lock-released: {(int)((data.TimeStampRelativeMSec - info.ContentionStartRelativeMSec))}");

        };

        traceLogSource.Process();
    }

    // ...[생략]...
}

얼마나 잘 동작하는지 실습을 위해 감시할 대상 프로그램을 다음의 예제 코드로 작성해 보면,

{
    int workerCount = ...;
    ThreadPool.SetMinThreads(workerCount, workerCount);

    Thread.Sleep(2000);

    Task [] workers = new Task[workerCount];
    for (int i = 0; i < workerCount; i++)
    {
        workers[i] = Task.Run(() =>
        {
            DateTime dt1 = DateTime.Now;

            Console.WriteLine($"[{dt1}] {AppDomain.GetCurrentThreadId()} {Thread.CurrentThread.ManagedThreadId} Before-lock");
            lock (lockObj)
            {
                DateTime dt2 = DateTime.Now;
                Console.WriteLine($"[{dt2}] {AppDomain.GetCurrentThreadId()} {Thread.CurrentThread.ManagedThreadId} After-lock {(int)(dt2 - dt1).TotalMilliseconds}");

                Thread.Sleep(1000);
            }
        });
    }

    foreach (Task task in workers)
    {
        task.Wait();
    }
}


실행 시, 출력 결과가 다음과 같이 나오지만,

[2020-07-08 오전 12:21:53] 26072 4 Before-lock
[2020-07-08 오전 12:21:53] 29048 5 Before-lock
[2020-07-08 오전 12:21:53] 30468 3 Before-lock
[2020-07-08 오전 12:21:53] 9148 6 Before-lock
[2020-07-08 오전 12:21:53] 31500 9 Before-lock
[2020-07-08 오전 12:21:53] 30732 8 Before-lock
[2020-07-08 오전 12:21:53] 25124 11 Before-lock
[2020-07-08 오전 12:21:53] 26072 4 After-lock 2
[2020-07-08 오전 12:21:53] 22400 10 Before-lock
[2020-07-08 오전 12:21:53] 16732 12 Before-lock
[2020-07-08 오전 12:21:53] 23136 7 Before-lock
[2020-07-08 오전 12:21:53] 336 18 Before-lock
[2020-07-08 오전 12:21:53] 12152 17 Before-lock
[2020-07-08 오전 12:21:53] 19224 20 Before-lock
[2020-07-08 오전 12:21:53] 25960 22 Before-lock
[2020-07-08 오전 12:21:53] 18180 21 Before-lock
[2020-07-08 오전 12:21:53] 20160 13 Before-lock
[2020-07-08 오전 12:21:53] 15896 19 Before-lock
[2020-07-08 오전 12:21:53] 29252 15 Before-lock
[2020-07-08 오전 12:21:53] 5088 14 Before-lock
[2020-07-08 오전 12:21:53] 7164 16 Before-lock
[2020-07-08 오전 12:21:54] 29048 5 After-lock 1008
[2020-07-08 오전 12:21:55] 30468 3 After-lock 2014
[2020-07-08 오전 12:21:56] 9148 6 After-lock 3015
[2020-07-08 오전 12:21:57] 31500 9 After-lock 4016
[2020-07-08 오전 12:21:58] 30732 8 After-lock 5022
[2020-07-08 오전 12:21:59] 25124 11 After-lock 6035
[2020-07-08 오전 12:22:00] 22400 10 After-lock 7044
[2020-07-08 오전 12:22:01] 16732 12 After-lock 8046
[2020-07-08 오전 12:22:02] 23136 7 After-lock 9053
[2020-07-08 오전 12:22:03] 336 18 After-lock 10056
[2020-07-08 오전 12:22:04] 12152 17 After-lock 11057
[2020-07-08 오전 12:22:05] 19224 20 After-lock 12062
[2020-07-08 오전 12:22:06] 25960 22 After-lock 13076
[2020-07-08 오전 12:22:07] 18180 21 After-lock 14090
[2020-07-08 오전 12:22:08] 20160 13 After-lock 15110
[2020-07-08 오전 12:22:09] 15896 19 After-lock 16123
[2020-07-08 오전 12:22:10] 29252 15 After-lock 17138
[2020-07-08 오전 12:22:11] 5088 14 After-lock 18147
[2020-07-08 오전 12:22:12] 7164 16 After-lock 19155

ETW로 모니터링한 경우는,

[2020-07-08 오전 12:21:53] 26072 Start
[2020-07-08 오전 12:21:53] 26072 Stop [Native]Lock-released: 0
[2020-07-08 오전 12:21:53] 30468 Start
[2020-07-08 오전 12:21:53] 30468 Stop [Native]Lock-released: 0
[2020-07-08 오전 12:21:53] 30468 Start
[2020-07-08 오전 12:21:53] 30468 Stop [Native]Lock-released: 0
[2020-07-08 오전 12:21:53] 26072 Start
[2020-07-08 오전 12:21:53] 26072 Stop [Native]Lock-released: 0
[2020-07-08 오전 12:21:53] 29048 Start
[2020-07-08 오전 12:21:53] 29048 Stop [Native]Lock-released: 0
[2020-07-08 오전 12:21:53] 29048 Start
[2020-07-08 오전 12:21:53] 29048 Stop [Native]Lock-released: 0
[2020-07-08 오전 12:21:53] 29048 Start
[2020-07-08 오전 12:21:53] 26072 Start
[2020-07-08 오전 12:21:53] 26072 Stop [Native]Lock-released: 0
[2020-07-08 오전 12:21:53] 26072 Start
[2020-07-08 오전 12:21:53] 26072 Stop [Native]Lock-released: 0
[2020-07-08 오전 12:21:53] 29048 Stop [Native]Lock-released: 0
[2020-07-08 오전 12:21:53] 9148 Start
[2020-07-08 오전 12:21:53] 9148 Stop [Native]Lock-released: 0
[2020-07-08 오전 12:21:53] 26072 Start
[2020-07-08 오전 12:21:53] 23136 Start
[2020-07-08 오전 12:21:53] 31500 Start
[2020-07-08 오전 12:21:53] 25124 Start
[2020-07-08 오전 12:21:53] 25124 Stop [Native]Lock-released: 0
[2020-07-08 오전 12:21:53] 30732 Start
[2020-07-08 오전 12:21:53] 25124 Start
[2020-07-08 오전 12:21:53] 26072 Stop [Managed]Lock-released: 0
[2020-07-08 오전 12:21:53] 22400 Start
[2020-07-08 오전 12:21:53] 22400 Stop [Managed]Lock-released: 0
[2020-07-08 오전 12:21:53] 5088 Start
[2020-07-08 오전 12:21:53] 20160 Start
[2020-07-08 오전 12:21:53] 29252 Start
[2020-07-08 오전 12:21:53] 22400 Start
[2020-07-08 오전 12:21:53] 16732 Start
[2020-07-08 오전 12:21:53] 23136 Stop [Managed]Lock-released: 2
[2020-07-08 오전 12:21:53] 336 Start
[2020-07-08 오전 12:21:53] 336 Stop [Native]Lock-released: 0
[2020-07-08 오전 12:21:53] 15896 Start
[2020-07-08 오전 12:21:53] 15896 Stop [Native]Lock-released: 0
[2020-07-08 오전 12:21:53] 336 Start
[2020-07-08 오전 12:21:53] 15896 Start
[2020-07-08 오전 12:21:53] 12152 Start
[2020-07-08 오전 12:21:53] 7164 Start
[2020-07-08 오전 12:21:53] 23136 Start
[2020-07-08 오전 12:21:53] 336 Stop [Managed]Lock-released: 0
[2020-07-08 오전 12:21:53] 18180 Start
[2020-07-08 오전 12:21:53] 25960 Start
[2020-07-08 오전 12:21:53] 19224 Start
[2020-07-08 오전 12:21:53] 336 Start
[2020-07-08 오전 12:21:53] 12152 Stop [Managed]Lock-released: 1
[2020-07-08 오전 12:21:53] 12152 Start
[2020-07-08 오전 12:21:53] 19224 Stop [Managed]Lock-released: 0
[2020-07-08 오전 12:21:53] 19224 Start
[2020-07-08 오전 12:21:53] 25960 Stop [Managed]Lock-released: 1
[2020-07-08 오전 12:21:53] 25960 Start
[2020-07-08 오전 12:21:53] 18180 Stop [Managed]Lock-released: 2
[2020-07-08 오전 12:21:53] 18180 Start
[2020-07-08 오전 12:21:53] 20160 Stop [Managed]Lock-released: 8
[2020-07-08 오전 12:21:53] 20160 Start
[2020-07-08 오전 12:21:53] 15896 Stop [Managed]Lock-released: 9
[2020-07-08 오전 12:21:53] 29252 Stop [Managed]Lock-released: 11
[2020-07-08 오전 12:21:53] 15896 Start
[2020-07-08 오전 12:21:53] 29252 Start
[2020-07-08 오전 12:21:53] 5088 Stop [Managed]Lock-released: 11
[2020-07-08 오전 12:21:53] 5088 Start
[2020-07-08 오전 12:21:53] 7164 Stop [Managed]Lock-released: 10
[2020-07-08 오전 12:21:53] 7164 Start
[2020-07-08 오전 12:21:54] 28292 Start
[2020-07-08 오전 12:21:57] 31500 Stop [Managed]Lock-released: 4015
[2020-07-08 오전 12:21:58] 30732 Stop [Managed]Lock-released: 5022
[2020-07-08 오전 12:21:59] 25124 Stop [Managed]Lock-released: 6034
[2020-07-08 오전 12:22:00] 22400 Stop [Managed]Lock-released: 7043
[2020-07-08 오전 12:22:01] 16732 Stop [Managed]Lock-released: 8046
[2020-07-08 오전 12:22:02] 23136 Stop [Managed]Lock-released: 9049
[2020-07-08 오전 12:22:03] 336 Stop [Managed]Lock-released: 10053
[2020-07-08 오전 12:22:04] 12152 Stop [Managed]Lock-released: 11053
[2020-07-08 오전 12:22:05] 19224 Stop [Managed]Lock-released: 12060
[2020-07-08 오전 12:22:06] 25960 Stop [Managed]Lock-released: 13073
[2020-07-08 오전 12:22:07] 18180 Stop [Managed]Lock-released: 14085
[2020-07-08 오전 12:22:08] 20160 Stop [Managed]Lock-released: 15099
[2020-07-08 오전 12:22:09] 15896 Stop [Managed]Lock-released: 16113
[2020-07-08 오전 12:22:10] 29252 Stop [Managed]Lock-released: 17126
[2020-07-08 오전 12:22:11] 5088 Stop [Managed]Lock-released: 18135
[2020-07-08 오전 12:22:12] 7164 Stop [Managed]Lock-released: 19144
[2020-07-08 오전 12:22:13] 28292 Stop [Managed]Lock-released: 19163
[2020-07-08 오전 12:22:32] 23136 Start
[2020-07-08 오전 12:22:32] 23136 Stop [Native]Lock-released: 0
[2020-07-08 오전 12:22:33] 31500 Start
[2020-07-08 오전 12:22:33] 31500 Stop [Native]Lock-released: 0

원래 프로그램의 결과에서 1초, 2초, 3초에 해당하는 대기 시간이, 어떤 때는 출력이 되고 어떤 때는 출력이 안 됩니다. 그러니까, 100% 믿을 수는 없지만 그래도 성능 하락을 유발할 수 있는 정도는 알아낼 수 있으므로 그런대로 도움이 될 수 있습니다.



또 다른 경우로 다음과 같이 테스트를 해보면,

{
    Thread t1 = new Thread(threadFunc);
    Thread t2 = new Thread(threadFunc);

    t1.Start(lockObj);
    t2.Start(lockObj);

    t1.Join();
    t2.Join();
}

private static void threadFunc(object objLock)
{
    lock (objLock)
    {
        Thread.Sleep(2000);
    }
}

분명히 lock으로 인해 지연이 있는데도 불구하고 ETW로는 저 상황을 못 잡아내는 경우가 종종 있습니다. 그러니까, ETW 이벤트를 100% 믿고 진단을 해서는 안 됩니다. 그래도 메서드 가로채기 등의 방법보다는 안전하므로 현재로서는 ETW를 이용하는 것이 가장 최선으로 보입니다.

(첨부 파일은 이 글의 예제 코드를 포함합니다.)



[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]





[최초 등록일: ]
[최종 수정일: 7/8/2020]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com
비밀번호
댓글 작성자
 


... 46  47  48  49  50  51  52  53  [54]  55  56  57  58  59  60  ...
NoWriterDateCnt.TitleFile(s)
12279정성태7/29/202012134개발 환경 구성: 499. 닷넷에서 접근해보는 InterSystems의 Cache 데이터베이스파일 다운로드1
12278정성태7/23/20209474VS.NET IDE: 149. ("Binary was not built with debug information" 상태로) 소스 코드 디버깅이 안되는 경우
12277정성태7/23/202010924개발 환경 구성: 498. DEVPATH 환경 변수의 사용 예 - .NET Reflector의 (PDB 연결이 없는) DLL의 소스 코드 디버깅
12276정성태7/23/202010129.NET Framework: 930. 개발자를 위한 닷넷 어셈블리 바인딩 - DEVPATH 환경 변수
12275정성태7/22/202012662개발 환경 구성: 497. 닷넷에서 접근해보는 InterSystems의 IRIS Data Platform 데이터베이스파일 다운로드1
12274정성태7/21/202012058개발 환경 구성: 496. Azure - Blob Storage Account의 Location 이전 방법 [1]파일 다운로드1
12273정성태7/18/202013692개발 환경 구성: 495. Azure - Location이 다른 웹/DB 서버의 경우 발생하는 성능 하락
12272정성태7/16/20208656.NET Framework: 929. (StrongName의 버전 구분이 필요 없는) .NET Core 어셈블리 바인딩 규칙 [2]파일 다운로드1
12271정성태7/16/202010724.NET Framework: 928. .NET Framework의 Strong-named 어셈블리 바인딩 (2) - 런타임에 바인딩 리디렉션파일 다운로드1
12270정성태7/16/202011549오류 유형: 633. SSL_CTX_use_certificate_file - error:140AB18F:SSL routines:SSL_CTX_use_certificate:ee key too small
12269정성태7/16/20208555오류 유형: 632. .NET Core 웹 응용 프로그램 - The process was terminated due to an unhandled exception.
12268정성태7/15/202010712오류 유형: 631. .NET Core 웹 응용 프로그램 오류 - HTTP Error 500.35 - ANCM Multiple In-Process Applications in same Process
12267정성태7/15/202012381.NET Framework: 927. C# - 윈도우 프로그램에서 Credential Manager를 이용한 보안 정보 저장파일 다운로드1
12266정성태7/14/202010092오류 유형: 630. 사용자 계정을 지정해 CreateService API로 서비스를 등록한 경우 "Error 1069: The service did not start due to a logon failure." 오류발생
12265정성태7/10/20209238오류 유형: 629. Visual Studio - 웹 애플리케이션 실행 시 "Unable to connect to web server 'IIS Express'." 오류 발생
12264정성태7/9/202018308오류 유형: 628. docker: Error response from daemon: Conflict. The container name "..." is already in use by container "...".
12261정성태7/9/202011242VS.NET IDE: 148. 윈도우 10에서 .NET Core 응용 프로그램을 리눅스 환경에서 실행하는 2가지 방법 - docker, WSL 2 [5]
12260정성태7/8/20209637.NET Framework: 926. C# - ETW를 이용한 ThreadPool 스레드 감시파일 다운로드1
12259정성태7/8/20209171오류 유형: 627. nvlddmkm.sys의 BAD_POOL_HEADER BSOD 문제 [1]
12258정성태7/8/202012329기타: 77. DataDog APM 간략 소개
12257정성태7/7/20209344.NET Framework: 925. C# - ETW를 이용한 Monitor Enter/Exit 감시파일 다운로드1
12256정성태7/7/20209760.NET Framework: 924. C# - Reflection으로 변경할 수 없는 readonly 정적 필드 [4]
12255정성태7/6/202010190.NET Framework: 923. C# - ETW(Event Tracing for Windows)를 이용한 Finalizer 실행 감시파일 다운로드1
12254정성태7/2/202010044오류 유형: 626. git - REMOTE HOST IDENTIFICATION HAS CHANGED!
12253정성태7/2/202011103.NET Framework: 922. C# - .NET ThreadPool의 Local/Global Queue파일 다운로드1
12252정성태7/2/202013077.NET Framework: 921. C# - I/O 스레드를 사용한 비동기 소켓 서버/클라이언트파일 다운로드2
... 46  47  48  49  50  51  52  53  [54]  55  56  57  58  59  60  ...