Microsoft MVP성태의 닷넷 이야기
.NET Framework: 873. C# - 코드를 통해 PDB 심벌 파일 다운로드 방법 [링크 복사], [링크+제목 복사]
조회: 674
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
 

C# - 코드를 통해 PDB 심벌 파일 다운로드 방법

물론 symchk.exe를 이용하면 쉽게 다운로드할 수 있지만,

pdb 파일을 다운로드하기 위한 symchk.exe 실행에 필요한 최소 파일
; https://www.sysnet.pe.kr/2/0/12091

관련 DLL들은 재배포 가능할 수 있어도 exe 파일에 대한 언급이 없습니다.

DbgHelp Versions
; https://docs.microsoft.com/en-us/windows/win32/debug/dbghelp-versions

The most current versions of DbgHelp.dll, SymSrv.dll, and SrcSrv.dll are available as a part of the Debugging Tools For Windows package. The redistribution policies for these included DLLs were specifically designed to make it as easy as possible for people to include these files in their own packages and releases.

The DbgHelp.dll file that ships in Windows is not redistributable.


그래서 ^^ 그냥 직접 다운로드하는 코드를 만들어 봤습니다.




기반 지식은 이미 다 정리가 되었습니다. 아래의 글에서 PDB 파일의 경로 구성을 알아봤고,

PDB 기호 파일의 경로 구성 방식
; https://www.sysnet.pe.kr/2/0/2925

위의 지식을 기반으로 PE 파일로부터 정보를 얻는 방법도 설명했습니다.

C# - PDB 파일 경로를 PE 파일로부터 얻는 방법
; https://www.sysnet.pe.kr/2/0/11237

또한, 마이크로소프트의 심벌 서버에서 다운로드하는 방법도 알았으니,

PDB 파일을 수동으로 다운로드하는 방법
; https://www.sysnet.pe.kr/2/0/11096

이제 이것들을 잘 조합하기만 하면 됩니다. 우선, PE 파일의 헤더로부터 Debug Directory를 가져오는 코드를 지난 글에 소개한 예제를 확장해 구현했습니다.

C# - 로딩된 Native DLL의 export 함수 목록 출력
; https://www.sysnet.pe.kr/2/0/12093

남은 작업은, 이렇게 구성한 PDB 파일 경로를 이용해 msdl.microsoft.com 심벌 서버로부터 다운로드하는 것인데 이에 대해서는 다음의 글에 소개한,

PDB Downloader
; https://blogs.msdn.microsoft.com/webtopics/2016/03/07/pdb-downloader/

PDB Downloader에서 힌트를 얻었습니다. 물론, 소스 코드를 직접 분석하기보다는 그냥 fiddler를 이용해 네트워크 패킷을 보는 것이 더 직관적일 수 있는데요, 우선, "HEAD" method 쿼리를 이용해,

HEAD http://msdl.microsoft.com/download/symbols/ntdll.pdb/0C2E19EA1901E9B82E4567D2D21E56D21/ntdll.pdb HTTP/1.1
User-Agent: Microsoft-Symbol-Server/10.0.10522.521
Host: msdl.microsoft.com
Connection: Keep-Alive

요청을 보내면 다음과 같이 "Location" 헤더에 실제 다운로드할 수 있는 URL이 담겨 옵니다.

HTTP/1.1 302 Found
Cache-Control: no-store, no-cache, max-age=0
Content-Length: 0
Location: https://vsblobprodscussu5shard62.blob.core.windows.net/b-4712e0edc5a240eabf23330d7df68e77/73D63042197DD1EE7B80F...[생략]...4cb6588
X-Cache: TCP_MISS
Server: Microsoft-HTTPAPI/2.0
X-MSEdge-Ref: Ref A: 6A044B29569A4FB582D54408AC47B3E5 Ref B: SLAEDGE0919 Ref C: 2019-12-25T03:49:24Z
Date: Wed, 25 Dec 2019 03:49:23 GMT

그렇군요, 그러니까 PDB 파일 다운로드는 HEAD + GET의 조합으로 가능하다는 것입니다. 아래의 소스 코드는 PEImage.cs의 코드를 이용해 PDB 파일을 다운로드하는 예제입니다.

// ...[생략]...

class Program
{
    static void Main(string[] args)
    {
        // DownloadPdbs(false);
        DownloadPdbs(true);
    }

    private static void DownloadPdbs(bool fromFile)
    {
        string rootPathToSave = Path.Combine(Environment.CurrentDirectory, "sym");
        if (Directory.Exists(rootPathToSave) == false)
        {
            Directory.CreateDirectory(rootPathToSave);
        }

        Process currentProcess = Process.GetCurrentProcess();
        foreach (ProcessModule pm in currentProcess.Modules)
        {
            Console.WriteLine($"[{pm.FileName}, 0x{pm.BaseAddress.ToString("x")}]");

            PEImage pe = null;

            if (fromFile == true)
            {
                pe = PEImage.ReadFromFile(pm.FileName);
            }
            else
            {
                pe = PEImage.ReadFromMemory(pm.BaseAddress, pm.ModuleMemorySize);
            }

            if (pe == null)
            {
                Console.WriteLine("Failed to read images");
                return;
            }

            string modulePath = pm.FileName;
            DownloadPdb(modulePath, rootPathToSave);

            Console.WriteLine();
        }
    }

    private static void DownloadPdb(string modulePath, string rootPathToSave)
    {
        if (File.Exists(modulePath) == false)
        {
            Console.WriteLine("NOT Found: " + modulePath);
            return;
        }

        PEImage pe = PEImage.ReadFromFile(modulePath);
        if (pe == null)
        {
            Console.WriteLine("Failed to read images");
            return;
        }

        Uri baseUri = new Uri("https://msdl.microsoft.com/download/symbols/");

        foreach (CodeViewRSDS codeView in pe.EnumerateCodeViewDebugInfo())
        {
            if (string.IsNullOrEmpty(codeView.PdbFileName) == true)
            {
                continue;
            }

            string pdbFileName = codeView.PdbFileName;
            if (Path.IsPathRooted(codeView.PdbFileName) == true)
            {
                pdbFileName = Path.GetFileName(codeView.PdbFileName);
            }

            Console.WriteLine("\tFileName: " + pdbFileName);
            Console.WriteLine("\tPdbFileName: " + codeView.PdbFileName);
            Console.WriteLine("\tLocal: " + codeView.PdbLocalPath);
            Console.WriteLine("\tUri: " + codeView.PdbUriPath);

            string localPath = Path.Combine(rootPathToSave, codeView.PdbLocalPath);
            string localFolder = Path.GetDirectoryName(localPath);

            if (Directory.Exists(localFolder) == false)
            {
                try
                {
                    Directory.CreateDirectory(localFolder);
                }
                catch (DirectoryNotFoundException)
                {
                    Console.WriteLine("NOT Found on local: " + codeView.PdbLocalPath);
                    continue;
                }
            }

            if (File.Exists(localPath) == true)
            {
                Console.WriteLine("Found on local: " + pdbFileName);
                continue;
            }

            if (CopyPdbFromLocal(modulePath, codeView.PdbFileName, localPath) == true)
            {
                Console.WriteLine("Found on local: " + pdbFileName);
                continue;
            }

            Uri target = new Uri(baseUri, codeView.PdbUriPath);
            Console.WriteLine(target);

            Uri pdbLocation = GetPdbLocation(target);

            if (pdbLocation == null)
            {
                string underscorePath = ProbeWithUnderscore(target.AbsoluteUri);
                pdbLocation = GetPdbLocation(new Uri(underscorePath));
            }

            if (pdbLocation != null)
            {
                DownloadPdbFile(pdbLocation, localPath);
            }
            else
            {
                Console.WriteLine("Not Found on symbol server: " + codeView.PdbFileName);
            }
        }

        Console.WriteLine();
    }

    private static bool CopyPdbFromLocal(string modulePath, string pdbFileName, string localTargetPath)
    {
        if (File.Exists(pdbFileName) == true)
        {
            File.Copy(pdbFileName, localTargetPath);
            return File.Exists(localTargetPath);
        }

        string fileName = Path.GetFileName(pdbFileName);
        string pdbPath = Path.Combine(Environment.CurrentDirectory, fileName);

        if (File.Exists(pdbPath) == true)
        {
            File.Copy(pdbPath, localTargetPath);
            return File.Exists(localTargetPath);
        }

        pdbPath = Path.ChangeExtension(modulePath, ".pdb");
        if (File.Exists(pdbPath) == true)
        {
            File.Copy(pdbPath, localTargetPath);
            return File.Exists(localTargetPath);
        }

        return false;
    }

    private static string ProbeWithUnderscore(string path)
    {
        path = path.Remove(path.Length - 1);
        path = path.Insert(path.Length, "_");
        return path;
    }

    private static void DownloadPdbFile(Uri target, string pathToSave)
    {
        System.Net.HttpWebRequest req = System.Net.WebRequest.Create(target) as System.Net.HttpWebRequest;

        using (System.Net.HttpWebResponse resp = req.GetResponse() as System.Net.HttpWebResponse)
        using (FileStream fs = new FileStream(pathToSave, FileMode.CreateNew, FileAccess.Write, FileShare.None))
        using (BinaryWriter bw = new BinaryWriter(fs))
        {
            BinaryReader reader = new BinaryReader(resp.GetResponseStream());
            long contentLength = resp.ContentLength;

            while (contentLength > 0)
            {
                byte[] buffer = new byte[4096];
                int readBytes = reader.Read(buffer, 0, buffer.Length);
                bw.Write(buffer, 0, readBytes);

                contentLength -= readBytes;
            }
        }
    }

    private static Uri GetPdbLocation(Uri target)
    {
        System.Net.HttpWebRequest req = System.Net.WebRequest.Create(target) as System.Net.HttpWebRequest;
        req.Method = "HEAD";

        try
        {
            using (System.Net.HttpWebResponse resp = req.GetResponse() as System.Net.HttpWebResponse)
            {
                return resp.ResponseUri;
            }
        }
        catch (System.Net.WebException)
        {
            return null;
        }
    }

}

완전하게 동작하는 코드는 다음의 github에 공개되어 있습니다.

DotNetSamples/WinConsole/PEFormat/PEFormatSample/
; https://github.com/stjeong/DotNetSamples/tree/master/WinConsole/PEFormat/PEFormatSample

DotNetSamples/WinConsole/PEFormat/WindowsPE/
; https://github.com/stjeong/DotNetSamples/tree/master/WinConsole/PEFormat/WindowsPE




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]

[연관 글]





[최초 등록일: ]
[최종 수정일: 12/26/2019 ]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer@outlook.com

비밀번호

댓글 쓴 사람
 




[1]  2  3  4  5  6  7  8  9  10  11  12  13  14  15  ...
NoWriterDateCnt.TitleFile(s)
12290정성태8/11/2020101.NET Framework: 931. C# - IP 주소에 따른 국가별 위치 확인파일 다운로드1
12289정성태8/6/2020101개발 환경 구성: 502. Portainer에 윈도우 컨테이너를 등록하는 방법
12288정성태8/5/202042오류 유형: 637. WCF - The protocol 'net.tcp' does not have an implementation of HostedTransportConfiguration type registered.
12287정성태8/5/202032오류 유형: 636. C# - libdl.so를 DllImport로 연결 시 docker container 내에서 System.DllNotFoundException 예외 발생
12286정성태8/5/202029개발 환경 구성: 501. .NET Core 용 container 이미지 만들 때 unzip이 필요한 경우
12285정성태8/4/202055오류 유형: 635. 윈도우 10 업데이트 - 0xc1900209 [2]
12284정성태8/4/202085디버깅 기술: 169. Hyper-V의 VM에 대한 메모리 덤프를 뜨는 방법
12283정성태8/3/202037디버깅 기술: 168. windbg - 필터 드라이버 확인하는 확장 명령어(!fltkd)
12282정성태8/2/202048디버깅 기술: 167. windbg 디버깅 사례: AppDomain 간의 static 변수 사용으로 인한 crash (2)
12281정성태8/2/2020156개발 환경 구성: 500. (PDB 연결이 없는) DLL의 소스 코드 디버깅을 dotPeek 도구로 해결하는 방법
12280정성태8/2/202052오류 유형: 634. 오라클 (평생) 무료 클라우드 VM 생성 후 SSH 접속 시 키 오류 발생
12279정성태7/29/202062개발 환경 구성: 499. 닷넷에서 접근해보는 InterSystems의 Cache 데이터베이스파일 다운로드1
12278정성태8/2/202065VS.NET IDE: 149. ("Binary was not built with debug information" 상태로) 소스 코드 디버깅이 안되는 경우
12277정성태8/2/202098개발 환경 구성: 498. DEVPATH 환경 변수의 사용 예 - .NET Reflector의 (PDB 연결이 없는) DLL의 소스 코드 디버깅
12276정성태7/23/2020117.NET Framework: 930. 개발자를 위한 닷넷 어셈블리 바인딩 - DEVPATH 환경 변수
12275정성태7/28/2020100개발 환경 구성: 497. 닷넷에서 접근해보는 InterSystems의 IRIS Data Platform 데이터베이스파일 다운로드1
12274정성태7/21/202079개발 환경 구성: 496. Azure - Blob Storage Account의 Location 이전 방법파일 다운로드1
12273정성태7/20/2020204개발 환경 구성: 495. Azure - Location이 다른 웹/DB 서버의 경우 발생하는 성능 하락
12272정성태7/16/202099.NET Framework: 929. (StrongName의 버전 구분이 필요 없는) .NET Core 어셈블리 바인딩 규칙파일 다운로드1
12271정성태7/16/202079.NET Framework: 928. .NET Framework의 Strong-named 어셈블리 바인딩 (2) - 런타임에 바인딩 리디렉션파일 다운로드1
12270정성태7/16/202069오류 유형: 633. SSL_CTX_use_certificate_file - error:140AB18F:SSL routines:SSL_CTX_use_certificate:ee key too small
12269정성태7/16/202068오류 유형: 632. .NET Core 웹 응용 프로그램 - The process was terminated due to an unhandled exception.
12268정성태7/15/202073오류 유형: 631. .NET Core 웹 응용 프로그램 오류 - HTTP Error 500.35 - ANCM Multiple In-Process Applications in same Process
12267정성태7/15/2020139.NET Framework: 927. C# - 윈도우 프로그램에서 Credential Manager를 이용한 보안 정보 저장파일 다운로드1
12266정성태7/14/2020149오류 유형: 630. 사용자 계정을 지정해 CreateService API로 서비스를 등록한 경우 "Error 1069: The service did not start due to a logon failure." 오류발생
[1]  2  3  4  5  6  7  8  9  10  11  12  13  14  15  ...