Microsoft MVP성태의 닷넷 이야기
.NET Framework: 873. C# - 코드를 통해 PDB 심벌 파일 다운로드 방법 [링크 복사], [링크+제목 복사],
조회: 11165
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
 
(연관된 글이 2개 있습니다.)

C# - 코드를 통해 PDB 심벌 파일 다운로드 방법

물론 symchk.exe를 이용하면 쉽게 다운로드할 수 있지만,

pdb 파일을 다운로드하기 위한 symchk.exe 실행에 필요한 최소 파일
; https://www.sysnet.pe.kr/2/0/12091

관련 DLL들은 재배포 가능할 수 있어도 exe 파일에 대한 언급이 없습니다.

DbgHelp Versions
; https://learn.microsoft.com/en-us/windows/win32/debug/dbghelp-versions

The most current versions of DbgHelp.dll, SymSrv.dll, and SrcSrv.dll are available as a part of the Debugging Tools For Windows package. The redistribution policies for these included DLLs were specifically designed to make it as easy as possible for people to include these files in their own packages and releases.

The DbgHelp.dll file that ships in Windows is not redistributable.


그래서 ^^ 그냥 직접 다운로드하는 코드를 만들어 봤습니다.




기반 지식은 이미 다 정리가 되었습니다. 아래의 글에서 PDB 파일의 경로 구성을 알아봤고,

PDB 기호 파일의 경로 구성 방식
; https://www.sysnet.pe.kr/2/0/2925

위의 지식을 기반으로 PE 파일로부터 정보를 얻는 방법도 설명했습니다.

C# - PDB 파일 경로를 PE 파일로부터 얻는 방법
; https://www.sysnet.pe.kr/2/0/11237

또한, 마이크로소프트의 심벌 서버에서 다운로드하는 방법도 알았으니,

PDB 파일을 수동으로 다운로드하는 방법
; https://www.sysnet.pe.kr/2/0/11096

이제 이것들을 잘 조합하기만 하면 됩니다. 우선, PE 파일의 헤더로부터 Debug Directory를 가져오는 코드를 지난 글에 소개한 예제를 확장해 구현했습니다.

C# - 로딩된 Native DLL의 export 함수 목록 출력
; https://www.sysnet.pe.kr/2/0/12093

남은 작업은, 이렇게 구성한 PDB 파일 경로를 이용해 msdl.microsoft.com 심벌 서버로부터 다운로드하는 것인데 이에 대해서는 다음의 글에 소개한,

PDB Downloader
; https://blogs.msdn.microsoft.com/webtopics/2016/03/07/pdb-downloader/

PDB Downloader에서 힌트를 얻었습니다. 물론, 소스 코드를 직접 분석하기보다는 그냥 fiddler를 이용해 네트워크 패킷을 보는 것이 더 직관적일 수 있는데요, 우선, "HEAD" method 쿼리를 이용해,

HEAD http://msdl.microsoft.com/download/symbols/ntdll.pdb/0C2E19EA1901E9B82E4567D2D21E56D21/ntdll.pdb HTTP/1.1
User-Agent: Microsoft-Symbol-Server/10.0.10522.521
Host: msdl.microsoft.com
Connection: Keep-Alive

요청을 보내면 다음과 같이 "Location" 헤더에 실제 다운로드할 수 있는 URL이 담겨 옵니다.

HTTP/1.1 302 Found
Cache-Control: no-store, no-cache, max-age=0
Content-Length: 0
Location: https://vsblobprodscussu5shard62.blob.core.windows.net/b-4712e0edc5a240eabf23330d7df68e77/73D63042197DD1EE7B80F...[생략]...4cb6588
X-Cache: TCP_MISS
Server: Microsoft-HTTPAPI/2.0
X-MSEdge-Ref: Ref A: 6A044B29569A4FB582D54408AC47B3E5 Ref B: SLAEDGE0919 Ref C: 2019-12-25T03:49:24Z
Date: Wed, 25 Dec 2019 03:49:23 GMT

그렇군요, 그러니까 PDB 파일 다운로드는 HEAD + GET의 조합으로 가능하다는 것입니다. (2020-11-23 업데이트: 현재 HEAD 요청 없이 곧바로 다운로드가 가능합니다.) 아래의 소스 코드는 PEImage.cs의 코드를 이용해 PDB 파일을 다운로드하는 예제입니다.

// ...[생략]...

class Program
{
    static void Main(string[] args)
    {
        // DownloadPdbs(false);
        DownloadPdbs(true);
    }

    private static void DownloadPdbs(bool fromFile)
    {
        string rootPathToSave = Path.Combine(Environment.CurrentDirectory, "sym");
        if (Directory.Exists(rootPathToSave) == false)
        {
            Directory.CreateDirectory(rootPathToSave);
        }

        Process currentProcess = Process.GetCurrentProcess();
        foreach (ProcessModule pm in currentProcess.Modules)
        {
            Console.WriteLine($"[{pm.FileName}, 0x{pm.BaseAddress.ToString("x")}]");

            PEImage pe = null;

            if (fromFile == true)
            {
                pe = PEImage.ReadFromFile(pm.FileName);
            }
            else
            {
                pe = PEImage.ReadFromMemory(pm.BaseAddress, pm.ModuleMemorySize);
            }

            if (pe == null)
            {
                Console.WriteLine("Failed to read images");
                return;
            }

            string modulePath = pm.FileName;
            DownloadPdb(modulePath, rootPathToSave);

            Console.WriteLine();
        }
    }

    private static void DownloadPdb(string modulePath, string rootPathToSave)
    {
        if (File.Exists(modulePath) == false)
        {
            Console.WriteLine("NOT Found: " + modulePath);
            return;
        }

        PEImage pe = PEImage.ReadFromFile(modulePath);
        if (pe == null)
        {
            Console.WriteLine("Failed to read images");
            return;
        }

        Uri baseUri = new Uri("https://msdl.microsoft.com/download/symbols/");

        foreach (CodeViewRSDS codeView in pe.EnumerateCodeViewDebugInfo())
        {
            if (string.IsNullOrEmpty(codeView.PdbFileName) == true)
            {
                continue;
            }

            string pdbFileName = codeView.PdbFileName;
            if (Path.IsPathRooted(codeView.PdbFileName) == true)
            {
                pdbFileName = Path.GetFileName(codeView.PdbFileName);
            }

            Console.WriteLine("\tFileName: " + pdbFileName);
            Console.WriteLine("\tPdbFileName: " + codeView.PdbFileName);
            Console.WriteLine("\tLocal: " + codeView.PdbLocalPath);
            Console.WriteLine("\tUri: " + codeView.PdbUriPath);

            string localPath = Path.Combine(rootPathToSave, codeView.PdbLocalPath);
            string localFolder = Path.GetDirectoryName(localPath);

            if (Directory.Exists(localFolder) == false)
            {
                try
                {
                    Directory.CreateDirectory(localFolder);
                }
                catch (DirectoryNotFoundException)
                {
                    Console.WriteLine("NOT Found on local: " + codeView.PdbLocalPath);
                    continue;
                }
            }

            if (File.Exists(localPath) == true)
            {
                Console.WriteLine("Found on local: " + pdbFileName);
                continue;
            }

            if (CopyPdbFromLocal(modulePath, codeView.PdbFileName, localPath) == true)
            {
                Console.WriteLine("Found on local: " + pdbFileName);
                continue;
            }

            Uri target = new Uri(baseUri, codeView.PdbUriPath);
            Console.WriteLine(target);

            Uri pdbLocation = GetPdbLocation(target);

            if (pdbLocation == null)
            {
                string underscorePath = ProbeWithUnderscore(target.AbsoluteUri);
                pdbLocation = GetPdbLocation(new Uri(underscorePath));
            }

            if (pdbLocation != null)
            {
                DownloadPdbFile(pdbLocation, localPath);
            }
            else
            {
                Console.WriteLine("Not Found on symbol server: " + codeView.PdbFileName);
            }
        }

        Console.WriteLine();
    }

    private static bool CopyPdbFromLocal(string modulePath, string pdbFileName, string localTargetPath)
    {
        if (File.Exists(pdbFileName) == true)
        {
            File.Copy(pdbFileName, localTargetPath);
            return File.Exists(localTargetPath);
        }

        string fileName = Path.GetFileName(pdbFileName);
        string pdbPath = Path.Combine(Environment.CurrentDirectory, fileName);

        if (File.Exists(pdbPath) == true)
        {
            File.Copy(pdbPath, localTargetPath);
            return File.Exists(localTargetPath);
        }

        pdbPath = Path.ChangeExtension(modulePath, ".pdb");
        if (File.Exists(pdbPath) == true)
        {
            File.Copy(pdbPath, localTargetPath);
            return File.Exists(localTargetPath);
        }

        return false;
    }

    private static string ProbeWithUnderscore(string path)
    {
        path = path.Remove(path.Length - 1);
        path = path.Insert(path.Length, "_");
        return path;
    }

    private static void DownloadPdbFile(Uri target, string pathToSave)
    {
        System.Net.HttpWebRequest req = System.Net.WebRequest.Create(target) as System.Net.HttpWebRequest;

        using (System.Net.HttpWebResponse resp = req.GetResponse() as System.Net.HttpWebResponse)
        using (FileStream fs = new FileStream(pathToSave, FileMode.CreateNew, FileAccess.Write, FileShare.None))
        using (BinaryWriter bw = new BinaryWriter(fs))
        {
            BinaryReader reader = new BinaryReader(resp.GetResponseStream());
            long contentLength = resp.ContentLength;

            while (contentLength > 0)
            {
                byte[] buffer = new byte[4096];
                int readBytes = reader.Read(buffer, 0, buffer.Length);
                bw.Write(buffer, 0, readBytes);

                contentLength -= readBytes;
            }
        }
    }

    private static Uri GetPdbLocation(Uri target)
    {
        System.Net.HttpWebRequest req = System.Net.WebRequest.Create(target) as System.Net.HttpWebRequest;
        req.Method = "HEAD";

        try
        {
            using (System.Net.HttpWebResponse resp = req.GetResponse() as System.Net.HttpWebResponse)
            {
                return resp.ResponseUri;
            }
        }
        catch (System.Net.WebException)
        {
            return null;
        }
    }

}

완전하게 동작하는 코드는 다음의 github에 공개되어 있습니다.

DotNetSamples/WinConsole/PEFormat/PEFormatSample/
; https://github.com/stjeong/DotNetSamples/tree/master/WinConsole/PEFormat/PEFormatSample

DotNetSamples/WinConsole/PEFormat/WindowsPE/
; https://github.com/stjeong/DotNetSamples/tree/master/WinConsole/PEFormat/WindowsPE




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]

[연관 글]






[최초 등록일: ]
[최종 수정일: 3/9/2024]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 




... 31  32  33  34  35  36  37  38  39  40  41  42  43  44  [45]  ...
NoWriterDateCnt.TitleFile(s)
12508정성태1/27/20218291개발 환경 구성: 523. Jupyter Notebook - Slide 플레이 버튼이 없는 경우
12507정성태1/26/20218422VS.NET IDE: 157. Visual Studio - Syntax Visualizer 메뉴가 없는 경우
12506정성태1/25/202111712.NET Framework: 1019. Microsoft.Tye 기본 사용법 소개 [1]
12505정성태1/23/20219411.NET Framework: 1018. .NET Core Kestrel 호스팅 - Web API 추가 [1]파일 다운로드1
12504정성태1/23/202110520.NET Framework: 1017. .NET 5에서의 네트워크 라이브러리 개선 (2) - HTTP/2, HTTP/3 관련 [1]
12503정성태1/21/20218833오류 유형: 696. C# - HttpClient: Requesting HTTP version 2.0 with version policy RequestVersionExact while HTTP/2 is not enabled.
12502정성태1/21/20219624.NET Framework: 1016. .NET Core HttpClient의 HTTP/2 지원파일 다운로드1
12501정성태1/21/20218710.NET Framework: 1015. .NET 5부터 HTTP/1.1, 2.0 선택을 위한 HttpVersionPolicy 동작 방식파일 다운로드1
12500정성태1/21/20219262.NET Framework: 1014. ASP.NET Core(Kestrel)의 HTTP/2 지원 여부파일 다운로드1
12499정성태1/20/202110463.NET Framework: 1013. .NET Core Kestrel 호스팅 - 포트 변경, non-localhost 접속 지원 및 https 등의 설정 변경 [1]파일 다운로드1
12498정성태1/20/20219433.NET Framework: 1012. .NET Core Kestrel 호스팅 - 비주얼 스튜디오의 Kestrel/IIS Express 프로파일 설정
12497정성태1/20/202110364.NET Framework: 1011. C# - OWIN Web API 예제 프로젝트 [1]파일 다운로드2
12496정성태1/19/20219176.NET Framework: 1010. .NET Core 콘솔 프로젝트에서 Kestrel 호스팅 방법 [1]
12495정성태1/19/202111230웹: 40. IIS의 HTTP/2 지원 여부 - h2, h2c [1]
12494정성태1/19/202110500개발 환경 구성: 522. WSL2 인스턴스와 호스트 측의 Hyper-V에 운영 중인 VM과 네트워크 연결을 하는 방법 [2]
12493정성태1/18/20218797.NET Framework: 1009. .NET 5에서의 네트워크 라이브러리 개선 (1) - HTTP 관련 [1]파일 다운로드1
12492정성태1/17/20218208오류 유형: 695. ASP.NET 0x80131620 Failed to bind to address
12491정성태1/16/20219847.NET Framework: 1008. 배열을 반환하는 C# COM 개체의 메서드를 C++에서 사용 시 메모리 누수 현상 [1]파일 다운로드1
12490정성태1/15/20219390.NET Framework: 1007. C# - foreach에서 열거 변수의 타입을 var로 쓰면 object로 추론하는 문제 [1]파일 다운로드1
12489정성태1/13/202110323.NET Framework: 1006. C# - DB에 저장한 텍스트의 (이모티콘을 비롯해) 유니코드 문자가 '?'로 보인다면? [1]
12488정성태1/13/202110575.NET Framework: 1005. C# - string 타입은 shallow copy일까요? deep copy일까요? [2]파일 다운로드1
12487정성태1/13/20219088.NET Framework: 1004. C# - GC Heap에 위치한 참조 개체의 주소를 알아내는 방법파일 다운로드1
12486정성태1/12/202110038.NET Framework: 1003. x64 환경에서 참조형의 기본 메모리 소비는 얼마나 될까요? [1]
12485정성태1/11/202110817Graphics: 38. C# - OpenCvSharp.VideoWriter에 BMP 파일을 1초씩 출력하는 예제파일 다운로드1
12484정성태1/9/202111486.NET Framework: 1002. C# - ReadOnlySequence<T> 소개파일 다운로드1
12483정성태1/8/20218560개발 환경 구성: 521. dotPeek - 훌륭한 역어셈블 소스 코드 생성 도구
... 31  32  33  34  35  36  37  38  39  40  41  42  43  44  [45]  ...