Microsoft MVP성태의 닷넷 이야기
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일

C# - kubectl 명령어 또는 REST API 대신 Kubernetes 클라이언트 라이브러리를 통해 프로그래밍으로 접근

전에 k8s 서비스와 REST API 통신을 하는 방법에 대해 알아봤는데요,

Kubernetes - kube-apiserver와 REST API 통신하는 방법 (Docker Desktop for Windows 환경)
; https://www.sysnet.pe.kr/2/0/12566

이미 고마우신 분들이 ^^ C# 전용 클라이언트를 만들어 두었기 때문에,

kubernetes-client/csharp
; https://github.com/kubernetes-client/csharp

패키지 참조 추가로 간단하게,

// .NET 5 또는 .NET Standard 2.1 이상

Install-Package KubernetesClient

// 물론 C# 뿐만 아니라 Go, Python, Java, JavaScript, Haskell 언어도 공식 클라이언트 라이브러리를 지원합니다.
// 
// Access Clusters Using the Kubernetes API
// ; https://kubernetes.io/docs/tasks/administer-cluster/access-cluster-api/

형식 안정성 있는 프로그램이 가능합니다. 예를 들어, "service account token" 값을 가져오는 kubectl 명령어가 있었는데요,

c:\temp> kubectl get secrets
NAME                  TYPE                                  DATA   AGE
default-token-qnwbl   kubernetes.io/service-account-token   3      50d

c:\temp> kubectl describe secret default-token-qnwbl
Name:         default-token-qnwbl
Namespace:    default
Labels:       <none>
Annotations:  kubernetes.io/service-account.name: default
              kubernetes.io/service-account.uid: 6a8f5d0c-db54-4018-b060-f311583546c0

Type:  kubernetes.io/service-account-token

Data
====
namespace:  7 bytes
token:      eyJhbGciOiJSUzI...[생략]...lzn1lGmAh1w
ca.crt:     1025 bytes

이런 정보를 KubernetesClient 패키지를 이용해 다음과 같이 조회할 수 있습니다.

using k8s;
using System;
using System.Text;

namespace k8sutil
{
    class Program
    {
        static void Main(string[] args)
        {
            string path = Environment.ExpandEnvironmentVariables(@"%USERPROFILE%\.kube\config");
            KubernetesClientConfiguration config = KubernetesClientConfiguration.BuildConfigFromConfigFile(path);
            // 또는, KubernetesClientConfiguration config = KubernetesClientConfiguration.BuildDefaultConfig();

            IKubernetes client = new Kubernetes(config);

            ListSecrets(client);

            Console.WriteLine();

            /* 혹은, secrets의 이름과 네임스페이스를 알고 있다면 곧바로 쿼리

c:\temp> kubectl get secrets
NAME                  TYPE                                  DATA   AGE
default-token-qnwbl   kubernetes.io/service-account-token   3      50d
            */

            // var v1secret = client.ReadNamespacedSecret("default-token-qnwbl", "default");

            string secretName = client.ListNamespacedSecret("default").Items[0].Metadata.Name;
            string namespaceProperty = "default";
            var v1secret = client.ReadNamespacedSecret(secretName, namespaceProperty);
            foreach (var data in v1secret.Data)
            {
                Console.WriteLine($"\t{data.Key} == {data.Value.Length} byte(s)");
            }
        }

        private static void ListSecrets(IKubernetes client)
        {
            var list = client.ListNamespacedSecret("default");
            foreach (var item in list.Items)
            {
                Console.WriteLine($"{nameof(item.ApiVersion)}: {item.ApiVersion}"); // (null)
                Console.WriteLine($"{nameof(item.StringData)}: {item.StringData}"); // (null)

                Console.WriteLine($"{nameof(item.Type)}: {item.Type}"); // kubernetes.io/service-account-token
                Console.WriteLine($"{nameof(item.Kind)}: {item.Kind}"); // (null)

                Console.WriteLine($"{nameof(item.Immutable)}: {item.Immutable}"); // (null)

                Console.WriteLine();

                Console.WriteLine("=== V1ObjectMetadata ===");
                Console.WriteLine($"\t{nameof(item.Metadata.Name)}: {item.Metadata.Name}"); // default-token-qnwbl
                Console.WriteLine($"\t{nameof(item.Metadata.ClusterName)}: {item.Metadata.ClusterName}"); // (null)
                Console.WriteLine($"\t{nameof(item.Metadata.CreationTimestamp)}: {item.Metadata.CreationTimestamp}"); // 2021-01-25 오전 6:01:59
                Console.WriteLine($"\t{nameof(item.Metadata.DeletionGracePeriodSeconds)}: {item.Metadata.DeletionGracePeriodSeconds}"); // (null)
                Console.WriteLine($"\t{nameof(item.Metadata.GenerateName)}: {item.Metadata.GenerateName}"); // (null)
                Console.WriteLine($"\t{nameof(item.Metadata.Generation)}: {item.Metadata.Generation}"); // (null)
                Console.WriteLine($"\t{nameof(item.Metadata.NamespaceProperty)}: {item.Metadata.NamespaceProperty}"); // default
                Console.WriteLine($"\t{nameof(item.Metadata.SelfLink)}: {item.Metadata.SelfLink}"); // /api/v1/namespaces/default/secrets/default-token-qnwbl
                Console.WriteLine($"\t{nameof(item.Metadata.Uid)}: {item.Metadata.Uid}"); // 6c584cda-d9a9-4b5c-8489-7e4365866014

                Console.WriteLine();

                Console.WriteLine($"=== Annotations ({item.Metadata.Annotations.Count}) ===");
                foreach (var (k, v) in item.Metadata.Annotations)
                {
                    Console.WriteLine($"\t{k} == {v}");
                }

                Console.WriteLine();

                Console.WriteLine($"=== Labels ({item.Metadata.Labels?.Count}) ===");
                if (item.Metadata.Labels != null)
                {
                    foreach (var (k, v) in item.Metadata.Labels)
                    {
                        Console.WriteLine($"\t{k} == {v}");
                    }
                }

                Console.WriteLine();

                Console.WriteLine($"=== OwnerReferences ({item.Metadata.OwnerReferences?.Count}) ===");
                if (item.Metadata.OwnerReferences != null)
                {
                    foreach (var data in item.Metadata.OwnerReferences)
                    {
                        PrintOwnerReference(data);
                    }
                }

                Console.WriteLine();

                Console.WriteLine($"=== ManagedFields ({item.Metadata.ManagedFields?.Count}) ===");
                if (item.Metadata.ManagedFields != null)
                {
                    foreach (var data in item.Metadata.ManagedFields)
                    {
                        Console.WriteLine($"\t{nameof(data.ApiVersion)}: {data.ApiVersion}"); // v1
                        Console.WriteLine($"\t{nameof(data.FieldsType)}: {data.FieldsType}"); // FieldsV1
                        Console.WriteLine($"\t{nameof(data.FieldsV1)}: {data.FieldsV1}"); // ...json...
                        Console.WriteLine($"\t{nameof(data.Operation)}: {data.Operation}"); // Update
                        Console.WriteLine($"\t{nameof(data.Manager)}: {data.Manager}"); // Kube-controller-manager
                        Console.WriteLine($"\t{nameof(data.Time)}: {data.Time}"); // v1
                    }
                }

                Console.WriteLine("=== Data ===");
                /*
                ca.crt == byte []
                namespace == byte [] ("default")
                token == byte []
                */
                foreach (var (k, v) in item.Data)
                {
                    Console.WriteLine($"\t{k} == {PrintValue(v)}");
                }

            }
        }

        private static void PrintOwnerReference(k8s.Models.V1OwnerReference data)
        {
            Console.WriteLine($"\t{nameof(data.ApiVersion)} == {data.ApiVersion}");
            Console.WriteLine($"\t{nameof(data.BlockOwnerDeletion)} == {data.BlockOwnerDeletion}");
            Console.WriteLine($"\t{nameof(data.Controller)} == {data.Controller}");
            Console.WriteLine($"\t{nameof(data.Kind)} == {data.Kind}");
            Console.WriteLine($"\t{nameof(data.Name)} == {data.Name}");
            Console.WriteLine($"\t{nameof(data.Uid)} == {data.Uid}");
        }

        private static string PrintValue(byte[] value)
        {
            return Encoding.UTF8.GetString(value);
        }
    }
}

출력 결과를 보면,

ApiVersion:
StringData:
Type: kubernetes.io/service-account-token
Kind:
Immutable:

=== V1ObjectMetadata ===
        Name: default-token-qnwbl
        ClusterName:
        CreationTimestamp: 2021-01-25 오전 6:01:59
        DeletionGracePeriodSeconds:
        GenerateName:
        Generation:
        NamespaceProperty: default
        SelfLink: /api/v1/namespaces/default/secrets/default-token-qnwbl
        Uid: 6c584cda-d9a9-4b5c-8489-7e4365866014

=== Annotations (2) ===
        kubernetes.io/service-account.name == default
        kubernetes.io/service-account.uid == 6a8f5d0c-db54-4018-b060-f311583546c0

=== Labels () ===

=== OwnerReferences () ===

=== ManagedFields (1) ===
        ApiVersion: v1
        FieldsType: FieldsV1
        FieldsV1: {
  "f:data": {
    ".": {},
    "f:ca.crt": {},
    "f:namespace": {},
    "f:token": {}
  },
  "f:metadata": {
    "f:annotations": {
      ".": {},
      "f:kubernetes.io/service-account.name": {},
      "f:kubernetes.io/service-account.uid": {}
    }
  },
  "f:type": {}
}
        Operation: Update
        Manager: kube-controller-manager
        Time: 2021-01-25 오전 6:01:59
=== Data ===
        ca.crt == -----BEGIN CERTIFICATE-----
MIICyDCCAbCgAwIBAgIBADANBgkqhkiG9w0BAQsFADAVMRMwEQYDVQQDEwprdWJl
AxMKa3Vi...[생략]...pGl6vpH/zMokqw
8FBcTBqYAlRJRiDWefzIy7tEPiSkOnLqtoVhBqL8WK6Xu15xzHJ5yO2yHTs=
-----END CERTIFICATE-----

        namespace == default
        token == eyJhbGciOiJSUzI1NiIsImtpZCI6IkpaSndaVndMbTByU1NBNnFXZl80ekZibE9zMk5oRHJtYzZSN19aSDNUSEkifQ.eyJpc3MiOiJrdWJlcm5ldGVzL3NlcnZpY2VhY2Nv...[생략]...NHgPtK1Z14-fIbt-jouEHsGa4ZZB1J3Xagxy0A4N7GCuNS-5fvn65B1EqVaaUgfbdHtz8E6cb0ZsEtqRvlsIjQYXlHv_3HyXWyF7SINjPRLTlzn1lGmAh1w

        ca.crt == 1025 byte(s)
        namespace == 7 byte(s)
        token == 900 byte(s)

이로부터 "kubectl get secrets" 명령어의 출력 결과와 동일한 값들을 뽑아낼 수 있을 것입니다.

(첨부 파일은 이 글의 예제 코드를 포함합니다.)




참고로, Yaml을 다루는 패키지도 함께 소개합니다. ^^

// aaubry/YamlDotNet
// ; https://github.com/aaubry/YamlDotNet

Install-Package YamlDotNet

자신이 정의한 yaml 규칙이 있다면 YamlDotNet을 이용해 I/O를 하는 것도 괜찮은 방법이겠습니다.




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]

[연관 글]


donaricano-btn



[최초 등록일: ]
[최종 수정일: 4/15/2021

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 쓴 사람
 



2021-04-23 08시49분
정성태

1  2  3  [4]  5  6  7  8  9  10  11  12  13  14  15  ...
NoWriterDateCnt.TitleFile(s)
12672정성태6/15/2021234오류 유형: 725. IntelliJ에서 Java webapp 실행 시 "Address localhost:1099 is already in use" 오류
12671정성태6/15/2021254오류 유형: 724. Tomcat 실행 시 Failed to initialize connector [Connector[HTTP/1.1-8080]] 오류
12670정성태6/13/2021191.NET Framework: 1071. DLL Surrogate를 이용한 Out-of-process COM 개체에서의 CoInitializeSecurity 문제파일 다운로드1
12669정성태6/11/2021301.NET Framework: 1070. 사용자 정의 GetHashCode 메서드 구현은 C# 9.0의 record 또는 리팩터링에 맡기세요.
12668정성태6/11/2021394.NET Framework: 1069. C# - DLL Surrogate를 이용한 Out-of-process COM 개체 제작파일 다운로드2
12667정성태6/10/2021283.NET Framework: 1068. COM+ 서버 응용 프로그램을 이용해 CoInitializeSecurity 제약 해결파일 다운로드1
12666정성태6/10/2021197.NET Framework: 1067. 별도 DLL에 포함된 타입을 STAThread Main 메서드에서 사용하는 경우 CoInitializeSecurity 자동 호출파일 다운로드1
12665정성태6/9/2021226.NET Framework: 1066. Wslhub.Sdk 사용으로 알아보는 CoInitializeSecurity 사용 제약파일 다운로드1
12664정성태6/9/2021170오류 유형: 723. COM+ PIA 참조 시 "This operation failed because the QueryInterface call on the COM component" 오류
12663정성태6/9/2021252.NET Framework: 1065. Windows Forms - 속성 창의 디자인 설정 지원: 문자열 목록 내에서 항목을 선택하는 TypeConverter 제작파일 다운로드1
12662정성태6/8/2021235.NET Framework: 1064. C# COM 개체를 PIA(Primary Interop Assembly)로써 "Embed Interop Types" 참조하는 방법파일 다운로드1
12661정성태6/4/2021667.NET Framework: 1063. C# - MQTT를 이용한 클라이언트/서버(Broker) 통신 예제 [3]파일 다운로드1
12660정성태6/3/2021362.NET Framework: 1062. Windows Forms - 폼 내에서 발생하는 마우스 이벤트를 자식 컨트롤 영역에 상관없이 수신하는 방법 [1]파일 다운로드1
12659정성태6/2/2021225Linux: 40. 우분투 설치 후 MBR 디스크 드라이브 여유 공간이 인식되지 않은 경우 - Logical Volume Management
12658정성태6/2/2021339Windows: 194. Microsoft Store에 있는 구글의 공식 Youtube App
12657정성태6/2/2021447Windows: 193. 윈도우 패키지 관리자 - winget 설치
12656정성태6/1/2021218.NET Framework: 1061. 서버 유형의 COM+에 적용할 수 없는 Server GC
12655정성태6/1/2021229오류 유형: 722. windbg/sos - savemodule - Fail to read memory
12654정성태5/31/2021224오류 유형: 721. Hyper-V - Saved 상태의 VM을 시작 시 오류 발생
12653정성태5/31/2021383.NET Framework: 1060. 닷넷 GC에 새롭게 구현되는 DPAD(Dynamic Promotion And Demotion for GC)
12652정성태5/31/2021214VS.NET IDE: 164. Visual Studio - Web Deploy로 Publish 시 암호창이 매번 뜨는 문제
12651정성태5/31/2021288오류 유형: 720. PostgreSQL - ERROR: 22P02: malformed array literal: "..."
12650정성태5/17/2021245기타: 82. OpenTabletDriver의 버튼에 더블 클릭을 매핑 및 게임에서의 지원 방법
12649정성태5/16/2021365.NET Framework: 1059. 세대 별 GC(Garbage Collection) 방식에서 Card table의 사용 의미
12648정성태5/16/2021291[예약]파일 다운로드1
12647정성태5/15/2021337.NET Framework: 1058. C# - C++과의 연동을 위한 구조체의 fixed 배열 필드 사용파일 다운로드1
1  2  3  [4]  5  6  7  8  9  10  11  12  13  14  15  ...