Microsoft MVP성태의 닷넷 이야기
Math: 63. C# - 3층 구조의 신경망 [링크 복사], [링크+제목 복사]
조회: 997
글쓴 사람
홈페이지
첨부 파일

C# - 3층 구조의 신경망

아래의 책에 보면,

실체가 손에 잡히는 딥러닝
; http://www.yes24.com/Product/Goods/74258238

3층 신경만을 표현한 파이썬 용 소스 코드가 나오는데 다음과 같습니다.

# http://nanya-kanya.net/index.php/1232/#outline__1_29

import numpy as np
import matplotlib.pyplot as plt

X = np.arange(-1.0, 1.0, 0.2)
Y = np.arange(-1.0, 1.0, 0.2)

Z = np.zeros((10, 10))

w_im = np.array([[2.0, -2.0],
                 [1.0, 4.0]])
w_mo = np.array([[1.0],
                 [-1.0]])

b_im = np.array([3.0, -3.0])
b_mo = np.array([0.1])

def middle_layer(x, w, b):
    u = np.dot(x, w) + b
    return 1 / (1 + np.exp(-u))

def output_layer(x, w, b):
    u = np.dot(x, w) + b
    return u

for i in range(10):
    for j in range(10):

        inp = np.array([X[i], Y[j]])
        mid = middle_layer(inp, w_im, b_im)
        out = output_layer(mid, w_mo, b_mo)

        Z[j][i] = out[0]
        
plt.imshow(Z, "gray", vmin = 0.0, vmax = 1.0)
plt.colorbar()
plt.show()

C#으로 표현한 후,

using MathNet.Numerics.LinearAlgebra;
using System;
using System.Linq;

using np = PythonUtils;
using vector = MathNet.Numerics.LinearAlgebra.Vector<double>;
using matrix = MathNet.Numerics.LinearAlgebra.Matrix<double>;

class Program
{
    static void Main(string[] args)
    {
        var X0 = np.arange(-1.0, 1.0, 0.2).ToArray();
        var X1 = np.arange(-1.0, 1.0, 0.2).ToArray();

        double[,] Y = new double[X0.Length, X1.Length];

        matrix w_im = GetMatrix(new[] { -4.0, 4.0 }, new[] { -4.0, -4.0 });
        matrix w_mo = GetMatrix(new[] { 1.0 }, new[] { -1.0 });

        vector b_im = GetVector(3.0, -3.0);
        vector b_mo = GetVector(0.1);

        Func<vector, matrix, vector, vector> middle_layer = (x, w, b) =>
        {
            vector u = x * w + b;
            return 1 / (1 + np.exp(-u));
        };

        Func<vector, matrix, vector, vector> output_layer = (x, w, b) =>
        {
            return x * w + b;
        };

        for (int i = 0; i < X0.Length; i++)
        {
            for (int j = 0; j < X1.Length; j++)
            {
                var inp = GetVector(X0[i], X1[j]);
                var mid = middle_layer(inp, w_im, b_im);
                var outp = output_layer(mid, w_mo, b_mo);

                Y[j, i] = outp[0];
            }
        }

        OutputImage("layer3_neuron.png");

        void OutputImage(string fileName)
        {
            Gridmap grid = new Gridmap(371, 371);
            grid.Show(Y, fileName);
        }
    }

    private static Matrix<double> GetMatrix(params double[][] values)
    {
        return CreateMatrix.DenseOfRows(values.Length, values[0].Length, values);
    }

    private static Vector<double> GetVector(params double [] values)
    {
        return CreateVector.DenseOfArray(values);
    }
}

실행해 보면, 좌측의 출력은 matplotlib의 출력이고 우측은 C# 출력입니다.

layer3_neuron.png

제 경우에, 신경망 출력의 값을 단순히 다음과 같이 gray 색으로 보간했는데,

double minX = gridmap.Min();
double maxX = gridmap.Max();

Func<double, double> lerf = (value) =>
{
    return (value - minX) / (maxX - minX);
};

for (int i = 0; i < count; i++)
{
    double h, l, s;
    double r1, g1, b1;

    h = 0;
    l = lerf(gridmap[i]);
    s = 0;

    pl.hlsrgb(h, l, s, out r1, out g1, out b1);
    r[i + 16] = (int)(r1 * 255.0);
    g[i + 16] = (int)(g1 * 255.0);
    b[i + 16] = (int)(b1 * 255.0);
}

matplotlib과 차이가 납니다. 어쩌면 보간 방식의 차이일 수도 있고, HLS to RGB 방식의 차이일 수 있는데 중요한 것은 신경망 출력이 가중치와 편향에 따라 다양해진다는 점이므로 넘어가도 좋겠습니다.

(첨부 파일은 이 글의 예제 코드를 포함합니다.)




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]

[연관 글]





[최초 등록일: ]
[최종 수정일: 7/7/2019 ]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer@outlook.com

비밀번호

댓글 쓴 사람
 




1  2  3  4  5  6  7  8  9  [10]  11  12  13  14  15  ...
NoWriterDateCnt.TitleFile(s)
11993정성태7/22/2019817오류 유형: 561. Dism.exe 수행 시 "Error: 2 - The system cannot find the file specified." 오류 발생
11992정성태7/22/2019938오류 유형: 560. 서비스 관리자 실행 시 "Windows was unable to open service control manager database on [...]. Error 5: Access is denied." 오류 발생
11991정성태7/18/2019687디버깅 기술: 128. windbg - x64 환경에서 닷넷 예외가 발생한 경우 인자를 확인할 수 없었던 사례
11990정성태3/16/20201388오류 유형: 559. Settings / Update & Security 화면 진입 시 프로그램 종료
11989정성태7/18/2019662Windows: 162. Windows Server 2019 빌드 17763부터 Alt + F4 입력시 곧바로 로그아웃하는 현상
11988정성태7/18/20191195개발 환경 구성: 453. 마이크로소프트가 지정한 모든 Root 인증서를 설치하는 방법
11987정성태7/17/20192680오류 유형: 558. 윈도우 - KMODE_EXCEPTION_NOT_HANDLED 블루스크린(BSOD) 문제
11986정성태7/18/2019774오류 유형: 557. 드라이브 문자를 할당하지 않은 파티션을 탐색기에서 드라이브 문자와 함께 보여주는 문제
11985정성태7/17/2019777개발 환경 구성: 452. msbuild - csproj에 환경 변수 조건 사용
11984정성태7/9/20191297개발 환경 구성: 451. Microsoft Edge (Chromium)을 대상으로 한 Selenium WebDriver 사용법
11983정성태7/8/2019787오류 유형: 556. nodemon - 'mocha' is not recognized as an internal or external command, operable program or batch file.
11982정성태7/8/2019823오류 유형: 555. Visual Studio 빌드 오류 - result: unexpected exception occured (-1002 - 0xfffffc16)
11981정성태7/7/20191028Math: 64. C# - 3층 구조의 신경망(분류)파일 다운로드1
11980정성태7/7/20193797개발 환경 구성: 450. Visual Studio Code의 Java 확장을 이용한 간단한 프로젝트 구축파일 다운로드1
11979정성태7/8/20191159개발 환경 구성: 449. TFS에서 gitlab/github등의 git 서버로 마이그레이션하는 방법
11978정성태7/6/20191132Windows: 161. 계정 정보가 동일하지 않은 PC 간의 인증을 수행하는 방법 [1]
11977정성태7/6/20191558오류 유형: 554. git push - error: RPC failed; HTTP 413 curl 22 The requested URL returned error: 413 Request Entity Too Large
11976정성태7/4/20191025오류 유형: 553. (잘못 인증 한 후) 원격 git repo 재인증 시 "remote: HTTP Basic: Access denied" 오류 발생
11975정성태7/4/20192438개발 환경 구성: 448. Visual Studio Code에서 콘솔 응용 프로그램 개발 시 "입력"받는 방법
11974정성태7/4/20191549Linux: 22. "Visual Studio Code + Remote Development"로 윈도우 환경에서 리눅스(CentOS 7) C/C++ 개발
11973정성태7/4/20191098Linux: 21. 리눅스에서 공유 라이브러리가 로드되지 않는다면?
11972정성태7/3/20191209.NET Framework: 847. JAVA와 .NET 간의 AES 암호화 연동파일 다운로드1
11971정성태7/3/20191161개발 환경 구성: 447. Visual Studio Code에서 OpenCvSharp 개발 환경 구성
11970정성태7/2/20191049오류 유형: 552. 웹 브라우저에서 파일 다운로드 후 "Running security scan"이 끝나지 않는 문제
11969정성태7/7/2019997Math: 63. C# - 3층 구조의 신경망파일 다운로드1
11968정성태7/1/20192059오류 유형: 551. Visual Studio Code에서 Remote-SSH 연결 시 "Opening Remote..." 단계에서 진행되지 않는 문제 [1]
1  2  3  4  5  6  7  8  9  [10]  11  12  13  14  15  ...