Microsoft MVP성태의 닷넷 이야기
.NET Framework: 885. C# - 닷넷 응용 프로그램에서 SQLite 사용 [링크 복사], [링크+제목 복사],
조회: 23020
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
(연관된 글이 3개 있습니다.)

C# - 닷넷 응용 프로그램에서 SQLite 사용

요즘엔, 웬만한 건 모두 NuGet에 다 들어 있으니... 검색을 해보면 가장 상단에 sqlite가 나옵니다.

sqlite 3.13.0
; https://www.nuget.org/packages/sqlite/

아쉽게도 저건 C/C++ 사용자를 위한 native DLL을 담고 있을 뿐 닷넷 개발자에게는 Microsoft.Data.Sqlite가 의미 있습니다.

[닷넷 프레임워크]
Install-Package Microsoft.Data.SQLite -Version 3.1.1
; https://www.nuget.org/packages/Microsoft.Data.Sqlite/

[닷넷 코어]
Install-Package Microsoft.Data.Sqlite.Core -Version 3.1.1
; https://www.nuget.org/packages/Microsoft.Data.Sqlite.Core/

현재(2020-02-09) 3.1.1 기준으로 .NET Standard 2.0을 요구하기 때문에 .NET Framework의 경우 4.6.1 이상의 프로젝트에서 참조 추가할 수 있습니다. 사용법은, System.Data의 명세를 따른 만큼 일전에 소개한 다른 DB들과,

무료 데이터베이스 서버 성능 비교(SQL Server Express, IBM DB2 Express, MySQL, Sybase, PostgreSQL, Oracle XE)
; https://www.sysnet.pe.kr/2/0/1411

코드 상으로 거의 유사합니다.

using Microsoft.Data.Sqlite;
using System;
using System.Collections.Generic;
using System.Data;
using System.IO;
using System.Linq;
using System.Text;

namespace ConsoleApp1
{
    class Program
    {
        static void Main(string[] args)
        {
            string currentPath = Path.GetDirectoryName(typeof(Program).Assembly.Location);
            string sqlFilePath = Path.Combine(currentPath, "test.sqlite");

            string connectionString = $"Data Source={sqlFilePath};";

            using (SqliteConnection connection = new SqliteConnection(connectionString))
            {
                connection.Open();

                CreateTableIfNotExists(connection);

                // Create
                SqliteCommand insertCommand = new SqliteCommand();
                insertCommand.Connection = connection;
                insertCommand.CommandText = "INSERT INTO mytable(id, NAME, age, DESCRIPTION) VALUES (@id, @NAME, @age, @DESCRIPTION)";

                insertCommand.Parameters.Add("@id", SqliteType.Integer);
                insertCommand.Parameters.Add("@NAME", SqliteType.Text, 50);
                insertCommand.Parameters.Add("@age", SqliteType.Integer);
                insertCommand.Parameters.Add("@DESCRIPTION", SqliteType.Text, 150);

                string nameValue = "Name" + Guid.NewGuid().ToString();
                insertCommand.Parameters[0].Value = (int)DateTime.Now.Ticks;
                insertCommand.Parameters[1].Value = nameValue;
                insertCommand.Parameters[2].Value = 10;
                insertCommand.Parameters[3].Value = nameValue + "_Description";

                int affected = insertCommand.ExecuteNonQuery();
                Console.WriteLine("# of affected row: " + affected);

                // Update
                SqliteCommand updateCommand = new SqliteCommand();
                updateCommand.Connection = connection;
                updateCommand.CommandText = "UPDATE mytable SET DESCRIPTION=@DESCRIPTION WHERE NAME=@NAME";

                updateCommand.Parameters.Add("@NAME", SqliteType.Text, 50);
                updateCommand.Parameters.Add("@DESCRIPTION", SqliteType.Text, 150);

                updateCommand.Parameters[0].Value = nameValue;
                updateCommand.Parameters[1].Value = nameValue + "_Description2";

                affected = updateCommand.ExecuteNonQuery();
                Console.WriteLine("# of affected row: " + affected);

                // Select - ExecuteScalar
                SqliteCommand selectCommand = new SqliteCommand();
                selectCommand.Connection = connection;
                selectCommand.CommandText = "SELECT count(*) FROM mytable";

                object result = selectCommand.ExecuteScalar();
                Console.WriteLine("# of records: " + result);

                // Select - DataTable
                DataSet ds = new DataSet();

                /* DataAdapter 미구현

                SqlDataAdapter da = new SqlDataAdapter("SELECT * FROM mytable", sqlConnection);
                da.Fill(ds, "mytable");

                DataTable dt = ds.Tables["mytable"];
                foreach (DataRow dr in dt.Rows)
                {
                    Console.WriteLine(string.Format("Name = {0}, Desc = {1}", dr["NAME"], dr["DESCRIPTION"]));
                }
                */

                // Delete
                SqliteCommand deleteCommand = new SqliteCommand();
                deleteCommand.Connection = connection;
                deleteCommand.CommandText = "DELETE FROM mytable WHERE NAME=@NAME";

                deleteCommand.Parameters.Add("@NAME", SqliteType.Text, 50);
                deleteCommand.Parameters[0].Value = nameValue;

                affected = deleteCommand.ExecuteNonQuery();
                Console.WriteLine("# of affected row: " + affected);
            }
        }

        private static void CreateTableIfNotExists(SqliteConnection conn)
        {
            string sql = "create table if not exists mytable(id int, NAME varchar(50), age int, DESCRIPTION varchar(150))";

            using (SqliteCommand command = new SqliteCommand(sql, conn))
            {
                command.ExecuteNonQuery();
            }

            sql = "create index if not exists idx_NAME on mytable(NAME)";
            using (SqliteCommand command = new SqliteCommand(sql, conn))
            {
                command.ExecuteNonQuery();
            }
        }
    }
}

단지 주요 차이점이라면 다음과 같은 정도가 됩니다.

  • 파일 기반
  • DataAdapter의 미구현
  • 타입명이 각각 SqliteConnection, SqliteCommand라는 것
  • SqliteType { Integer = 1, Real, Text, Blob } 4가지 필드 타입만 제공

(첨부 파일은 이 글의 예제 코드를 포함합니다.)




그 외에 유의할 사항으로는, 대량 데이터 INSERT 시 속도가 (대단히) 느리다는 점입니다. 이에 대해서는 다음의 글에도 나오지만,

SQLite is creating a transaction for each insert
; https://stackoverflow.com/questions/3852068/sqlite-insert-very-slow

다중 실행 시 "being", "end" 명령어로 명시적인 트랜잭션을 취하면 됩니다. 따라서, ADO.NET의 전통적인 방식에 따라 SqliteTransaction 타입을 이용해 처리하거나,

using (SqliteTransaction mytransaction = connection.BeginTransaction())
{
    insertCommand.Transaction = mytransaction;
    insertCommand.Connection = connection;

    for (int i = 0; i < 100; i++)
    {
        string nameValue = "Name" + Guid.NewGuid().ToString();
        insertCommand.Parameters[0].Value = (int)DateTime.Now.Ticks;
        insertCommand.Parameters[1].Value = nameValue;
        insertCommand.Parameters[2].Value = 10;
        insertCommand.Parameters[3].Value = nameValue + "_Description";

        int affected = insertCommand.ExecuteNonQuery();
        Console.WriteLine("# of affected row: " + affected);
    }

    mytransaction.Commit();
}

SqliteTransaction을 사용하지 않고 직접 "begin", "end" 명령어를 사용해도 무방합니다. 아래는 해당 명령어를 이용한 래퍼 클래스의 사용법을 보여줍니다.

using (SqliteBulk bulk = new SqliteBulk(connection))
{
    for (int i = 0; i < 100; i++)
    {
        string nameValue = "Name" + Guid.NewGuid().ToString();
        insertCommand.Parameters[0].Value = (int)DateTime.Now.Ticks;
        insertCommand.Parameters[1].Value = nameValue;
        insertCommand.Parameters[2].Value = 10;
        insertCommand.Parameters[3].Value = nameValue + "_Description";

        int affected = insertCommand.ExecuteNonQuery();
        Console.WriteLine("# of affected row: " + affected);
    }
}

public sealed class SqliteBulk : IDisposable
{
    SqliteConnection _connection;

    public SqliteBulk(SqliteConnection connection)
    {
        _connection = connection;
        new SqliteCommand("begin", connection).ExecuteNonQuery();
    }

    public void Dispose()
    {
        new SqliteCommand("end", _connection).ExecuteNonQuery();
    }
}




참고로, sqlite 파일의 내부를 보려면 별도의 도구를 다운로드해야 합니다.

DB Browser for SQLite
; https://sqlitebrowser.org/dl/

또한, Microsoft.Data.SQLite는 내부적으로 SQLitePCL을 라이선스해 사용하는 것으로 보이는데, 이에 대한 소스 코드도 다음의 사이트에 공개되어 있습니다.

ericsink/SQLitePCL.raw
    - A Portable Class Library (PCL) for low-level (raw) access to SQLite
; https://github.com/ericsink/SQLitePCL.raw

그 외에 다른 글을 찾아보면,

C#으로 SQLite 다루기
; http://www.gisdeveloper.co.kr/?p=2290

SQLite 공식 사이트에서도 배포하는 패키지가 있다고 하니, Microsoft.Data.SQLite 대신 그것을 사용해도 무방할 것입니다. (그나저나... 공식 사이트에서 배포한 버전이 좋을까요? Microsoft가 배포한 버전이 좋을까요? ^^)




예외 상황 하나 정리해 보면, SqliteTransaction 트랜잭션 사용 시 SqliteCommand의 Transaction 속성에 명시적으로 트랜잭션 인스턴스를 설정하지 않으면,

// insertCommand.Transaction = mytransaction;

다음과 같은 식의 예외가 발생합니다.

Unhandled Exception: System.InvalidOperationException: Execute requires the command to have a transaction object when the connection assigned to the command is in a pending local transaction.  The Transaction property of the command has not been initialized.
   at Microsoft.Data.Sqlite.SqliteCommand.ExecuteReader(CommandBehavior behavior)
   at Microsoft.Data.Sqlite.SqliteCommand.ExecuteNonQuery()
   at ConsoleApp1.Program.Main(String[] args) in C:\ConsoleApp1\ConsoleApp1\Program.cs:line 57




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]

[연관 글]






[최초 등록일: ]
[최종 수정일: 4/19/2023]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 



2020-05-16 12시06분
[gwise] Microsoft.Data.Sqlite vs System.Data.SQLite 2개중에 어느게 좋은가요? 궁금합니다.
[guest]
2020-05-16 12시25분
그러게요... ^^ 어느게 좋을지 저도 모르겠군요. (gwise 님의 블로그에 테스트 해보시고 정리한 글을 올리시면 어떨까요? ^^)
정성태
2020-05-16 02시18분
[gwise] Prepare()이 System.Data.SQLite는 안되어 있고 Microsoft.Data.Sqlite는 구현되어 있는거 같습니다.
그리고 저장/조회 속도면에서 Microsoft.Data.Sqlite가 조금 더 빠르긴 하나 이건 사용자가 느낄 정도는 아니라서..
저는 .net 4.5를 사용해야 해서 System.Data.SQLite를 사용하는데 이 조건이 아니라면 Microsoft.Data.Sqlite이 좋아 보입니다.
[guest]
2022-12-09 11시48분
[gwise] 2년을 지나 검색해서 이 글에 다시 왔습니다.
로컬 프로그램 개발이 필요해서 Postgresql과 Sqlite를 고민 했으나 Postgresql는 사용자가 별도 설치를 해야 해서 Sqlite로 결정했는데 암호화에서 문제가 됐습니다.
 System.Data.SQLite는 기능(DataAdapter 개꿀..넘좋음)이 많으나 암호화 하려면 SEE라이선스 $2,000을 구입해야 해서 결국 Microsoft.Data.Sqlite 를 사용하게 됐습니다.

Microsoft.Data.Sqlite에서 DataAdapter 가 없어서 아래 처럼 비슷하게 사용했습니다.
SqliteDataReader reader = selectCommand.ExecuteReader();
dt.Load(reader);

암호화는 아래 처럼 하면 된다고 되어 있는데 역시 한번에 안되고
https://learn.microsoft.com/ko-kr/dotnet/standard/data/sqlite/encryption?tabs=netcore-cli

C:\Users\gwise\.nuget\packages\sqlitepclraw.lib.e_sqlcipher\2.1.3 해당 폴더의 runtimes 폴더 전체를 Debug에 복사 해 두고 하면 됩니다.
물론 배포 할 때도 runtimes 폴더 같이 해야 합니다.

이렇게 해서 테스트 해보니 암호화는 잘 됐습니다. 생성된 db파일을 DB Browser (SQLite)에서 열어 볼려고 하니 안 열리고 DB Browser (SQLCipher)에서 비밀번호 입력해야 열립니다.

성능은 잘 모르겠고 개발 편의성은 System.Data.SQLite이 개꿀이긴 하나 암호화를 해야 한다면 Microsoft.Data.Sqlite을 선택하는걸 추천합니다.
물론 돈이 많아서 200만원 정도 주도 SEE 살 정도 되면 System.Data.SQLite으로 선택

성태님 감사해요~!. 저의 닷넷 개발의 대부분은 성태님의 지식에서 기반 합니다. ^^
[guest]
2022-12-09 12시25분
좋은 정보 공유 감사드립니다. 끈기 있으시군요. ^^ gwise 님은 제가 아니었더라도 docs/learn 사이트를 참고하며 잘 공부하셨을 것입니다.
정성태
2023-04-18 10시02분
[guest] Sqlite는 암호화의 문제가 있군요nn
[guest]

... 151  152  153  154  155  156  157  158  159  160  161  162  163  [164]  165  ...
NoWriterDateCnt.TitleFile(s)
944정성태11/11/201031530VC++: 43. C++/CLI 컴파일 오류 - error C2872: 'IServiceProvider' : ambiguous symbol could be ...
943정성태11/8/201030662디버깅 기술: 30. windbg ".loadby sos" 명령어 [2]
942정성태11/7/201042276.NET Framework: 187. 실행 시에 메서드 가로채기 - CLR Injection: Runtime Method Replacer 개선 [7]파일 다운로드3
941정성태11/6/201025166.NET Framework: 186. windbg로 확인하는 .NET CLR LCG 메서드(DynamicMethod) [1]파일 다운로드1
940정성태11/6/201026032.NET Framework: 185. windbg로 확인하는 .NET CLR 메서드파일 다운로드1
939정성태10/24/201033012Windows: 51. RDP로 접속한 Windows Server 2008 R2 환경에서 Aero Glass 활성화 [1]
938정성태10/23/201024784디버깅 기술: 29. Windbg - Hyper-V 윈도우 7 원격 디버깅 구성 [1]
937정성태10/22/201030910DDK: 5. NT Legacy 드라이버: 프로세스(EXE) 생성/제거 모니터링 [3]파일 다운로드1
936정성태10/21/201029910DDK: 4. Device Driver 응용 프로그램의 빌드 스크립트 - 두 번째 이야기 [2]파일 다운로드1
935정성태10/17/201030529디버깅 기술: 28. Windbg - 윈도우 핸들 테이블 [3]
934정성태10/11/201033532디버깅 기술: 27. Windbg - Local Kernel Debug 모드 [2]
933정성태10/10/201025706.NET Framework: 184. 닷넷에서 호출 스택의 메서드에 대한 인자 값 확인이 가능할까? [2]파일 다운로드1
932정성태10/10/201028934DDK: 3. NT Legacy 드라이버를 이용하여 C#에서 Port 입출력파일 다운로드1
931정성태9/30/201023503오류 유형: 108. Net.Tcp Listener Adapter 서비스 시작 실패
930정성태9/30/201022787웹: 16. 윈도우 미디어 플레이어 - 일시 정지/시작을 스크립트에서 감지
929정성태9/17/201024054웹: 15. IE 9 - 작업 표시줄의 웹 사이트 바로가기 사용자 정의 - JumpLists [3]파일 다운로드1
928정성태9/16/201028228VC++: 42. 쓰기 전용 파일(예: 로그 파일)의 동기화 방법파일 다운로드1
927정성태9/14/201038108VC++: 41. UTF-8 포맷의 INI 파일에 대한 GetPrivateProfile... API 사용 불가 [2]
926정성태9/9/201027370Team Foundation Server: 41. 빌드 스크립트에 Code Coverage 추가 [1]파일 다운로드1
925정성태9/8/201031296Team Foundation Server: 40. Visual Studio 2010 - Code Coverage 결과를 외부 XML 파일로 출력하는 명령행 도구 제작 [1]파일 다운로드1
924정성태9/6/201021549개발 환경 구성: 88. SCVMM이 설치된 도메인에 참여하지 않은 Hyper-V 호스트 추가
923정성태9/5/201027542오류 유형: 107. SCVMM Agent 설치 오류 - Failed to configure the WS-Management service.
922정성태9/4/201036187오류 유형: 106. Hyper-V 가상 머신의 네트워크 끊김 현상
921정성태9/2/201030210DDK: 2. Device Driver 응용 프로그램의 빌드 스크립트 [2]파일 다운로드1
920정성태9/1/201034677오류 유형: 105. WMI - The RPC server is unavailable [2]
919정성태8/30/201040737DDK: 1. Visual Studio 2010 - Device Driver 제작- Hello World 예제 [3]파일 다운로드1
... 151  152  153  154  155  156  157  158  159  160  161  162  163  [164]  165  ...