Microsoft MVP성태의 닷넷 이야기
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
 

(시리즈 글이 24개 있습니다.)
.NET Framework: 1129. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 비디오 인코딩 예제(encode_video.c)
; https://www.sysnet.pe.kr/2/0/12898

.NET Framework: 1134. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 비디오 디코딩 예제(decode_video.c)
; https://www.sysnet.pe.kr/2/0/12924

.NET Framework: 1135. C# - ffmpeg(FFmpeg.AutoGen)로 하드웨어 가속기를 이용한 비디오 디코딩 예제(hw_decode.c)
; https://www.sysnet.pe.kr/2/0/12932

.NET Framework: 1136. C# - ffmpeg(FFmpeg.AutoGen)를 이용해 MP2 오디오 파일 디코딩 예제(decode_audio.c)
; https://www.sysnet.pe.kr/2/0/12933

.NET Framework: 1137. ffmpeg의 파일 해시 예제(ffhash.c)를 C#으로 포팅
; https://www.sysnet.pe.kr/2/0/12935

.NET Framework: 1138. C# - ffmpeg(FFmpeg.AutoGen)를 이용해 멀티미디어 파일의 메타데이터를 보여주는 예제(metadata.c)
; https://www.sysnet.pe.kr/2/0/12936

.NET Framework: 1139. C# - ffmpeg(FFmpeg.AutoGen)를 이용해 오디오(mp2) 인코딩하는 예제(encode_audio.c)
; https://www.sysnet.pe.kr/2/0/12937

.NET Framework: 1147. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 오디오 필터링 예제(filtering_audio.c)
; https://www.sysnet.pe.kr/2/0/12951

.NET Framework: 1148. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 오디오 필터 예제(filter_audio.c)
; https://www.sysnet.pe.kr/2/0/12952

.NET Framework: 1150. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 비디오 디코딩 예제(decode_video.c) - 두 번째 이야기
; https://www.sysnet.pe.kr/2/0/12959

개발 환경 구성: 637. ffmpeg(FFmpeg.AutoGen)를 이용한 비디오 디코딩 예제(decode_video.c) - 세 번째 이야기
; https://www.sysnet.pe.kr/2/0/12960

.NET Framework: 1151. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 비디오 프레임의 크기 및 포맷 변경 예제(scaling_video.c)
; https://www.sysnet.pe.kr/2/0/12961

.NET Framework: 1153. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 avio_reading.c 예제 포팅
; https://www.sysnet.pe.kr/2/0/12964

.NET Framework: 1157. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 muxing.c 예제 포팅
; https://www.sysnet.pe.kr/2/0/12971

.NET Framework: 1159. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 qsvdec.c 예제 포팅
; https://www.sysnet.pe.kr/2/0/12975

.NET Framework: 1161. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 resampling_audio.c 예제 포팅
; https://www.sysnet.pe.kr/2/0/12978

.NET Framework: 1166. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 filtering_video.c 예제 포팅
; https://www.sysnet.pe.kr/2/0/12984

.NET Framework: 1169. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 demuxing_decoding.c 예제 포팅
; https://www.sysnet.pe.kr/2/0/12987

.NET Framework: 1170. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 transcode_aac.c 예제 포팅
; https://www.sysnet.pe.kr/2/0/12991

.NET Framework: 1178. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 http_multiclient.c 예제 포팅
; https://www.sysnet.pe.kr/2/0/13002

.NET Framework: 1180. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 remuxing.c 예제 포팅
; https://www.sysnet.pe.kr/2/0/13006

.NET Framework: 1188. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 transcoding.c 예제 포팅
; https://www.sysnet.pe.kr/2/0/13023

.NET Framework: 1190. C# - ffmpeg(FFmpeg.AutoGen)를 이용한 vaapi_encode.c, vaapi_transcode.c 예제 포팅
; https://www.sysnet.pe.kr/2/0/13025

.NET Framework: 1191. C 언어로 작성된 FFmpeg Examples의 C# 포팅 전체 소스 코드
; https://www.sysnet.pe.kr/2/0/13026




C# - ffmpeg(FFmpeg.AutoGen)를 이용한 http_multiclient.c 예제 포팅

지난 글에 이어,

C# - ffmpeg(FFmpeg.AutoGen)를 이용한 transcode_aac.c 예제 포팅
; https://www.sysnet.pe.kr/2/0/12991

이번에는 ffmpeg 예제 중 "http_multiclient.c" 파일을 FFmpeg.AutoGen으로 포팅하겠습니다.

using FFmpeg.AutoGen;
using FFmpeg.AutoGen.Example;
using System;
using System.IO;
using System.Runtime.InteropServices;
using System.Threading;

namespace http_multiclient
{
    internal unsafe class Program
    {
        static void process_client(AVIOContext* client, string in_uri)
        {
            AVIOContext* input = null;
            byte* buf = stackalloc byte[1024];
            Span<byte> buffer = new(buf, 1024);
            int ret, n, reply_code;
            byte* resource = null;
            string? text = null;

            while ((ret = ffmpeg.avio_handshake(client)) > 0)
            {
                ffmpeg.av_opt_get(client, "resource", ffmpeg.AV_OPT_SEARCH_CHILDREN, &resource);
                text = Marshal.PtrToStringAnsi(new IntPtr(resource));

                if (string.IsNullOrEmpty(text) == false)
                {
                    break;
                }

                ffmpeg.av_freep(&resource);
            }

            if (ret < 0)
            {
                goto end;
            }

            ffmpeg.av_log(client, ffmpeg.AV_LOG_TRACE, $"resource=0x{new IntPtr(resource):x}\n");

            if (text != null && text[0] == '/' /* && text.Substring(1) == in_uri */)
            {
                reply_code = 200;
            }
            else
            {
                reply_code = ffmpeg.AVERROR_HTTP_NOT_FOUND;
            }

            if ((ret = ffmpeg.av_opt_set_int(client, "reply_code", reply_code, ffmpeg.AV_OPT_SEARCH_CHILDREN)) < 0)
            {
                ffmpeg.av_log(client, ffmpeg.AV_LOG_ERROR, $"Failed to set reply_code: {FFmpegHelper.av_err2str(ret)}\n");
                goto end;
            }

            ffmpeg.av_log(client, ffmpeg.AV_LOG_TRACE, $"Set reply code to {reply_code}\n");

            while ((ret = ffmpeg.avio_handshake(client)) > 0) ;

            if (ret < 0)
            {
                goto end;
            }

            Console.WriteLine("Handshake performed");

            if (reply_code != 200)
            {
                goto end;
            }

            Console.WriteLine("Opening input file");
            if ((ret = ffmpeg.avio_open2(&input, in_uri, ffmpeg.AVIO_FLAG_READ, null, null)) < 0)
            {
                ffmpeg.av_log(input, ffmpeg.AV_LOG_ERROR, $"Failed to open input: {in_uri}: {FFmpegHelper.av_err2str(ret)}\n");
                goto end;
            }

            for (; ; )
            {
                n = ffmpeg.avio_read(input, buf, buffer.Length);
                if (n < 0)
                {
                    if (n == ffmpeg.AVERROR_EOF)
                    {
                        break;
                    }

                    ffmpeg.av_log(input, ffmpeg.AV_LOG_ERROR, $"Error reading from input: {FFmpegHelper.av_err2str(n)}\n");
                    break;
                }

                ffmpeg.avio_write(client, buf, n);
                ffmpeg.avio_flush(client);
            }

        end:
            Console.WriteLine("Flushing client");
            ffmpeg.avio_flush(client);
            Console.WriteLine("Closing clinet");
            ffmpeg.avio_close(client);
            Console.WriteLine("Closing input");
            ffmpeg.avio_close(input);
            ffmpeg.av_freep(&resource);
        }

        static unsafe int Main(string[] args)
        {
            FFmpegBinariesHelper.RegisterFFmpegBinaries();

#if DEBUG
            Console.WriteLine("Current directory: " + Environment.CurrentDirectory);
            Console.WriteLine("Running in {0}-bit mode.", Environment.Is64BitProcess ? "64" : "32");
            Console.WriteLine($"FFmpeg version info: {ffmpeg.av_version_info()}");

            Console.WriteLine();
#endif

            AVDictionary* options = null;
            AVIOContext* client = null;
            AVIOContext* server = null;
            string in_uri, out_uri;
            int ret;

            ffmpeg.av_log_set_level(ffmpeg.AV_LOG_TRACE);

            out_uri = "http://127.0.0.1:15384/";

            string dirPath = Path.GetDirectoryName(typeof(Program).Assembly.Location) ?? "";
            in_uri = Path.Combine(dirPath, "..", "..", "..", "Samples", "mpeg1video_q0.m1v");

            ffmpeg.avformat_network_init();

            if ((ret = ffmpeg.av_dict_set(&options, "listen", "2", 0)) < 0)
            {
                Console.WriteLine($"Failed to set listen mode for server: {FFmpegHelper.av_err2str(ret)}");
                return ret;
            }

            if ((ret = ffmpeg.avio_open2(&server, out_uri, ffmpeg.AVIO_FLAG_WRITE, null, &options)) < 0)
            {
                Console.WriteLine($"Failed to open server: {FFmpegHelper.av_err2str(ret)}");
                return ret;
            }

            Console.WriteLine("Entering main loop");

            for (; ;)
            {
                if ((ret = ffmpeg.avio_accept(server, &client)) < 0)
                {
                    goto end;
                }

                Console.WriteLine("Accepted client, forking/thraeding process.");

                AVIOContext** pClient = &client;

                Thread t = new Thread((obj) =>
                {
                    Console.WriteLine("Client....");
                    process_client(*pClient, in_uri);
                });

                t.Start();
            }

        end:

            ffmpeg.avio_close(server);
            if (ret < 0 && ret != ffmpeg.AVERROR_EOF)
            {
                Console.WriteLine($"Some errors occurred: {FFmpegHelper.av_err2str(ret)}");
                return 1;
            }

            return 0;
        }
    }

}

원본 "http_multiclient.c" 코드는 리눅스의 fork를 이용하지만, 위의 코드는 스레드를 이용했다는 정도의 차이가 있습니다.

잘 동작하는지 테스트까지 해볼까요? ^^

이 코드는, 예제 소개에서처럼 "This example will serve a file without decoding or demuxing it over http.Multiple clients can connect and will receive the same file."이라고, 동영상 파일에 대해 어떠한 디코딩도, 디먹싱도 하지 않습니다.

그렇다면, 클라이언트 측에서 어차피 디먹싱, 디코딩을 할 것이므로 온전한 mp4 파일을 서비스하면 될 것 같은데요,

// repo에 포함한 예제 비디오 파일

in_uri = Path.Combine(dirPath, "..", "..", "..", "Samples", "sample-10s.mp4");

그런데, 이것을 GOM 플레이어로 열었더니 재생시간은 10초 정도로 정확히 나오는데 영상은 그냥 검은 화면으로 재생이 됩니다.

혹시나 싶어, 그럼 먹싱은 하지 않고 영상만 포함하고 있는 파일을,

ffmpeg(FFmpeg.AutoGen)를 이용한 비디오 디코딩 예제(decode_video.c) - 세 번째 이야기
; https://www.sysnet.pe.kr/2/0/12960

// repo에 포함한 예제 비디오 파일: 컨테이너 없이 비디오 영상만 포함
in_uri = Path.Combine(dirPath, "..", "..", "..", "Samples", "mpeg1video_q0.m1v");

서비스했더니, 이번에는 GOM 플레이어에서 해당 동영상 재생이 잘 됩니다.

http_multi_clnt_1.png

또한 ffplay로도 다음과 같은 옵션으로 재생이 잘 되고.

ffplay -autoexit http://127.0.0.1:15384/

ffplay -autoexit -f mpegvideo http://127.0.0.1:15384/

다른 입력 파일도 해볼까요? 이전에 hw_decode 포팅에서,

C# - ffmpeg(FFmpeg.AutoGen)로 하드웨어 가속기를 이용한 비디오 디코딩 예제(hw_decode.c)
; https://www.sysnet.pe.kr/2/0/12932

출력한 파일은 컨테이너도 없고, raw 형식으로 NV12 포맷으로 디코딩된 데이터를 포함하고 있습니다. 이 파일로 서비스하게 되면,

// hw_decode 예제를 실행해 얻은 파일

in_uri = @"C:\ffmpeg_autogen_cs\hw_decode\bin\Debug\test.dat";

GOM 플레이어로는 이제 재생할 수 없고, ffplay에서는 다음과 같은 옵션으로 재생할 수 있습니다.

// test.dat 파일이 1920x1080 동영상이고 nv12 raw 포맷을 가지므로.

ffplay -autoexit -f rawvideo -pixel_format nv12 -video_size 1920x1080 http://127.0.0.1:15384/

(이 글의 소스 코드는 github에 올려져 있습니다.)




그런데, 재생 시간이 좀 흥미롭습니다.

테스트를 위해 (repo의 Samples 디렉터리에 포함시킨 5.00초 분량의) file_example_MP4_1920_18MG.mp4 파일을 hw_decode 예제로 출력한 test.dat 파일을 ffplay로 fps를 지정해 재생해 보면,

ffplay -autoexit -f rawvideo -framerate 30 -pixel_format nv12 -video_size 1920x1080 test.dat

4.96 ~ 4.98초 정도의 재생 시간이 나옵니다. 이것을 http_multiclient 예제를 통해 서비스하는 것을 재생해보면,

ffplay -autoexit -f rawvideo -framerate 30 -pixel_format nv12 -video_size 1920x1080 http://127.0.0.1:15384/

대략 7.77 ~ 8.10초 정도의 재생 시간이 나옵니다. 게다가, http_multiclient를 이용해 재생하는 경우에는 -framerate 옵션의 지정이 별다른 효력이 없었습니다. 즉, -framerate를 70으로 지정해도 동일하게 약 7.8초 정도의 재생 시간이 나왔습니다.

반면, (컨테이너는 없지만) 인코딩만은 시켰던 "mpeg1video_q0.m1v" 파일로 테스트하면 원래의 5.00초 정도로 재생이 잘 됩니다.




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]







[최초 등록일: ]
[최종 수정일: 3/14/2022]

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 작성자
 




1  2  3  [4]  5  6  7  8  9  10  11  12  13  14  15  ...
NoWriterDateCnt.TitleFile(s)
13843정성태12/13/20244381오류 유형: 938. Docker container 내에서 빌드 시 error MSB3021: Unable to copy file "..." to "...". Access to the path '...' is denied.
13842정성태12/12/20244534디버깅 기술: 205. Windbg - KPCR, KPRCB
13841정성태12/11/20244866오류 유형: 937. error MSB4044: The "ValidateValidArchitecture" task was not given a value for the required parameter "RemoteTarget"
13840정성태12/11/20244438오류 유형: 936. msbuild - Your project file doesn't list 'win' as a "RuntimeIdentifier"
13839정성태12/11/20244859오류 유형: 936. msbuild - error CS1617: Invalid option '12.0' for /langversion. Use '/langversion:?' to list supported values.
13838정성태12/4/20244595오류 유형: 935. Windbg - Breakpoint 0's offset expression evaluation failed.
13837정성태12/3/20245058디버깅 기술: 204. Windbg - 윈도우 핸들 테이블 (3) - Windows 10 이상인 경우
13836정성태12/3/20244624디버깅 기술: 203. Windbg - x64 가상 주소를 물리 주소로 변환 (페이지 크기가 2MB인 경우)
13835정성태12/2/20245071오류 유형: 934. Azure - rm: cannot remove '...': Directory not empty
13834정성태11/29/20245287Windows: 275. C# - CUI 애플리케이션과 Console 윈도우 (Windows 10 미만의 Classic Console 모드인 경우) [1]파일 다운로드1
13833정성태11/29/20244979개발 환경 구성: 737. Azure Web App에서 Scale-out으로 늘어난 리눅스 인스턴스에 SSH 접속하는 방법
13832정성태11/27/20244910Windows: 274. Windows 7부터 도입한 conhost.exe
13831정성태11/27/20244382Linux: 111. eBPF - BPF_MAP_TYPE_PERF_EVENT_ARRAY, BPF_MAP_TYPE_RINGBUF에 대한 다양한 용어들
13830정성태11/25/20245185개발 환경 구성: 736. 파이썬 웹 앱을 Azure App Service에 배포하기
13829정성태11/25/20245162스크립트: 67. 파이썬 - Windows 버전에서 함께 설치되는 py.exe
13828정성태11/25/20244440개발 환경 구성: 735. Azure - 압축 파일을 이용한 web app 배포 시 디렉터리 구분이 안 되는 문제파일 다운로드1
13827정성태11/25/20245091Windows: 273. Windows 환경의 파일 압축 방법 (tar, Compress-Archive)
13826정성태11/21/20245320닷넷: 2313. C# - (비밀번호 등의) Console로부터 입력받을 때 문자열 출력 숨기기(echo 끄기)파일 다운로드1
13825정성태11/21/20245667Linux: 110. eBPF / bpf2go - BPF_RINGBUF_OUTPUT / BPF_MAP_TYPE_RINGBUF 사용법
13824정성태11/20/20244750Linux: 109. eBPF / bpf2go - BPF_PERF_OUTPUT / BPF_MAP_TYPE_PERF_EVENT_ARRAY 사용법
13823정성태11/20/20245290개발 환경 구성: 734. Ubuntu에 docker, kubernetes (k3s) 설치
13822정성태11/20/20245155개발 환경 구성: 733. Windbg - VirtualBox VM의 커널 디버거 연결 시 COM 포트가 없는 경우
13821정성태11/18/20245079Linux: 108. Linux와 Windows의 프로세스/스레드 ID 관리 방식
13820정성태11/18/20245249VS.NET IDE: 195. Visual C++ - C# 프로젝트처럼 CopyToOutputDirectory 항목을 추가하는 방법
13819정성태11/15/20244490Linux: 107. eBPF - libbpf CO-RE의 CONFIG_DEBUG_INFO_BTF 빌드 여부에 대한 의존성
13818정성태11/15/20245288Windows: 272. Windows 11 24H2 - sudo 추가
1  2  3  [4]  5  6  7  8  9  10  11  12  13  14  15  ...