성태의 닷넷 이야기
홈 주인
모아 놓은 자료
프로그래밍
질문/답변
사용자 관리
사용자
메뉴
아티클
외부 아티클
유용한 코드
온라인 기능
MathJax 입력기
최근 덧글
[정성태] Detecting blocking calls using asyn...
[정성태] 아쉽게도, 커뮤니티는 아니고 개인 블로그입니다. ^^
[정성태] 질문이 잘 이해가 안 됩니다. 우선, 해당 소스코드에서 ILis...
[양승조
] var대신 dinamic으로 선언해서 해결은 했습니다. 맞는 해...
[양승조
] 또 막혔습니다. ㅠㅠ var list = props[i].Ge...
[양승조
] 아. 감사합니다. 어제는 안됐던것 같은데....정신을 차려야겠네...
[정성태] "props[i].GetValue(props[i])" 코드에서 ...
[정성태] 저렇게 조각 코드 말고, 실제로 재현이 되는 예제 프로젝트를 압...
[정성태] Modules 창(Ctrl+Shift+U)을 띄워서, 해당 Op...
[정성태] 만드실 수 있습니다. 단지, Unity 엔진 내의 스크립트와 W...
글쓰기
제목
이름
암호
전자우편
HTML
홈페이지
유형
제니퍼 .NET
닷넷
COM 개체 관련
스크립트
VC++
VS.NET IDE
Windows
Team Foundation Server
디버깅 기술
오류 유형
개발 환경 구성
웹
기타
Linux
Java
DDK
Math
Phone
Graphics
사물인터넷
부모글 보이기/감추기
내용
<div style='display: inline'> <h1 style='font-family: Malgun Gothic, Consolas; font-size: 20pt; color: #006699; text-align: center; font-weight: bold'>C# - 화면 캡처한 이미지를 ffmpeg(FFmpeg.AutoGen)로 동영상 처리 (저해상도 현상 해결)</h1> <p> 지난 글에서,<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > C# - 화면 캡처한 이미지를 ffmpeg(FFmpeg.AutoGen)로 동영상 처리 ; <a target='tab' href='https://www.sysnet.pe.kr/2/0/12897'>https://www.sysnet.pe.kr/2/0/12897</a> </pre> <br /> 화면 캡처 동영상을 OpenCvSharp.VideoWriter로 만들었던 것을 ffmpeg로 교체했었는데요, 일단 ffmpeg.AutoGen에서 제공하는 기본 H264 예제 코드를 이용해 포팅을 했지만 시간이 지날수록 화면이 깨지는 문제점이 있습니다.<br /> <br /> 그 당시에는 뭘 모르니 ^^; sws_scale에 문제가 있을 거라고 판단했었는데, 근래에 관련 소스 코드를 계속 공부하면서,<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > C# - ffmpeg(FFmpeg.AutoGen)를 이용한 비디오 프레임의 크기 및 포맷 변경 예제(scaling_video.c) ; <a target='tab' href='https://www.sysnet.pe.kr/2/0/12961'>https://www.sysnet.pe.kr/2/0/12961</a> </pre> <br /> 저건 코덱 측 레벨의 문제이지, sws_scale과는 전혀 상관이 없는 문제로 보입니다. 그래서, 웹상에서 여러 가지 H264 인코딩 관련 예제를 찾아봤는데,<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > ffmpeg libx264 AVCodecContext settings ; <a target='tab' href='https://stackoverflow.com/questions/9173012/ffmpeg-libx264-avcodeccontext-settings'>https://stackoverflow.com/questions/9173012/ffmpeg-libx264-avcodeccontext-settings</a> </pre> <br /> 위의 글에 bit_rate를 width * height * 4로 설정하는 코드가 있군요. ^^ 저게 설정을 하지 않으면 기본으로 200000 값을 가지고 있는데요, 어쨌든 저도 기존 소스 코드에서 아무것도 변경하지 않고 bit_rate만 늘렸더니,<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > public H264VideoStreamEncoder(Stream stream, AVCodecID codecId, AVPixelFormat destinationPixelFormat, int fps, Size frameSize) { _stream = stream; _frameSize = frameSize; _pCodec = ffmpeg.avcodec_find_encoder(codecId); if (_pCodec == null) throw new InvalidOperationException("Codec not found."); _pCodecContext = ffmpeg.avcodec_alloc_context3(_pCodec); <span style='color: blue; font-weight: bold'>_pCodecContext->bit_rate = frameSize.Width * frameSize.Height * 4;</span> _pCodecContext->width = frameSize.Width; _pCodecContext->height = frameSize.Height; _pCodecContext->time_base = new AVRational { num = 1, den = fps }; _pCodecContext->pix_fmt = destinationPixelFormat; ffmpeg.av_opt_set(_pCodecContext->priv_data, "preset", "veryslow", 0); ffmpeg.avcodec_open2(_pCodecContext, _pCodec, null).ThrowExceptionIfError(); _linesizeY = frameSize.Width; _linesizeU = frameSize.Width / 2; _linesizeV = frameSize.Width / 2; _ySize = _linesizeY * frameSize.Height; _uSize = _linesizeU * frameSize.Height / 2; } </pre> <br /> 오~~~ 깨지는 현상이 없어졌습니다. 그런데, 일부러 캡처하는 동안 해당 영역의 비주얼 스튜디오 윈도우를 빠르게 잡고 흔들었더니... 이렇게 깨지는 장면이 나옵니다.<br /> <br /> <img onclick='toggle_img(this)' class='imgView' alt='h264_high_encode_1.png' src='/SysWebRes/bbs/h264_high_encode_1.png' /><br /> <br /> 그러다, 윈도우를 다시 놓으면 정상적으로 깨지지 않는 화면으로 돌아옵니다. 테스트를 해보니, 약 12 정도 곱해서 설정하면,<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > _pCodecContext->bit_rate = frameSize.Width * frameSize.Height * 12; </pre> <br /> 유튜브에서 동계 올림픽 쇼트 트랙 동영상을 켜놓고 캡처를 한 것도 정상적으로 깨짐 현상이 없습니다. 그렇긴 한데, 문제가 있군요. ^^; 3분 정도 길이의 동영상인데 크기가 무려 380MB 가까이 됩니다. youtube_dl로 다운로드하면 소리 포함해도 88MB인 것을 감안하면 뭔가 또 다른 문제가 있는 듯합니다. ^^;<br /> <br /> <hr style='width: 50%' /><br /> <a name='no_container'></a> <br /> ffprobe로 위의 동영상 파일을 살펴보면,<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > C:\temp> <span style='color: blue; font-weight: bold'>ffprobe test.avi</span> ...[생략]... Input #0, h264, from 'test.avi': Duration: N/A, bitrate: N/A Stream #0:0: Video: h264 (<span style='color: blue; font-weight: bold'>Constrained Baseline</span>), yuv420p(progressive), 1920x1080, 29.75 fps, 30 tbr, 1200k tbn, 60 tbc </pre> <br /> 희한하군요, bit_rate 값이 N/A가 나옵니다. 이것 때문인지 동영상의 전체 재생시간도 나오지 않습니다. 그리고 h264의 profile이 "Constrained Baseline"으로 나옵니다. 예전 소스 코드에서,<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > C# - ffmpeg(FFmpeg.AutoGen) AVFormatContext를 이용해 ffprobe처럼 정보 출력 ; <a target='tab' href='https://www.sysnet.pe.kr/2/0/12948'>https://www.sysnet.pe.kr/2/0/12948</a> </pre> <br /> 테스트한 대부분의 동영상은 "h264 (High)"였었는데요, 이 값이 어떤 대단한 역할을 하는지는 모르겠지만 그래도 쉽게 다음의 코드 설정을 했더니,<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > _pCodecContext->profile = ffmpeg.FF_PROFILE_H264_HIGH; </pre> <br /> 이렇게 바뀌었습니다. ^^<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > C:\temp> <span style='color: blue; font-weight: bold'>ffprobe test.avi</span> ...[생략]... Input #0, h264, from 'test.avi': Duration: N/A, bitrate: N/A Stream #0:0: Video: h264 (<span style='color: blue; font-weight: bold'>High</span>), yuv420p(progressive), 1920x1080, 30 fps, 30 tbr, 1200k tbn, 60 tbc </pre> <br /> 하지만, 딱히 저게 설정되었다고 뭔가 변화가 눈에 띄지는 않았습니다. ^^ 어쨌든, 이렇게 서서히 공부하면서 개선을 해나가면 언젠가는 쓸만한 화면 캡처 프로그램이 나오겠죠?!!! ^^<br /> <br /> (<a target='tab' href='https://www.sysnet.pe.kr/bbs/DownloadAttachment.aspx?fid=1901&boardid=331301885'>첨부 파일은 이 글의 예제 코드를 포함</a>합니다.)<br /> <br /> <hr style='width: 50%' /><br /> <br /> 참고로, ffmpeg.AutoGen에서 제공하는 기본 H264 예제 코드가 출력하는 avi 파일은 container가 없는 비디오 스트림입니다. 그래서 단순히 윈도우에서 제공하는 "영화 및 TV" 앱을 이용해 재생하면 다음과 같은 오류 메시지가 발생합니다.<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > 재생할 수 없음 이 파일을 재생할 수 없습니다. 파일 형식이 지원되지 않거나, 파일 확장명이 올바르지 않거나, 파일이 손상되었을 수 있습니다. 0xc00d36c4 </pre> <br /> 이를 재생하려면 ffplay나 GOM 플레이어를 이용해야 합니다. 그리고, Container가 없는 유형이기 때문에 지난번에 설명한,<br /> <br /> <pre style='margin: 10px 0px 10px 10px; padding: 10px 0px 10px 10px; background-color: #fbedbb; overflow: auto; font-family: Consolas, Verdana;' > ffmpeg(FFmpeg.AutoGen)를 이용한 비디오 디코딩 예제(decode_video.c) - 세 번째 이야기 ; <a target='tab' href='https://www.sysnet.pe.kr/2/0/12960'>https://www.sysnet.pe.kr/2/0/12960</a> </pre> <br /> 비디오 디코딩의 예제 파일로 사용해 정상적인 pgm 파일 출력을 볼 수 있습니다.<br /> </p><br /> <br /><hr /><span style='color: Maroon'>[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]</span> </div>
첨부파일
스팸 방지용 인증 번호
6080
(왼쪽의 숫자를 입력해야 합니다.)