사운드와 원본 비디오 데이터간에 ffmpeg가 커지면 지연되는 것을 방지하려면 어떻게합니까?

Question

여러분, 안녕하세요.

내 문제는 다음과 같습니다. 원시 비디오 프레임을 표준 출력으로 파이핑하는 프로그램이 있습니다. 이 프로그램은 OpenCV를 사용하여 비디오를 캡처하고 처리하며 처리 된 프레임을 직접 출력합니다. 루프가 내가 선택한 프레임 속도에 동기화됩니다. 나는 ffmpeg를 표준 입력에서 읽기 위해 사용하고 있으며 모든 것이 비디오에서 잘 작동한다. 그러나 이제는 큰 문제가있는 사운드를 추가했습니다. 점점 더 지연되고 있으며 정말로 제거해야합니다. 그래서 여기에 제 아이디어가 있습니다. 그러나 당신의 도움이 정말로 필요합니다 :

원시 비디오에 타임 스탬프 정보를 포함시키는 방법을 찾아야합니다. ffmpeg가 이해할 수 있으려면, 알려진 원시 비디오 호환 컨테이너 여야합니다. 그리고 컨테이너 API를 사용하여 프로그램의 표준 출력에 파이프해야합니다. 나는 비디오 포맷과 코덱의 정글에서 무엇을 사용해야할지 모르며, ffmpeg에서 타임 스탬프를 동기화하는 방법을 알지 못한다. ...

누구나 아이디어가 있다면, 나는 정말로 여기에 관심이있다.

./myprogram | ffmpeg -y -f alsa -i pulse -ac 2 -f rawvideo -vcodec rawvideo -r 24 -s 640x480 -pix_fmt bgr24 -i - -vcodec libx264 -pix_fmt yuv420p -r 24 -f flv -ar 44100 out.flv; 

Thand 대단히,

비디오와 오디오 사이의 지연이 멀티미디어에있는 오래 된 문제 롤랜드

Answer 1

: 자세한 내용은 여기 내가 파이프에 원시 영상을 사용하여 명령 줄입니다 공간. 이를 해결할 은색의 글 머리 기호는 없지만 다른 코덱을 사용하려고 할 수 있습니다 (특히 마이크로 소프트가 아닌 새로운 코덱). 더 낮은 지연을 발견 할 수 있으며, 괜찮은 비디오 길이 (1 시간)의 경우에는 별다른 효과가 없습니다.

Answer 2

쉬운 방법은 오디오 파일 &을 세그먼트 단위로 처리하는 것입니다 (예 : 비디오 및 오디오 30 분 잘라 내기). 스트림이 비동기식이기 때문에 ffmpeg로 제어 할 수 있습니다. 가이드 here 또는 here을 참조하십시오. ffmpeg가 동일한 파일의 소스로 작업 할 수 있으므로 두 가지 파일 (스트림)이 필요하지 않습니다.

지연을 알았 으면 다음 세그먼트 등을 반복합니다.

가끔 오디오가 30 분보다 길거나 33 분이 될 수 있습니다. 그런 다음 'Audacity'을 사용하여 병합하기 전에 길이를 30 분으로 줄입니다.