FFmpeg — це комплекс вільнихкомп'ютерних програм та програмних бібліотек для обробки відео, аудіо та інших мультимедійних файлів і потоків. У його основі лежить сам інструмент командного рядка ffmpeg, призначений для обробки відео та аудіофайлів. Проєкт широко використовується для перекодування форматів, базового редагування (обрізка та конкатенація), масштабування відео, ефектів постпродакшн відео та для дотримання стандартів (SMPTE[en], ITU).
FFmpeg також включає інші інструменти: ffplay, простий медіа програвач та ffprobe — інструмент командного рядка для відображення медіа-інфомації. Серед вхідних бібліотек є libavcodec, бібліотека аудіо-/відео- кодеків, яка використовується багатьма комерційними та безкоштовними програмними продуктами, libavformat (Lavf)[3], бібліотека мультиплексування та демуксування аудіо/відео контейнерів, а також libavfilter, бібліотека для покращення та редагування фільтрів за допомогою фільтр-граф, схожий на GStreamer.[4]
FFmpeg є частиною робочого процесу багатьох інших програмних проєктів, а його бібліотеки є основною частиною медіапрогравачів, таких як VLC, також були включені в основу обробки для YouTube і Bilibili.[5] У комплект входять кодери та декодери для багатьох форматів аудіо та відео файлів, що робить його дуже корисним для перекодування поширених і незвичайних медіафайлів.
Проєкт був започаткований Фабрісом Белларом (використовуючи псевдонім «Жерар Лантау») у 2000 році, а з 2004 по 2015 рік його очолював Міхаель Нідермайєр. Деякі розробники FFmpeg також були частиною проєкту MPlayer, а сам FFmpeg був розміщений на сервері проєкту MPlayer.
Назва проєкту навіяна групою стандартів відео MPEG разом із «FF» для «швидкої перемотування».[7] У логотипі використовується зигзагоподібний візерунок, який показує, як відеокодеки MPEG обробляють ентропійне кодування.
13 березня 2011 року група розробників FFmpeg вирішила розділити проєкт під назвою Libav.[8][9][10] Подія була пов’язана з проблемою в управлінні проєктами, у якій розробники не погодилися з керівництвом FFmpeg.[11][12]
10 січня 2014 року двоє співробітників Google оголосили, що протягом попередніх двох років у FFmpeg було виправлено понад 1000 помилок за допомогою fuzz-тестування.
У січні 2018 року програму командного рядка ffserver, який є давнім компонентом FFmpeg, було видалено.[13] Розробники відмовилися від програми, посилаючись на високі зусилля по обслуговуванню через використання внутрішніх інтерфейсів прикладного програмування.[14]
Проєкт публікує новий випуск у середньому кожні три місяці. Хоча версії випуску доступні на вебсайт для завантаження, розробники FFmpeg рекомендують користувачам компілювати програмне забезпечення з вихідного коду, використовуючи останню збірку з їх вихідного коду системи контролю версій Git.[15]
Історія кодеків
Наразі в рамках проєкту FFmpeg створено два формати кодування відео з відповідними кодеками та один формат контейнера. Два відеокодеки – це FFV1 (без втрат якості) та Snow (без втрат або з втратами). Розвиток відеокодека Snow зупинився, а його формат бітового потоку ще не завершено, що робить його експериментальним з 2011 року. Власним форматом мультимедійного контейнера є NUT, який більше активно не розвивається, але все ще підтримується.[16]
Влітку 2010 року розробники FFmpeg Фіона Глейзер, Рональд Бултьє та Девід Конрад анонсували декодер ffvp8. За допомогою тестування вони визначили, що ffvp8 швидший, ніж власний декодер Google libvpx.[17] Починаючи з версії 0.6 FFmpeg також підтримує WebM і VP8.[18]
У жовтні 2013 року до FFmpeg були додані власний відеокодек VP9[19], декодер OpenHEVC, декодер високоефективне кодування відео H.265 (відомий ще як HEVC) з відкритим програмним кодом.[20] У 2016 році власний кодер AAC вважався стабільним, що призвело до зняття підтримки двох зовнішніх кодеків AAC від VisualOn та FAAC. FFmpeg 3.0 (під назвою «Einstein») зберіг підтримку для кодера Fraunhofer FDK AAC.[21] Серед помітних змін в порівнянні з попередніми версіями було поліпшено підтримку апаратного стиснення AAC, поліпшене апаратне пришвидшення стиснення інших алгоритмів. Проте було порушено сумісність програмного та двійкового інтерфейсу з попередніми версіями.[22] Починаючи з версії 3.4 «Cantor» FFmpeg підтримує формат зображення FITS.[23] З листопада 2018 року у версії 4.1 «al-Khwarizmi» AV1 може мультиплікувати в MP4, Matroska та WebM.[24][25]
Компоненти
Інструменти командного рядку
ffmpeg – програма командного рядка для конвертування одного формату аудіо чи відео у інший. Вона також дозволяє захоплювати і кодувати відео в режимі реального часу від декількох апаратних і програмних джерел,[26] таких як карта захоплення ТБ.
ffplay – простий медіа програвач, який використовує SDL та бібліотеки FFmpeg.
ffprobe – інструмент командного рядка для зображення медіа інформації (тексту, CSV, XML, JSON), див. також Mediainfo.
Бібліотеки
libswresample – бібліотека, що містить функції редискретизації аудіо.
libavresample – бібліотека, що містить функції редискретизації аудіо з проєкту Libav project, подібна до libswresample із бібліотеки ffmpeg.
libavcodec – бібліотека, що містить усі власні аудіо/відео кодери і декодери FFmpeg. Більшість кодеків розроблені з нуля, щоб забезпечити найкращу продуктивність і можливість повторного використання коду.
libavformat (Lavf)[27] – бібліотека, що містить мультиплексори і демультиплексори для форматів контейнерів аудіо/відео.
libavutil – допоміжна бібліотека, що містить функції спільні для різних частин FFmpeg. Ця бібліотека містить хеш-функції, шифри, LZO декомпресор і Base64 кодер/декодер.
libpostproc – бібліотека, що містить старіші функції пост-обробки відео відео на базі H.263.
libavfilter – є заміною для vhook, що дозволяє перевіряти чи модифікувати відео/аудіо між процесами декодування і кодування. Фільтри були портовані із багатьох проєктів, включаючи MPlayer і AviSynth.
libavdevice – бібліотека, що містить аудіо/відео io через внутрішні та зовнішні пристрої.
Підтримуване обладнання
Процесори
FFmpeg моє програмні реалізації алгоритмів стиснення та розпакування відео та аудіо. Таким чином їх можна компілювати та запускати на різних наборах інструкцій процесора.
Існує безліч інтегральних схем (ASIC) для стиснення та декомпресії аудіо/відео. Ці ASIC можуть частково або повністю розвантажити обчислення з центрального процесора. Замість повної реалізації алгоритму для використання подібного ASIC потрібен лише API.[29]
Прискорення апаратне декодування включається за допомогою опції -hwaccel. Декодування починається у звичайному режимі, але якщо декодований потік підтримує апаратне забезпечення, тоді декодер призначає всю значну обробку цьому апаратному забезпеченню, таким чином прискорюючи процес декодування. Якщо потоки, які можна декодувати через апаратне забезпечення не виявлено (як це відбувається з непідтримуваним кодеком або профілем), тоді вони будуть декодовані програмним забезпеченням. Параметр -hwaccel_device застосовується, коли апаратне забезпечення потребує певного пристрою для роботи, особливо якщо доступно декілька графічних карт.
Підтримувані кодеки та формати
Формати зображень
FFmpeg підтримує багато поширених та деякі незвичайні формати зображень.
Формат зображення PGMYUV є саморобним варіантом двійкового (P5) формату PGM Netpbm. FFmpeg також підтримує 16-бітову глибину форматів PGM і PPM, а також двійковий (P7) формат PAM з або без альфа-каналу, глибиною 8 або 16 біт для pix_fmts monob, grey, gray16be, rgb24, rgb48be, ya8, rgba, rgb64be.
MP1, MP2, MP3, AAC, HE-AAC, MPEG-4 ALS, G.711 μ-law, G.711 A-law, G.721 (також відомий як G.726 32k), G.722, G.722.2 (також відомий як AMR-WB), G.723 (також відомий як G.726 24k і 40k), G.723.1, G.726, G.729, G.729D, IEC DV аудіо та Direct Stream Transfer (також відомий як Super Audio CD)
Субтитри
MPEG-4 Timed Text (також відомий як MPEG-4 Part 17 або 3GPP Timed Text)
SMPTE 314M (також відомий як DVCAM і DVCPRO), SMPTE 370M (також відомий як DVCPRO HD), VC-1 (також відомий як WMV3), VC-2 (відомий як Dirac Pro), VC-3 (також відомий як AVID DNxHD)
DTS Coherent Acoustics (також відомий як DTS або DCA), DTS Extended Surround (також відомий як DTS-ES), DTS 96/24, DTS-HD High Resolution Audio, DTS Express (також відомий як DTS-HD LBR), DTS-HD Master Audio, QDesign Music Codec 1 та 2
QCELP-8 (також відомий як SmartRate або IS-96C), QCELP-13 (також відомий як PureVoice або IS-733) та Enhanced Variable Rate Codec (EVRC. також відомий як IS-127)
Дані можна передавати без обробки через -c copy. Одним зі способів є вирізання відеозапису без необхідності часу та обробки перекодування.
Муксери
Вихідні формати (формати контейнерів та інші способи створення вихідних потоків) у FFmpeg називаються «муксерами» (від слова muxers). FFmpeg підтримує наступні:[37]
↑UYVY 10bpc без заповнення підтримується як «bitpacked» кодек в FFmpeg. UYVY 10bpc з 2-бітовим заповненнямм підтримується як кодек «v210» в FFmpeg. 16bpc (Y216) підтримується як кодек «targa_y216» в FFmpeg.
FFmpeg не підтримує IMC1-IMC4, AI44, CYMK, RGBE, Log RGB та інші формати. Він також ще не підтримує ARGB 1:5:5:5, 2:10:10:10 або інші формати бітових полів BMP, які зазвичай не використовуються.
FFmpeg містить понад 100 кодеків,[42] більшість із яких використовує ті чи інші методи стиснення. Багато таких методів стиснення можуть бути предметом юридичних претензій щодо патентів на програмне забезпечення.[43] Такі претензії можуть мати позовну силу в таких країнах, як Сполучені Штати Америки, які запровадили патенти на програмне забезпечення, але вважаються такими, що не мають позовної сили або є недійсними, наприклад, у країнах-членах Європейського Союзу.[44] Термін дії патентів на багато старіших кодеків, включаючи AC3 і всі кодеки MPEG-1 і MPEG-2, закінчився.
FFmpeg ліцензується згідно з ліцензією LGPL, але якщо певна збірка FFmpeg пов’язана з будь-якою бібліотекою GPL (зокрема, x264), тоді весь двійковий файл ліцензується під ліцензією GPL.
FFmpeg використовується ffdshow, FFmpegInterop, плагіном GStreamer FFmpeg, фільтрами LAV і OpenMAX IL для розширення можливостей кодування та декодування відповідних мультимедійних платформ.
Примітка: Важливо, щоб параметри були вказані в правильному порядку (наприклад, вхід, відео, фільтри, аудіо, вихід). Якщо цього не зробити, параметри можуть бути пропущені або запобігти виконанню FFmpeg.[51]
Переглянути інформацію про будь-який медіафайла:[52]
$ ffprobe вхідний-файл.mkv
Об’єднання потрібних файлів, наприклад VOB-файли, в один потік і мультиплексування їх у MPEG-2:
↑FFmpeg - ArchWiki. wiki.archlinux.org (англ.) . Процитовано 21 липня 2022. It is important that parameters are specified in the correct order (e.g. input, video, filters, audio, output). Failing to do so may cause parameters being skipped or will prevent FFmpeg from executing.