Pull to refresh

Редактирование видео в MPC с помощью шейдеров

Working with videoLifehacks for geeks
Sandbox
Есть задача: Изменить видео “на лету” при воспроизведении — поменять местами правую и левую часть. Не отразить, а именно поменять, т.е. разрезать картинку на две части и поменять их местами. Можно, конечно, сделать с помощью фреймсервера типа AviSynth'a, но это уже не совсем “на лету” — надо писать скрипт для каждого видео файла. Хочется сделать это быстро и без напрягов.

На фига? Чтобы сделать курс лекций по машинному обучению от Яндекса более удобным для просмотра. Лектор указывает на пункты презентации вживую, и приходится постоянно перескакивать через весь экран взглядом, чтобы понять, о чём речь:

image

Решение


Используем инструмент шейдеров, доступный в Media Player Classic. В стандартном комплекте есть несколько готовых шейдеров для правки изображения — “Emboss”, “Grayscale”, “16-235 to 0-255” и тому подобные. Нужного нам там нет, поэтому создаём новый шейдер (небольшая программа на языке HLSL):

sampler s0 : register(s0);
 
float4 main(float2 tex : TEXCOORD0) : COLOR
{
	// swapLine 0.5 = in the middle
	float swapLine = 1082.0 / 1920.0; 
	tex.x = (tex.x + swapLine) % 1.0;
	float4 c0 = tex2D(s0, tex);
	return c0;
}

Сохраняем его в папку \Shaders медиаплеера (например, C:\Program Files\MPC-HC\Shaders) под именем Shift.hlsl. Далее заходим в настройки Media Player Classic (Options/Playback/Shaders) и добавляем новый шейдер Shift в список Active pre-Resize shaders.

Данный способ обработки видео не нагружает CPU, так как вся работа производится силами графической карты, во всяком случае, если она реальная, а не эмулированная.

Что это, Бэримор?


Это пиксельный шейдер, который должен выдать на выходе цвет точки в зависимости от координат, которые передаются через параметр tex. Переменная s0 содержит текстуру с текущим кадром видео.

Новая горизонтальная координата вычисляется как остаток деления по модулю 1 от суммы текущей координаты и сдвига swapLine. Таким образом мы сдвигаем точку вправо и переставляем её в левую часть, когда она выходит за габариты.

И наконец, команда tex2D(s0, tex) возвращает цвет точки с нужной координатой из исходного кадра.

P.S.


Tags:mpc-hcпиксельный шейдерHLSLредактирование видео
Hubs: Working with video Lifehacks for geeks
Total votes 33: ↑32 and ↓1 +31
Views10.3K
Developer Relations for Bugout
from 90,000 ₽BugoutRemote job
Mobile (React Native) Developer
from 4,000 to 6,000 $BravadoRemote job
Python Developer
to 250,000 ₽TraceAirМосква
Oracle PL/SQL developer
from 3,500 to 4,500 $TechHiveRemote job
Automation Engineer (Remote work)
from 1,500 to 1,500 €Cyntegrity Germany GmbHТомскRemote job