Какво е ротоскопинг? Ротоскопингът е техника за анимация и визуални ефекти, при която артистите проследяват живо действие кадър по кадър, за да произведат реалистично движение[1]. С прости думи, това включва ръчно рисуване или маскиране на елементи във всеки кадър от видео, така че тези елементи да могат да бъдат изолирани или стилизирани. Първоначално аниматорите проектирали филм на стъклен панел и проследявали контурите на хартия - с устройство, наречено ротоскоп, изобретено от Макс Флейшер през 1915 г.[1]. Днес процесът е цифров, но името „ротоскопинг“ все още се прилага. В технически термини съвременният ротоскопинг често означава създаването на точен мат (маска) за обект в видео, така че той да може да бъде екстрахиран от фона си и съставен на друг фон[2]. Техниката е широко използвана в киното, видео продукцията и дори в дигиталния маркетинг, за да постигне ефекти, които биха били трудни или невъзможни за заснемане в един кадър.

В това обширно ръководство, ще разгледаме ротоскопинга както в прости, така и в технически термини, ще се запознаем с неговата история от ранната анимация до съвременните визуални ефекти и ще обсъдим общи приложения във филми, видео и маркетинг. Ще подчертаем и предизвикателствата, свързани с ръчния ротоскопинг, и как новите инструменти с изкуствен интелект революционизираха работния процес. Подробен раздел ще представи Онлайн инструмента за ротоскопинг на VIIDO - неговите функции, предимства и идеални потребители - като основен пример за съвременна ротоскопинг технология. Ще сравним ръчния и AI ротоскопинг, ще предоставим практически примери и ще заключим с резюме и призив за действие относно оползотворяването на днешните инструменти за ротоскопинг.

Разбиране на техниката на ротоскопинг

В основата си, ротоскопингът включва проследяване или маскиране на видео кадри кадър по кадър. В класическия контекст на анимация, артистът буквално рисува върху кадри от филм, за да създаде анимирани последователности с живо движение[1]. Например, ранните аниматори биха заснели жив актьор, който изпълнява, след което проектират филма върху повърхност и проследяват контурите на актьора във всеки кадър. Този трудоемък процес произвежда много реалистична анимация, защото улавя нюансите на истинското движение.

В съвременните визуални ефекти (VFX), ротоскопингът обикновено се отнася до ръчно създаване на непрозрачна маска около субект в видеокадрите[2]. Чрез проследяване на контурите на човек или обект (често с помощта на софтуер), VFX артистът генерира изрязване на този елемент. Тази маска може да се използва, за да изолира елемента от фона му, така че той да може да бъде поставен на различен фон или да бъде приложени ефекти независимо[2]. Например, артист по ефекти може да ротоскопира актьор от сцена, за да вмъкне различен фон зад него или да приложи корекция на цвета само на актьора.

С прости думи: Ротоскопингът е като дигитално изрязване на елементи от видео. Ако някога сте използвали функцията „премахване на фон“ в снимка, представете си, че правите същото за всеки кадър от видео - традиционно на ръка. Това позволява на филмови творци и редактори да комбинират отделни визуални ефекти, да сменят фонове или да създават въображаеми последователности. Независимо дали се извършва ръчно или с помощта на софтуер, ротоскопингът изисква внимание към детайла, за да се гарантира, че проследените контури остават точни, докато субектът се движи в кадрите.

История на ротоскопинга: От ранна анимация до съвременни VFX

Ротоскопингът има богатата история, която започва в началото на 20-ти век. Техниката е изобретена от аниматора Макс Флейшер през 1915 г. като начин да направи анимацията на карикатури по-реалистична[3]. Първоначалното устройство на Флейшер проектирало кадри от живо действие върху стъклени плочи, където аниматорът могъл да проследи изображенията. Използвайки този метод, Флейшер известен заснел своя брат Дейв (облечен като клоун) и проследил кадрите, за да създаде един от първите ротоскопирани карикатурни герои: Коко Клоуна[4]. По това време, това било революционно - позволяващо плавно, живо движение в анимирани филми, което било трудно за постигане, рисувайки единствено от въображението.

Въпреки че е замислен като улеснение за аниматорите, ранният ротоскопинг доказва изключително трудоемък и отнемащ много време, тъй като всеки кадър все още трябва да бъде рисуван с прецизност[5]. Всъщност, процесът бил толкова трудоемък, че малко в известен смисъл убивал целта на улеснението. Флейшер първоначално запазил техниката на ротоскопиране само за своето студио (това понякога било наричано "Процес на Флейшер"). Но след като патентът му изтекъл през 1934 г., други студиа с нетърпение приели ротоскопинга[6]. Например, Walt Disney Studios използвали ротоскопинг в Снежанка и седемте джуджета (1937), за да постигнат по-реалистична анимация на хора[6]. Много от сцените на Снежанка, като танците и движенията на принца, били нарисувани, като проследявали кадри от живо действие на актьори[7]. Това довело до изключително fluid motion, въпреки че също така допринесло за надвишаване на бюджета на филма поради сложността на техниката[6].

През средата на 20-ти век, ротоскопингът продължава да се използва в анимация и специални последователности. Няколко известни примера подчертават творческите му приложения. Режисьорът Ралф Бакши разчитал силно на анимацията с ротоскоп през 70-те и 80-те години с филмите си - като Магьосници (1977) и Властелинът на пръстените (1978) - за да постигне сложни битки и реалистично движение на ограничен бюджет[8]. Тези филми включвали снимане на живи актьори и след това проследяване на тях, за да се създадат стилизирани анимирани фантастични последователности. Техниката давала на анимациите на Бакши сурова, реалистична ръб, която ги отличавала от по-традиционните карикатури.

Ротоскопингът също е намерил пътя си в експерименталното изкуство и музикалните медии. Знаменит пример е музикалното видео „Take On Me“ от a-ha през 1985 г., което комбинирало кадри от живо действие с анимация в стил молив чрез ротоскопинг. В това иконично видео аниматорите внимателно проследили около 3,000 кадъра от живо действие, за да обединят нарисуван свят с реалността[9][10]. Резултатът е визуално зашеметяваща и наградена музикална видеоклип, която завладяла аудиторията - истински показ на уникалната естетика на ротоскопираната анимация.

Към края на 20-ти век и в началото на 2000-те години, ротоскопингът се е развил от чисто техника за анимация в основна част от визуалните ефекти и пост-продукцията. Появата на компютри и цифрови инструменти за композиране направи процеса на ротоскопиране до известна степен по-лесен и по-точен (няма повече проектиране на стъкло и изкривяване на линии - артистите вече могат да рисуват маски с помощта на софтуер). Все пак, той остава ръчна задача кадър по кадър в много ситуации. Дори когато техници с сини екрани/зелени екрани (chroma key) станаха често срещани за разделяне на актьорите от фоновете, ротоскопингът все още се използваше интензивно за доработка и почистване на матовете или за обработка на случаи, в които зелени екрани не бяха приложими[11].

Класически пример от историята на киното, който подчертава важността на ротоскопинга в визуалните ефекти, е създаването на ефектите на светлинните мечове в оригиналната трилогия на Звездни войни. В Звездни войни: Епизод IV - Нова надежда (1977), светещите енергийни остриета на светлинните мечове бяха постигнати чрез ротоскопиране на всеки кадър от филма[12]. Актьорите държали реални пръти като реквизит, а артистите по ефекти проследили пръта във всеки един кадър и след това добавили светеща аура към този контур[13]. Този трудоемък ротоскопинг кадър по кадър придаде на оръжието на джедаите иконичния ярък блясък[12]. Същото беше направено и за последващите филми на Звездни войни; например, ротоскопингът беше използван, за да се включат AT-AT ходещи на Хот и да се композира принцеса Лея в сцени от Rogue One с помощта на кадри от по-стари филми[14]. Тези примери показват как ротоскопингът свързва разликата между реалното и фантастичното в киното.

През повече от век ротоскопингът е доказал своята многофункционалност: първо позволявайки реалистично анимирано движение, а по-късно давайки плавни визуални ефекти в живи филми. Процесът винаги е бил педантичен - в старите дни, армии от артисти прекарали седмици в проследяване на кадри на ръка. Днес компютрите заменят химикалите и хартията, но до неотдавна хората, занимаващи се с ротоскопинг, все още трябваше да рисуват маски на почти всеки кадър. Тази дълга история подготвя сцената за това как се използва ротоскопингът в момента и защо новите напредъци (като автоматизация) представляват толкова голяма работа.

Чести приложения на ротоскопинга в киното и видео продукцията

Ротоскопингът играе важна роля в киното и видео продукцията, особено в областта на визуалните ефекти. По същество, всеки път, когато филмовите творци трябва да разделят или променят част от кадър след заснемането му, ротоскопингът е една от техниките, на които разчитат. Ето някои от най-честите приложения:

• Създаване на матове за композиране: В визуалните ефекти основното приложение на ротоскопинга е създаването на мат (маска) за конкретен елемент, така че да може да бъде комбиниран с различни фонове или елементи. Филмовите творци използват ротоскопинг, за да екстрахират героите или обектите от една сцена и да ги поставят в друга[15]. Например, актьор, заснет на място, може да бъде ротоскопиран и след това композиране на цифрово създаден фон по-късно. Това е полезно, ако зелен екран не е бил използван или ако е необходимо допълнително изолиране. Ротоскопингът се използва също така, за да премахне фонове от кадри или да изолира преден елемент за цветна корекция (така, че можете да коригирате цвета на актьор отделно от фона).
• Визуални ефекти и фантастични последователности: Ротоскопингът позволява всякакви творчески ефекти, които включват рисуване или анимиране върху живо действие. Както беше споменато, светлинните мечове в Звездни войни бяха ръчно ротоскопирани, за да добавят светещия светлинен ефект върху реквизитните мечове на актьорите[12]. Друг пример: в Кой подстави заека Роджър (1988), въпреки че голяма част от него използва анимация и композиране, вероятно се е използвал ротоскопинг на места, за да се установи взаимодействието между анимираните герои и живото действие. Всяко време, когато видите ефект като светеща аура около човек, светкавици, магически енергийни полета и т.н., вероятността е голяма, че артистите са ротоскопирали части от кадъра, за да добавят ефекта или да маскират героите, така че ефектът да може да се появи зад тях или около тях. Ротоскопингът предоставя на филмовите творци възможността да създадат сцени или ефекти, които биха били иначе трудни, скъпи или невъзможни за заснемане в камера[16]. Това е сигурност и креативен инструмент - от криене на каскадьорски грижи до добавяне на въображаеми същества.
• Премахване на нежелани елементи (Paint-Out): Друго често приложение е в работа с “paint-out” или премахване на обекти. Да кажем, че микрофон за бум пада в кадър или е видимо каскадьорско предпазно оборудване или (известно) е оставена случайна чаша кафе на снимачната площадка - артистите по VFX могат да ротоскопират района и да го нарисуват отново. Примерно, режисьорът Мартин Скорсезе веднъж използва ротоскопинг в пост-продукцията, за да **премахне парче мръсотия (или висяща част от кокаин) от лицето на актьор в документален филм, проследявайки и рисувайки този елемент кадър по кадър[17]. Маските на ротоскопа определят зоната, която да бъде променена. По подобен начин, въжетата, използвани в каскадьорските сцени, често се премахват чрез ротоскопиране около актьора и ръчно оцветяване на въжета в всеки кадър.
• Графика в движение и стилизирани видео ефекти: Извън интензивния VFX, ротоскопингът се използва и в обичайната видео продукция и графика в движение. Редакторите могат да ротоскопират човек в видео, за да създадат ефект на контурно изрязване, да превърнат кадрите в стилизирано изглеждаща “карикатура” или да приложат различни фонови обработки. Примерно, музикално видео може да изолира танцьор от кадрите и след това да замени фона с завихрящи се цветове или графики - тази изолация може да се постигне чрез ротоскопиране на танцьора.
• Креативни преходи: Ротоскопингът може да се използва за създаване на стилни преходи в редактирането. Представете си сцена, в която актьор скача, и в момента на скока, фонът се променя - редактор може да ротоскопира актьора и да прехвърли фона под него по време на скока. Това е малка техническа магия за зрителя, постигната с прецизно маскиране.

В обобщение, ротоскопингът в киното/видеото често е свързан с контрол. Той дава на създателите способността да манипулират визуализации: например, да сменят фонове, да нанасят слоеве елементи, да променят цвета на специфични части от сцена или да добавят ръчно нарисувани акценти. Артист по ротоскопиране в VFX студио може да прекара деня в проследяване на актьори, реквизити и сенки, кадър по кадър, за да помогне за интегрирането на всички части на сложен кадър.

За да илюстрираме важността на ротоскопинга в продукцията, помислете, че дори и с днешните цифрови инструменти, като chroma key, много блокбъстър филми все още разчитат на екипи от артисти по ротоскопинг. Големи филми с много VFX (мислете за Marvel или научна фантастика) често имат последователности, където актьорите не са заснети на зелен екран, но по-късно трябва да бъдат разделени от оригиналния фон - ротоскопингът е решението. Това е трудоемко, но позволява на режисьорите огромна гъвкавост в пост-продукцията, за да променят нещата.

Практически пример: в Отмъстителите: Край на играта, ако сцена с супергерой първоначално не е имала зелен екран, но режисьорите по-късно решават да увеличат фона с CGI разрушение, артистите биха ротоскопирали актьорите от оригиналната сцена, за да се добавят CGI експлозии или небостъргачи зад тях. Този вид използване е всеобхватно в съвременното кино.

Ротоскопинг в дигиталния маркетинг и реклама

Освен в киното и телевизията, ротоскопингът също така станал популярна техника в дигиталния маркетинг, рекламата и другото творческо видео съдържание. Маркетолозите и рекламистите винаги търсят визуално зашеметяващи начини за разказване на история или показване на продукт, а ротоскопираната анимация предлага уникална смес от реализъм и артистичност, която може да привлече вниманието на аудиторията.

Една основна причина ротоскопингът в маркетинга е привлекателен е, че той съчетава реалност и въображение по безпроблемен начин[18]. Поради факта, че техниката започва с истински кадри, резултатът запазва усещането за реализъм - реално човешко движение, реални детайли на продукта - но чрез проследяване или стилизиране на Тези кадри, окончателният вид придобива артистичен, почти ръчно изработен стил. Тази отличителна естетика веднага се откроява сред типичните видеа с живо действие[19]. Зрителите може да забележат, че нещо изглежда като реалния живот, но същевременно и като карикатура, което може да бъде много завладяващо. Например, някои марки са използвали частични ефекти на ротоскоп, където жив актьор внезапно преминава в нарисуван стил или има анимирани акценти около себе си; това създава запомняща се визуализация, която остава в съзнанието на зрителите.

Случаи на реклама: Ротоскопингът често се използва, за да подчертае продукти или хора в реклами. Рекламист може да ротоскопира продукт (да речем, кола или обувка), за да го изолира и след това да го постави на всякакви фонове или графични среди, без да му се налага презаснемане всяко път. В света на продуктови реклами, ротоскопингът може да създаде безпроблемно смесване на продукта с всякакъв избран фон - така че да изглежда, сякаш продуктът е всъщност заснет в тя[20]. Например, реклама на кола може да заснеме колата на прост фон и по-късно да я ротоскопира, за да я постави в екзотични локации или сюреалистични пейзажи в пост-продукцията. Аудиторията вижда колата идеално интегрирана в новата сцена и това изглежда реалистично, защото образът на колата е реален - само фонът е сменен.

Ротоскопираната анимация беше приета и като стилистичен избор за разказване на истории на марката. Забележителен казус в рекламата е серията от реклами „Говори с Чък“ на Чарлз Шваб (около 2008 г.). Тези реклами бяха заснети в живо действие, но след това ротоскопирани в стил с висок контраст и скица. Резултатът беше привлекателен вид; всъщност, CMO на Чарлз Шваб отбеляза, че много зрители можеха да запомнят сцените и диалозите от рекламата от паметта, защото визуалният стил беше толкова отличителен[21]. Визията на ротоскоп помогна на иначе обикновената рекламу на финансови услуги да пробие през многото реклами, като се чувстваше като графичен роман, в движение. Това демонстрира как рекламните агенции използват ротоскопираната анимация, за да направят рекламите по-запомнящи се и ангажиращи[22][23]. Техниката им позволила да акцентират върху определени детайли в анимацията (като подчертаване на говорителя), докато все още използвали естественото движение и израженията на живите актьори за автентичност.

Социални медии и дигитално съдържание: В епохата на Instagram, TikTok и YouTube, маркетолозите и създателите на съдържание също се обръщат към ротоскопинг (или ефекти, подобни на ротоскопинг), за да произвеждат визуално споделими визуализации. Кратко видео в социална медия може да ротоскопира основния субект, за да приложи креативен филтър или да замени фона с бранд елементи и т.н. Поради трудоемкия характер на ротоскопинга, той не се използва за всяко малко нещо, но когато марката иска „фактор на лапа“ – може би анимирана инфографика, смесена с истински кадри, или реклама в стил на музикално видео – това е мощен подход. Освен това, съвременният софтуер и изкуственият интелект започнаха да оптимизират процеса на ротоскопинг, което прави бързо и по-достъпно за екипите по маркетинг, работещи с краен срок[24]. Това означава, че дори кратките рекламни кампании или по-малки марки могат да разгледат използването на ефекти на ротоскоп, без да се сблъскват с забранителни разходи или време.

Защо маркетолозите обичат ротоскопираната анимация:

• Тя привлича вниманието: Полу-анимираният вид може да спре пръстите, които скролват в социални медии. Видеото с ротоскоп често има „креативен“ или „изкуствоведски“ вид, който интригува зрителите, водейки до по-добро взаимодействие[19].
• Тя подобрява разказването на истории: Маркетолозите могат да илюстрират абстрактни концепции, рисувайки върху реалността. Например, реклама за здравеопазване може да има ротоскопиран герой с анимирани диаграми, извиващи се около тях, за да покажат вътрешен процес - съчетавайки реален човек с илюстративна графика.
• Тя може да опростява производството: Учудващо, ротоскопингът може да бъде икономически ефективен в определени сценарии[25][23]. Ако вече имате живи кадри, прилагането на ротоскопирана анимация може да е по-евтино от създаването на напълно анимирано видео от нулата или изграждането на скъпи декори за живо снимане. То позволява използването на “съществуващи кадри” по нови творчески начини, което потенциално спестява разходи за повторни снимки или разходи за локации[25]. Много марки са преобърнали стари видеосъдържания, чрез ротоскопиране и даване на нов анимиран обрат.
• Тя е многофункционална в различни индустрии: Модните марки използват ротоскопинг, за да накарат живите модели да изглеждат като движещи се скици, носещи последните дизайни. Технологичните компании могат да го използват, за да визуализират данни или процеси над реални офис кадри. Музикалните видеоклипове, рекламите, финансите, неправителствени организации - всички са намерили уникални начини за внедряване на съдържание в стил ротоскоп, за да предадат своето послание по привлекателен визуален формат[26][27].

За да дадем друг пример за въздействие: Музикалното видео/реклама за серията на Amazon Prime Undone (2019) използва пълна ротоскопирана анимация (много подобно на A Scanner Darkly през 2006), за да създаде мечтателен, сюрреалистичен вид, който размива реалността - перфектно за история, включваща пътуване във времето и лична драма. Кампанията за реклама се възползва от същия стил на ротоскопиране, за да се открои пред зрителите[28]. Това подчертава финалната точка: ротоскопингът може да предизвика емоции и тон, които чисто живото действие или чисто анимация може би не мога. То живее в хибридно пространство, което може да изглежда носталгично, артистично или извънземно в зависимост от изпълнението.

В обобщение, за маркетинг и реклама, ротоскопингът предлага палитра от креативни възможности: една, която съчетава достоверността на реални кадри с творческата свобода на анимацията. То помага на марките да разказват истории по визуално очароващи начини, независимо дали за обясняване на сложна идея с яснота или за правене на смело артистично изявление. Със своето подобрение в технологията, дори малките екипи могат да експериментират с ротоскопиране, за да диференцират съдържанието си - тенденция, която вероятно ще нараства, тъй като автоматизацията го прави по-лесно за изпълнение (повече за това следва).

Предизвикателствата на ръчния ротоскопинг

Вече е ясно, че ротоскопингът е мощен, но също така е важно да се разбере защо той е придобил репутация като една от най-усилени задачи в киното и видео продукцията. Традиционният ротоскопинг (и дори цифровият ръчен ротоскопинг) е известно времеемък и трудоемък[29].

Представете си 10-секунден видеоклип, заснет при 24 кадъра в секунда - това са 240 индивидуални кадъра. Ако трябва да проследите обект във всеки един от тези кадри, трябва да нарисувате 240 отделни маски, като настройвате всяка одна за движението на обекта. За 5-минутна сцена, това са хиляди кадри за обработка. В резултат на това ръчният ротоскопинг може да отнеме часове или дори дни работа само за няколко секунди на кадър[29]. Артистите по VFX често наричат ротоскопинга „брутален труд“ - той е трудоемък, изисква интензивен фокус и често се чувства като правене на цифрово проследяване или изрязване за дълги периоди.

Някои ключови предизвикателства на ръчния ротоскопинг включват:

• Настройки на кадър по кадър: Дори с софтуерни инструменти за рисуване на маски, артистът често трябва да коригира маската за всеки кадър (или за всеки няколко кадри), за да я поддържа в съответствие с движещия се обект. Хората и обектите във видео рядко остават в същата форма или размер поради промени в перспективата, засядане на движение и движение на камерата. Така че маската, която е паснала около човек в кадър 1, няма да пасне перфектно в кадър 5 - тя трябва да бъде обработена. Това означава много повтаряща се работа.
• Педантично внимание към детайла: Добър ротоскопинг изисква прецизност. Ако матът (маската) е дори малко несъвместим, може да видите „ореоли“ или парченца от фона, пробиващи през кадъра, когато композиране на субекта на новия фон. Фини детайли като коса, полупрозрачни тъкани или ръбове на движение са особено трудни. Артист може да прекара неоправдано много време внимателно анимирайки точките на маската около отделните кичури коса, които се развяват на вятъра или около припокриващите се крайници на група хора. Това е малко като цифрова хирургия с много малък скалпел.
• Умора и човешка грешка: Повторяемата природа на проследяването кадър след кадър може да доведе до умора, а умората може да доведе до грешки. Лесно е артистът по ротоскопиране да загуби следа на точка и да направи форма на маската да трепти или се отклонява. Тези „трептения“ или несъответствия след това изискват повторно посещаване и коригиране, което е още време загубено[5]. Последователността е от съществено значение - формата на мата трябва идеално да остане стабилна, освен ако самият обект наистина не променя формата си. Осигуряването на тази последователност е трудно, когато се извършва ръчно.
• Високи изисквания за умения: Докато ротоскопингът може да бъде преподаван на млади артисти, да се прави наистина добре е умение. Опитни артисти по ротоскопинг знаят техники, които ускоряват работата (като използване на проследяване на движение за помощ или разбиване на сложен субект на няколко по-простични маски). Те също така развиват око за това как да се справят със сложни секции. Но, тъй като е толкова трудоемко, студията често възлагат задачи на млади артисти или аутсорсват ротоскопинг дейности на специализирани доставчици[30]. Това е така, защото времето на старши артисти е скъпо и ротоскопингът, какъвто е, се рассматри овластен труд, който може да бъде предаден. Но дори и тогава, качеството трябва да бъде проверено и ревизиите са чести.
• Времеви и финансови последици: Всички горепосочени фактори означават, че ръчният ротоскопинг може да стане забавящ фактор в пост-продукцията. Ако проектът има много нужди от ротоскопинг, той или забавя графика, или налага наемането на повече артисти, за да разделят работата. Това естествено увеличава разходите. Има анекдоти в индустрията за сцени, които отнеха седмици на работа по ротоскопинг само за няколко секунди кадър. Например, музикалното видео Take On Me, за което споменахме, отне 16 седмици на екипа аниматори, за да го ротоскопират - макар и по много артистичен начин, но илюстрира извънредния труд, необходим[31]. В VFX екипите понякога прекарват месеци в ротоскопиране на сложни сценари или сцени с тълпа, когато други методи (като зелен екран или различни матове) не са налични.

Имайки предвид тези предизвикателства, не е изненадващо, че ротоскопингът често сее окачествяван като „необходимото зло“ в киното. То е критично за много ефекти, но е трудоемко от гледна точка на артистите. Всъщност, исторически, голяма част от ротоскопинга е била извършвана с помощта на софтуер като Adobe After Effects, Nuke или Silhouette - всички предоставящи по-добри инструменти за рисуване и проследяване, отколкото правенето му на хартия, но все пак основно изискващи артистът да рисува форми и да ги анимира с течение на времето. Можете да проследите нещо в кадър 1 и кадър 10 и да оставите компютъра да интерполира, но след това трябва да поправите междинните кадри и така нататък.

За да обобщим болката: ръчният ротоскопинг е малко като анимацията в обратен ред. В нормалната анимация вие рисувате обект, движещ се. В ротоскопинга обектът се движи в кадрите, а вие рисувате контурите, за да паснете на него. Това е бавно, ориентирано към детайлите и трябва да бъде перфектно, за да изглежда правилно. Един източник го описва като „досаден ръчен процес, който изисква прецизно внимание, често изискващо часове или дори дни от времето и усилията на редактора, за да се усъвършенства само една сцена“[29]. Това наистина го уловва – една сцена, много дни.

Поради това отдавна има интерес към правенето на ротоскопинга по-лесен или по-бърз. И именно тук технологиите наскоро започнаха да предлагат известно облекчение: автоматизация и AI.

Как автоматизацията и AI подобриха работния поток при ротоскопинга

През последните няколко години, напредъкът в софтуер и изкуствен интелект започна да революционизира ротоскопинга. Задачи, които преди отнемаха часове на човек, понякога могат да бъдат изпълнени за минути (или секунди) от интелигентни алгоритми, обучени да разпознават и проследяват обекти. Тази промяна е преломна за редактори на видео и VFX артисти, превръщайки ротоскопинга от тежко задължение в по-оптимизирана част от работния поток[32][24].

Модерна помощ при ротоскопинг софтуер: Дори преди AI да стане модно слово, бяха разработени инструменти, които да помогнат с ротоскопинга. Например, проследяване на движение може да помогне, като проследява точка или форма, така че артистът да не трябва ръчно да премества маската на всеки кадър. Планарните проследяващи (като тези в Mocha Pro) могат да проследяват плоски повърхности или обекти и да разпространяват форми на ротото през кадрите. Тези инструменти спестиха време, но все пак изискваха ръчна корекция. Функции за „лукс“ позволяваха на артистите да видят предишните и следващите кадри суперизположени, за да коригират формите по-консистентно[33]. Всичко това направи ротоскопинга по-малко болезнен, но еволюционно, а не революционно.

Влиза AI и машинно обучение: Сега сме в ерата, в която AI се прилага към ротоскопинг в значителен начин. AI-базираните ротоскопи (често наричани „AI-помощен ротоскопинг“ или просто „авто матинг“) включват алгоритми, обучени на много изображения и видеа да разпознават определени субекти (като хора, животни и т.н.) и да ги отделят от фона. Основната идея е, че AI може да автоматизира идентификацията и маскирането на субекти през кадрите[34].

Ето как обикновено работи AI-помощеният ротоскопинг зад кадрите:

1. Обнаружаване на обекти и сегментация: AI разглежда всеки кадър и се опитва да идентифицира субекта от интерес (или множество субекти). Например, AI модел може да бъде обучен да открива хора в видеокадри и да генерира маска около тяхната силует. Това е подобно на начина, по който вашата смартфон камера може да идентифицира лице или човек за портретен режим на снимка. С достатъчно данни за обучение, AI може да направи обосновани предположения за това, което е преден план спрямо фона.
2. Темпорално проследяване: След като AI знае какво да маскира в един кадър, той проследява този обект през последващите кадри. Използвайки оптичния поток или дълбочинно обучение, предсказва къде се е преместил обектът в следващия кадър и коригира съответно маската[34]. По същество, той автоматично прави това, което би направил ръчно един артист по ротоскоп.
3. Усъвършенстване на маската: Добри AI инструменти също работят за усъвършенстване на ръбовете на маската, справяйки се с някои от трудните части, като регулиране на размазването на движение или фини детайли. Някои AI системи конкретно се справят с косата, използвайки невронни мрежи, които са добри в уловване на размити полупрозрачни области (нещо, с което хората се борят в ротото). Целта е да се произведе маска, която е почти толкова прецизна, колкото бы я нарисувал опитен човек.

Резултатът от тези стъпки с AI може да бъде пораждащо бърз. Както отбелязва един източник, напредналите инструменти използват алгоритми, за да идентифицират и проследяват обектите през кадрите, спестявайки часове ръчна работа и често произвеждащи резултати, които съперничат на ръчните методи[35]. Например, Adobe After Effects представи Roto Brush 2 (подкрепен от AI на Adobe Sensei), което позволява на редактор просто да нарисува грубо субекта веднъж, а след това AI разпространява това избиране през десетки или стотици кадри, обикновено получавайки добра маска, която просто изисква малка корекция[36]. По подобен начин, Mocha Pro на Boris FX интегрира модул с AI за създаване на матове. Дори Blackmagic Fusion и Da Vinci Resolve добавят функция, наречена Magic Mask, която използва машинно обучение,за да проследи и маскира хората автоматично.

Какво означава това в практика? Това означава, че задачи, които биха били ужасни ръчно, сега са реализируеми. Например редактор може да вземе 4K резолюционен кадър на човек, който върви през тълпа и да изолира този човек за много по-кратко време, с помощта на AI - нещо, което може да е неподходящо скъпо, когато се прави на ръка през хиляди кадри. Специфичен пример е появата на Runway ML, удобен за потребителя инструмент за редактиране на видео с AI: с няколко клика, инструментът за ротоскопиране на Runway може да изолира движещ се човек от фона. Процес, който, преди, би отнел ден, сега отнема само няколко минути изчисления плюс малко почистване.

Обаче, това не е магия (все още). Инструментите за ротоскопинг с AI имат предимства и ограничения. Ето кратки резюме на:

• Предимства на AI ротоскопинга: Очевидното е скоростта. Тя драстично ускорява работния поток, позволявайки почти реално премахване на фона или изолиране на обекти[37]. Това не само спестява време, но също така намалява труда за артисти, които могат да се фокусират повече на творческите корекции, отколкото на суровия труд. AI също е забележително добър в справянето с постоянни ситуации с висок контраст - например, човек, движещ се спрямо сравнително ясен фон или отчетливи предни обекти. Някои AI инструменти могат дори да се справят с сложни ръбове доста добре (като контурите на къдрава коса или колело на велосипед) благодарение на факта, че са се обучили от масивни набори от данни[38]. AI също е безпристрастен - той не се уморява или става нехигиеничен, така че, ако алгоритъмът е ефективен, той ще приложи маската последователно за всеки кадър (без „трептения“, освен ако субектът самият не трепти).
• Интеграция в работния поток: Много AI roto инструменти сега интегрират в софтуер, който редакторите вече използват (инструменти на Adobe в After Effects/Premiere или OFX плъгини за Nuke и др.), което означава, че можете да ги включите без радикално да променяте работния си процес. Това улеснява прилагането на инструменти. Дори самостоятелни онлайн инструменти (като този, който ще обсъдим от VIIDO) често се проектират, за да бъдат прости: качване на снимка, получаване на бърз резултат, сваляне на маската или обработеното видео. В резултат, дори редактори, които не са специалисти в VFX, могат да се опитат да извършат задачи като премахване на фон, които преди биха изисквали специализиран артист.
• Ограничения и предизвикателства: AI не е перфектен. Той може да има трудности със сложни сцени, които имат много припокриващи се елементи, хаотично движение или подобни цветове между субекта и фона[39]. Например, ако някой е частично скрит от друг човек или обект, AI може да загуби следа от него или да слее двата обекта в един блок. Много бързо движение (размазането на движението) може да обърка алгоритъма - AI може да не е сигурен къде свършва субектът и къде започва фонът в размазания кадър. Също така, определени фини детайли като кичури коса, отражения или прозрачни обекти остават трудни за AI да уцели на 100%[39]. В такива случаи генерираната от AI маска може да има грешки, които все още изискват проверка и ръчно поправяне (въпреки че е по-лесно да се коригира частично добра маска, отколкото да се създаде от нулата).
• Друг ключов недостатък е липса на творческо разглеждане. AI обикновено може да идентифицира очевидни обекти (като “човек” или “кола”), но той не знае кой обект е важен освен ако не му се даде указание. И няма да знае, ако например искате да изключите сянка или да включите нещо деликатно. Човешките ротоскоп артисти често правят съдийски решения – напр. трябва ли полупрозрачната сянка на човек да бъде включена в мата или да бъде оставена извън него? AI ще направи всичко, за което е обучен, но може да не съвпадне с художествения замисел[40]. Следователно, обикновено е необходим контрол от човек. В професионалния VFX, след като AI направи първия проход, артистът влиза и усъвършенства маската, поправя всяка част, където AI е грешил, и се уверява, че отговаря на качествения стандарт.
• Крайни случаи и обобщение: AI моделите се обучават на данни и ако вашето видео е извън това, което “очаква”, можете да получите слаби резултати. Например, инструмент, обучен предимно на хора, може да има проблеми, ако поискате да ротоскопирате дърво или абстрактна форма. Или ако видеосъдържанието е зърнисто, с лоша светлина или е под необичайна перспектива, AI може да се обърка[41] (някои професионалисти отбелязват, че е “по-бързо да го направят ръчно” в определени сложни случаи, отколкото да опитват да накарат AI, когато е объркан[41]).

Въпреки това, траекторията е ясна: AI-помощеният ротоскопинг бързо се подобрява и много в индустрията го виждат като бъдеще (или настояще!). Една статия го формулира по следния начин: С напредъка в AI, ротоскопингът преживява сеизмичен преход. Инструменти с мощност на AI могат сега да автоматизират голяма част от процеса, драстично намалявайки времето и усилията, необходими за ротоскопинг[32]. Консенсусът не е, че AI напълно ще елиминира ръчния ротоскопинг — по-скоро, той допълва възможностите на артистите. Най-добрите резултати често идват от комбинирования подход: AI покрива около 90% от работата, а след това човек може да се включи и да определи оставащите 10% и да добави прецизни нюанси, които алгоритъмът може да е пропуснал[42][40].

В практическо отношение, това, което отнемаше дни, сега може да отнеме часове. Това означава, че стегнатите срокове са по-управляеми. Също така означава, че ротоскопингът вече не е бариера за по-малки творци; не е необходимо голямо екип, за да се извърши ротоскопиране на кратко видео, когато инструмент на AI може да го направи на вашия лаптоп или чрез онлайн услуга. Ако, например, ютубър иска да премахне фона си без зелен екран, вече има AI-доставени инструменти за ротоскопиране, които правят точно това с едно кликване (и ще се впуснем в един конкретен онлайн инструмент следващия).

За да обобщим тази част, може да се каже: дните, в които прекараха безброй часове в ротоскопиране кадър по кадър, са преброени[43]. AI действа като катализатор, а не като директна замяна на ротоскопинга. Той поема трудната работа, позволявайки на артистите и редакторите да се фокусират повече на творческите решения и финалното полиране. В крайна сметка, ротоскопингът остава изкуство - човешкия допир все още е от съществено значение за тези перфектни детайли - но съвременните инструменти най-накрая започнаха да улесняват живота на ротоскопиращите[43].

Онлайн инструмент за ротоскопинг на VIIDO: лесен ротоскоп с AI

Едно от най-вълнуващите развития в областта на ротоскопинга е появата на потребителски удобни онлайн инструменти, които използват AI, за да позволят на практически всеки да извършва ротоскопинг задачи. Онлайн инструментът за ротоскопинг на VIIDO (наличен на vidio.ai) е основен пример за напредъка, който е постигнат. Този инструмент обединява много от подобренията, които обсъдихме, обгръщайки мощни AI алгоритми в прост уеб интерфейс, така че дори начинаещите бързо да изолират субекти и да сменят фоновете с минимално усилие.

Ранен ротоскоп artist в предцифровата ера проследява живи филмови кадри на осветено бюро (около 1980-те). Модерните AI инструменти като VIIDO значително трансформираха този трудоемък процес кадър по кадър в няколко кликвания чрез автоматично откриване и маскиране на движещи се субекти.

Ключови функции и как работи: Инструментът на VIIDO за ротоскопинг е проектиран да бъде прост. Работният процес обикновено включва само няколко стъпки:

1. Качете своя видеоклип. Тъй като е онлайн инструмент, не е необходимо да инсталирате софтуер - просто плъзнете и пуснете или изберете видеофайла си на уебсайта. Инструментът обработва тежката работа в облака, дори показвайки ви напредъка в реално време, докато видеото ви се качва и обработва (така че