Глубокая рамка для объемных работ: Оформление в багет объемных предметов. Рамки для 3D композиций в СПб

Мы показываем, что VCD-LFM подходит для регистрации динамических процессов у живых животных, демонстрируя визуализацию нейронной активности движущихся C. elegans и бьющееся сердце личинки данио. Микрожидкостный чип был использован, чтобы позволить C. elegans (стадия L4) быстро перемещаться внутри микрокамеры (300 × 300 × 50 мкм, , рис. 2а, ).Мы использовали объектив 40 × / 0,8 Вт для изображения активности ядер двигательных нейронов, меченных GCaMP / RFP, с частотой сбора данных 100 Гц, что дает 6000 световых полей в каждом канале за 1-минутное наблюдение (метод , , ). Дополнительный рис. 1 ). VCD-Net обеспечил высококачественные реконструкции для визуализации нейронных сигналов с разрешением одной клетки во время быстрого движения тела ( Рис. 2b, Дополнительный Рис. 12, Видео 1, 2 ). Напротив, LFD страдает неоднозначным разрешением ячеек и ухудшением качества изображения вокруг фокальной плоскости, что является известным ограничением ( Рис.2c ). Мы идентифицировали определенные A- и B-моторные нейроны, которые были связаны с выбором моторной программы, и картировали их кальциевую активность с течением времени после ратиометрической коррекции сигналов GCaMP с использованием базовых значений RFP для удаления шумов движения ¹⁴ ( Рис. 2d, e, Методы, Дополнительный Рис. 13, Видео 3 ). Между тем, применяя автоматическую сегментацию контуров тела червя (методы , дополнительное примечание 5, ), мы вычислили скорость и кривизну червя, связанные с его движением и поведением, что позволило классифицировать движение червя на прямое, обратное или нерегулярное. ползание ( рис.2f – h ). Паттерны транзиторной передачи сигналов Ca ²⁺ оказались релевантными для переключений с прямого на обратное ползание червя, что согласуется с предыдущими находками ^14-17 . Кроме того, неитеративная реконструкция VCD может последовательно восстанавливать трехмерные изображения с объемной скоростью 13,5 Гц, что в ~ 900 раз быстрее, чем итерационный метод LFD ( рис. 2i, дополнительная таблица 3 ). Таким образом, наш VCD-LFM продемонстрировал значительные преимущества для визуализации устойчивой биологической динамики, что является сложным с точки зрения вычислений при использовании обычных методов деконволюции.

( a ) Конфигурация, сочетающая световое поле с микрофлюидным методом для визуализации активности двигательных нейронов на стадии L4 C. elegans (штамм ZM9128 hpIs595 [ Pacr-2 (s) :: GCaMP6 (f) :: wCherry]), действующий в микрожидкостном чипе (300 × 300 × 50 мкм, верхняя панель) со скоростью записи 100 Гц. ( b ), ( c ) MIP одного мгновенного объема, реконструированного с помощью VCD и LFD, соответственно.Увеличенные изображения выбранной области показывают, что VCD восстанавливает разрешение отдельной ячейки и удаляет артефакты. Представленные данные являются репрезентативными для n = 10 независимых C.elegans . Шкала 10 мкм. ( d ) Схема червя с идентифицированными мотонейронами, помеченными (слева) и описанием движения с комментариями (справа). ( e ) Тепловая карта, визуализирующая нейронную активность 18 идентифицированных двигательных нейронов во время 1-минутного наблюдения за действующим червем. Каждая строка показывает флуктуацию сигнала Ca ²⁺ отдельного нейрона с цветом, показывающим процентные изменения флуоресценции ( ΔF / F _O ), где F скорректирован с помощью коэффициента флуоресценции GCaMP к флуоресценции RFP.( f ) Кимограммы кривизны вдоль тела движущегося червяка. ( г ) График скорости показывает смещение в направлении тела. Этограмма, описывающая поведение червя во времени (нижняя панель), получается путем анализа кривизны и изменения скорости. ( ч ) Выбранные объемы с временными графиками (длительность: слева и посередине, 150 мс; справа, 500 мс) в соответствии с этограммой, визуализирующей обратное (слева), вперед (посередине) и нерегулярное (справа) ползание склонность червя.Масштабные линейки, 20 мкм. ( i ) Пропускная способность реконструкции VCD-LFM и LFDM для обработки одного и того же видео светового поля C.elegans .

Объемное изображение быстрой динамики бьющегося сердца рыбок данио

Мы также зафиксировали сердечную гемодинамику в бьющемся сердце рыбок данио. Чтобы уменьшить фон от тканей тела, был создан лазерный стержень для выборочного освещения области сердца ¹⁸ , и видео в световом поле было записано с частотой 200 Гц с использованием 20 × / 0.Объектив 5w ( Рис. 3a, Методы, Дополнительный Рис. 2 ). Текущие эритроциты (эритроциты, Tg (gata1a: dsRed) ) и ядра бьющихся кардиомиоцитов ( Tg (myl7: nls-gfp) ) были реконструированы в четырех измерениях с помощью VCD-Net с разрешением, структурным сходством , и производительность обработки заметно лучше, чем у традиционных подходов LFD ( Рис. 3b, c, f, g , Дополнительный Рис. 14, 15, 17, Видео 4, 5 ). Мы также доказали, что такое прямое преобразование 2D-3D VCD намного превосходит дальнейшее последующее улучшение результатов 3D LFD с использованием известных методов восстановления с глубоким обучением ¹⁹ ( Дополнительное примечание, рис.3 ). Помимо известного ограничения на восстановление плотных сигналов с использованием предыдущих реализаций LFDM, мы также продемонстрировали, что наш VCD-LFM может реконструировать трехмерное бьющееся сердце, экспрессирующее трабекулярный миокард высокой плотности ( Tg (cmlc2: gfp) ), Рис. 3h, i, дополнительный рисунок 16, видео 6 ), и предел был относительно высоким ( дополнительный рисунок 18, ). Кроме того, VCD-Net также хорошо обобщается при обучении на одном типе сердечного образца и его применении к другому, или обучении на гибридных наборах кардиологических данных вместе и применении ко всем из них (дополнительное примечание , рис.4.1, 4.2) . Быстрая визуализация VCD-LFM с точным разрешением отдельных клеток ( Дополнительный Рис. 19, ) затем позволила количественно исследовать преходящую сердечную гемодинамику. Мы отслеживали 19 отдельных эритроцитов на протяжении всего сердечного цикла продолжительностью 415 мс, в течение которых кровоток закачивался в желудочек и из желудочка с высокой скоростью более 3000 мкм / с ^-1 ( Рис. 3d, e ). С сегментацией непрерывной границы сердца мы успешно количественно оценили изменение объема миокарда во время диастолы и систолы и рассчитали фракцию выброса сердечных сокращений ( рис.3j, к ). Кроме того, с помощью комбинации VCD-LFM с SPIM мы реализовали 3D-визуализацию и количественный анализ кровотока внутри статических сосудов рыбок данио ( Tg (fli1: gfp; gata1a: dsRed) ), Methods, Supplementary 20, Video 7, 8 ).

( a ) Схема построения светового поля на основе выборочного объемного освещения для экспериментов с рыбками данио. Последовательности высококонтрастных световых полей движущихся эритроцитов (бьющееся сердце) записываются с помощью системы освещения пучком в виде стержня, которая выборочно возбуждает сигналы флуоресценции в интересующих объемах.( b ), ( c ) MIP в плоскостях x-y (слева) и y-z (справа) одного мгновенного объема текущих эритроцитов с помощью VCD-LFM и LFDM, соответственно. Пунктирными линиями обозначено сердце. ( d ) Дорожки 19 одиночных эритроцитов на протяжении сердечного цикла. Для справки выделено неподвижное сердце. ( e ) Карта скорости двух смежных во времени объемов эритроцитов во время систолы. ( f ), ( g ) MIP в плоскостях x-y (вверху) и x-z (внизу) одного мгновенного объема биения ядер кардиомиоцитов с помощью VCD-LFM и LFDM, соответственно.( h ), ( i ) 3D-визуализация биения миокарда в переходный момент с помощью VCD-LFM и LFDM соответственно. Миокард был плотно помечен GFP, который показывает непрерывные трабекулярные структуры. Стрелки указывают вход и выход сердечной помпы. A: атриум; V: желудочек. ( j ) Объем миокарда во время диастолы и систолы в одном сердечном цикле. ( k ) Соотношение изменения объема желудочка во время диастолы и систолы в одном сердечном цикле.Частота рассчитывается по формуле ( V _время — ESV ) / EDV , где V _время — это изменяющийся во времени объем желудочка во время сердцебиения, а ESV и . EDV представляют объемы в конце систолы и диастолы соответственно. Фракция выброса сердцебиения (EF), определяемая по формуле ( EDV — ESV ) / EDV , также показанная в виде пика на кривой, по расчетам составляет ~ 71%.Двадцать из 120 временных точек (по 1 из 6) выбираются для анализа в течение сердечного цикла ~ 400 мс. Масштабные линейки, 50 мкм. Представленные данные являются репрезентативными для n = 8, 4, 3 независимых рыб для клеток крови, ядер кардиомиоцитов и изображений миокарда, соответственно.

Чтобы записать нейронную активность действующих C. elegans с разрешением одной клетки, предыдущие исследования фиксировали червя в 2D или 3D с частотой кадров / объема до 50 Гц ^{7, 17, 20} .Дополнительный инфракрасный канал часто требуется для получения ярких изображений поведения червя в качестве эталона. Наш VCD-LFM, который способен записывать 100 Гц и восстанавливать 13,5 Гц быстрых трехмерных процессов в сочетании с полностью флуоресцентным анализом на основе сети, предлагает новый конвейер для изучения нейронной активности и соответствующего поведения червя у целых движущихся червей. , без размытия изображения или задержки обработки. Для визуализации сердечно-сосудистой системы недавние подходы, основанные на сканировании, для объемной визуализации бьющегося сердца и кровотока у личинок рыбок данио ^{21, 22,} потребовали сложной оптики, сверхбыстрой камеры и высокоинтенсивного возбуждения.Напротив, наш метод, основанный на относительно простой системе и простой вычислительной процедуре, предлагает убедительное решение для исследования динамических свойств и функций сердечно-сосудистой системы с одноклеточным разрешением и низкой фототоксичностью. Таким образом, VCD-LFM может быть ценным инструментом для изучения динамики в быстрых временных масштабах, потенциально принося пользу в различных приложениях, таких как исследования фенотипа, регулируемого нервными сигналами, и важные с медицинской точки зрения дисфункции сердца и транспортной системы крови у модельных организмов.

Обсуждение

Таким образом, мы представили подход VCD-LFM и продемонстрировали его способность отображать кратковременную биологическую динамику с улучшенным пространственным разрешением, минимальными артефактами реконструкции и увеличенной пропускной способностью реконструкции. Эти достижения имеют решающее значение для устойчивой объемной визуализации кровотока в бьющемся сердце рыбок данио и нервной активности в поведении C. elegans с высоким разрешением. Сетевая вычислительная модель VCD также является надежной, универсальной и готовой к широкому применению.Несмотря на то, что VCD-LFM значительно улучшает качество реконструкции от первоначального соединения с оптической системой до того, что можно оптимизировать с помощью предварительного обучения данных, он по-прежнему требует предварительного получения обучающих изображений. Мы ожидаем, что ситуация улучшится с дальнейшим развитием глубокого обучения. Помимо комбинации с базовой настройкой LFM, мы отмечаем, что VCD-Net также совместим с модифицированными модальностями LFM, такими как установка с двумя объективами ¹¹ или сканирующее световое освещение ¹⁸ .Наконец, мы ожидаем, что VCD-LFM потенциально может принести новые идеи для методов компьютерной визуализации и позволит нам еще больше расширить пределы пространственно-временного разрешения для наблюдения за биологической динамикой.

Вклад авторов

P.F., Z.W. и Х.З. задумал идею. П.Ф., С.Г. и Т.К.Х. курировал проект. Z.W., L.Z., G.L., Y.Y. разработал оптические установки. H.Z., Z.W. и Л.З. разработал программы. Z.W., L.Z., G.L., Y.D. и Ю.Л. провели эксперименты, обработали изображения.Z.W., L.Z., H.Z., L.X., M.Z., S.G., T.K.H. и П.Ф. проанализировал данные и написал статью.

Методы

LFM-установка с эпи-освещением

Эпифлуоресцентная установка для светового поля была построена на вертикальном микроскопе (BX51, Olympus). Пути обнаружения светового поля / широкого поля были добавлены к порту камеры главного микроскопа с использованием перекидного зеркала для переключения между двумя режимами обнаружения. Моторизованный z-столик (Z812B, Thorlabs) вместе с водяной камерой устанавливали непосредственно на столик микроскопа (x-y) для трехмерного контроля образцов внутри камеры.Объектив с водной иммерсией (LUMPlanFLN 40 × / 0,8 Вт, Olympus) использовался для сбора сигналов эпифлуоресценции от образцов. Для регистрации светового поля матрица микролинз (MLA, APO-Q-P150-F3.5 (633), OKO Optics) была размещена в плоскости исходного изображения для сбора сигналов светового поля. Релейная система 1: 1 (AF 60 мм 2.8D, Nikon) использовалась для сопряжения задней фокальной плоскости MLA с плоскостью сенсора камеры (Flash 4.0 V2, Hamamatsu). Путь светового поля был дополнительно расширен до двухканального обнаружения путем разделения после MLA и добавления дополнительного датчика камеры для C.elegans экспериментов. Дополнительную информацию о настройке Epi-LFM см. На дополнительном рисунке . .

Селективное плоское / объемное освещение LFM-установка

Мы также разработали LFM-установку, основанную на селективном объемном освещении. Две пары редукторов луча в сочетании с регулируемой диафрагмой использовались для генерации масштабируемого стержневидного луча (473 или 532 нм), который в конечном итоге проецировался на образец через объектив с 4-кратным освещением (Plan Fluor 4 × / 0,13, Nikon ) размещены перпендикулярно пути обнаружения.Он ограничивал возбуждение флуоресценции в области сердца эмбриона рыбок данио, уменьшая чрезмерное излучение из интересующего объема, которое могло бы размыть желаемые сигналы. Этот режим выборочного объемного освещения обеспечивает изображение в светлом поле с меньшим фоновым шумом и повышенной контрастностью ¹⁸ . Для наблюдения за динамическим процессом кровотока по сосудам мы также интегрировали стандартный канал SPIM (лазерный лист 473 нм, 4- мкм, толщина ) для получения трехмерных изображений устойчивых сосудов.Пути освещения светового стержня / светового листа были выровнены, обеспечивая двойное возбуждение образца с его двух сторон. Объектив с погружением в воду (Fluor 20 × / 0,5 Вт, Nikon) использовали для сбора сигналов двухцветной флуоресценции от эритроцитов / кардиомиоцитов. Дихроичное зеркало разделяет двухканальные сигналы GFP (сосуды) / DsRed (RBC) для обнаружения широкого поля и светового поля соответственно. Детектирование светового поля здесь выполнено по той же схеме, что и в LFM с эпи-освещением. См. Дополнительный рис. .2 для получения дополнительных сведений об этой гибридной установке.

Реконструкция светового поля VCD Сеть

Штамм ZM9128 hpIs595 [Pacr-2 (s) :: GCaMP6 (f) :: wCherry] , с индикаторами кальция, помеченными на двигательные нейроны класса A и B, был используется для обнаружения нейронной активности действующего червя ( рис.2 ). Штамм QW1217 hpIs467 [Prab-3 :: NLS :: RFP] с ядрами, меченными во всех нейронных клетках, был использован для демонстрации характеристик визуализации VCD-LFM ( Дополнительный Фиг.12, ). Все C. elegans культивировали на стандартных планшетах со средой для роста нематод (NGM), засеянными OP50, и выдерживали при 22 ° C в инкубаторах до стадии L4.

Чтобы получить данные HR 3D для обучения сети, анестезированные черви L4-стадии (QW1217 hpIs467 , ZM9128 hpIs595 , by 2.5 мМ левамизола в буфере M9, Sigma-Aldrich) были сначала получены с использованием объектива 40 × / 0,95 на конфокальном микроскопе (FV3000, Olympus). Чтобы продемонстрировать эффективность VCD-LFM, анестезированные черви (QW1217 hpIs467 ), внедренные в агарозу, были in situ , визуализированные как в световом, так и в широкопольном режимах обнаружения в нашем LFM с Epi-освещением. Полученные наборы трехмерных изображений с широким полем (размер шага 1 мкм) были деконволюционированы в программном обеспечении Amira (Thermo Scientific) для сравнения с этими реконструкциями светового поля с помощью LFD и VCD-Net.Трехмерные реконструкции охватывали 31 плоскость z с размером вокселя 0,34 × 0,34 × 1 мкм. В исследованиях поведения C. elegans бодрствующие черви на стадии L4 (ZM9128 hpIs595 ) были загружены в микрофлюидную камеру (~ 300 × 300 × 50 мкм), которая позволяет червям действовать в пределах поля зрения 40 × объектив. Затем сигналы GCaMP / RFP действующего червя записывались в течение одной минуты с частотой кадров 100 Гц (время воздействия 2 мс).

Количественный анализ нейронной активности и актерского поведения

3.Framebridge

Цена: от 39 до 199 долларов
Рамки от 4 «x 4» до 32 «x 40»
Framebridge выходят за рамки сверхпростой границы в стиле галереи, предлагая более стилизованное индивидуальное обрамление в Интернете. Пружина для позолоченного бамбука или состаренного побеленного дерева в сочетании с матировкой, защищенным от ультрафиолета акрилом и подвесными принадлежностями. Вы можете отправить свое произведение искусства или загрузить фотографию для печати в Framebridge в желаемом размере. Компания также может обрамлять такие предметы, как пуговицы или майки, глубиной менее 3/8 дюйма.

Level Frames могут продемонстрировать все, от плакатов до винила.

4. Рамы уровней

Цены: от 39 до 199 долларов
Элементы рамы размером от 4 «x 4» до 32 «x 40»
Рамы уровней изготавливаются вручную из древесины, заготовленной экологически безопасным способом, с использованием экологически чистых шеллаков. Пользователи могут загрузить изображение для печати, а затем выбрать между черным или белым матом и одним из трех типов остекления. Если вы нажмете кнопку золотого сечения, сайт предложит правильный фрейм в зависимости от размера вашего произведения искусства.Постеры и распечатки также можно отправить в студию Level для оформления. На заметку меломанам: сайт специализируется на оформлении виниловых пластинок.

Artifact Uprising специализируется на изысканных оправах без излишеств.

5. Artifact Uprising

Цена: от 69 до 349 долларов
Размеры рамы: от 8 x 8 дюймов до 30 x 42 дюймов
Artifact Uprising поможет вам персонализировать ваше пространство с помощью принтов, оформленных в различных современных стилях. от плавающих акриловых и латунных настенных рам до деревянных рам для столешниц.Каждая из модернизированных рам поставляется с оборудованием и инструкциями по вывешиванию. Artifact Uprising также предлагает варианты без рамки, такие как деревянные выступы для фотографий и вешалки для фотографий.

6. Американская рама

Цены: от 19 до 300 долларов
Размеры рамы: от 5 «x 5» до 40 «x 50» (или до 80 «в разобранном виде)
American Frame работает с 1973 и предлагает более 400 вариантов деревянных и металлических каркасов.Компания также будет печатать произведения искусства и фотографии на различных типах бумаги: холст, оргстекло или алюминий.Клиенты могут выбирать из большого разнообразия рам и матов, а также использовать возможности ретуши, монтажа и остекления.

Объемный рендеринг в глубину — V-Ray 5 для Maya

Эта страница содержит несколько полезных советов по визуализации объемных эффектов.

Режим объемной геометрии предоставляется в качестве опции по следующим причинам:

1. Генерация элементов рендеринга для композитинга — для полного списка поддерживаемых рендеров Элементы как в режиме объемной, так и в объемной геометрии, пожалуйста, проверьте страницу «Элементы рендеринга».
2. Смешивание нескольких атмосферных эффектов в сцене — например, вы используете Aerial Perspective и Volume Grid Simulation — если выбран режим Volumetric, один будет полностью позади другого на визуализированном изображении.

Ограничения:

1. Режим объемной геометрии не работает с вероятностными волюметриями.
2. В режиме «Объемная геометрия» рендеринг выполняется медленнее. В идеале вы должны работать в режиме Volumetric все время и переключаться на Volumetric Geometry только при создании проходов Render Element.
3. Параметры «Приблизительное» и «Приблизительное + рассеивание теней» в разделе «Визуализация» → «Цвет дыма» не поддерживаются в режиме объемной геометрии. По умолчанию будет отключено рассеяние.
4. Вам может потребоваться увеличить параметр V-Ray Settings → Overrides → Materials → Max.Transparency Levels, что замедлит рендеринг. При рендеринге в режиме объемной геометрии процедурная геометрия, состоящая из нескольких прозрачных слоев, создается во время рендеринга. Думайте об этом как о спрайтах, используемых в видеоиграх — последовательности фрагментов, обращенных к камере.

При рендеринге с помощью V-Ray GPU , режим рендеринга не имеет значения , а не — генерируются элементы рендеринга, и скорость рендеринга одинакова как в режимах объемной, так и в объемной геометрии.

Визуализация VDB выполняется медленнее, чем файлы AUR.

Макет VDB, который позволяет визуализировать огромные объемы с разреженной сеткой, делает визуализацию обычных объемов медленнее, чем формат AUR с плотной сеткой.

Если вы можете выбирать между AUR и VDB, по возможности используйте AUR. Ускорение рендеринга с файлами AUR может увеличиваться до 2x в зависимости от сложности настройки.

Кроме того, результаты ресимуляции при использовании VDB в качестве основы обычно отличаются от результатов при использовании файлов AUR из-за различий в методах сжатия по умолчанию.

Ресимуляция сохраняется как AUR, время рендеринга: 3 мин 45 секунд.

Ресимуляция сохраняется как VDB, время рендеринга: 6 мин 28 секунд.

Развертка рендеринга → Шаг% .

Параметр Step% является основным элементом управления сэмплингом при визуализации объемных эффектов. Чем выше вы можете установить Step%, тем быстрее будет рендеринг. В конце концов, артефакты начнут появляться при очень высоких значениях, так что именно здесь вы должны прекратить увеличивать Step%.

Параметр Step% указывает шаг перемещения лучей камеры в процентах от размера ячейки.Поскольку средство визуализации отслеживает лучи через сетку объема, это значение определяет, как часто получать информацию из сетки. Если Step% больше 100, некоторые ячейки будут пропущены и могут появиться артефакты. Может потребоваться более низкий процент, чтобы мелкие детали не терялись при внесении пользовательских изменений в кривые непрозрачности для огня / дыма.

Шаг%: 90, Время рендеринга: 4 м 58 секунд.

Шаг%: 200, Время рендеринга: 2 мин 01 секунда.

Шаг%: 300, Время рендеринга: 1 мин. 49 секунд.

Развертка рендеринга → Shadow Step% .

Shadow Step% похож на Step% в том смысле, что он отвечает за качество выборки объема, но только за тени, отбрасываемые объемом только на себя и окружающие объекты. Чем выше вы можете установить Shadow Step%, тем быстрее будет рендеринг. В конце концов, тени станут размытыми для очень высоких значений, так что именно здесь вы должны прекратить увеличивать Shadow Step%.

Шаг%: 200, Шаг тени%: 200, Время рендеринга: 2 мин 02 секунды.

Шаг%: 200, Шаг тени%: 400, Время рендеринга: 1 мин. 38 секунд.

Шаг%: 200, Шаг тени%: 800, Время рендеринга: 1 мин 36 секунд.

Свиток для рендеринга → Smoke Color → Use Light Cache | Ускорение светового кэша .

Как правило, для моделирования с низким разрешением Volume Grid Light Cache значительно ускоряет рендеринг.По мере увеличения разрешения выгода от использования Volume Grid Light Cache уменьшается. Если использование Light Cache отключено, попробуйте включить его, чтобы проверить, ускорит ли это рендеринг. Вы можете значительно сократить время рендеринга, увеличив настройку Light Cache Speedup. Увеличение его с 0,9 до 0,99 до 0,999 должно привести к большой разнице в скорости рендеринга.

Ускорение светового кэша следует увеличивать до тех пор, пока в визуализированном изображении не начнут появляться артефакты. Артефакты Grid Light Cache будут выглядеть как темные и яркие пятна размером с воксель.Они также будут мерцать в анимации. Артефакты сетки начинают появляться, когда воксел не отбрасывает достаточно теневых лучей — обычно это связано с настройкой освещения — например, освещение слишком тусклое, в сцене слишком много сеток и т. д. Если вы видите эти артефакты, значит, ваше ускорение светового кэша слишком велико, и вам необходимо уменьшить его. Если уменьшение до нуля по-прежнему не помогает, отключите Light Cache.

Отключите параметр «Использовать световой кэш», если:

1. Уменьшение параметра «Ускорение светового кэша» до нуля не помогает устранить артефакты в дыму.Если вы видите яркие и темные воксели, это означает, что ускорение светового кэша слишком велико. Если вы видите шум размером с пиксель, то это сэмплирование — вам следует соответствующим образом скорректировать настройки V-Ray (например, увеличить Max Subdivs для Bucket Sampler).
2. Вы визуализируете анимацию и замечаете мерцание, которое не исчезнет после уменьшения ускорения светового кэша.
3. Вы используете прогрессивный рендеринг.
4. В сцене есть несколько сеток — для большого количества сеток в одной сцене отключение Volume Grid Light Cache может ускорить процесс, в отличие от одной сетки, где лучше оставить ее включенной.

Use Light Cache: disabled, Render Time: 11m 34s.

Использовать Light Cache: включено, Ускорение: 0,9, Время рендеринга: 32 мин. 42 с.

Использовать Light Cache: включено, Ускорение: 0,99, Время рендеринга: 7 мин 17 с.

Использовать световой кэш: включено, ускорение: 0,999, время рендеринга: 1 мин. 49 с. .

При рендеринге с помощью V-Ray GPU опция Use Light Cache полностью игнорируется — Volume Grid Light Cache — это «хак» только для CPU, используемый для ускорения рендеринга CPU.

Артефакты сэмплирования V-Ray :

Артефакты размера пикселя , вызванные низкими настройками V-Ray Sampling, могут проявиться в визуализированном изображении, особенно при использовании Smoke Color → Scattering → Ray -Отслеживаемый (GI).

Чтобы решить эту проблему, увеличьте Max Subdivs в окне настроек V-Ray.

Максимальное количество подразделов: 2, время рендеринга: 33 секунды

Максимальное количество подразделов: 5, время рендеринга: 116 секунд

Максимальное количество подразделов: 9, время рендеринга: 177 секунд

Свиток рендеринга → Свитки Fire / Smoke Color / Smoke Opacity

Если вы используете какие-либо текстуры для модуляции / замены Fire, Smoke Color или Smoke Opacity, отключите их, чтобы проверить скорость рендеринга.Оценка и рендеринг некоторых текстур и сложных текстурных сетей может быть медленным.

Цвет дыма → Модуляция по текстуре: включен, Текстура: Градиентный градиент, Время рендеринга: 49 секунд.

Цвет дыма → Модуляция по текстуре: отключено, время рендеринга: 40 секунд.

Развертывание рендеринга → Непрозрачность дыма → Оптимизировать большие объемные сетки

Если этот параметр включен, будет выполняться предварительный проход оптимизации по каждой сетке в сцене для ускорения процесса рендеринга.

Лучше оставить эту опцию включенной, если:

1. У вас мало ОЗУ — эта опция требует дополнительной памяти во время рендеринга, поэтому вы можете отключить ее, если у вас недостаточно ОЗУ.
2. В сцене присутствует несколько волюметрических сеток — предварительный проход будет выполняться для каждой сетки — это может задержать начало рендеринга на достаточно долгое время, чтобы свести на нет выигрыш в скорости рендеринга от оптимизации.
3. Прогрессивный рендеринг включен — предварительный проход задерживает начало процесса рендеринга — вы можете отключить его, если такое поведение нежелательно.

Этот параметр влияет только на скорость рендеринга — на качество рендеринга изображения не влияет.

Оптимизировать большие объемные сетки: отключено, время рендеринга: 3 м 31 с.

Оптимизация больших объемных сеток: включено , Время рендеринга: 2 м 21 с.

Свиток рендеринга → Непрозрачность дыма → Минимальная видимая непрозрачность

Если непрозрачность вокселя ниже указанного значения, воксель вообще не будет закрашен.Эта опция значительно экономит время при объемном рендеринге. Его всегда следует поддерживать на уровне 0,001 или выше, если только дым не прекращается резко.

Минимальная видимая непрозрачность: 0,005, время рендеринга: 54 секунды.

Минимальная видимая непрозрачность: 0,001, время рендеринга: 61 секунда.

Минимальная видимая непрозрачность: 0,000, время рендеринга: 66 секунд.

Свиток рендеринга → Цвет дыма → Рассеивание

Этот параметр определяет, как световые лучи рассеиваются внутри объема.Лучше всего использовать Approximate или Approximate + Shadows (последнее также влияет на тени, отбрасываемые на геометрию сцены).

Ray-Traced (только GI) — более реалистичная настройка, но рендеринг с большими сетками с использованием V-Ray Adv (CPU) будет очень медленным. Вы можете использовать эту опцию, когда:

1. Вам нужны реалистично выглядящие паровые облака.
2. Вы выполняете рендеринг с помощью V-Ray GPU — Ray-Traced Scattering на значительно быстрее на при рендеринге на GPU.V-Ray Global Illumination должен быть включен, чтобы эта опция имела какой-либо эффект, иначе по умолчанию будет отключено рассеивание.
3. Вы выполняете рендеринг в Volumetric Geometry Mode Mode с V-Ray Adv (CPU) — параметры Approximate и Approximate + Shadows не поддерживаются.

Рассеяние : отключено, время рендеринга: 80 секунд.

Рассеяние: трассировка лучей (GI), время рендеринга: 177 секунд.

Рассеяние : приблизительное, время рендеринга: 57 секунд.

Свиток рендеринга → Цвет дыма → External Scatter Mult

Если вы хотите получить лучшее ощущение объема для внешнего вида дыма, вместо увеличения его непрозрачности вы можете уменьшить External Scatter Mult — это предотвратит попадание света слишком глубоко в дым, и вы получите более сильные тени в объеме с той же непрозрачностью.

Внешний Scatter Mult: 1.0

External Scatter Mult: 0,9

Внешний разброс Mult: 0,75

Развертывание рендеринга → Fire Lights

Включение Create Fire Lights имитирует Global Illumination , помещая источники света в яркие части огня, что дает аналогичные результаты и намного быстрее рендеринг.Его можно использовать как с включенным, так и с выключенным GI, потому что это поможет в тех случаях, когда большие помещения необходимо освещать очень маленькими и очень яркими огнями.

Отключить Create Fire Lights — если это значительно ускоряет рендеринг, вы можете поэкспериментировать с параметрами в разделе Fire Lights .

При рендеринге с помощью V-Ray GPU параметры Fire Lights полностью игнорируются. Глобальное освещение должно быть включено в настройках V-Ray, если вам нужно, чтобы дым и / или сцена освещались огнем.

Функция Create Fire Lights включена, самозатенение на основе сетки, разрешение света: 25%, время рендеринга: 14 мин 45 секунд

Функция Create Fire Lights отключена, время рендеринга: 1 час 0 мин 03 секунды

Самозатенение на основе сетки игнорирует любую геометрию внутри сетки и светит прямо за ней. Это также относится к пересекающимся сеткам. Если такое поведение нежелательно, переключитесь в режим Ray-Traced Self-Shadowing .

Самозатенение на основе сетки, разрешение света: 25%, время рендеринга: 14 мин 45 секунд

Самозатенение с трассировкой лучей, разрешение света: 25%, время рендеринга: 1 час 53 минуты 06 секунд

Если вы находитесь в режиме самозатенения на основе сетки по умолчанию, наиболее важным для увеличения скорости рендеринга является попытка уменьшить Разрешение света (%) , особенно если есть многие тома сияют друг на друге.Не бойтесь уменьшать его ниже 1% — разрешение света обычно не имеет значения для деталей почти так же, как разрешение непрозрачности, поэтому вы должны иметь возможность опустить его очень низко, прежде чем начнут появляться артефакты затенения.

Light Cut-Off определяет порог интенсивности света, ниже которого свет от Fire Lights не будет вычисляться на поверхностях — это может значительно сэкономить время, особенно с большим количеством сеток или сложной геометрией в сцена. Увеличьте его, чтобы ограничить эффект света Феникса на некотором расстоянии вокруг сетки объема. Слишком большое его увеличение начнет проявляться на освещенных геометрических объектах в виде крутых краев, где прекращается освещение от Огней Огня.

Самозатенение на основе сетки, разрешение света: 25%, время рендеринга: 14 мин 45 секунд

Самозатенение на основе сетки, разрешение света: 10%, время рендеринга: 6 мин 02 секунды

Самозатенение на основе сетки, разрешение света: 5%, время рендеринга: 5 м 05 секунд

Самозатенение на основе сетки, разрешение света: 1%, время рендеринга: 4 м 08 секунд

Для очень простых сцен установка выпадающего меню V-Ray Settings → Global Switches → Advanced → Adaptive Lights на Full Lights Evaluation может ускорить рендеринг объемных эффектов.

Дополнительную информацию об Adaptive Lights можно найти в статье Understanding Adaptive Lights.

Толстый (очень непрозрачный) дым рендерится быстрее, чем тонкий (очень прозрачный) дым, потому что расчеты освещения для вокселей, полностью скрытых за другими непрозрачными вокселями, можно полностью пропустить.

Если дым плотный, вы можете еще больше ускорить рендеринг, включив параметр «Вероятностный объем» в меню «Параметры рендеринга V-Ray → Переопределения → Объемные параметры», чтобы посмотреть, дает ли это вам повышение скорости рендеринга.

Если ваш дым очень прозрачен, вероятностный объем не будет иметь большого значения, а в некоторых случаях может даже замедлить рендеринг.

Если V-Ray Global Illumination включен, количество GI Samples сильно повлияет на время рендеринга. И высокие, и низкие значения увеличивают время рендеринга — вы должны стремиться найти хорошее значение где-то посередине.

Вероятностное затенение: отключено, время рендеринга: 91 с.

Вероятностное затенение: включено, время рендеринга: 54 с.

Все параметры в развертывании Rendering поддерживаются V-Ray Adv (CPU).

Следующие параметры не поддерживаются V-Ray GPU:

1. Smoke Color → Scattering: Approximate & Approximate + Shadows — V-Ray GPU значительно быстрее при использовании опции Ray-Traced (GI Only). Чтобы эта опция имела какой-либо эффект, необходимо включить V-Ray Global Illumination.
2. Smoke Color → Use Light Cache: эта опция относится к внутренней Volume Grid Light Cache , которая не связана с V-Ray Light Cache. Это функция только для ЦП, которая помогает ускорить рендеринг Bucket.
3. Fire Lights: все параметры Fire Lights игнорируются при рендеринге с помощью V-Ray GPU. Включите глобальное освещение в настройках V-Ray, если вам нужно, чтобы дым и / или сцена освещались огнем.

V-Ray Next Adv.ЦП с грубой силой / грубой силой GI

Графический процессор V-Ray Next с функцией Brute Force / Brute Force GI

Это путь: как инновационные технологии погрузили нас в мир мандалорца

Когда The Mandalorian открывается на ледяной планете, титулованный охотник за головами нацеливается на свой следующий приз, вы почти чувствуете порывы ветра, пронизывающие суровую местность.Эффект интуитивный, безупречное сочетание проверенных практичных наборов и костюмов в сочетании с инновационной новой техникой, которая выводит визуальные эффекты на передний план производственного процесса.

За кулисами на съемочной площадке « Мандалорианец», «» рассказчики и беспрецедентные инженеры по визуальным эффектам, создавшие первый телесериал « Звездные войны » в прямом эфире, объединились, чтобы взломать код для того, что стало революционным творением: StageCraft, технологическое чудо, которое погружает съемочную и производственную бригаду в среду компьютерной графики в реальном времени с помощью массивного светодиодного экрана, охватывающего весь спектр.

«Мы экспериментировали с этими технологиями в моих прошлых проектах и, наконец, смогли собрать группу с разными точками зрения, чтобы объединить достижения в кино и играх и проверить пределы возможностей рендеринга в реальном времени в камере», — заявил шоураннер Джон Фавро. сказал.

«Джон Фавро нашел прорыв, к которому всегда стремился Джордж [Лукас], когда впервые исследовал идею телешоу с живыми актерами», — добавляет Ричард Блафф, супервайзер по визуальным эффектам в этом нашумевшем сериале.Известные как StageCraft, новаторы из Industrial Light & Magic, Lucasfilm и их совместные партнеры по проекту достигли волшебства прыжков по планете Звездных войн , которое переносит зрителей в далекую-далекую галактику, поселив The Mandalorian в фотореалистичной среде, созданной в основном на компьютере, которая охватывает физические декорации и реальных актеров, чтобы создать цельный эффект.

Потрясающе наблюдать за тем, как разворачивается финальный эффект, поскольку команда художников и инженеров, известная как Brain Bar, действует как центр управления полетом всего в нескольких ярдах от Тома, изогнутого кокона из светящихся светодиодных экранов, готовых транспортировать тех, кто стоит внутри. буквально где угодно.«Это точно такая же технология, как и большие светодиодные экраны на Таймс-сквер», — говорит Блафф. «Мы хотели снимать на небольшой сцене с небольшими физическими установками, которые можно было бы довольно быстро раскатывать и выдвигать, а затем расширять эти физические наборы на светодиодной стене, охватывающей весь круг». А перемещая визуальные эффекты в начало съемочного процесса, StageCraft обогащает актеров и опыт режиссеров и кинематографистов, используя новую методологию для более точного повествования в полностью сфабрикованной галактике.

Всего за шесть месяцев до начала съемок шоураннер Джон Фавро, исполнительный продюсер Дэйв Филони и DP Грейг Фрейзер объединили свои усилия с ILM, Epic Games (создателем Unreal Engine) и партнерами по производственным технологиям Golem Creations, Fuse, Lux Machina. , Profile Studios, NVIDIA и ARRI, чтобы разблокировать это инновационное достижение. В то время как ILM была пионером в создании инструментов виртуального производства и успешно работала со светодиодной технологией в предыдущих фильмах Star Wars , StageCraft в то время все еще находился в зачаточном состоянии, платформа виртуальной реальности, которая помогала рассказчикам исследовать искусственно созданную среду для настройки своих снимков.Опираясь на поддержку президента Lucasfilm Кэтлин Кеннеди и чистую волю Фавро, который всегда подталкивал коллектив, чтобы пробовать что-то новое, и объединяя несколько блестящих умов, способных сделать это возможным, съемочная группа сделала следующие шаги в более широком смысле. world, создав прототип Тома.

Свежие проекты, такие как The Jungle Book и The Lion King , Фавро был увлечен использованием новых технологий для обогащения повествования, когда он начал свою работу над The Mandalorian .Но ограничения по расписанию телешоу — и шоу Star Wars , которое должно было удовлетворить ожидания поклонников скачкообразных масштабов планеты, в то же время делая его совершенно аутентичным и доступным не меньше, — означали, что все, что придумала команда, должно было выглядят реалистично и могут быть сняты на звуковой сцене Лос-Анджелеса без традиционных проблем натуры. «Одна из вещей, которую мы хотели сделать, — это отойти от зеленых экранов и сделать масштаб телешоу Star Wars работающим, — говорит Блафф.«И мы знали, что нам нужны технологические инновации, чтобы раздвинуть границы и предложить решение для производства. Благодаря сотрудничеству с Джоном Фавро, Грейгом Фрейзером, ILM, Epic Games и другими мы пришли к идее использования технологии видеостен ».

«В тот момент, когда все поняли, что это сработает».

Блафф, как и многие фанаты, открыл для себя Star Wars в детстве, увлеченный далекой-далекой галактикой и историями, которые там разворачивались.«Я влюбился в Star Wars в детстве. Я смотрел фильмы снова и снова и лежал перед телевизором, рисуя персонажей. Я отчаянно хотел попасть в любую творческую среду, особенно в мир кино, через рисование ». Когда Jurassic Park открыл новые горизонты с реалистичной анимацией компьютерной графики, Блафф увидел свое открытие. «Я понимал, что двери отрасли вот-вот будут выбиты, и это будет гонка за изучением этой технологии, потому что она находится в зачаточном состоянии.Так что я воспользовался этой возможностью обеими руками! »

«Именно этот новаторский дух с первых дней ILM, рождение компьютерной графики и рождение компьютеров Pixar действительно вдохновил меня», — добавляет Ким Либрери, технический директор Epic Games, который тесно сотрудничал с Блеф и команда. «Честно говоря, ILM и наследие Джорджа оказали большое влияние на то, что я выбрал свой карьерный путь». Однажды вечером, когда он учился в колледже в Великобритании, Либрери приснился сон о реалистичной видеоигре, в которой был задействован полет на снежном спидере над Хотом во время битвы с AT-AT из Star Wars: The Empire Strikes Back .«Это было абсолютно реально. Я был в фильме, но это была игра. Я подумал, что однажды, возможно, видеоигра будет выглядеть так же хорошо, как фильм. И этим я руководствовался всю мою карьеру ».

Блафф получил работу в ILM в составе команды матовых художников над «Звездные войны: Месть ситхов»; Libreri также продолжал работать супервайзером визуальных эффектов в ILM, прежде чем продолжить. И они оба очень рады работать над новыми историями Star Wars . «Что касается меня, когда я возвращаюсь к Star Wars в роли, которую я занимаюсь развитием технологий, я надеюсь, что это вдохновит детей моего возраста, когда я [обнаружил Star Wars ]», — говорит Блафф.

Спустя почти два десятилетия после своей первой роли в закулисном строительстве галактики, Блафф вспоминает те ранние испытания StageCraft весной 2018 года, когда у команды, работавшей над The Mandalorian , было всего несколько недель, чтобы придумать прототип экрана с охватом. «Мы получили добро, чтобы начать активную разработку технологии где-то в конце марта 2018 года. Идея заключалась в том, что 10 июня того же года мы проведем тест на сцене с гораздо меньшим экраном со светодиодной подсветкой. фотоаппарат, прототип костюма и множество различных светодиодных сред для тестирования технологии.”

«Моя теория заключалась в том, что текстуры и освещение от контента должны быть безошибочно реальными», — говорит Блафф. Некоторые попытки использовать процедурные и компьютерные ландшафты не увенчались успехом. «Было много тестовых сред, которые на самом деле не работали, и это было полезной частью процесса. Чаще всего это были среды, построенные по принципу «все с нуля» ».

Когда они помещали изображения настоящих пустынь и снежных пейзажей с высоким разрешением, напоминающие Татуин и Хот, на Объем, эффект ощущался ощутимым, но каким-то далеким.Поскольку действие происходит так далеко от пейзажного фона, он больше похож на традиционный матовый фон. «Когда камера перемещается на 10 футов, гора не двигается. Так что это действительно доказало только одно: если мы сможем поместить на экран фотореалистичные изображения, мы поверим, что персонаж находится в этой среде в определенной ситуации освещения ».

В предпоследний день тестирования команда ILM создала трехмерную внутреннюю среду, используя тысячи перекрывающихся изображений из реального места на острове Ангела в Сан-Франциско.Параллакс должен был быть встроен, поэтому при смещении фона на экране следовало направленное позиционирование. Наконец, актер, одетый в костюм мандалорца, был помещен в центр изогнутого тома. «Это был момент нашей« Эврики! », — говорит Блафф. «Это не было широко открытое пространство, это была гораздо меньшая среда, и все на съемочной площадке верили, что это реально.

«Набор« Остров ангелов »на самом деле представлял собой набор комнат с дверными проемами между ними, и у нас была камера, откидывающаяся назад, и на экране создавалось впечатление, что мы движемся назад, путешествуя из комнаты в комнату», — говорит Блафф.«У нас был Мандалорианец в центре проходящего кадра, и он был полностью интегрирован, потому что освещение из компьютерной среды перемещалось вместе с ним, когда камера двигалась назад. Никто не мог сказать, что его не было в той комнате. И это был момент, когда все поняли, что это сработает ».

«Все боялись мерцания и всевозможных технических проблем», — добавляет Либрери. «И люди были буквально поражены тем, как хорошо это выглядело. Это было просто потрясающе. Все сидели на сцене и говорили: «Боже мой, я думаю, это будущее.Думаю, мы все вместе, как команда, разработали шаблон для создания визуальных эффектов в камере ». Рождение нового метода работы».

«Все стояли в пустыне»

Месяцы спустя, набор The Mandalorian в Лос-Анджелесе представлял собой оживленный улей. В эпицентре Volume — изогнутая светодиодная видеостена высотой 20 футов с углом обзора 270 градусов, состоящая из 1326 отдельных светодиодных экранов, увенчанных светодиодным потолком. Внутри пространства для выступлений диаметром 75 футов множество физических опор и частичных наборов, созданных художником-постановщиком Эндрю Джонсом и его командой, можно было поменять местами, чтобы они соответствовали экранам и быстро превращали инновационную арену в множество планет и внутренних локаций. .

StageCraft заключается в том, как он объединяет совместные творческие силы в первой серии живых боевиков Star Wars и позволяет им работать вместе в режиме реального времени. Зеленый и синий экраны, которые когда-то были стандартными для съемки реальных актеров и реквизита, прежде чем цифровая замена фона для компьютерной среды стала бы кошмаром для команды пост-продакшн эффектов с центральным персонажем, таким как Мандалорианец, чей блестящий бескар доспехи отражали бы те самые оттенки, которые должны были быть вырезаны из окончательного кадра.Таким образом, StageCraft является благом как для актеров, так и для съемочной группы и фанатов. «Зеленые экраны создают путаницу как для актеров, так и для съемочной группы, ограничивая спонтанность и творческий подход на лету», — говорит Блафф.

Но помимо экономии времени и средств за счет исключения этапа тщательной замены зеленых экранов, StageCraft позволяет улучшить освещение на съемочной площадке, при этом окружающая среда отражается обратно в доспехах Мандо без трудоемкой пост-продакшн-детализации. А магия StageCraft позволяет создателям эффективно создавать визуальные эффекты с высоким разрешением в реальном времени благодаря технологии игрового движка.«Все, что мы делаем, мы всегда делали бы на этапе пост-продакшн, и это всегда выглядело бы точно так же», — говорит Блафф. «Это была цель. Мы никогда не хотели жертвовать качеством шоу. Фактически, наоборот, мы хотели улучшить качество, потому что нашей задачей был главный герой в полностью отражающем костюме.

«Этот подход изменил правила игры для нас, не только потому, что убрали зеленые экраны, но и предоставили всем присутствующим на съемочной площадке расширение набора визуальных эффектов, которое обычно создается только через несколько недель после окончания съемок.Вместо этого он был там в день, люди могли взаимодействовать с ним и погрузиться в себя — актеры, операторы, постановщики. Все стояли в пустыне, или в лесу, или где-то в ангаре. Не было необходимости в вопросах: куда я иду? Что это за место? Насколько глубоко это восходит? Какой высоты потолок?

«С добавлением технологии слежения за камерой, где бы физическая камера ни двигалась, когда фотографировала актеров, мы смогли компенсировать фон в реальном времени, как если бы камера смотрела через волшебное зеркало в [созданный компьютером] мир, который мы построили », — говорит Блафф.

«Это как будто мы поместили их в видеоигру», — добавляет Либрери, хотя фотореалистичные изображения выходят за рамки современных игровых технологий. «Тот факт, что мы можем посещать эти места, я думаю, у них лучший контент, лучшие выступления. Это похоже на возвращение в те дни, когда Джордж [Лукас] был там, в Тунисе »или в более поздние фильмы « Звездные войны », в которых команда « Звездных войн: Скайуокер »отправилась в песку Иордании. «Вы снова чувствуете это чувство», — говорит Либрери.«Это похоже на классический Star Wars … и он будет иметь резонанс в течение многих лет».

«Учил Джордж»

Такие революционные инновации часто являются кульминацией лет маленьких, с трудом завоеванных побед, которые шаг за дюймом продвигают технологию кинопроизводства вперед. Например, Фавро и другие режиссеры уже экспериментировали с этой технологией, снимая такие фильмы, как « Книга джунглей » Фавро и другие, например, Gravity до этого, возможно, когда светодиодные экраны были впервые использованы Lucasfilm для освещения на Rogue One. : История Звездных войн .В то время качество изображений означало, что большинство экранов все еще приходилось заменять эффектами с более высоким разрешением при постобработке автономного фильма Star Wars . «Мы основывались на том, что было сделано для Rogue One , мы оба использовали круговой светодиодный экран, но в то время они были ограничены воспроизведением предварительно визуализированных сред с точки зрения одной камеры», — говорит Блафф. «Их намерение состояло в том, чтобы сосредоточиться на захвате интерактивного освещения с экранов, зная, что воспроизводимый контент будет заменен при постпродакшне на версию с высокой точностью воспроизведения, которая будет поддерживать точно такое же освещение.”

Джон Фавро представил свои новаторские достижения в области виртуальной реальности, разработанные как для The Jungle Book , так и для Lion King , но хотел вывести эффект на новый уровень. «Требуется огромное мужество и дальновидность, чтобы поверить в то, что нам это удастся, — говорит Блафф. «И было много раз, когда люди, участвовавшие в разработке технологии, задавались вопросом, будет ли это осуществимо», — признает он. Но Фавро никогда не колебался. «Джон помог нам выжить и доказать, что технология работает.”

Как давний смотритель Звездных войн , рассказывая истории, работая по правую руку от самого Лукаса, когда он впервые подписал контракт с руководителем мультсериала Звездные войны: Войны клонов , «Дэйв [Филони] привносит связь с оригиналом Джорджа. видение, — говорит Блафф. «Дэйв невероятно креативен и сам по себе замечательный рассказчик, но тот факт, что его обучал сам Джордж, делает всех честными. Вы чувствуете, что перед вами открытая дверь к тому, что Джордж пытался сделать в оригинальных фильмах.Он ведет нас. Он нас вдохновляет. Он заставляет нас смеяться каждый день на съемочной площадке. Он замечательный, замечательный человек. И всем нравится с ним работать ».

Libreri впервые участвовал в обсуждениях, когда Филони исследовал использование Unreal Engine и подобных платформ для анимированного повествования. «Мы говорили об идее, что телешоу, такое как Clone Wars , и некоторый эпизодический анимационный контент можно было бы сделать в движке», — говорит Либрери. Слежение за физическими камерами в виртуальной среде — это то, чему Фавро помог продвинуть в своей работе над The Jungle Book и совсем недавно над The Lion King .«Когда вы начинаете смотреть на все эти разные проекты, Джон всегда был в разговоре и всегда настаивал на том, каким будет этот следующий шаг вперед». В течение многих лет «ни у кого не было точного ответа», — говорит Блафф. «Потребовалось, чтобы все собрались вместе и рассказали о своем опыте и о том, чем хотел заниматься Джон, будь то Грейг Фрейзер, главный исполнительный директор, будь то Ким Либрери из Epic, я из ILM или, конечно, Джон и Дэйв, сами создатели фильма. И именно в ходе этих разговоров мы пришли к мысли о том, как мы хотим попытаться снять The Mandalorian .”

Для Bluff StageCraft — это венец за два десятилетия в отрасли. «Это был самый лучший опыт сотрудничества, который у меня когда-либо был за 20 лет работы в этой отрасли», — говорит он.

Панель мозга

Изо дня в день рендеринг и управление окружающей средой, отображаемой на экране, в реальном времени осуществляется элитной командой художников по визуальным эффектам и инженеров ILM, известной как «панель мозга».

«По сути, это авиадиспетчерская служба», — говорит Блафф. Несмотря на то, что они прижались друг к другу всего в нескольких футах от Тома, они напоминают стойкую диспетчерскую НАСА.«Это те, кто управляет огромными экранами. Они рассказывают о различных средах, которые вы могли бы увидеть, по которым вы бы стреляли. Они могут буквально двигать горы. Они могут вращать мир. Они могут переместить нас из одного конца ангара в другой конец ангара. Они могут добавить дополнительное освещение в сцену, которое, конечно, могло бы повлиять на актеров на сцене, поэтому они делают много, много, много вещей, чтобы заставить камеру поверить в волшебный трюк.”

В то время как команда усиленно работает над The Mandalorian Season Two, Блафф говорит, что уроки из первых восьми глав новаторской серии оставили у команды новые идеи для еще большей интеграции технологий в будущем. «Мы многому научились из первого сезона», — говорит Блафф. «Глава 6 была одной из последних снятых нами серий. Ангар Roost, вероятно, был самым сложным из всех, что мы делали, потому что он был таким огромным. И в этой среде у нас был не только Razor Crest в виртуальной среде, но и люди, которые ходили по виртуальным средам.У нас падали искры, поднимался пар и двигались краны. Таким образом, вы могли сказать, что к тому времени, когда мы подошли к концу шоу, мы вполне освоились с технологиями и были рады просто продолжать расширять границы возможного ». И хотя он пока не может вдаваться в подробности, «я могу сказать, что во втором сезоне мы превзошли все, что мы сделали в первом сезоне с технологической точки зрения», — намекает Блафф. «Это даже оставило команду с открытым ртом на некоторые из фокусов, которые мы смогли выполнить с помощью технологии видеостен.”

Ничего из этого не было бы возможным без видения Джорджа Лукаса и вдохновляющих достижений Industrial Light & Magic и других мастеров визуальных эффектов, которые продолжали стремиться к более реалистичным и аутентичным эффектам со времен покадровой анимации и матовой окраски.

«Мы очень гордимся тем, что являемся частью The Mandalorian , и мы очень благодарны Кэти [Кеннеди], Lucasfilm и Джону Фавро», — говорит Либрери. «Он подтолкнул всех нас. Он заставлял всех делать то, чего раньше никогда не делали.И когда мы оглядываемся на 20 лет назад, это знаковый момент. Это такая же достопримечательность, как «Приключения Андре и Уолли» B , когда группа Pixar сняла свой первый короткометражный мультфильм ».

«Я не верю, что технология работала бы так же хорошо, как без того особого места, которое Star Wars занимает в сердцах всех», — добавляет Блафф. «Вы можете увидеть это в работе, которую они проделали, и в той любви, которую они испытывали ко всему, что мы делали. Каждый привнес в этот проект что-то, что редко можно найти где-либо еще, и все это восходит к Джорджу Лукасу и замечательным фильмам, которые он снял несколько десятилетий назад.”

Узнайте больше о создании The Mandalorian в новой документальной серии Disney Gallery: The Mandalorian , теперь транслируемой на Disney +!

Узнайте больше о технологии, лежащей в основе The Mandalorian, в галерее Disney: The Mandalorian !

И вы можете посмотреть эксклюзивное закулисное видео Industrial Light & Magic о виртуальном производстве The Mandalorian , Season One, ниже!

Заместитель редактора Кристин Бавер — писатель, ведущая на этой неделе! В «Звездных войнах » и всестороннем ботанике, у которого всегда есть только один вопрос в неисчерпаемом списке курьезов.Иногда она выпаливает: «Это ловушка!» даже если это не так. Вы знаете фаната, который производит наибольшее впечатление? Зайдите в Twitter и расскажите о них @KristinBaver .

Теги сайта: #StarWarsBlog, #DisneyPlus, #TheMandalorian,

ТЕГИ: Disney Gallery: The Mandalorian, ILM, ILM Stagecraft, Industrial Light & Magic, The Mandalorian

Советы и рекомендации по съемке объемного видео и фотограмметрии

Это отредактированная стенограмма, взятая из серии молниеносных выступлений, посвященных современным методам создания контента во время SIGGRAPH 2020.Полнометражный пост изначально появился на нашей странице в Medium.

ALEX: Наша цель — поделиться инсайдерской информацией о объемном видео и фотограмметрии, а также о том, как получить наилучший захват, какой бы метод захвата вы ни выбрали. Мы упомянем некоторые внутренние особенности, присущие технологическому решению MOD Tech Labs, но в целом наша цель — создавать возможности по всему спектру. Подача MOD полностью универсальна — мы можем обрабатывать любые объемные данные, данные фотограмметрии и данные сканирования.Наш вывод также полностью универсален — .obj и .fbx и т. Д.

ALEX: Я Алекс Портер, генеральный директор и соучредитель MOD Tech Labs. Это наш второй стартап в сфере технологий — мы оба пришли из XR, и этот инструмент был создан, когда мы с Тимом работали в Underminer Studios. В конечном итоге мы хотели создать возможность для создания масштабируемого контента. И то, что мы пришли после трех с половиной лет работы над этим инструментом, — это высокомасштабируемое облачное решение SaaS.Я не собираюсь вдаваться в подробности, но это точка отсчета, из которой мы пришли.

Я занимаюсь дизайном интерьеров и технологиями строительства, а последние несколько лет мы работали в сфере развлечений, средств массовой информации, медицинских инструментов и т. Д. Мы всегда занимались созданием каких-то внутренних инструментов. Независимо от того, создаете ли вы инструмент сканирования AR или опыт вождения инвалидной коляски VR, у людей есть возможность создавать и масштабировать свои собственные взаимодействия и контент с эффектом погружения в VFX, геопространственном, медицинском или другом месте.

Мы — стартап с венчурным капиталом, базирующийся в Остине, штат Техас, и за последние несколько лет мы были награждены премией Top Innovator от Intel в течение 3 лет подряд и наградой City of Austin Innovation Award в 2019 году. Мы также являемся частью этой программы. Программа NVIDIA Inception.

TIM: Я Тим Портер, соучредитель и технический директор MOD Tech Labs. Я проработал 20 лет в индустрии видеоигр, кино и иммерсивных медиа. В играх я был техническим художником и техническим директором конвейера.Я являюсь председателем рабочей группы XR Ассоциации потребительских технологий и являюсь их заместителем председателя по стандартам XR.

Моя точка зрения исходит от производителя — как я могу создавать инструменты, доступные каждому? Мне очень повезло освоить новые технологии, а затем очень быстро их использовать. Раньше я создавал автоматизированные инструменты и игрушки для художников и оптимизацию под устройства, и это привело к тому, что MOD находится сегодня. Взять технологию, которую действительно сложно построить, автоматизировать или отнять очень много времени, превратить ее во что-то простое в использовании, быстрое и не требующее инфраструктуры — то, с чем небольшие и средние студии сталкиваются с серьезной проблемой. .

ALEX: Мы разделим наши предложения на фотограмметрию, сканирование и объемное видео для получения наилучших практик захвата.

ALEX: Для настройки вашей фотограмметрической установки есть несколько важных вещей. Размещение камеры и фокус камеры имеют решающее значение. В зависимости от вашего пространства пола и того, что вы пытаетесь сфотографировать, неподвижный объект часто располагается в центре.

Если у вас несколько фотоаппаратов или вы используете одну наведи и снимайте, вам определенно захочется использовать что-то вроде штатива, чтобы иметь профессиональное качество с ровными фотографиями с любого ракурса и части, которую вы пытаетесь снять. захватывать.Это поможет вам получить еще более подробную информацию. Для очень детализированных объектов вам понадобится еще больше фотографий. Вы всегда хотите использовать — где это возможно — идентичные камеры и объективы. В некоторых решениях можно использовать несколько камер, но, в конечном итоге, решить эту задачу намного проще, если у вас один тип. В общем, мы хотели бы сказать, что это 15-градусное сечение между каждой из камер, что помогает создать те перекрывающиеся точки данных, которые вы захотите сделать действительно высококачественными.

ТИМ: Именно так.Это просто легкая концепция, когда вы думаете о любом уровне сканирования. Я видел, как люди делали намного больше. Я видел, как вещи обходятся меньшим. Но общее практическое правило — особенно если вы строите статическую установку — это 15 градусов в каждом направлении. 14,5 градусов, если вы действительно очень точны и хотите сделать что-то высококлассное, особенно снимать лица. Но на самом деле, как только вы опускаетесь ниже этого числа, вы начинаете сталкиваться с данными, которые на самом деле не нужны — многие новые системы фактически выбрасывают эти данные.

Когда вы говорите об отдельных активах, вы можете немного подробнее остановиться на топологии и потоке актива. Если это то, для чего у вас есть портативная камера, вы знаете, проследите за краями и скажите: «Хорошо, хорошо, это перекрывающаяся область. Итак, мне нужно получить еще парочку в этой области ». Но со статическими установками вы ищете хорошее покрытие для каждой из этих разных вещей. Когда мы говорим об идентичных линзах, причина в том, что алгоритмы машинного обучения легче решить.Они в некоторой степени понимают внутренние и внешние свойства камеры — в основном, где она находится в трехмерном пространстве, поле зрения камеры и целый ряд других важных точек данных, и это происходит в течение определенного промежутка времени. агрегирование изображений.

Итак, чем больше у вас изображений — особенно если все они одинаковы, тем выше скорость вычислений (количество времени, которое вы тратите на вычисления, эта информация уменьшается), а затем, когда качество повышается, потому что вы иметь такое же количество технической информации захвата, которая проходит через все различные изображения по мере их прохождения.В итоге получается более качественный результат.

Да, я видел массу разных. Многие профессиональные установки используют несколько установок, но вы говорите о установках с обычно 100-200 камерами, и замены этому действительно нет. Если вместо этого вы сделали что-то более близкое к одиночным объективам и камерам, вы наверняка можете обойтись немного меньшим.

И, конечно же, вы всегда должны быть уверены, что вы предварительно сфокусируете свои камеры, что объект находится в кадре в максимально возможной степени и что у вас есть перекрытие с кадром.Общее практическое правило — три изображения на точку — это неплохо.

ALEX: Некоторые из типичных конфигураций включают купольное покрытие с объектом посередине. Если вы работаете с полным телом, вы увидите цилиндрические стили установки оснастки. Это гораздо больше связано с тем, что вы снимаете, и с вашим физическим следом. Есть несколько способов использовать и то, и другое в разных ситуациях в ваших интересах.

Эти «три выстрела на очко» действительно важны.Недавно у нас были некоторые люди, представившие фотограмметрию с массивными пробелами — они находились слишком далеко от объекта, который снимали. И когда у вас это есть, вы упустите много деталей и упустите много действительно тонких моментов, которые должны пересекаться. Таким образом, действительно важно поместить этот объект в кадр как можно больше с наименьшим количеством посторонних вещей на заднем плане или за пределами объекта.

Затем для каждой сцены вы хотите перекрыть на 40%.Опять же, многое из этого связано с отображением этих точек интереса по всем данным.

TIM: И, конечно же, эти номера будут обновляться и дальше. В какой-то момент это было 60%, и вам нужно было по шесть изображений за штуку. Теперь количество сокращается до трех, и с такими вещами, как синтез представлений, эти числа регулярно снижаются. Я видел синтезированные снимки просмотра, которые позволяют полностью захватить объект в менее чем 30 изображениях — во всех направлениях — и получить абсолютно все, а качество просто феноменально; четкие края, блеск и блеск и тому подобное.

Но как только мы вернемся и поговорим о сегодняшних технологиях — о том, что все используют, что используется в очередях и с помощью которых люди обрабатываются, — это все еще три изображения. С 40% перекрытием вы можете обойтись немного меньшим, если у вас есть действительно интересные точки без особых разделений поверхности — в основном, массивное изменение силуэта. Если у вас есть что-то вроде серьги, вам понадобится дополнительная информация, особенно если это сложная серьга, а не гвоздика и тому подобное.

Итак, самая сложная часть — это баланс между ними. Если у вас есть статический объект с чем-то, чего нет, например, с очень подробной рубашкой, вам может потребоваться больше фотографий для создания изображений — информация, основанная либо на изменениях освещения, теневом полюсе или что-то в этом роде — просто в зависимости от того, что иду туда. Такие вещи, как абсолютные активы, являются сложными, потому что они ищут точки интереса, которые можно сопоставить между ними.

Съемка на белом фоне затруднена, потому что вы получаете отражение или преломление от земли.То же самое, если на тебе полностью черная рубашка. Вы можете получить хорошие снимки на черных рубашках и тому подобном, но это сложнее решить в целом, и вы получите гораздо более четкие результаты, если предоставите что-то вроде пледа. Но, с другой стороны, с таким материалом вы в конечном итоге сталкиваетесь с разными проблемами, такими как обеспечение того, чтобы линия оставалась прямой, и тому подобное. Все, что безопасно для камеры, но все же имеет какую-то форму, является хорошим ответом.

ALEX: Сканеры представляют собой скорее непрерывный рулон, чем отдельные изображения.Цель состоит в том, чтобы поддерживать целостность и уровень во всех отношениях. Вы хотите оставаться под одним и тем же углом и равномерно перемещаться по объекту. Опять же, для такой устойчивости и профессионального качества требуется штатив.

Есть много способов использования сканеров: лидары, дроны и т. Д. Тим еще расскажет о RGBD. Для сканера не требуется фокусировка; как правило, у них все эти вещи изначально настроены. Вам нужно максимально заполнить кадр объектом.Одна из распространенных вещей, которые мы наблюдаем, — это сочетание данных сканера с фотограмметрией, так что это действительно отличный способ дополнить ваши наборы данных.

TIM: Единственное, на что вы всегда должны обращать внимание, — это то, что у каждого из этих сканеров есть минимальное и максимальное расстояние — хорошо быть в этом месте. Существуют физические диаграммы, такие как 435 от Intel. Камера RealSense находится на расстоянии двух футов — как только вы выйдете за пределы этого диапазона, вы начнете терять качество.Но если вы попадаете в этот диапазон, у вас появляется упакованная информация, которая вызывает проблемы с реконструкцией. У вас могут возникнуть проблемы с деформацией или пунктиром, если вы подойдете слишком близко. Если вы находитесь слишком далеко, это похоже на то, что из этого выходит, но это скорее гористый / фальшивый вид.

LiDAR — речь идет о большинстве наземных LiDAR — будет сканировать так, как он изначально установлен. FARO прекрасно справляется с настройкой своих систем так, чтобы они делали то, что они делают.Если вы говорите о базовом сканировании самолета, убедитесь, что вы получаете перекрытие от 20% до 30%, чтобы, когда данные вернутся, вы могли использовать это для очистки, когда вы получаете обходной путь.

прошла долгий путь, теперь квадрокоптеры могут нести все тяжелые и тяжелые объекты. Я начинаю видеть намного больше данных, вращающихся вокруг фотограмметрии поверх данных сканирования, поэтому вы видите много времяпролетных сканеров, а не столько структурированных сканеров, которые есть на дронах.Хотя я видел некоторые сканирующие дроны RealSense, которые в некотором роде сочетаются с зеркальными фотокамерами и дают неплохую обратную связь, но это действительно зависит от того, что вы собираетесь делать. Если вам нужно подобрать дрон так близко, у вас должен быть отличный пилот — так что есть много компромиссов.

Одно из лучших решений — небесный LiDAR с наземной фотограмметрией. Комбинация этих двух элементов обеспечивает как четкие края, которые вы получаете от LiDAR, так и большую заполняющую информацию, которую вы получаете от фотограмметрии — такого рода настройки «молитесь и распыляйте» — особенно когда у вас есть большая площадь, которую вам нужно покрыть, а не точность, которую вам обеспечат только фотограмметрия и наземный LiDAR.Итак, если у вас большие дела, комбинация этих двух действительно обеспечивает более полные результаты за более короткий промежуток времени и более экономична.

ALEX: Установка объемного видеоряда — это интересно и увлекательно. Типичная сейчас модель для большей части объемного видеозахвата — это выделенная сцена. Мы считаем, что это определенно ценный способ для некоторых людей получить к нему доступ, но может быть нереалистичным для других. Это одна из причин, по которой мы фактически создали наше решение обработки для MOD, заключалась в том, чтобы создать возможность передавать объемное видео другим пользователям, которые уже занимаются фотограмметрическим захватом — они уже понимают, кто это делает, у них есть оборудование для фотограмметрического захвата, и все, что им действительно нужно сделать, это несколько настроек калибровки, чтобы иметь возможность захватывать объемное видео.

Эти вещи относительно похожи на фотограмметрический захват, настроенный с несколькими квалификаторами здесь и там. Для начала, минимум три камеры на 15-градусное сечение, что основано на принципах фотограмметрии — назовите это «видеограмметрия», если хотите. Мы работаем над тем, чтобы создать это перекрытие в данных и убедиться, что вы получите как можно больше деталей для создания этого движущегося объекта.

С фокусировкой камеры вам действительно нужно одинаковое фокусное расстояние для каждой камеры.Одинаковый тип фокусировки на каждой камере — без автофокуса — определенно вызывает проблемы, потому что все камеры будут делать свои собственные варианты автофокуса. Тогда сложнее добиться того результата, когда вы их комбинируете. Глобальный затвор предпочтительнее и держитесь подальше от линз типа «рыбий глаз». Вы не хотите, чтобы какая-либо из камер была индивидуальной; вам нужно, чтобы у них у всех была одинаковая настройка, а если у них все одинаковые камеры… даже лучше. Мы работали со всем, от установок для веб-камер до установок для цифровых зеркальных фотоаппаратов и заканчивая установками «Bullet Time», и создали возможности для повторной калибровки этих стилей и использования их для этой возможности.

TIM: Почему мы говорим о трех разделах? На самом деле это вертикальное перекрытие — в итоге вы получаете кикер-секцию, среднюю секцию и лицевую секцию. Вы хотите поставить хотя бы пару наверх, и это то, что я склонен видеть почти в каждом клиентском оборудовании, которое мы получаем — они не особо рассчитывают на то, что макушка выйдет так хорошо. Их это не особо беспокоит, потому что многие из них носят тюбетейки, а потом накрашивают волосы. Хотя я могу сказать вам, если вы считаете, что у вас есть рабочая сила, чтобы идти вперед и укладывать волосы на каждый кадр объемного видео … вы продолжаете делать это, но это звучит как удовольствие далеко за пределами того уровня развлечений, который я нахожу.

Тебе действительно нужно снимать сейчас — это все сейчас, иначе тебе придется испытать много боли позже. Итак, делать вещи над головой и следить за тем, чтобы вы действительно считали пол — я вижу это даже с большими профессиональными волюметрическими станками, где они не делают много работы по разделению между землей и ногами людей. Вы в конечном итоге увидите эти плоскостопие. Я знаю, что не все носят пару Chuck Taylors, на этих вещах есть подошва … но они проходят сквозь них и отрубают подошву.В конечном итоге вам нужно иметь больше на земле, чем люди на самом деле думают, чтобы вы могли пойти дальше и разделить этих людей. Это очень важно.

Одно предостережение, когда дело доходит до линз типа «рыбий глаз» — линзы «рыбий глаз» неприятны. Они неприятны, потому что фактически растягивают изображение по краям. Каждая камера делает это — очень верно. Осознаёте ли вы это или нет, причина, по которой мы понимаем, насколько далеко находится точка в трехмерном пространстве, заключается в решимости, которую камера передает на плоское изображение.Итак, у вас есть это плоское изображение, а затем мы приближаемся к центру изображения … по мере того, как оно приближается к краю, каждое изображение имеет растяжение — даже у фиксированного объектива есть некоторое растяжение, которое выходит наружу — он просто придерживается этого точного фокусного расстояния и обеспечивает гораздо лучший результат.

Fisheye делают это с гораздо большей скоростью. В результате вы теряете более жизнеспособную информацию — даже если вы делаете замечательную де-деформацию, которую я видел несколько де-деформаций, когда ваш глаз ее не увидит.Я могу обещать вам, что компьютерное зрение будет видеть каждую минуту разницу между каждым из этих изображений. И когда он пытается обойти весь круг, он увидит эти небольшие результаты и даст немного здесь, а не здесь. Может показаться, что это не так уж и много, но когда вы говорите о том, что «немного здесь» для каждого кадра, края танцуют, а танцующие края вызывают у людей тошноту, а люди не любят, когда их тошнит. Этого мы стараемся не делать.

Есть несколько решений, над которыми мы определенно работаем, регулярно задействуя алгоритмы машинного обучения, которые, очевидно, намного умнее, чем люди, которые их создают (то есть я). Это то, что принесет отличные результаты. На SIGGRAPH я видел много хороших решений, которые помогли нам справиться с линзами «рыбий глаз», потому что иногда у вас есть место только для «рыбьего глаза». Fisheyes действительно великолепны в освещении. Проблема в том, что покрытие, которое они предоставляют, не является тем покрытием, которое вам нужно.

ALEX: Покрытие буровой установки, опять же, действительно похоже на фотограмметрию. Очень типично, покрытие куполом — определенно хочу убедиться, что у вас есть верхняя часть головы, как упоминал Тим … ноги и голова, если вы делаете все тело.

Есть некоторые технологии, с которыми мы экспериментируем, и мы фактически создали временную иллюзию, чтобы воссоздать некоторые недостающие данные — у нас были некоторые наборы данных, которые не содержали всех идеальных снимков. Честно говоря, это не всегда возможно, в зависимости от предмета обсуждения.Поэтому правильное освещение очень важно для этой точности. Особенно на лице, если вы делаете бюст, потому что весь смысл объемного видео лица состоит в том, чтобы получить все макро и микровыражения — весь этот румянец, все маленькие тонкие линии — мельчайшие движения нашего лица, которые создают мы люди.

Итак, мы установили камеры, направленные на все стороны объекта, и убедитесь, что вы четко охватываете такие вещи, как уши, волосы, макушка и затылок, все эти действительно интересные, странные места, которые немного скрыты.

Для снимков бюста требуется минимум 210 градусов данных записи. Так что это не 180 °, хотя мы обычно называем 180 °, на самом деле это 210 °, потому что вы действительно хотите получить эту заднюю часть уха. Это огромная его часть.

TIM: Таким образом, вы получаете 210 градусов, поэтому вы можете сократить его до 180 °. Вернитесь к нашему правилу трех … вам нужно добавить дополнительные 15 градусов с каждой стороны — назовите это 210. Тогда вы получите нужную область, потому что в конечном итоге вы получите некоторую деформацию и шатание, основанное на факте. что в этих областях есть только одна в определенных точках, которые находятся там, или, может быть, две в некоторых других точках, просто исходя из правого-левого севера-юга от 180-градусного спада, который вам действительно нужен.

Когда мы говорим о камерах, установленных со всех сторон от объекта, это одно и то же — это фотограмметрия — вы хотите, чтобы все было вокруг. Цилиндры отлично справляются с этим. Самая большая проблема с цилиндрами заключается в том, что у вас есть руки (внизу и вверху) и области паха, которые находятся намного дальше, под ними, чем от любой точки камеры. Таким образом, вы в конечном итоге видите множество проблем в этих областях. Если вы можете сделать полный купол, вы все равно столкнетесь с этими проблемами.

Итак, многие вещи, которые я вижу, всегда связаны с большим количеством камер. Когда вы дойдете до диапазона камеры 210 °, вы захотите, чтобы они указывали вверх в определенных областях. У вас есть некоторые из них, которые указывают на этот цилиндрический узор, а затем у вас есть те, которые указывают на подмышки, и другие снимки проблем, которые там есть. Если вы в этом разбираетесь, вы направите всех в одном направлении, а затем сделаете снимки под мышками и под пахом, так что в конечном итоге вы получите качественные результаты. Очень весело пытаться понять это и получить качественные результаты.

ALEX: Другой способ, которым мы фактически боролись внутри компании, здесь, в MOD, заключается в том, что мы создали возможность использовать лучшее из обоих миров. Итак, фотограмметрия в позе A или T для самого тела, а затем это тело можно оснастить или наложить на него мокап — есть много интересных вещей, которые вы можете сделать с этой точкой — всевозможные анимации или последовательности. Вы можете сопоставить это с фактическим захватом костюма захвата движения, а затем объемным для бюста. Другое преимущество заключается в том, что объемный бюст — это значительно меньший физический размер, и это дает вам возможность делать точные снимки лица и тела, а затем создавать комбинированную технологию, которая максимизирует ваши результаты.

ТИМ: Однозначно. И давайте будем честными, люди намного лучше знают, как работать с мокапом, и с тем, как мы делаем все-в-одном .fbx — где все ресурсы находятся в одном месте — это действительно просто умный результат для вывода и для вариантов использования.

ALEX: Мы не собираемся проходить все это (на фото выше) один за другим, но это также можно найти в нашем руководстве по захвату. Это своего рода обзор. Общие лучшие практики.Это в значительной степени характерно почти для всех из них. Некоторые из них немного лучше — когда вы начнете сканировать, вы будете лучше и эффективнее захватывать эти тонкие объекты. Отчасти этот блеск и блеск будет меньшей проблемой, чем при фотограмметрии или объемном видео.

Опять же по характеристикам камеры, у многих они одинаковые? Если вы используете ту же камеру, это прекрасно. Если вы можете свести к минимуму посторонние функции — рыбий глаз, автофокус, баланс белого — действительно постарайтесь сохранить их одинаковыми.Это идеально.

Еще одно различие между тем, как работают данные захвата, которые мы получаем, заключается в том, что наше решение для обработки на самом деле наиболее функционально, когда у вас нет синего, зеленого или белого экрана / набора позади вас. Он работает намного эффективнее, когда у нас есть точки данных / интересные места позади и вокруг объекта — будь то фотограмметрическое или объемное видео. Мы используем машинное обучение и компьютерное зрение, чтобы на самом деле выполнять калибровку камеры, извлечение фона, обнаружение краев и тому подобные вещи, необходимые для понимания тригонометрии, глубины и того, где заканчивается объект и начинается мир.

TIM: Одна из важных вещей, которую люди часто упускают, — это использование карт отражения для плоского освещения. В конечном итоге вы получаете белые отражения и преломления на коже человека. Итак, панельное освещение — это хорошо, если не слишком жарко. Вы можете найти несколько превосходных на Amazon — пару за 50 долларов или меньше сейчас на низком уровне — и получить хорошие результаты, и в них есть аккумуляторные блоки. Нам они нравятся. Я использовал их в нескольких снимках, и они великолепны, особенно для путешествий и тому подобного.

DSLR идеальны во многих областях. У них есть ограничение, когда дело доходит до объемного видео — и некоторые из них могут быть довольно громкими при захвате отдельных изображений — хотя, если вы переключаетесь на видео, они все равно обеспечивают прекрасные результаты. Что-то посередине — это такие вещи, как RX0 и тому подобное, потому что они специально предназначены для небольших фотографий. Практически все, кроме GoPro, потому что линзы GoPro довольно грубые, рыбий глаз и тому подобное.

И, конечно же, как мы уже говорили ранее, без автофокуса, и вы определенно захотите нормально сбалансировать белый цвет на своих устройствах. Теперь у нас есть решение, автоматизирующее цветной паспорт. Прямо сейчас у нас также есть один, который использует нейронную сеть для создания одного и того же цветового тона для всех изображений. Итак, если вы предоставите сбалансированное по белому изображение изображение, которое вы хотите, чтобы все выглядело так, как в вашем списке, тогда вы можете это сделать, так что вам не нужно особо об этом беспокоиться.

Затем они, конечно, должны быть обработаны в наших системах, но вы также можете сделать это самостоятельно.Это просто зависит от того, к чему вы клоните. Но вы определенно хотите, чтобы ваши активы, которые отправляются в обработку, были сбалансированы по белому — в этом просто нет замены качеству.

Одна вещь, которая здесь не обязательно упоминается, но хорошо известна, — это использование raw. Во многих случаях результаты будут лучше. В некоторых случаях нет. И это зависит от того, как вы это делаете.

ALEX: Итак, как в него вписывается MOD? Почему это важно для нас? Для нас это важно, потому что захват — не наша специальность.Мы хорошо знакомы с захватом — мы понимаем лучшие практики, помогаем другим захватывать более эффективно и расширяем их возможности. Но мы — технологическое решение.

На самом деле у нас есть распределенная обработка, поэтому во многих случаях мы на 98% быстрее. Мы используем автоматизированные системы: таким образом, данные изображений перетаскиваются в папку проекта, они загружаются в незашифрованной системе, отправляются непосредственно в наше частное безопасное облако, мы обрабатываем их в соответствии с вашими требованиями и доставляем их вам.

На самом деле, вся предпосылка этого состоит в том, чтобы открыть экосистему и возможность для людей выполнять более функциональные вещи без необходимости иметь инфраструктуру и иметь возможность свести к минимуму специализированный персонал, который вам нужен для многих этих процессов, и действительно отказаться от этой огромной сверхурочной работы. Многие вещи, которые мы делаем и обрабатываем, на самом деле выполняются вручную и требуют много времени, и лучше всего их выполняет машина.

ALEX: У нас есть еще один ресурс, помимо руководства по захвату и нашего веб-сайта: если вы прокрутите нашу домашнюю страницу вниз, руководство по захвату будет доступно для загрузки в формате PDF.

Мы всегда готовы помочь вам. Мы действительно заинтересованы в том, чтобы делиться своими знаниями и давать людям больше возможностей.

ТИМ : Спасибо всем! Вы можете найти нас на сайте modtechlabs.com. Электронная почта Алекса — alex@modtechlabs.