Как вывести изображение с камеры на монитор

Обновлено: 04.07.2024

Машинное обучение и встроенные камеры позволяют создать новый класс более естественных устройств для видеоконференций

Идея встраивания камер в дисплей не нова. С самых первых дней видеоконференцсвязи было признано, что разделение камеры и дисплея означало, что система не могла точно передавать восприятие взгляда. Системы видеоконференцсвязи по-прежнему не могут воссоздать зрительный контакт — ключевой элемент эффективного общения.

Вторая проблема возникла совсем недавно. Желание максимально увеличить размер экрана на небольших устройствах, таких как мобильные телефоны, оставляет мало места за пределами дисплея для размещения камеры.

Размещение камер за экраном может решить эти проблемы, но это приводит к ухудшению качества изображения. Дифракция от пиксельной структуры экрана может привести к размытию изображения, снижению контрастности, уменьшению полезного уровня освещенности и даже полному перекрытию некоторого содержимого изображения способами, которые зависят от дизайна пикселя дисплея устройства.

Кроме того, есть и другие способы, при которых видеоконференция игнорирует пространственные факторы, искажая воспринимаемый размер и положение участников по сравнению с разговором в реальном пространстве.

В этом проекте мы исследуем, как машинное обучение может помочь преодолеть некоторые проблемы ухудшения качества изображения, связанные с размещением камер за дисплеем, и поможет организовать удаленные разговоры в более естественной пространственной среде.

Проблема перспективы

Размещение камеры над дисплеем приводит к тому, что точка обзора отличается от точки зрения при разговоре лицом к лицу, особенно при использовании больших дисплеев, что может создать ощущение, что говорящий смотрит сверху вниз.

Хуже того, из-за большого расстояния между камерой и дисплеем у участников не будет зрительного контакта. Если я посмотрю прямо вам в глаза на экране, вы увидите, что я смотрю прямо под ваше лицо. И наоборот, если я смотрю прямо в камеру, чтобы дать вам ощущение, что я смотрю вам в глаза, на самом деле я больше не могу видеть ваши глаза и могу пропустить тонкие невербальные сигналы обратной связи.

В совокупности результат может больше походить на видеонаблюдение, чем на разговор!

Камера, расположенная над дисплеем Встроенные в экран камеры обеспечивают естественную перспективу для разговора

Из-за этих несоответствий потенциал видеоконференций не соответствует их потенциалу по созданию ощущения присутствия и достоверному воспроизведению богатства личного разговора.

Перемещение камеры в точку на экране, где появляется лицо удаленного участника, обеспечит естественную перспективу и зрительный контакт.

Сложность дифракции

С помощью прозрачных OLED-дисплеев (T-OLED) мы можем расположить камеру за экраном, что может решить проблему перспективы. Но поскольку экран не полностью прозрачен, просмотр через него ухудшает качество изображения из-за дифракции и шума.

Здесь мы можем увидеть эффект фотографирования простого изображения через экран T-OLED:

Увеличенная деталь фотографии точки Тот же объект, снятый той же камерой через экран T-OLED

Структура пикселя влияет на дифракцию. В этом примере на экране есть длинный тонкий прямоугольник, через который можно смотреть:

Иллюстрация камеры, направленной через экран T-OLED с пиксельной структурой, имеющей вертикальные прозрачные промежутки

Тепловизор (справа) просматривает вертикальные промежутки в пиксельной структуре T-OLED

Неудивительно, что это приводит к значительному ухудшению качества изображения, но только в горизонтальном направлении. Мы можем визуализировать этот эффект, построив функцию передачи модуляции (MTF):

Горизонтальная MTF показывает большую дифракцию. Вертикальная ЧКХ показывает пренебрежимо малую дифракцию.

Восстановление образа с помощью U-Net

Чтобы компенсировать ухудшение качества изображения при фотографировании через экран T-OLED, мы использовали структуру нейронной сети U-Net, которая одновременно улучшает соотношение сигнал/шум и устраняет размытость изображения.

Нам удалось получить восстановленное изображение, практически неотличимое от изображения, которое было сфотографировано напрямую.

ВАЖНО! Эта статья относится только к определенным продуктам и/или операционным системам. Подробнее см. в разделе Применимые продукты и категории.

В зависимости от настроек прокси-записи видео изображение может не отображаться на внешнем мониторе или на мониторе камеры, если вы записываете видео в формате XAVC S 4K на карту памяти, вставленную в камеру. Установите для записи прокси соответствующий параметр в соответствии с использованием.

Проверьте следующую комбинацию настроек при записи:

    Режим ожидания для видеозаписи:

  • Информация об изображении и записи отображается на внешнем мониторе.
  • Отображение камеры выключено.
  • Информация об изображении и записи отображается на внешнем мониторе.
  • Отображение камеры выключено.

    Режим ожидания для видеозаписи:

  • Информация об изображении и записи появляется на экране камеры.
  • На внешнем мониторе отображается только изображение.
  • Информация об изображении и записи появляется на экране камеры.
  • На внешнем мониторе отображается только изображение.

    Режим ожидания для видеозаписи:

  • Информация об изображении и записи появляется на экране камеры.
  • На внешнем мониторе отображается только изображение.

  • На внешнем мониторе отображается только изображение.
  • На экране камеры отображается только информация о записи.
  • Для камер ILCE-7RM4, ILCE-7RM4A, DSC-RX100M7, ILCE-6600, ILCE-9M2, ZV-1, ILCE-7C, ILCE-7C и ZV-E10, если для параметра Запись прокси установлено значение Выкл. и Record Setting на 24p, изображение появится на экране камеры и на внешнем мониторе. Информация о записи будет отображаться только на камере.

Информация об изображении и записи отображается только на экране камеры.

    Режим ожидания для видеозаписи:

  • Информация об изображении и записи появляется на экране камеры.
  • На внешнем мониторе отображается только изображение.
  • Информация об изображении и записи появляется на экране камеры.
  • На внешнем мониторе отображается только изображение.

Если ваша камера по-прежнему подключена к внешнему монитору с помощью кабеля HDMI во время воспроизведения, изображения будут отображаться на внешнем мониторе независимо от информации HDMI. Настройка дисплея и установлен ли формат файла 4K или HD. Отображение экрана камеры выключено.

Я искал ветку на эту тему и ничего не нашел, но, возможно, неправильно выразился. У меня есть 24-дюймовый плоский экран со светодиодной подсветкой, который был заменен большим для телевизора. Интересно, смогу ли я использовать его для показа моих фотографий заказчику в студии во время съемки. Кажется, я видел кое-что для людей, которые снимают на мероприятиях, но это будет отличаться, поскольку они, вероятно, будут показывать их после мероприятия.

Что я прошу, так это показать фото на мониторе, как только я сделаю снимок, так же, как на дисплее камеры. Если бы кто-то мог указать мне на настройку для этого, я был бы признателен. Кажется, стыдно тянуть хороший телевизор.


Иногда я снимаю «подключенные» через USB-кабель (и удлинительный USB-кабель ) к ноутбуку, и ноутбук также управляет вторым (намного большим) дисплеем. Программное обеспечение является частью дистрибутива Canon. Я не видел никакой информации о поставщике в вашем профиле, так что. Я не знаю, относится ли это к тому снаряжению, которое вы используете.

Некоторые говорят, что EyeFi (SD-карта Xmtr) можно использовать. если вы не снимаете в высоком разрешении или в формате RAW.

Я думаю, вы могли бы использовать кабель HDMI от камеры к телевизору, если оба поддерживают этот интерфейс. Таким образом, вы также получите предварительный просмотр на задней панели камеры, отображаемый на телевизоре. Во всяком случае, это то, что я слышал, я точно не знаю.

Существует несколько программ, к которым вы можете привязываться либо через USB (иногда через FireWire со старыми камерами Canon высокого класса), либо через беспроводной передатчик (либо сделанный компанией, производящей камеру, либо чем-то вроде Eye-Fi). Многие производители камер предоставляют один, многие профессионалы используют Capture One Pro, который работает с большим списком камер. Если вы уже используете Lightroom или что-то подобное в своем рабочем процессе, я считаю, что вы можете настроить его для наблюдения за папкой съемки, поэтому, если программное обеспечение, поставляемое с вашей камерой, позволяет вам снимать привязанно и сохранять в папку, вы можете смотреть съемку в Lightroom. .
--

Nikon D800 Nikon AF Nikkor 50mm f/1.4D Nikon AF-Nikkor 80-200mm f/2.8D ED Nikon AF-S Nikkor 14-24mm f/2.8G ED Epson Stylus Pro 4880 + еще 6

Roys1000 написал:

Я искал ветку по этому поводу и ничего не нашел, но, возможно, неправильно формулирую. У меня есть 24-дюймовый плоский экран со светодиодной подсветкой, который был заменен большим для телевизора. Интересно, смогу ли я использовать его для показа моих фотографий заказчику в студии во время съемки. Кажется, я видел кое-что для людей, которые снимают на мероприятиях, но это будет отличаться, поскольку они, вероятно, будут показывать их после мероприятия.

любой кабель HDMI за 2 доллара из любого источника подойдет для подключения вашего последнего Canon к экрану. если на экране есть только вход DVI, приобретите кабель HDMI-DVI или штекер-переходник. (DVI и HDMI — очень похожие цифровые сигналы, поэтому кабель/конвертер также недорог.)

имейте в виду, что цифровая зеркальная камера Canon будет отображать разрешение 480P только при записи фильма/просмотре в реальном времени, но будет отображать разрешение 1080P при воспроизведении. вы стреляете, нажимаете кнопку воспроизведения, и это будет отлично смотреться на дополнительном экране. Я понятия не имею, делают ли Nikon то же самое, но я предполагаю, что да.

Ищите дверь сбоку от камеры.

Подключите кабель к камере и телевизору, и все, что обычно отображается на задней панели камеры, будет отображаться на телевизоре.

Используйте боковую стрелку и другие кнопки на камере, чтобы изменить изображение на телевизоре.

В зависимости от выходных разъемов камеры вы можете купить кабель премиум-класса для подключения к разъемам HDMI на камере.

Если это фотоаппарат с видео, шнур в коробке будет с разъемом для изображения и разъемом для звука.


Поскольку D80 – несколько устаревшая камера, вы застряли с обычным аналоговым видеосигналом 480 P, который не будет хорошо смотреться на 24-дюймовом телевизоре. кабель находится в коробке с камерой.


Поиск программного обеспечения под названием «Nikon Capture Control Pro»

Доступна бесплатная пробная версия.

Похоже, что в руководстве он отображается только на телевизоре в режиме воспроизведения. Думаю, я могу попробовать и посмотреть.


Я использовал компьютерный кабель с камерой и подключил его к видеоразъему на телевизоре, и он работал как в режиме повтора, так и во время съемки. Сейчас иду в магазин за длинным кабелем. Тот всего около 3 футов.


Есть несколько способов сделать это.

1) Ваша фотокамера D80 будет работать с программным обеспечением Nikon "Camera Control Pro 2". Подключите камеру к компьютеру (ноутбуки хороши) с помощью USB-кабеля и снимайте. Файлы идут прямо на компьютер. Основным ограничением является длина USB-кабеля. Да, вы можете использовать активные ретрансляторы, но это немного беспорядок, если вам нужны длинные кабели для свободного перемещения. Изображение с идеальным разрешением для ваших клиентов (они просматривают реальный файл с камеры). Полукомпьютерный клиент может выбирать изображения для просмотра. Время передачи составляет 12-15 секунд для файла RAW и, возможно, 5 секунд для файла JPG (эти цифры являются догадками, я на самом деле не замерял время, и у меня нет D80). Отличный ответ в студии со штативом! Не очень хорошо для модного фотографа, танцующего на съемочной площадке.

2) Ваш D80 имеет (я думаю) стандартный видеовыход с мини-разъемом. Вы можете купить мини-разъем для видеокабеля RCA практически любой длины и подключить его к композитному видеовходу (желтый из набора из 3 разъемов RCA на любом телевизоре). Клиент видит именно то, что находится на заднем ЖК-дисплее вашей камеры (клиент не может контролировать то, что он видит). «Время передачи» мгновенное. Убедитесь, что любой монитор/телевизор, который вы используете для этого, не будет «автоматически искать вход», если видеосигнал камеры пропадет (черный). Видео среднего и низкого разрешения. Не используйте слишком большой экран!

3) Беспроводной передатчик: насколько мне известно, D80 не будет работать с беспроводным передатчиком Nikon. Есть некоторые неоригинальные (Eye-Fi), которые должны работать. Мой очень ограниченный опыт работы с Eye-Fi был очень разочаровывающим. ОЧЕНЬ медленно с файлами JPG в полном разрешении и бесполезно медленно с файлами RAW. Изображение с идеальным разрешением для ваших клиентов (они просматривают реальный файл с камеры). Не верьте мне на слово по поводу проблемы со скоростью, Eye-Fi уже был установлен в студии у друга, и я просто «поигрался» с ним минут 10. Хотя мой друг вернул Eye-Fi и потребовал свои деньги обратно!

Итак, как видите, идеального ответа не существует. Зависит от того, насколько важны для ваших методов работы мобильность, разрешение и скорость.

Я написал статью о привязной стрельбе на другом форуме. Если вы профессионал, вы можете получить к нему доступ.

Том Фергюсон писал:

Время передачи составляет 12-15 секунд для файла RAW и, возможно, 5 секунд для файла JPG

D300 передает 4 изображения RAW примерно за 6–8 секунд. Я полагаю, что ваш D80 будет немного быстрее (учитывая немного меньшее количество пикселей).

ВАЖНО! Эта статья относится только к определенным продуктам и/или операционным системам. Прежде чем приступить к выполнению этих действий, ознакомьтесь с разделом Применимые продукты и категории этой статьи.

При записи видеороликов XAVC S 4K на карту памяти, вставленную в камеру, изображение может не отображаться на внешнем мониторе или мониторе камеры, в зависимости от настроек записи прокси-видео.

Чтобы решить эту проблему, установите для параметра «Запись прокси» соответствующий параметр в соответствии с использованием.Для некоторых моделей, если для параметра «Запись прокси» установлено значение «Выкл.», а для параметра «Настройка записи» — значение 24p, изображение будет отображаться как на экране внешнего монитора, так и на экране камеры.

Примечание. Доступные форматы файлов различаются в зависимости от модели камеры. Подробнее см. в инструкции по эксплуатации камеры или в справочном руководстве.

Если для параметра Формат файла установлено значение XAVC S HD или AVCHD, а также Информация HDMI. Отображение установлено на Вкл:

В режиме ожидания записи фильма

  1. Отображаются изображения и информация.
  2. Монитор выключен.

Во время видеосъемки

  1. Отображаются изображения и информация.
  2. Монитор выключен.

Если для параметра Формат файла установлено значение XAVC S HD или AVCHD, а также Информация HDMI. Для отображения установлено значение Выкл:

В режиме ожидания записи фильма

  1. Изображения отображаются, а информация нет.
  2. Отображаются изображения и информация.

Во время видеосъемки

  1. Изображения отображаются, а информация нет.
  2. Отображаются изображения и информация.

Когда для параметра Формат файла установлено значение XAVC S 4K, а изображения записываются на карту памяти, вставленную в камеру

В режиме ожидания записи фильма

  1. Изображения отображаются, а информация нет.
  2. Отображаются изображения и информация.

Во время записи фильмов

  • Запись прокси: отключено
    1. Изображения отображаются, а информация нет.
    2. Изображения не отображаются.
      Информация отображается.
    • Только для совместимых моделей, для которых для параметра "Запись прокси" установлено значение "Выкл.", а для параметра "Настройка записи" установлено значение 24p
      Примечание. Совместимыми моделями являются ILCE-7RM4, ILCE-7RM4A, DSC-RX100M7, ILCE-6600, ILCE-9M2, ZV. -1, ИЛСЕ-7С и ЗВ-Э10
    1. Изображения отображаются, а информация нет.
    2. Отображаются изображения и информация.
      1. Изображения и информация не отображаются.
      2. Отображаются изображения и информация.

      Когда для параметра Формат файла установлено значение XAVC S 4K, а для параметра Выбор вывода 4K установлено значение Только HDMI:

      В режиме ожидания записи фильма

      1. Изображения отображаются, а информация нет.
      2. Отображаются изображения и информация.

      Во время видеосъемки

      1. Изображения отображаются, а информация нет.
      2. Отображаются изображения и информация.

      Во время воспроизведения

      Когда камера подключена через HDMI, изображения отображаются только на внешнем мониторе во время воспроизведения независимо от информации HDMI. Настройка дисплея или установлен ли формат файла 4K или HD.

      Читайте также: