Tof камера samsung что это
Samsung уверена, что нам с вами не нужны хорошие камеры
Если вы думали, что камеры смартфонов в целом каждый год становятся все лучше и лучше, то вы ошиблись. Признаюсь честно, я тоже так думал и считал, что если у флагманов появился какой-то компонент или функция, то она уже никуда не денется и так и будет переходить от модели к модели. Отказаться от нее могут только тогда, когда придумают что-то новое и более качественное/удобное/производительное. Оказывается, это не так, и в своей борьбе за удешевление смартфонов Samsung начала немного переигрывать. Компания решила отказаться от компонентов, которые прямо не влияют на качество снимкой с точки зрения четкости или цвета, но сильно портят их художественную составляющую.
Камера Samsung скоро станет чуть-чуть хуже.
Что такое ToF-сенсор
Первые массовые смартфоны с ToF-сенсорами начали появляться еще в 2018 году. Долгое время никто толком не понимал, для чего они нужны, но постепенно разобрались в вопросе и поняли, что это позволяет устройствам более точно рассчитывать эффект глубины. Так можно делать более красивое размытие и лучше работать с дополненной реальностью. Если система работает совсем хорошо, то можно даже не просто накладывать AR-объекты на картинку вне зависимости от того, что попадает в кадр, а полностью ее интегрировать в реальность.
Дружи с нами, а не с ними. США оказывают давление на Samsung.
Samsung отказывается от ToF-сенсора
Samsung тоже пользовалась такой системой, пока не рашила отказаться от нее сначала в серии Galaxy Note 20, а потом в серии Galaxy S21. Теперь, судя по всему, она не вернется и в более поздних моделях.
Корейские источники сообщают, что семейство Galaxy S22 также не будет использовать датчики 3D ToF. ET News сообщает, что Samsung недавно решила не возвращать технологию во флагманы следующего года. Сообщается, что информация поступает от источника, знакомого с планами компании.
Камеры выпирают все больше но лишаются важных функций.
Сообщается, что Samsung приняла это решение, потому что реакция потребителей на камеры телефонов без датчиков 3D ToF была не такой уж плохой. Издание также заявило, что Samsung рассматривала возможность возвращения технологии после того, как Apple внедрила Lidar в линейку iPhone 12, но в конечном итоге отказалась от этого, поскольку в его использовании ”не было явных преимуществ”.
Как делать боке на телефоне
Как было написано выше, сенсоры ToF действительно дают возможность лучше определять параметры сцены для создания более художественных снимков с точным размытием, но производители постепенно научились при помощи других ухищрений приходить к аналогичному результату. Например, они делают это за счет получения информации с дополнительных объективов.
Далее в процессе вычисления и обработки такие камеры добиваются пусть и не такого же хорошего результата, как те, что оснастили ToF-сенсором, но все равно существенно лучшего, чем без обработки вообще.
Примеров телефонов, которые как-то научились обходиться без ToF-сенсора можно привести много. Они делают довольно неплохое размытие фона и обеспечивают почти полноценный боке, но модели, вроде iPhone 12 Pro, практически не ошибаются при создании портретов именно из-за того, что могут точно замерить ту часть снимка, которая находится на небольшом расстоянии и которую не надо размывать. При этом делая небольшое размытие для объектов, которые находятся чуть дальше, и сильно размывая остальной фон.
Неужели только iPhone, будет замерять глубину сцены?
Программное создание боке
Некоторые телефоны умудряются делать размытие, даже не пользуясь дополнительными модулями. Они просто программно определяют, где на снимке находится человек, и пытаются сделать все так, чтобы размытыми были только области за ним. Особенно преуспели в этом смартфоны Google Pixel. Даже первое поколения этих устройств размывало фон очень достойно, обладая всего одним модулем камеры.
Пусть мы и не делаем все снимки в портретном режиме, но смотрятся они по-настоящему профессионально. Кроме этого, все ближе к нам подбирается такое явление, как дополненная реальность, и для ее реализации тоже неплохо было бы точно определять параметры сцены.
Все это делает немного странным решение о полном отказе Samsung от ToF-сенсора. Возможно, пока можно обойтись и имеющимися средствами, а через пару лет она предложит что-то принципиально новое? А может быть компания просто заигралась в уменьшение стоимости? Пластиковый корпус, уменьшение разрешения экрана, отказ от ToF-сенсора… Что дальше?
Новости, статьи и анонсы публикаций
Свободное общение и обсуждение материалов
Несмотря на то что смартфоны Galaxy никогда не возглавляли рейтинг DxOMark, снимают они действительно на очень достойном уровне, вне зависимости от режима. Хоть портреты, хоть макро, хоть ночные фото, хоть снимки с приближением флагманским аппаратам Samsung даются очень хорошо. Иначе и быть не могло, учитывая, какими фото-модулями они оснащаются. Но корейцам показалось, что этого недостаточно, чтобы называться производителем камерофонов. Поэтому они решили скопировать одну из ключевых фишек новых iPhone и адаптировать её для себя.
Смартфоны Samsung уже давно заслужили внимание всех, кто неравнодушен к миру Android-устройств. Корейцы сумели доказать, что их смартфоны заслуживают внимание пользователя. Однако в последнее время с их линейками происходит что-то совсем непонятное. Топовый Galaxy Note, который многие так любили, исчезает с прилавков. Ему на замену приходит непонятный Galaxy Fold за 160 тысяч. Кажется, в компании сами запутались. Решить все проблемы должен будущий Galaxy S22. Телефон должен объединить все крутые фишки Samsung и cтать по-настоящему универсальным устройством. Сегодня предлагаю поговорить о том, что известно о гаджете на сегодняшний день, обсудить его главные фишки и решить, стоит ли обновляться владельцам предыдущих поколений.
Что такое ToF-сенсор и почему в Samsung Galaxy S21 его не будет из-за Apple
Когда-то было счастьем иметь камеру в телефоне. Только одну с одним простеньким сенсором. Иногда буквально для того, чтобы она просто была, а не для того, чтобы делала крутые фотографии. Тогда их еще называли мутировавшим потомком смайлика. Потом постепенно начали появляться вспышки, вторые сенсоры, третьи сенсоры, четвертые сенсоры, отдельные фронталки и так далее. Одним из трендов последнего времени является использование в смартфоне ToF-сенсора. Многие рады, что он у них есть, хотя реально не понимают, для чего он нужен и как он вообще работает. Интересно, что даже производители не особо торопятся объяснить это пользователям, используя принцип «есть и уже хорошо», значит продать можно.
Samsung может многое, но не все.
Что такое ToF-камера
ToF-камера или ToF-сенсор, как ее еще называют — это сокращение. Полная версия названия звучит, как Time-of-flight. Это камера, которая позволяет оценивать дистанцию до объекта и вместо пикселей выдает оценку расстояния от объектива до объекта съемки.
Определение расстояния производится за счет измерения времени движения импульса света до объекта и обратно. Так камера понимает, на каком расстоянии находится та или иная часть сцены и может в зависимости от этого менять настройки.
Samsung будет обновлять по три года даже бюджетные смартфоны на Android
Если не вдаваться в подробности технологий, то принцип работы подобной камеры выглядит именно так. Ей не надо получать детальное изображение — она нужна для получения данных объема, а за картинку отвечают уже другие сенсоры. Наверное, одним из первых случаев применения ToF в смартфонах был датчик FaceID в iPhone X.
Какое отношение Apple имеет к Samsung Galaxy S21
Казалось бы, какое отношения Apple может иметь к смартфону Samsung, который еще не вышел и который еще не факт даже, что получит такое название, но связь есть. Она может быть и косвенная, но определенное влияние на Samsung Apple все же оказывает. В данном случае в отношении сенсоров.
Какие смартфоны будут лучше и дешевле Samsung Galaxy Note 20К
Смартфоны Samsung Galaxy Note 20 и Note 20 Ultra в это году уже были анонсированы без датчиков ToF. Учитывая это, есть вероятность, что что-то подобное может произойти и с новыми смартфонами линейки Samsung Galaxy S, которые представят в следующем году. Некоторые аналитики говорят, что Samsung якобы считает, что для этой технологии недостаточно вариантов использования. Именно это по их мнению станет причиной для отказа от использования такого сенсора.
Когда сенсор глубины может сканировать лицо, это полезно для безопасности.
В качестве основной причины аналитики сходятся во мнении, что ей стала Apple. Технология, которую применяет Samsung, не так хороша, как используемая купертиновцами. Все из-за того, что Samsung использует так называемую косвенную технологию, а Apple — прямую.
Сенсоры, которые используются Apple, разрабатывает и производит Sony. Логично спросить, почему Samsung не хочет купить у Sony эти датчики и пользоваться ими в своих устройствах. На деле не все так просто. Apple имеет эксклюзивное соглашения с Sony. То есть имеет на них полные права и может запретить японцам продавать их ”на сторону”. Не стоит думать, что Sony находится в каком-то рабском положении. Наоборот, компания получает за это очень хорошие деньги и отлично себя чувствует. Ей явно лучше, чем Samsung, которой приходится искать другие решения.
По некоторой информации Samsung все же прорабатывает вариант использования ToF-камер в новых моделях своих смартфонов. Говорят даже, что для этого в ее подразделении System LSI кипит работа по разработке нового сенсора ToF. На каком этапе находятся разработки, естественно, не уточняется, но улучшение собственных наработок компании возможно.
Каким будет Samsung Galaxy S21
Как и положено, новый смартфон серии Samsung Galaxy S выйдет в феврале или марте следующего года. Конечно, отклонения возможны, но это стандартный цикл обновления модели, которого компания придерживается уже много лет.
Подобное определение расстояния очень полезно, но только тогда, когда оно правильно работает.
В чем точно не стоит сомневаться, так это в том, что новинка получит процессор Snapdragon 875. Какая маркировка будет на его аналоге под брендом Exynos, пока остается неизвестным.
Чтобы не пропускать новые смартфоны от топовых брендов, подписывайтесь на наш новостной канал в Telegram.
На какой версии Android будет работать смартфон, пока тоже не понятно, но он наверняка получит оболочку Samsung One UI. А еще все смартфоны Samsung Galaxy S21 получат защиту от воды и пыли по самому высокому стандарту. Также не стоит сомневаться в тонких рамках передней панели.
В этом году продажи Samsung идут не совсем так, как планировалось, поэтому компания должна найти золотую середину в серии Galaxy S21, чтобы превзойти продажи Galaxy S20. До запуска серии Galaxy S21 еще далеко, так что посмотрим, что будет дальше. А заодно узнаем, как она будет называться. Не хотелось бы, чтобы теперь компания начинала отсчитывать модели десятками, как Huawei. Куда интересней смотрится вариант с годом производства. В этом году S20 и Note 20, в следующем — S21 и Note 21, потом — S22 и Note 22 и так далее.
Новости, статьи и анонсы публикаций
Свободное общение и обсуждение материалов
Заметили, что в последнее время как-то мало стали говорить о сетях пятого поколения? Сначала их все ждали, потом испугались и начали сжигать вышки, а теперь кажется, что вообще забыли о них. Кажется, что последний активностью были попытки производителей телефонов включать ”5G” в название всех моделей, где он есть. При том неважно, что не было версий без него. Главное было показать всему миру, что компания на острие прогресса. Можно было бы предположить, что разговоры стихли только в России, где таких сетей пока нет, но интерес упал во всем мире. Это хорошо видно, если просматривать иностранные ленты новостей, что я делаю почти ежедневно. До сих пор не согласны с тем, что интерес к 5G упал? Тогда давайте читать дальше.
До того, как телефоны стали умными, находить мобильники было круто: считай, надежды, что его кто-то уже сможет вернуть не было. Да и возвращать его в полицию тоже не очень хотелось. У меня была похожая история, когда под ногами оказался Sony Ericsson K750. Естественно, возвращать его не стал, правда, позже милиционеры на улице его проверили и забрали, а меня заставили давать показания. С тех пор находить технику совершенно не хочется, хотя иногда это все-таки случается. Уверен, у вас похожие ситуации тоже бывали. Разобрались, что нужно делать, если вы нашли чужой телефон.
Apple только что выпустила серию iPhone 13, но нам уже приходится попрощаться с моделями, которые оставили свой след в истории. Даже если не сравнивать их с моделями на Android, можно сказать, что они были не самыми лучшими в истории. Тем не менее, свой след они точно оставили. А еще они помогли компании закрепиться на рынке премиальных устройств. Согласно новым данным, в текущем году компания претендует на еще большую долю в сегменте премиальных смартфонов. Вот только в этом году история успеха будет немного иной и компания добьется его за счет некоторых других факторов. Обо всей этой истории надо рассказать подробнее, ведь в ней фигурируют даже Samsung и Huawei.
Что такое ToF-камера в смартфоне
Между производителями смартфонов идет постоянное соперничество. Чтобы как-то выделиться среди конкурентов и переманить покупателей на свою сторону, компании наделяют мобильники все новыми и новыми фишками. Кто-то развивается в плане дизайна, предлагая то вырезы, то изогнутые дисплеи, а кто-то разрабатывает новые форм-факторы вроде слайдеров, выдвижных элементов и гибких дисплеев.
Один из распространенных рецептов по созданию уникального и интересного смартфона касается камеры. Поле для экспериментов в этой области широкое: в современных мобильниках используются несколько объективов. Производителю остается только выбрать, какую комбинацию установить.
Последним нововведением в мобильных камерах стал датчик ToF, или времяпролетная камера. Давайте разберемся, что это и какую пользу от нее может получить простой обыватель.
Что такое ToF-камера
Времяпролетная камера, как подсказывает ее название, измеряет время, затраченное на движение импульса света от датчика до объекта съемки и обратно. Полученные данные используются камерой для построения карты глубины, то есть объемной картинки.
Этот метод построения изображения существует давно. У него есть свои особенности, которые до недавних пор не позволяли использовать его в коммерческих целях в таких малогабаритных устройствах, как смартфон. Свет перемещается с невероятной скоростью – 299 792 458 метров в секунду, поэтому ToF-камера должна обладать технологией, способной улавливать мельчайшую разницу в показателях времени, и иметь компактный размер, чтобы уместиться в корпусе смартфона.
ToF-камера состоит из 4 основных компонентов:
Сенсор и линза – обязательные компоненты любой камеры. У времяпролетного датчика есть еще излучатель и процессор. Первый испускает поток света, второй отвечает за измерение времени. На работу ToF-камеры уходят доли секунды.
Как работает ToF-камера
Луч света, испускаемый датчиком, возвращается быстро, если объект съемки находится близко к объективу. Чем дальше расположен объект или его часть, тем больше времени уйдет на то, чтобы луч достиг его, отразился и вернулся. Показатель расстояния измеряется для каждого пикселя. Это дает подробное представление о том, как выглядит объект, какие особенности формы имеет и как далеко находится. В качестве импульса используется инфракрасный свет, невидимый для человеческого глаза.
Аналогичный подход использует Apple в камере TrueDepth для разблокировки по лицу: там тоже создается трехмерное изображение лица пользователя по точкам, только за основу взята лазерная технология LIDAR.
У мобильной ToF-камеры есть свои недостатки. Первый связан с тем, что яркое освещение может мешать работе датчика: отраженные лучи теряются в окружающем пространстве, а камере не хватает чувствительности, чтобы распознать их и не перепутать с посторонними бликами. Второй недостаток – относительно низкое разрешение по сравнению с основными камерами.
Для чего нужна ToF-камера в смартфоне
В смартфонах времяпролетные камеры используются для сбора информации о глубине кадра, которая в свою очередь нужна для построения трехмерных изображений, отделения фона от объекта съемки в портретном режиме и распознавания жестов.
До недавнего времени смартфоны могли создавать 3D-изображения с помощью программных алгоритмов или специально выделенной камеры, исполняющей роль датчика глубины (стереовидение). ToF-камера – это новая ступень в развитии мобильной фотографии, так как она способна работать в темноте, обладает более высокой точностью и сниженным энергопотреблением.
В каких смартфонах есть ToF-камера
Времпролетная камера – инновационный элемент в мобильной индустрии. Пока она доступна лишь во флагманском сегменте, но в будущем наверняка станет встречаться и в аппаратах среднеценового класса. Пока что обладателями ToF-датчика являются:
По слухам, времяпролетная камера будет включена в фотомодуль iPhone 2019.
Что делают 3D-сенсоры в смартфонах? РАЗБОР
Все чаще мы видим в смартфонах так называемые 3D-сенсоры, или сенсоры глубины. Большинство из них также называют ToF-сенсорами аналогично одноименной технологии. По слухам, такой сенсор будет установлен и в новом iPhone (там он называется LiDAR, подробнее мы об этом рассказывали в другом материале). Эти сенсоры довольно дорого стоят, но зачем они нужны понятно не всем. Производители уверяют, что сенсоры позволяют делать лучше фото и портреты или добавляют фишки в дополненную реальность. Но так ли это на самом деле?
Сегодня обсудим, зачем нужны 3D-сенсоры в смартфонах, как это работает, ну и конечно, проведем несколько тестов и проверим заявления производителей.
Что такое 3D сенсор (сенсор глубины)
Для начала, давайте разберемся, а что такое 3D-сенсор? Фотокамеры захватывают проекцию окружающего мира на плоскость. По одной лишь фотографии не понять реальный размер объекта — размером ли он с бутылку или с Пизанскую башню. И расстояние до него тоже не понять.
Для того, чтобы понимать реальные размеры объектов на фото, масштабы съемки, отличать, что ближе к камере, а что дальше, и нужны 3D-сенсоры. Они уже давно и активно применяются в робототехнике, автономном транспорте, играх, медицине и много где еще. Более того, наши глаза — это тоже 3D сенсор. При этом, в отличие от LiDAR’а и ToF-сенсоров в смартфонах, глаза — пассивный 3D-сенсор. То есть не излучающий никакого света, а работающий только на основе поступающего света. Только благодаря этому мы можем хоть как-то перемещаться в пространстве и взаимодействовать с окружающими объектами. Теперь 3D-сенсоры появились и в смартфонах.
Как работает ToF?
LiDAR в iPad’е, а также все 3D-сенсоры в Android-смартфонах — это time-of-flight или сокращенно ToF-сенсоры. Они определяют расстояния до объектов вокруг, напрямую измеряя сколько времени понадобится свету, чтобы долететь от камеры до объекта и вернуться обратно. Это очень похоже на эхо в пещере, оно тоже после отражения от стенок возвращается к нам с запаздыванием. Чтобы пролететь 1 метр свету нужно 3 наносекунды, для 1 см — 30 пикосекунд. Вроде бы все понятно. Но есть проблема.
Это очень маленькие промежутки времени. Как камера может такое замерить? Не будет же она делать миллиард кадров в секунду, а потом их сравнивать? Есть 2 основных подхода для решения этой проблемы: dToF (direct ToF) и iToF (indirect ToF). И чтобы вас заинтриговать еще сильнее: абсолютное большинство Android-смартфонов используют как раз iToF сенсоры, тогда как LiDAR в Apple iPad и скорее всего в грядущих iPhone — это редкий представитель семейства dToF сенсоров. Так чем же они отличаются?
iToF — indirect ToF
Начнем с iToF. В таких сенсорах излучатель отправляет высокочастотный модулированный свет, то есть этот свет постоянно включается и выключается с частотой десятки миллионов раз в секунду. За счет того, что свету нужно время для полета до объекта и обратно, фаза, то есть вот это состояние где-то между включенностью и выключенностью, света, вернувшегося в камеру, немного отличается от фазы света в момент отправки. На сенсоре исходный и отраженный обратно от объекта сигналы накладываются друг на друга, и за счет этого определяется сдвиг фаз, который и позволяет понять расстояние до каждой точки объекта.
dToF — direct ToF
dToF работает немного иначе. В таких сенсорах напрямую измеряется разница во времени между отправкой света и детектированием его отражения на сенсоре. Для этого используются так называемые SPAD: single photon avalanche diodes. Они могут детектировать крайне маленькие импульсы света, фактически даже ловить единичные фотоны. Такие SPAD расположены в каждом пикселе сенсора. А в качестве излучателя в таких сенсорах используются как правило так называемые VCSEL — Vertical Cavity, Surface Emitting Laser. Это лазерный излучатель, подобный тем, что используются в лазерных мышках и много где еще. dToF сенсор в LiDAR разработан совместно с Sony и является первым массовым коммерческим dToF сенсором.
Можно лишь гадать, почему в iPad используется dToF сенсор, но давайте отметим преимущества такого сенсора. Во-первых, в отличие от iToF сенсора излучатель испускает не сплошную стену света, а лишь светит в отдельных направлениях, что позволяет экономить батарейку. Во-вторых, dToF сенсор меньше подвержен ошибкам в измерении глубины из-за так называемой multipath interference. Это типичная проблема iToF сенсоров. Она возникает из-за переотражения света между объектами перед попаданием обратно в сенсор и искажает измерения сенсора.
Как это работает, разобрались, давайте теперь посмотрим, а зачем вообще 3D-сенсоры используются в смартфонах.
Зачем это нужно в смартфонах
1. Безопасность
Первым массовым внедрением 3D-сенсоров в смартфонах мы обязаны Apple и технологии Face ID. Распознавание лиц при использовании трёхмерных данных намного точнее и надежнее классического распознавания лиц по фото. Для Face ID Apple использует технологию структурированной подсветки, на ней мы остановимся подробнее как-нибудь в следующий раз.
Большинство производителей заявляют, что именно более качественный и точный режим дополненной реальности является главной задачей 3D-сенсоров. Более того, это также поддерживается непосредственно компанией Google. Буквально недавно они представили грядущее обновление своей библиотеки дополненной реальности ARCore, позволяющее более реалистично размещать виртуальные объекты в реальности и взаимодействовать с реальными объектами.
Для этой же задачи Apple встроили LiDAR в iPad Pro. Такое можно делать и без 3D-сенсора, но с ним все работает точнее и надежнее, плюс задача становится вычислительно сильно проще и разгружает процессор. 3D-сенсор выводит AR на другой уровень.
3. Улучшение фотографий
Ряд производителей, например, Samsung и HUAWEI заявляют, что 3D-сенсор используется в первую очередь для более качественного размытия фона и более точного автофокуса при съемке видео. Другими словами, он позволяет увеличить качество обычных фото и видео.
4. Прочее
Доступ к данным сенсоров у некоторых смартфонов открыт, поэтому появляется все больше приложений, предлагающих новые применения. Так, например, с помощью внешних приложений 3D-сенсор можно использовать для измерения объектов, трехмерного сканирования и motion tracking’а. Есть даже приложение, позволяющее сделать из своего смартфона прибор ночного видения.
Тесты
С тем как это работает в теории разобрались, давайте теперь посмотрим, как это работает на практике, и есть ли какой-то толк от этих дорогущих 3D-сенсоров в флагманах. Для тестов мы взяли Redmi Note 9S, у него есть ToF-сенсор и мы сделали несколько снимков в портретном режиме, но во втором случае просто закрыли 3D-камеру пальцем. И вот что получилось.
Всё просто — размытие действительно больше и лучше, если ToF работает.
И для частоты эксперимента мы взяли Samsung Galaxy S20 Ultra, который также получил ToF-камеру.
И найдите хотя бы одно отличие?
Что получается? Дело в том, что в зависимости от производителя ToF-камера используется по-разному и в разной степени.
Можно сказать, что часть производителей смартфонов располагает ToF-датчики в своих смартфонов не для маркетинга, чтобы добавить ещё одну камеру, а скорее на всякий случай. А дальше уже алгоритмы решают — использовать эту камеру или нет?
При этом на сегодняшний момент необходимости в LiDAR или ToF-камерах прямо нет. Так что это видимо чуть больше маркетинг.