Apple представила технологію LiTo: здатна відновити повний 3D-об'єкт з однієї фотографії та зберегти послідовність освітлення і тіней

Gate News повідомляє, що 17 березня команда дослідників Apple AI опублікувала статтю на ICLR 2026, у якій представила метод 3D-генерації LiTo (маркування поверхневого світлового поля). Цей метод дозволяє створювати повноцінні 3D-об’єкти з однієї фотографії та зберігати послідовність світлових ефектів, таких як дзеркальні блиски та рефракція Френеля, при зміні ракурсів. Раніше більшість методів 3D-відновлення могли обробляти лише геометрію або зовнішній вигляд з дифузним відбиттям, що ускладнювало відтворення деталей світла та тіні при зміні перспективи. LiTo об’єднує геометрію об’єкта та зовнішній вигляд, залежний від ракурсу, у єдиному 3D-потенційному просторі, а потім за допомогою моделі відповідності потенційних потоків генерує результати з однієї фотографії. Навчальні дані складаються з тисяч 3D-об’єктів, кожен з яких рендерили з 150 ракурсів та трьох умов освітлення. Декодер навчається шляхом випадкового вибору підзразків для відновлення повної геометрії та зовнішнього вигляду. Експерименти показали, що LiTo перевищує існуючі методи TRELLIS за якістю зображення та точністю відтворення вихідної фотографії. Статтю написали Jen-Hao Rick Chang, Xiaoming Zhao (співавтор), Dorian Chan, Oncel Tuzel, вона вже опублікована на arXiv.