март 15, 2024

Нова технология дава възможност за създаване на 3D модели на предмети с помощта на смартфон

Учени от университета „Саймън Фрейзър“ представиха нови AI възможности за смартфоните. Сега, с помощта на обикновена камера, е възможно да се създаде и редактира 3D модел на обект, разглеждайки го от всякакъв ъгъл. В същото време редактирането е интуитивно, с него може да се справи всеки дори съвсем начинаещ потребител на смартфон. Освен това от създадения 3D модел можете по всяко време да получите реалистични двуизмерни снимки от различни ъгли, каквито всъщност не сте правили.

Технологията се нарича PAPR („Proximity Attention Point Rendering“). Тя може да превърне набор от двуизмерни снимки на обект в облак от триизмерни точки, които изцяло представят формата и външния му вид. Всяка такава точка ви позволява да влияете върху характеристиките на модела. Например ако я плъзнете, обектът ще промени формата си, а ако редактирате свойствата на точката, ще се промени нейният външен вид. След това, по време на рендерирането, облакът от 3D точки може да бъде разгледан от всеки ъгъл. Както и да се превърне в 2D снимка, която показва обекта така, сякаш снимката е направена от този ъгъл в реалния свят.

Учените демонстрираха възможностите на своята разработка на примера на статуя. Те първо направиха 3D модел, а след това създадоха видеоклип на статуята, която поклаща главата си.

Триизмерното моделиране от дълго време е в ръцете на професионалисти, тъй като съществуващите технологии не позволяват редактирането на моделите по удобен и интуитивен начин. Така например един популярен подход, известен като невронни радиационни полета (NeRF), изисква от потребителя подробно да опише какво се случва с всяка една непрекъсната координата. Един по-нов подход, известен като 3D Gaussian splatting (3DGS), също не позволява промяна на формата на обекта. Той той се разкъсва на парчета при най-малката грешка.

Нещата се придвижиха напред, когато изследователите осъзнаха, че могат да третират всяка 3D точка в облака не като единична точка. А като контролна точка в непрекъснат интерполатор. При този подход, когато дадена точка се премести, формата на обекта автоматично се променя. При това по съвсем интуитивен начин. Това е подобно на начина, по който днес се създават анимационните видеоклипове. Аниматорите задават позициите на обектите в няколко точки във времето. Като а движението им във всяка точка във времето се генерира автоматично от интерполатора.

Д-р Ке Лий, доцент по компютърни науки в университета „Саймън Фрейзър“, заяви, че създаването на технологията е било по-трудно, отколкото екипът му е очаквал. При работата с изкуствения интелект те е трябвало да решат проблеми, които не възникват при традиционното 3D моделиране. Въпреки това изследователите смятат, че усилията са си стрували. Съвсем скоро човечеството ще може да използва триизмерни визуализации дори по-често от двуизмерните. Бъдещите 3D модели ще изглеждат много по-привлекателни и точни от сегашните.

source

Сподели: