INSAIT и сътрудници представят: моментално откриване на 3D обекти чрез текстово търсене

INSAIT, в сътрудничество с водещи международни изследователски институции, с гордост обявява пускането на пазара на SceneSplat — първата система за незабавно откриване на 3D обекти от текст във фотореалистични сцени . Със SceneSplat потребителите могат да търсят всяка фраза , а не само предварително дефиниран набор от категории, и незабавно да идентифицират съответните обекти директно в 3D пространството.

Изграден на базата на революционната 3D Gaussian Splatting технология, SceneSplat поставя нов стандарт в разбирането на 3D сцени . За разлика от традиционните системи, които изискват бавна, специфична за сцената оптимизация – често отнемаща минути на сцена – SceneSplat обработва цели сцени за секунди , благодарение на еднократно преминаване през невронна мрежа.

SceneSplat е и първият мащабен и обобщаем метод за разбиране на 3D сцени на закрито, който работи нативно върху 3D Gaussian Splatting . Той присвоява езикови характеристики с отворен речник на всеки 3D Gaussian елемент, което позволява богато, гъвкаво и интуитивно езиково базирано взаимодействие в сложни 3D среди.

Тази иновативна работа е резултат от сътрудничество между INSAIT , Амстердамския университет , ETH Zurich (Лаборатория за компютърно зрение) , Нанкинския университет по аеронавтика и астронавтика , Университета в Пиза и Университета в Тренто .

Поздравления за авторите: Юе Ли, Ци Ма, Руни Ян, Хуапенг Ли, Менджиао Ма, Бин Рен, Никола Попович, Нику Себе, Ендер Конукоглу, Тео Геверс, Люк Ван Гул, Мартин Р. Освалд и Данда Пани Паудел.