Stability AI prezentuje SPAR3D – generatywna AI tworząca strukturalne obiekty 3D z dwuwymiarowych obrazów
Stability AI zaprezentowała nowe rozwiązanie o pełnej nazwie Stable Point Aware 3D (SPAR3D). To model AI generujący obiekty 3D.
Czym jest SPAR3D? To generatywna sztuczna inteligencja zdolna do bardzo szybkiego przetwarzania dwuwymiarowych obrazów wejściowych i przekształcania widocznych na źródłowych ilustracjach obiektów w pełni edytowalne obiekty 3D. Mówiąc w skrócie SPAR3D umożliwia kompletne generowanie obiektu 3D i jego edycję w czasie rzeczywistym.
Jak chwali się Stability AI, Stable Point Aware 3D to rozwiązanie zaskakująco szybkie. Sugerowany przez twórców czas wygenerowania kompletnej struktury obiektu 3D z pojedynczego obrazu zajmuje nowemu rozwiązaniu mniej niż sekundę.
Twórcy wyjaśniają, że dzięki pierwszej w swoim rodzaju architekturze, SPAR3D łączy precyzyjne próbkowanie chmury punktów z zaawansowaną generacją siatki, aby zapewnić bezprecedensową kontrolę nad tworzeniem obiektów 3D. Zainteresowanych tym, co nowy model ma „pod maską” odsyłam do opublikowanej w zasobach Arxiv pracy badawczej. Nowy model jest bezpłatny zarówno do użytku komercyjnego, jak i niekomercyjnego (na podstawie licencji Stability AI Community License).
Wagi modelu udostępniono na Hugging Face, kod na platformie GitHub, ale jeżeli już cieszysz się na generowanie obiektów 3D, to warto najpierw zadbać o odpowiedni sprzęt: NVIDIA RTX.
SPAR3D nie tylko tworzy chmurę punktów przyszłego obiektu 3D na podstawie dwuwymiarowego zdjęcia, ale też pozwala bezpośrednio edytować tę chmurę poprzez dowolne usuwanie, duplikację punktów, rozciąganie, dodawanie obiektów czy zmianę koloru punktów. Ponadto Stability AI chwali się, że nowy model jest w stanie prawidłowo przewidzieć strukturę generowanego obiektu prawidłowo tworząc na podstawie obrazu 2D także części ukryte, niewidoczne w materiale źródłowym.
Ponadto SPAR3D konwertuje edytowane chmury punktów na ostateczne siatki w zaledwie 0,3 sekundy, umożliwiając bezproblemową edycję w czasie rzeczywistym. Z pojedynczego obrazu wejściowego generuje bardzo szczegółowe siatki 3D w zaledwie 0,7 sekundy na obiekt. Więcej informacji na temat nowego modelu generatywnego dla obiektów 3D znajdziecie we wpisie w oficjalnym serwisie Stability AI.
