Во петокот, истражувачите од NVIDIA објави Magic3D - модел на вештачка интелигенција кој може да генерира 3D модели од текстуални описи. Откако ќе внесете трага, како што е „Сината отровна жаба од стрела која седи на воден крин“, Magic3D генерира 40D мрежен модел со текстура во боја за околу XNUMX минути. Со модификации, добиениот модел може да се користи во видео игри или уметнички сцени во CGI формат.
Во својата научна статија NVIDIA го гледа Magic3D како одговор на DreamFusion, моделот текст-во-3Д што истражувачите на Google го најавија во септември. Исто како што DreamFusion користи модел текст-на-слика за да создаде 2D слика која потоа се оптимизира во волуметриски податоци NeRF (Неврално зрачење), Magic3D користи процес во два чекора кој зема груб модел создаден со мала резолуција и го оптимизира за да повисока резолуција. Според авторите на статијата, добиениот метод Magic3D може да генерира тродимензионални објекти двојно побрзо од DreamFusion.
Magic3D, исто така, може да врши уредување на 3D мрежи во лет. Со 3D модел со ниска резолуција и основен совет за алатка, можете да го промените текстот за да го промените добиениот модел. Magic3D, исто така, демонстрира зачувување на истиот заплет во текот на неколку генерации (концепт кој често се нарекува кохерентност) и примена на стил на 2D слика (како кубистичка слика) на 3D модел.
NVIDIA не објави никаков Magic3D код со нејзината истражувачка работа.
Способноста да се генерира 3D од текст изгледа природна еволуција во модерните модели на дифузија, кои користат невронски мрежи за синтетизирање на нова содржина по интензивна обука на низа податоци. Дури во 2022 година видовме појава на моќни модели од текст во слика како што се DALL-E и Stable Diffusion, како и рудиментирани генератори на текст во видео од Google и Meta.
Што се однесува до Magic3D, истражувачите зад него се надеваат дека ќе му овозможи на секој да креира 3D модели без потреба од специјална обука. Откако ќе се рафинира, добиената технологија може да го забрза развојот на видео игрите (и виртуелната реалност) и на крајот може да се користи во специјални ефекти за филм и телевизија. На крајот од нивната статија тие пишуваат: „Се надеваме дека со Magic3D можеме да ја демократизираме синтезата на 3D и да го отклучиме сечиј креативен потенцијал во создавањето 3D содржина“.
Можете да и помогнете на Украина да се бори против руските напаѓачи. Најдобар начин да го направите ова е да донирате средства за вооружените сили на Украина преку Савелифе или преку официјалната страница Bвезди.
Прочитајте исто така:
- Во Шведска научија како да печатат микроелектроника на 3Д принтери
- Прашината може да се користи за 3Д печатење на Марс