ابزار InstructMesh امکان ویرایش و چاپ سه‌بعدی مدل‌های هوش مصنوعی را فراهم کرد

سیستم‌های هوش مصنوعی مولد می‌توانند تصاویر و مدل‌های سه‌بعدی چشمگیری ایجاد کنند، اما اغلب در درک عملکرد فیزیکی اشیاء ناکام هستند؛ مثلاً ماگی تولید می‌کنند که نمی‌تواند مایعات را نگه دارد. برای حل این مشکل، پژوهشگران آزمایشگاه علوم کامپیوتر و هوش مصنوعی ام‌آی‌تی (CSAIL) به همراه گوگل و دانشگاه نورث‌ایسترن ابزاری به نام InstructMesh را توسعه داده‌اند.

این نرم‌افزار جدید سیستم تولید سه‌بعدی TRELLIS را با مدل زبانی بزرگ GPT-4 ترکیب می‌کند تا کاربران بتوانند با استفاده از زبان طبیعی، تغییرات دلخواه را روی طرح‌های سه‌بعدی اعمال کنند. کاربران می‌توانند بخش‌های خاصی از مدل را برجسته کرده و دستور ویرایش صادر کنند تا ساختار شیء برای استفاده در دنیای واقعی بهینه‌سازی شود. آزمایش‌ها نشان داده است که کاربران مبتدی با استفاده از این رابط کاربری توانسته‌اند به راحتی ایرادات طراحی مدل‌ها را شناسایی و اصلاح کنند.

پژوهشگران از این ابزار برای ساخت اشیاء متنوعی از جمله لوازم جانبی، قاب‌های ربات و قطعات سفارشی استفاده کرده‌اند. در آینده ممکن است این فناوری در پلتفرم‌های واقعیت افزوده ادغام شود تا کاربران بتوانند اشیاء مورد نیاز خود را به صورت زمینه ‌محور طراحی و چاپ کنند.