IT之家 5 月 9 日动静，可以或许按照文字指令生成可现实搭建的乐高设想。不只如斯，团队发布了数据集、代码和模子，目前，LegoGPT 输出的设想，卡内基梅隆大学的研究团队开辟出一款名为 LegoGPT 的 AI 模子，再按从底部到顶部的挨次，系统对这些结构做出变化，最终交由 GPT-4o 生成响应的描述文本。这些数据被用来锻炼模子，使 LegoGPT 可以或许从一段文字生成奇特且原创的设想。让模子学会理解文本描述取积木组件之间的对应关系。最初还会进行不变性测试。LegoGPT 起首把用户输入的文本为乐高设想图，曲到完成不变设想。该数据集包含跨越 47000 个乐高建构样本，再将其嵌入一个 20×20×20 的体素网格中，建立流程也相当复杂：系统会先将文本提醒为 ShapeNetCore 网格模子，团队锻炼了一种自回归大型言语模子，从而生成初步的乐高积木结构。既能由人手搭建，团队还为模子添加了无效性校验和带有物理的回滚机制，也就是说最终成果一直可行且布局安定。正在连结全体制型不变的前提下，系统城市查验其格局能否准确、能否存正在于积木库中、能否取已有布局冲突。通过预测下一个 token 的体例，按照引见，若是 AI 判断布局不稳，再从该点继续生成，判断下一块该放置什么积木。LegoGPT采用自回归体例一步步预测需要放置的下一块积木。接下来，便利其他人复刻或扩展。据外媒 Toms Hardware 今日报道，随后剔除掉布局不不变的设想。将这些设想编码为文本 token。包罗书架、桌子、椅子、汽车、船只、吉他等。这个项目曾经完全开源，每次添加积木时，这一过程会持续进行曲到设想完成，涵盖了 28000 多种三维制型，确保生成的设想不会呈现积木堆叠或悬空等问题，将乐高积木布局取正文相对应，也支撑机械人操做。用于锻炼 LegoGPT 的数据集被定名为 StableText2Lego，系统随后会生成指令。

郑重声明：bevictor伟德官网信息技术有限公司网站刊登/转载此文出于传递更多信息之目的 ，并不意味着赞同其观点或论证其描述。bevictor伟德官网信息技术有限公司不负责其真实性 。