Los jugadores continúan encontrando diferentes formas de usar redstone.
El sandbox cúbico de Minecraft ofrece muchas oportunidades para la autoexpresión. El autor del canal de YouTube sammyuri decidió crear un pequeño modelo de lenguaje.
Los parámetros de su modelo "pequeño" CraftGPT son 1020 x 260 x 1656 bloques. Aclaró que, debido a estas dimensiones, se vio obligado a usar el mod Distant Horizons para la filmación, por lo que algunos componentes pueden verse un poco extraños (redstone se muestra con un nivel de detalle más bajo).
Para entrenar el modelo, sammyuri usó Python y se tomó un conjunto de datos "TinyChat" que contiene "conversaciones básicas en inglés".
El modelo "tiene un vocabulario de 1920 tokens y consta de 6 capas. El tamaño de la ventana de contexto es de 64 tokens, lo cual es suficiente para conversaciones (muy) cortas".