Codex Spark a été entraîné sur des GPU pour le matériel Cerebras, mais OpenAI a ajouté le support à leur cadre d'inférence pour Cerebras, ce qui signifie qu'ils sont prêts à charger de futurs modèles dessus aussi. Les GPU restent fondamentaux pour l'inférence et l'entraînement, cependant.