Luma a commencé en 3D. Sa première app permettait à n’importe qui de capturer un objet ou un espace avec l’appareil photo d’un téléphone et de le transformer en scène 3D photoréaliste grâce aux champs de radiance neuronaux, puis au Gaussian splatting. On s’en servait pour scanner des produits, des pièces et des sculptures, et pour les partager dans un navigateur ou les exporter vers des outils 3D. L’entreprise a aussi sorti Genie, un modèle texte-vers-3D qui crée des assets 3D à partir d’une description.
Depuis, l’attention s’est déplacée vers la vidéo et la génération multimodale. Ses modèles vidéo Ray créent des clips à partir de texte ou d’images, et des outils pour monter des images existantes, poser des images clés et recadrer donnent du contrôle aux créateurs. Ces modèles sont disponibles via l’app Dream Machine et une API. Luma a aussi introduit des agents qui planifient et mènent un travail créatif à travers le texte, les images, la vidéo et l’audio, et collabore avec des studios sur des flux de production.
Luma propose une offre gratuite et des offres payantes pour les apps, avec des tarifs d’API pour les développeurs. La capture 3D est devenue moins centrale à mesure que la vidéo a pris le dessus, donc pour du scan 3D on peut préférer Polycam, Scaniverse ou Kiri Engine. Pour la génération vidéo, Runway, Veo de Google, Kling et Pika sont les principaux rivaux. Voir la fiche Luma Dream Machine pour le produit vidéo plus en détail.