Punto E: la nuova IA può creare modelli 3D dal testo

Le intelligenze artificiali stanno arrivando a dominare l'anno 2023 e poco prima che l'anno in corso finisca, il OpenAI ha realizzato un comunicato che può aiutare gli artisti che lavorano con le arti nella terza dimensione. IL Punto riesce a creare modelli 3D digitando il testo, che accelera diverse fasi di un processo creativo.

L'utilizzo in pratica non è ancora chiaro, ma lo strumento esiste e ora spetta ai professionisti creativi quando avrà luogo il rilascio pubblico. Scopri ulteriori informazioni in questo momento.

Point-E crea gruppi di punti nei modelli 3D

Con il supporto di A GPUNvidia V100, la nuova intelligenza artificiale di OpenAI (stesso creatore di DALL-E e ChatGPT) funziona allo stesso modo dei “suoi parenti”: l'utente deve solo digitare un comando in testo per ricevere il progetto. Forse il più grande punto negativo è che, come nella sua prima fase, Point-E non può ancora creare modelli solidi, ma piuttosto un insieme di punti che riescono a unificarsi per rappresentare una forma 3D.

Il nome può spiegare: il punto è correlato ai punti raggruppati e al "E” parla di efficienza, perché secondo OpenAI, l'intelligenza artificiale è più veloce degli strumenti attualmente utilizzati per la creazione di oggetti 3D.

È importante ricordare che le nuvole di punti sono più facili da sintetizzare, ma non catturano la forma o la trama finale di un oggetto. Tutto è solo un ammasso di punti che possono essere visti in 3D. Un modo per aggirare questo problema è un altro strumento di Punto-E, che può convertire gli insiemi di punti in mesh poligonali.

Poiché è nella sua prima fase di sviluppo, i professionisti si sono resi conto che anche con questo adattamento, i disegni possono ancora avere alcune parti mancanti, risultando in forme irregolari.

Doppi modelli per la creazione di un progetto

Secondo l'articolo del suo nuovo progetto, il OpenAI utilizza due modelli per fornire quanto richiesto dall'utente. Il primo di questi riguarda la conversione e la comprensione del testo, simile a quello di DALL-MI2 e diffusione stabileed è in grado di comprendere comandi digitati e concetti visivi. Il secondo, incentrato sulla modellazione 3D, è stato addestrato con una serie di immagini abbinate a oggetti 3D in modo da imparare a tradurre efficacemente tra i due.

In pratica funziona così: quando si riceve un comando di testo, il modello di lettura del testo genera un oggetto sintetico renderizzato che viene poi inviato allo strumento di modellazione 3D, in modo da poter creare la nuvola di punti. .

Gli stessi sviluppatori affermano che Point-E non è perfetto e in alcuni dei test l'IA non è riuscita a comprendere alcuni comandi di testo e la creazione del progetto, il che non consente la consegna come previsto dall'utente. Ma gli sviluppatori sottolineano che può accelerare il processo di sviluppo.

Sebbene il nostro metodo abbia prestazioni peggiori in questa valutazione rispetto alle tecniche all'avanguardia, produce campioni in una piccola frazione del tempo. Ciò può renderlo più pratico per determinate applicazioni o consentire la scoperta di oggetti 3D di qualità superiore.

Dove può essere utilizzata l'intelligenza artificiale?

Potrebbe essere troppo presto per citare gli usi di the Punto-e, ma il OpenAI esemplificato che i progetti di nuvole di punti possono essere utilizzati nella fabbricazione di prodotti 3D, con le modifiche necessarie apportate. Un altro fattore interessante, quando l'IA è maggiormente migliorata, è nella creazione di giochi e animazioni. Non è ancora possibile utilizzare l'intelligenza artificiale nella pratica e per ora gli sviluppatori hanno solo annunciato che esiste.

È importante ricordare che il Punto non è la prima IA che trasforma il testo in modelli 3D. IL Google rilasciato una versione rinnovata di Campi da sogno, che prese il nome di Fusione dei sogni e non richiede alcuna formazione preliminare, generando rappresentazioni 3D di oggetti senza dati 3D.

Molte aziende di architettura utilizzano oggetti 3D per presentare progetti e, oltre a film e serie per TV e cinema, la crescita degli strumenti di intelligenza artificiale in questo campo può essere un fenomeno interessante.

Uno dei grossi problemi che possono verificarsi è in termini di copyright, poiché l'intelligenza artificiale può basarsi su progetti esistenti per fornire ciò che è stato richiesto. Ma almeno per ora, questo è un problema che verrà risolto in un secondo momento, visto che il OpenAI non ha menzionato nulla sul copyright. Possiamo solo vedere i prossimi capitoli.

A cosa hai pensato Punto? dicci Commento!

Vedi anche

Conosci l'IA che parla? Comprendi il fenomeno ChatGPT

Con informazioni: TechCrunch l OpenAI l In Smartz