We kennen OpenAI van ChatGPT en Dall-E, maar het heeft nu een nieuwe kunstmatige intelligentietool erbij: Shap-E. Het is geen fitnesstool, maar een manier om op basis van een instructie middels tekst een 3D-model te laten genereren.
Lees verder na de advertentie.
Shap-E
In Dall-E kun je kunstwerken en fotorealistische afbeeldingen genereren door teksten te schrijven. Datzelfde geldt voor Shap-E, alleen krijg je hieruit geen kunst, maar 3D-modellen. Je kunt deze modellen zelfs van allerlei texturen voorzien. Omdat er gebruik wordt gemaakt van NeRF, wat staat voor neural radiance fields (neurale stralingsvelden) kunnen er afbeeldingen worden gegenereerd die complex en van hoge kwaliteit zijn.
NeRF is een gezichtsveldsynthesetechniek die veelvuldig wordt gebruikt bij het ontwikkelen van landkaarten, navigatie, virtual reality, augmented reality en robotica. Shap-E kan parameters van impliciete functies genereren, waardoor je complexe 3D-modellen kunt maken. Denk aan een stoel die eruitziet als een avocado, of een bananenvliegtuig, zoals Gizmochina al heel creatief bedacht.
NeRF
Vroeger werd er geen gebruikgemaakt van neurale stalingsvelden, maar van puntwolken. Hierin werden punten verdeeld die dan in een 3D-coördinatenstelsel vallen en worden verspreid over het onderwerp om het zo te kunnen weergeven. Hierin heeft elke cel een grootte die vaststaat.
In tegenstelling tot eerdere tools van OpenAI is dit geen tool die je even via de browser raadpleegt. Je kunt hiervoor naar Github gaan en vanuit daar het programma downloaden om lokaal op je PC te gebruiken. Vervolgens kun je binnen luttele seconden heel professioneel uitziende 3D-modellen genereren. Je kunt je voorstellen dat het voor het maken van games en apps een zeer aantrekkelijke tool is, maar ook voor wetenschappelijk onderzoek en productontwikkeling.
Kunstmatige intelligentie voor 3D-modellen
In ieder geval is het weer een nieuwe stap in de wondere wereld van kunstmatige intelligentie. Shap-E komt wederom van een bedrijf dat zijn sporen in de AI al dubbel en dwars heeft verdiend, dus ook deze tool belooft een succes te worden. Bovendien kunnen we ons voorstellen dat dit ook een wat minder fraudegevoelige tool is, of zou je ook hiermee de paus in een pufferjas kunnen maken?
Ga jij Shap-E gebruiken en zo ja, waarvoor? Laat het nu achter in de reacties.
Reacties
Inloggen of registreren
om een reactie achter te laten
Zo zou het produceren van reliëfkaarten en wetenschappelijke tekeningen voor scholen voor blinden en slechtzienden misschien heel wat minder duur worden? Of wat te denken van een architect die een maquette moet wil bouwen? Of kan shap e dat niet? Ook leuk zou zijn: een firma ontwerpt een nieuw logo en wil dit logo ook als een hebbeding aan klanten geven om b.v. aan je sleutelhanger vast te maken, …
Wat een creatieve toepassingen!
@Claudia: je wil niet weten hoe vaak ik me afvraag hoe iets eruit ziet. Soms heb ik geluk en stel ik de vraag aan mama en komen we kort daarna het voorwerp in kwestie tegen zodat ik het kan voelen. Maar soms is het lastiger. Voorbeelden: ik vroeg ooit aan mama hoe een oorfauteuil eruitziet (werd vermeld in het derde boek over Harry Potter, professor Zwamdrift gaat daarin zitten) en kort daarop zag mama in een meubelzaak zo’n fauteuil staan en kon ik voelen. Een lastiger voorbeeld is: m’n partner leest me de strips van Garfield voor uit de krant, maar ik kan me geen voorstelling van deze stripkat maken. Bij gebouwen etc. heb ik hetzelfde probleem en als je dan een maquette kan voelen, snap je beter hoe een gebouw of omgeving eruit ziet.
Shape-E verzint een nieuw driedimensionaal model op basis van een opdracht. Wat het verzint is dan nieuw en origineel.
Reliëfkaarten en tekeningen moeten juist uitgaan van bestaande data en tekeningen.
Het zou inderdaad interessant om Shape-E te vragen om een reliefkaart van, bijvoorbeeld, Noorwegen te generen. Maar, het moet dan nog wel uitgeprint worden op een 3d-printer.
Het omzetten van een bestaande tekening naar een 3D model zou al mogelijk moeten zijn zonder kunstmatige intelligentie.