Nvidia's DiffUHaul AI-tool kan objecten in afbeeldingen verplaatsen
Onderzoekers van Nvidia hebben op een artikel gepubliceerd over een nieuw AI-gereedschap, DiffUHaul, dat objecten in een afbeelding kan begrijpen en verplaatsen zonder de grootte of de achtergrond te veranderen. In het artikel staat dat het gereedschap "het ruimtelijk inzicht van een gelokaliseerd tekst-naar-beeld model gebruikt voor het slepen van objecten"
Huidige tekst-naar-beeld modellen hebben moeite met complexe beeldbewerkingstaken omdat ze "ruimtelijk redeneren" missen DiffuHaul lost dit probleem op door dit in het model in te bouwen, zodat het objecten in een afbeelding kan volgen en ze "naadloos" kan verplaatsen zonder iets anders te veranderen.
Om dit te bereiken, maskeert het hulpmiddel het object tijdens de denoisingstappen, zodat het de locatie ervan kan begrijpen en het kan scheiden van de achtergrond. Vervolgens interpoleert het het verschil tussen de originele en de gegenereerde afbeelding om het object op een nieuwe positie te plaatsen zonder de achtergrond te raken. Daarna worden fijnere details en kenmerken van de originele afbeelding verplaatst naar de nieuwe afbeelding voor consistentie.
DiffUHaul is gebaseerd op BlobGENeen model dat ruimtelijk inzicht gebruikt om afbeeldingen samen te stellen op basis van complexe aanwijzingen. Het artikel zegt dat het hulpmiddel trainingsvrij is, wat betekent dat het zonder datasets is gemaakt en direct werkt.
Top 10 Testrapporten
» Top 10 Multimedia Notebooks
» Top 10 Gaming-Notebooks
» Top 10 Budget Gaming Laptops
» Top 10 Lichtgewicht Gaming-Notebooks
» Top 10 Premium Office/Business-Notebooks
» Top 10 Budget Office/Business-Notebooks
» Top 10 Workstation-Laptops
» Top 10 Subnotebooks
» Top 10 Ultrabooks
» Top 10 Notebooks tot €300
» Top 10 Notebooks tot €500
» Top 10 Notebooks tot € 1.000De beste notebookbeeldschermen zoals getest door Notebookcheck
» De beste notebookbeeldschermen
» Top Windows Alternatieven voor de MacBook Pro 13
» Top Windows Alternatieven voor de MacBook Pro 15
» Top Windows alternatieven voor de MacBook 12 en Air
» Top 10 best verkopende notebooks op Amazon
» Top 10 Convertible Notebooks
» Top 10 Tablets
» Top 10 Tablets tot € 250
» Top 10 Smartphones
» Top 10 Phablets (>90cm²)
» Top 10 Camera Smartphones
» Top 10 Smartphones tot €500
» Top 10 best verkopende smartphones op Amazon