Az MIT képszerkesztő mesterséges intelligencia eszköze könnyedén lecseréli a hátteret bármely képen
Ez az MIT mesterséges intelligenciával támogatott képszerkesztő eszköze bármilyen kép hátterét megváltoztathatja
A Photoshop sokáig az a program, amelyet sokan használunk, hogy gyors javításokkal és kreatív fejlesztésekkel nagyszerűen nézzenek ki fotóink.
Most az MIT Számítástechnikai és Mesterséges Intelligencia Laboratóriumának (CSAIL) kutatói kifejlesztettek egy mesterséges intelligenciával támogatott képszerkesztő eszközt, amely automatizálja a fényképek szerkesztési folyamatának számos részét. Ez megkönnyíti a fényképek szerkesztését.
"Ahelyett, hogy egy szakértő szerkesztőre lenne szükség, hogy több percet töltsön a kép képkockánkénti és pixelenkénti finomhangolásával, szeretnénk egyszerűbbé és gyorsabbá tenni a folyamatot, hogy a képszerkesztés könnyebben elérhető legyen az alkalmi felhasználók számára" - mondja Yagiz Aksoy, az MIT CSAIL vendégkutatója.
"A vízió az, hogy eljussunk arra a pontra, ahol a szerkesztők egyetlen kattintással kombinálhatják a képeket, hogy létrehozzák ezeket a teljes, valósághű fantáziavilágokat. ”
A "Semantic Soft Szegmentáció" (SSS) néven ismert módszer mesterséges intelligenciát (AI) használ az objektumok automatikus elkülönítésére a képen, ami lehetővé teszi az egyszerű képszerkesztést. Ezzel a technikával például megváltoztathatja a háttér megjelenését, vagy egyesítheti az előtérben és a háttérben lévő képeket egy teljesen új jelenetbe.
Hogyan működik az SSS?
Az eszköz tanulmányozza az eredeti kép textúráját és színét, és kombinálja azt egy neurális hálózat által gyűjtött információkkal arról, hogy valójában mik a képen lévő objektumok. A neurális hálózat feldolgozza a kép jellemzőit, és észleli a "lágy átmeneteket", például a hajat és a füvet.
"Miután ezeket a lágy szegmenseket kiszámították, a felhasználónak nem kell manuálisan módosítania az átmeneteket, vagy egyedi módosításokat végrehajtania a kép egy adott rétegének megjelenésén" - mondja Aksoy. "A kézi szerkesztési feladatok, például a hátterek cseréje és a színek beállítása sokkal könnyebbé válnának. ”
A képen lévő képpontok ezután színnel vannak társítva egymással. Ezeket az információkat a neurális hálózat által észlelt jellemzőkkel kombinálva megbecsülik a képrétegeket. Ez a feladat azonban nem egyszerű, mivel a számítógépeket meg kell tanítani, hogyan kell ezt megtenni.
"Ezekben a képekben az a trükkös, hogy nem minden pixel tartozik kizárólag egy objektumhoz" - tette hozzá Aksoy, aki a múlt héten bemutatta a tanulmányt az éves SIGGRAPH számítógépes grafikai konferencián Vancouverben. "Sok esetben nehéz lehet meghatározni, hogy mely pixelek a háttér részét képezik, és melyek egy adott személy részei. ”
Hol használható az SSS?
Aksoy szerint az SSS-t a jelenlegi iterációjában olyan közösségi platformok, mint az Instagram és a Snapchat, használhatják szűrőik valósághűbbé tételére, főleg a szelfik hátterének megváltoztatására vagy bizonyos típusú kamerák szimulálására.
Tervek a jövőre nézve
A jövőben a kutatók azt tervezik, hogy a kép kiszámításához szükséges időt percekről másodpercekre csökkentik, és a képeket még valósághűbbé teszik azáltal, hogy javítják a rendszer képességét a színek illesztésére, valamint az olyan dolgok kezelésére, mint a megvilágítás és az árnyékok.
Forrás: CSAIL