گوگل از هوش مصنوعی جدید و خارق العاده جدید Lumiere رونمایی کرد

شاید تا یک سال پیش ویدئوهای تغییر چهره، برای ما تعجبآور بود و از پیشرفت هوش مصنوعی شگفتزده میشدیم. اما هوش مصنوعی مولد با سرعتی چشمگیری در حال پیشرفت است و مدل جدید و خارقالعاده انتشار فضا-زمانی گوگل، Lumiere بار دیگر مرزها را جابجا میکند.
لومیر Lumiere میتواند کلیپهای ویدئوهای بهطور قابلتوجهی واقعگرایانه یا سوررئالیستی با کیفیت بالا تا پنج ثانیه ایجاد کند و قادر است تصاویر ثابت یا فقط بخشهایی از آنها را در پاسخ به درخواستهای متنی به زبان عادی، متحرک کند.
لومیر میتواند یک تصویر بگیرد، سبک آن تصویر را شبیهسازی کند و سپس از آن سبک برای ایجاد مجموعهای از ویدیوها در مورد موضوعات دیگر استفاده کند که آنقدر طبیعی به نظر میرسند که آدم فکر میکند، محصول یک آژانس برندسازی است.
شما به سادگی میتوانید برای جانشینی بخشی از تصویر که دوست ندارید، نقاشی تحویل لومیر بدهید و این هوش مصنوعی، آن قسمت را به طور خودکار پر میکند.
تیم تحقیقاتی درگیر میگوید «معماری U-Net فضا-زمان» لومیر تمام طول ویدیو را یکباره ایجاد میکند. برخلاف مدلهای قبلی، که اغلب یک فریم شروع و پایان ایجاد میکنند، سپس سعی میکنند حدس بزنند در بین این دو چه رخ داده است.
ویژگی “Inpainting” لومیر باور نکردنی است. بخشی از کادر را خالی کنید، و گوگل آن را برای شما پر میکند.
در حال حاضر، این کار فقط یک پروژه تحقیقاتی است اما یک جهش عظیم به جلو است و دیدن اینکه لومیر چقدر خوب کار میکند،جالب است و حدسش دشوار است که وقتی در دسترس عموم مردم قرار بگیرد، چطور استفاده میشود.
منبع: Google Research





