W tym miesiącu Nvidia uruchomiła swoją aplikację do symulacji kontaktu wzrokowego, która pozwala użytkownikom zastąpić kontakt wzrokowy technologią AI.

Nvidia Broadcast 1.4 uruchamia aplikację do kontaktu wzrokowego opartą na sztucznej inteligencji

Nidhi Bhardwaj: Funkcja Eye Contact opiera się na sztucznej inteligencji, aby symulować, jak wyglądałyby twoje oczy, gdybyś patrzył w kamerę zamiast gdzie indziej, zgodnie z ostatnim wpisem na blogu Nvidii z 12 stycznia. Jak informowaliśmy, oprogramowanie do przesyłania strumieniowego Nvidia ma opcję zastąpienia twoich oczu symulowanymi oczami, które są dopasowane do twojego aparatu. Funkcja kontaktu wzrokowego, która pojawi się w aplikacji Nvidia Broadcast, sprawi, że wygląda na to, że nawiązujesz kontakt wzrokowy z kamerą, nawet jeśli tak nie jest, a wszystko to dzieje się za pomocą sztucznej inteligencji.

.@NVIDIA Broadcast to aplikacja do transmisji na żywo, wideokonferencji i poczty głosowej. Najnowsza wersja wprowadza jedną naprawdę fajną nową funkcję – technologię kontaktu wzrokowego, która modyfikuje wideo na żywo, dzięki czemu Twoje oczy zawsze wydają się patrzeć prosto w kamerę.

1/3 pic.twitter.com/rnf7bAaoFV— Bojan Tunguz (@tunguz) 21 stycznia 2023 r

Co nowego w tej aplikacji Nvidia?

Mówi się, że technologia Nvidia Broadcast 1.4 nie kontroluje ruchów gałek ocznych mówiącego, tylko je analizuje. Ta technologia ma na celu głębokie sfałszowanie oczu dzięki funkcji kopiowania koloru oczu i analizowaniu spojrzenia, aby umożliwić mruganie, aby wyglądało naturalnie, jak wspomniano w ostatnim blogu. Wspomniano, że nowa technologia Nvidii została płynnie przeszkolona z takimi funkcjami. Nvidia powiedziała dalej: „Istnieje nawet funkcja rozłączania na wypadek, gdybyś spojrzał za daleko”.

Wcześniej kilka firm próbowało eksperymentować z deepfake’ami w wyglądzie i głosie celebrytów. Cóż, tym razem Nvidia wyszkoliła swój model sztucznej inteligencji, aby naśladował miliony kolorów oczu wraz z różnymi kombinacjami oświetlenia.

źródło: Nvidia

Szybki rzut oka na Nvidia Broadcast 1.4

Nowy efekt kontaktu wzrokowego, zwany beta, został zastosowany w tym modelu sztucznej inteligencji, aby zmienić wygląd oczu mówiącego. Wraz z wersją beta, Vignette ma na celu symulację efektu soczewki poprzez zacienienie rogów kadru w celu uzyskania efektów kosmetycznych. Nvidia skupiła się również na zaktualizowaniu modelu o wirtualne efekty tła w celu rozmycia, podmiany i usunięcia. Zaktualizowany efekt wykorzystuje informacje czasowe w celu poprawy jakości i stabilności segmentacji, zgodnie z najnowszymi informacjami Nvidii.

Aplikacja promowałaby również opcję lustrzanego podglądu aparatu i migawek selfie, a także podpowiedzi dla lepszej dostępności.

Grupa docelowa Nvidii

Firma opisała nową aplikację AI jako przydatną dla twórców treści, którzy chcą je nagrywać podczas czytania notatek. Użytkownik może rozpocząć korzystanie z funkcji kontaktu wzrokowego po aktualizacji do wersji 1.4 Nvidia Broadcast. Jednak ta funkcja jest obecnie w fazie beta, więc może nie działać dobrze zgodnie z życzeniem użytkownika. Ponieważ opiera się na sztucznej inteligencji, użytkownicy mogą pomóc firmie ulepszyć sztuczną inteligencję za pomocą prób wideo.