Menu
Olek Kaim
  • PHP
  • Laravel
  • O mnie
  • Inne
Olek Kaim
Rozpoznawanie twarzy. Jakich technologii używa snapchat, facebook, instagram

Aplikacja MSQRD – Co zapoczątkowała oraz z jakich technologii korzysta.

Napisano dnia 1 listopada 20184 sierpnia 2019
Spis treści
1) Właściwie co to za aplikacja?
2) Historia aplikacji
3) Przejęcie Masquerade przez Facebooka
4) Algorytmy i technologie
5) Ciekawe rozwiązania w aplikacjach z rozpoznawaniem twarzy.
5.1) Źródła:

Właściwie co to za aplikacja?

MSQRD, a gdy rozwiniemy ten skrót to Masquerade. Posiada funkcje, takie jak: nakładanie filtru na twarz w czasie rzeczywistym, efekty wizualne, grafika 3D. Umożliwia robienie zdjęć oraz nagrywanie filmów.

Historia aplikacji

Stworzona przez białoruską firmę Masquerade Technologies. Na początku marca 2016 roku oficjalnie zadebiutowała w Google Play. Kilka dni po tym wydarzeniu Facebook wykupił MSQRD. Po czym trzej założyciele Jewgienij Nevgen, Sergey Gonchar i Evgeny Zatepyakin przeprowadzili się do Londynu, gdzie podjęli pracę w lokalnej siedzibie Facebooka.

Przejęcie Masquerade przez Facebooka

1,6 miliona pobrań aplikacji MSQRD skłonił serwis społecznościowy Marka Zuckerberga do jej zakupu.

Kolejnym czynnikiem tego zakupu może być sukces Snapchata, który w ciągu dnia osiąga 173 miliony aktywnych użytkowników. Stworzył monopol technologiczny pod względem aplikacji do rozpoznawania twarzy i nakładania na nią filtrów.

Donald Trump. Zdjęcie z filtrem psa na snapchacie.
Donald Trump z wykorzystaniem filtra twarzy na Snapchacie.

Algorytmy i technologie

Pierwszą rzeczą jest odpowiedni interfejs API. Google Cloud Vision API  dla Androida, Google Mobile Vision iOS API, Microsoft Cognitive Services, and Core Image API. Cztery najczęściej używane przez programistów. Każdy interfejs API przechodzi przez dwie fazy, aby rozpoznać twarz: fazę analizy obrazu i fazę przetwarzania obrazu.

Pierwsza faza dzieli obraz na połączone komórki. Komórki analizuje się w różnych skalach i w zależności od kierunku ronda i intensywności gradientu koloru określa się czy dany fragment ma twarz.

Kolejnym etapem przetwarzania tego fragmentu będzie powiększenie pewnego wirtualnego obiektu – tak zwanej maski (na przykładzie Snapchata – pyska psa lub twarzy wiedźmy). Znów otrzymujemy punkty orientacyjne na twarzy. Umożliwiają one inicjację nowego obiektu w wymaganym miejscu i odpowiednie skalowane (na przykład, gdy obraz jest powiększany, oprogramowanie określa położenie czoła i regionu skroniowego).

Do wyżej wymienionych operacji powstały poszczególne frameworki.

Najpopularniejszy z nich OpenCV. Zawiera złożone interfejsy z C++, Pythona i Javy. Został pobrany ponad 14 milionów oraz tworzy aktywną społeczność liczącą ok. 47 tysięcy użytkowników. 

W tworzeniu aplikacji do filtrowania twarzy najbardziej wydajne wyniki można osiągnąć przy użyciu kombinacji bibliotek Dlib i MagickWand.

Ciekawe rozwiązania w aplikacjach z rozpoznawaniem twarzy.

Support vector machine

Histogram of oriented gradients

Gaussian filter

Viola–Jones object detection framework

Facial Landmark Detection

Źródła:

http://msqrd.me/about.html [LINK]

https://ru.wikipedia.org/wiki/MSQRD  [LINK]

https://erminesoft.com/how-snapchat-instagram-face-filters-work [LINK]

Najnowsze wpisy

  • Git – własna komenda
  • Laravel – popularne paczki, które są w większości projektów.
  • SOAP PHP – garść przykładów i teorii.
  • 9 funkcji Laravel Eloquent, których nie ma w oficjalnej dokumentacji
  • Monitoruj stronę w sieci – Google Search Console

Kategorie

  • Aktualności
  • Inne
  • Laravel
  • PHP
©2021 Olek Kaim | Powered by SuperbThemes & WordPress