Ενσωματωμένο στην εφαρμογή κάμερας του Samsung Galaxy S9, το AR Emoji σάς επιτρέπει να χρησιμοποιείτε την μπροστινή κάμερα για να δημιουργείτε και να στέλνετε ψηφιακά είδωλα κινουμένων σχεδίων. Παρόμοια με την έννοια της Animojis της Apple, το AR Emoji καταγράφει τις κινήσεις του προσώπου σας και τις αντικατοπτρίζει με τη μορφή ενός χαρακτήρα ή ζώου. Αλλά με τη λειτουργία "Δημιουργία του Emoji μου", μπορείτε επίσης να δημιουργήσετε έναν εαυτό σας απλώς λαμβάνοντας μια selfie - επιτρέποντάς σας να επιλέξετε έναν τόνο δέρματος, στολή, χτένισμα, χρώμα μαλλιών και γυαλιά.
Με το AR Emoji, η Samsung ξεκίνησε να λύσει αυτό που βλέπει ως πρόβλημα - βρίσκοντας έναν τρόπο να αντικαταστήσετε τα υπάρχοντα emoji με αυτά που είναι διαδραστικά. Η εταιρεία ήθελε να το κάνει με έναν απλό τρόπο, παρέχοντας στους χρήστες τα κατάλληλα εργαλεία για να συλλάβουν το συναίσθημα, αλλά τους επέτρεψε να μοιράζονται εύκολα το αποτέλεσμα σε μια ποικιλία πλατφορμών ανταλλαγής μηνυμάτων.
Λοιπόν, πώς η Samsung δημιούργησε το AR Emojis της; Για αρχάριους, πήγε κατευθείαν στους ειδικούς 3D animation που έφεραν στη ζωή μερικούς από τους πιο δημοφιλείς χαρακτήρες του Χόλιγουντ.
Από μεγάλη οθόνη έως κάμερα smartphone
Για να τροφοδοτήσει τη νέα δυνατότητα, η Samsung συνεργάστηκε με το Loom.ai - μια εκκίνηση με έδρα το Σαν Φρανσίσκο που ειδικεύεται σε 3D animation. Το λογισμικό της εταιρείας επιτρέπει στους χρήστες να δημιουργούν πλήρως εξατομικευμένα και προσαρμόσιμα 3D είδωλα από μία φωτογραφία, χωρίς προσαρμοσμένο υλικό ή αισθητήρες βάθους. Μέσω μιας συνεργασίας και ενός κιτ ανάπτυξης λογισμικού (SDK), η Samsung συνδύασε την τεχνολογία Loom.ai με την τεχνολογία κάμερας του S9 (επαυξημένη πραγματικότητα και αναγνώριση προσώπου) για να καταστεί δυνατή η προσαρμοσμένη AR Emoji.
Η Samsung θέλει να βρει έναν τρόπο να αντικαταστήσει τα υπάρχοντα emoji με αυτά που είναι διαδραστικά.
Το όραμα πίσω από το Loom.ai ξεκίνησε με ταινίες - κινούμενα σχέδια και υπερήρωες. Έχοντας εργαστεί στο παρελθόν σε δημοφιλείς εταιρείες οπτικών εφέ όπως το DreamWorks και το Lucasfilm, οι ιδρυτές του Loom.ai –Mahesh Ramasubramanian και Kiran Bhat– έχουν βοηθήσει να φέρουν γνωστούς χαρακτήρες, όπως ο Shrek και ο Hulk, στη μεγάλη οθόνη.
Για να δώσουν προσωπικότητα σε αυτούς τους χαρακτήρες, χρησιμοποίησαν τεχνολογία απόδοσης για να ενσωματώσουν τους ηθοποιούς που τους έπαιξαν - καταγράφοντας τις κινήσεις του ηθοποιού, όχι την οπτική τους εμφάνιση. Αλλά αφού είδαν πώς αντέδρασαν οι κινηματογραφικοί θεατές στις τρισδιάστατες δημιουργίες τους, ο Ramasubramanian και ο Μπατ αποφάσισαν να προχωρήσουν αυτήν την τεχνολογία - πέρα από το Χόλιγουντ - ξεκινώντας το Loom.ai, το οποίο επικεντρώνεται στα smartphone.
"Οι άνθρωποι αντιδρούν άμεσα όταν αυτοί οι χαρακτήρες ζωντανεύουν όταν καθοδηγούνται από ανθρώπινους ηθοποιούς", δήλωσε ο Ramasubramanian, διευθυντής και συνιδρυτής, στην Digital Trends. «Ξεκινήσαμε το Loom.ai με το στόχο ότι πρέπει να είμαστε σε θέση να βρούμε έναν εύκολο τρόπο ώστε κάθε άτομο να μπορεί να βλέπει τον εαυτό του σε 3D, και για αυτό έπρεπε να χτίσουμε μια νέα τεχνολογία».
Brenda Stolyar / Ψηφιακές τάσεις Με ταινίες μεγάλου μήκους, η δημιουργία ενός τρισδιάστατου avatar απαιτεί τόνους εξοπλισμού - ακριβό υλικό και λογισμικό, μακιγιάζ και μια ρύθμιση στούντιο. Αλλά ο Loom.ai βρήκε έναν τρόπο να απλοποιήσει τη διαδικασία λήψης των χαρακτηριστικών ενός ατόμου χωρίς τα συνήθη εργαλεία. Αντ 'αυτού, η κατοχυρωμένη με δίπλωμα ευρεσιτεχνίας τεχνολογία χρησιμοποιεί μια μόνο φωτογραφία και μια βαθιά μάθηση για την ανάλυση μιας εικόνας. Εάν μια φωτογραφία είναι απαλλαγμένη από οποιεσδήποτε εκφράσεις του προσώπου, ο αλγόριθμος βαθιάς μάθησης κοιτάζει τα pixel και παράγει αυτόματα ένα πρόσωπο που ενσωματώνει τη σωστή κίνηση των μυών.
«Όταν η συνεργασία της Samsung ξεκίνησε, είχαμε την ευκαιρία να εφαρμόσουμε αυτήν την εξελιγμένη τεχνολογία σε μια συσκευή, η οποία πιστεύουμε ότι είναι ήδη ένα πολύ συναρπαστικό μηχανικό έργο από μόνη της», δήλωσε ο Μπατ, ο CTO του Loom.ai και συνιδρυτής, στην Digital Trends. "Είναι ένα μεγάλο άλμα τεχνολογίας που μπορεί να πάρει μερικές από αυτές τις ιδέες και τις φιλοδοξίες από τη μεγάλη οθόνη και να το φέρει στο κινητό."
Για να τροφοδοτήσει το AR Emoji, η Samsung ζήτησε τη βοήθεια του Loom.ai - μιας εκκίνησης που εδρεύει στο Σαν Φρανσίσκο και εξειδικεύεται σε 3D animation.
Η ενσωμάτωση αυτής της τεχνολογίας στο υλικό Galaxy S9 απαιτούσε το Loom.ai για την αναδιάρθρωση των αλγορίθμων του, προκειμένου να εκτελεστεί στη συσκευή. Αλλά το Loom.ai δεν δημιούργησε μόνο τον AR Emoji: Τόσο ο Ramasubramanian όσο και ο Μπατ πιστώνουν τη Samsung στην αφιέρωση της τεράστιας προσπάθειας για βελτιστοποίηση του λογισμικού. Παρέχοντας το SDK για ενσωμάτωση σε smartphone, οι ιδρυτές του Loom.ai πιστεύουν ότι η Samsung μπορεί να κάνει το πλαίσιο πολύ πιο πλούσιο προσθέτοντας περισσότερο περιεχόμενο και επιλογές προσαρμογής στο μέλλον.
Πώς το Galaxy S9 δημιουργεί ένα ψηφιακό είδωλο
Λοιπόν, πώς ακριβώς το S9 (και S9 Plus) δημιουργεί AR Emojis; Ενώ η Samsung δεν αποκάλυψε τη μυστική σάλτσα της, έδωσε μια ματιά στο Digital Trends.
Χάρη στην τεχνολογία του Loom.ai, η κάμερα του τηλεφώνου συλλαμβάνει και επεξεργάζεται μια εικόνα 2D σε 3D. Για να το βελτιώσει περαιτέρω, το S9 χρησιμοποιεί πρόσθετο λογισμικό - παρακολούθηση προσώπου και τεχνολογία Blend Shape της Samsung - για να παρέχει εκφράσεις προσώπου για το AR Emoji.
Έμεινε λοιπόν με μια έκδοση που μοιάζει με κινούμενα σχέδια που μπορεί να εκπέμπει 18 διαφορετικές εκφράσεις - τις οποίες η Samsung σχεδιάζει να επεκταθεί αργά σε 54 - από χαρά και ευχαρίστηση, μέχρι θλίψη και θυμό. Όλα τα δεδομένα είναι επίσης τοπικά στη συσκευή και δεν αποθηκεύονται πουθενά αλλού.
Και οι δύο συνεργάζονται, η τεχνολογία παρακολούθησης προσώπου παρακολουθεί πάνω από 100 χαρακτηριστικά του προσώπου σε πραγματικό χρόνο (όπως το μάτι ή το χαμόγελο) για να συλλάβει μεμονωμένα συναισθήματα, ενώ το Blend Shape βοηθά να προσφέρει μια μεγαλύτερη γκάμα από αυτά - που συνδυάζει τις εκφράσεις μαζί με βάση 75 βασικά χαρακτηριστικά του ανθρώπινου προσώπου . Η Samsung λέει, για το Blend Shape, διενήργησε τουλάχιστον 100 δοκιμές σε εβδομαδιαία βάση στα εργαστήριά της, προκειμένου να διασφαλίσει ότι υπάρχουν αρκετά δεδομένα που θα προσελκύσουν τους χρήστες της. (Το Blend Shape χρησιμοποιείται επίσης για τη δημιουργία της Disney AR Emojis, όπως ο Mickey και ο Minnie Mouse.)
Στη δική μας δοκιμή AR Emoji, η πλειοψηφία από εμάς θεωρούσαμε ότι οι χαρακτήρες μας φαινόταν εξαιρετικά ανακριβείς. Ένας συγγραφέας θεώρησε ότι υπήρχε έλλειψη διαθέσιμων επιλογών τόνου δέρματος, χωρίς σκούρους τόνους για να διαλέξετε. Άλλοι θεώρησαν ότι το AR Emoji τους δεν έμοιαζε με τίποτα, κάτι που έκανε την επεξεργασία του avatar να μοιάζει περισσότερο με μια δουλειά παρά μια ευχάριστη εργασία.
Σύμφωνα με το Loom.ai, η δημιουργία ενός ακριβούς AR Emoji βασίζεται σε μεγάλο βαθμό στον τρόπο λήψης της selfie. Οι χρήστες πρέπει να κάνουν τη φωτογραφία με τον ίδιο τρόπο που θα έπαιρναν φωτογραφία διαβατηρίου. «Θέλετε ομοιόμορφο φωτισμό, τίποτα που δεν καλύπτει το πρόσωπό σας και μια ουδέτερη έκφραση, ώστε να μπορούμε να προσθέσουμε τις εκφράσεις αργότερα», εξήγησε ο Ramasubramanian. «Είναι θέμα των ανθρώπων να εξοικειωθούν λίγο με αυτό και μετά να δουν τις δυνατότητες της κίνησης και της χρήσης τους.»
Ο Ramasubramanian είπε επίσης ότι οι χρήστες θα πρέπει να το αντιμετωπίζουν με τον ίδιο τρόπο, λαμβάνοντας ταυτόχρονα selfie - δηλαδή, μπορείτε να τραβήξετε τόνους φωτογραφιών έως ότου είστε ικανοποιημένοι με τη φωτογραφία. Εφόσον το AR Emoji σάς επιτρέπει να δημιουργήσετε πολλά είδωλα, μπορείτε να τα συγκρίνετε για να βρείτε αυτό που σας αρέσει περισσότερο. Κάθε ένα που δημιουργείτε αποθηκεύει επίσης στο τηλέφωνό σας, ώστε να μπορείτε να αλλάξετε την έκδοση που χρησιμοποιείτε ανάλογα με τη διάθεσή σας.
Η τελευταία ενημέρωση του AR Emoji περιλαμβάνει επιπλέον χτενίσματα, καπέλα όπως hijab και άλλες επιλογές. Η ενημέρωση κυκλοφορεί προς το παρόν σε ξεκλειδωμένες εκδόσεις των Samsung Galaxy S9 και S9 Plus στην Κορέα, την Κίνα και την Ευρώπη. Οι ευρωπαϊκές συσκευές κινητής τηλεφωνίας και οι ξεκλειδωμένες συσκευές στις ΗΠΑ θα πρέπει να έχουν διαθέσιμη την ενημέρωση για λήψη αυτήν την εβδομάδα. Η ενημέρωση για τις συσκευές κινητής τηλεφωνίας των ΗΠΑ θα κυκλοφορήσει τις επόμενες εβδομάδες. Η Samsung λέει ότι το AR Emoji θα συνεχίσει να εξελίσσεται στο μέλλον, αλλά προς το παρόν, παραμένει σφιχτό με τα ακριβή στοιχεία.
