H τεχνολογία AI ήταν το νέο trend για το 2018 όσον αφορά τους κατασκευαστές smartphones και οι υλοποιήσεις έφεραν πραγματικά σχεδόν τα ίδια αποτελέσματα καθιστώντας πολύ δύσκολο να προσδιορίσουν αν υπάρχουν σημαντικές διαφορές μεταξύ των διαφορετικών συσκευών με αυτό το feature. Έτσι, η AnTuTu αποφάσισε να κυκλοφορήσει ένα εργαλείο συγκριτικής αξιολόγησης, το οποίο θα βοηθήσει να αντιληφθούμε ποιες συσκευές έχουν πραγματικά την πιο ολοκληρωμένη πρόταση και την καλύτερη δυνατή υποστήριξη τεχνολογίας ΑΙ.
Ωστόσο, στην ανάρτησή τους στο blog, η ομάδα του AnTuTu τονίζει το γεγονός ότι η χρήση τεχνολογίας AI είναι ένα πιο περίπλοκο ζήτημα σε σχέση με τα τρέχοντα κριτήρια απόδοσης του συστήματος. Το νέο εργαλείο αξιολόγησης έχει δύο υποκατηγορίες – ταξινόμηση και αναγνώριση αντικειμένων. Η πρώτη δοκιμή περιέχει 200 εικόνες βασισμένες στο νευρωνικό δίκτυο Inception v3 ενώ η δεύτερη δοκιμή εξετάζει βίντεο 600 καναλιών που βασίζονται στο νευρωνικό δίκτυο SSD MobileNet. Αυτές οι εικόνες στη συνέχεια τροφοδοτούνται στο SDK που παρέχεται από τον πωλητή smartphones και αν το chip υποστηρίζει αλγορίθμους AI, το benchmark καταφεύγει στο TFLite για συγκριτική αξιολόγηση. Ωστόσο, το δεύτερο σενάριο είναι εξαιρετικά αναξιόπιστο τότε.

Η τελική βαθμολογία σχηματίζεται από την ταχύτητα και την ακρίβεια της δοκιμής, αλλά αν η ακρίβεια μεταβιβάζεται σε ταχύτητα, το σημείο benchmark θα δώσει χαμηλότερη βαθμολογία. Η λογική πίσω είναι ότι αυτό εμποδίζει την εξαπάτηση όπου το τηλέφωνο θα διαβάσει τις εικόνες πραγματικά γρήγορα χωρίς καμία σωστή απάντηση.
Το AnTuTu επισημαίνει επίσης ότι η βαθμολογία AI σε διαφορετικές πλατφόρμες δεν θα διαφοροποείται τόσο πολύ, επειδή το εργαλείο επικεντρώνεται αποκλειστικά στην απόδοση της AI και όχι στη συνολική απόδοση του συστήματος. Επίσης, η Samsung δεν κυκλοφόρησε το AI SDK, ενώ η HiSilicon εξακολουθεί να χρησιμοποιεί το TFLite για ορισμένες λειτουργίες, έτσι ώστε τα τηλέφωνα να βαθμολογούνται χαμηλότερα από ότι έπρεπε. Τέλος, η έκδοση Android μπορεί να αποκρύψει τα αποτελέσματα, καθώς η Google εργάζεται για τη βελτίωση των λειτουργιών AI σε επίπεδο συστήματος με κάθε έκδοση του Android.
[via]