ByteDance: Ετοιμάζει γιγαντιαίο AI μοντέλο έως 10 τρισ. παραμέτρων για να «χτυπήσει» την Anthropic

Η μητρική του TikTok περνά στην αντεπίθεση απέναντι στα αμερικανικά εργαστήρια τεχνητής νοημοσύνης, επενδύοντας επιθετικά σε data centers, ερευνητές, cloud υποδομές και εξειδικευμένα τσιπ.

Η ByteDance, μητρική εταιρεία του TikTok, ετοιμάζει ένα από τα μεγαλύτερα μοντέλα τεχνητής νοημοσύνης που έχουν αναπτυχθεί μέχρι σήμερα, με στόχο να πλησιάσει ή ακόμη και να ανταγωνιστεί άμεσα τα κορυφαία συστήματα της Anthropic.

Το νέο μοντέλο βρίσκεται ήδη στα πρώτα στάδια εκπαίδευσης και, σύμφωνα με πληροφορίες της αγοράς, θα μπορούσε να φτάσει ακόμη και τα 10 τρισεκατομμύρια παραμέτρους.

Εφόσον το σχέδιο υλοποιηθεί σε αυτή την κλίμακα, το σύστημα της ByteDance θα είναι περίπου τρεις φορές μεγαλύτερο από το Kimi K3 της Moonshot, το μεγαλύτερο κινεζικό μοντέλο που έχει παρουσιαστεί μέχρι σήμερα.

Στη φάση της προ-εκπαίδευσης

Το νέο AI σύστημα βρίσκεται αυτή τη στιγμή στη διαδικασία της προ-εκπαίδευσης, ένα από τα σημαντικότερα και πιο απαιτητικά στάδια ανάπτυξης ενός μεγάλου γλωσσικού μοντέλου.

Η συγκεκριμένη διαδικασία μπορεί να διαρκέσει από τρεις έως έξι μήνες και απαιτεί τεράστιους υπολογιστικούς πόρους, εξειδικευμένο hardware και πολύ μεγάλες ποσότητες δεδομένων.

Μετά την ολοκλήρωση της προ-εκπαίδευσης αναμένεται να ακολουθήσει η εξειδίκευση του μοντέλου και η προσαρμογή του στις τελικές εφαρμογές πριν από την επίσημη κυκλοφορία.

Το τελικό μέγεθος, πάντως, δεν έχει ακόμη οριστικοποιηθεί και μπορεί να μεταβληθεί όσο προχωρά η διαδικασία ανάπτυξης.

Στόχος τα κορυφαία μοντέλα της Anthropic

Η ByteDance φαίνεται να έχει θέσει ως βασικό σημείο αναφοράς τα πλέον προηγμένα μοντέλα της Anthropic.

Αναλυτές εκτιμούν ότι το κορυφαίο σύστημα της αμερικανικής εταιρείας, Mythos 5, μπορεί να διαθέτει περίπου 8 τρισεκατομμύρια παραμέτρους, ενώ το Fable 5 υπολογίζεται περίπου στα 5 τρισεκατομμύρια.

Η Anthropic δεν δημοσιοποιεί επίσημα τον αριθμό των παραμέτρων των μοντέλων της, επομένως οι συγκεκριμένες εκτιμήσεις δεν έχουν επιβεβαιωθεί από την ίδια την εταιρεία.

Το μέγεθος ενός μοντέλου δεν εγγυάται από μόνο του καλύτερη απόδοση, καθώς κρίσιμο ρόλο παίζουν η ποιότητα των δεδομένων, η αρχιτεκτονική και ο τρόπος εκπαίδευσης.

Η Κίνα κλείνει την ψαλίδα με τις ΗΠΑ

Η προσπάθεια της ByteDance αποτελεί μέρος μιας πολύ μεγαλύτερης τεχνολογικής μάχης μεταξύ Κίνας και Ηνωμένων Πολιτειών.

Τα κινεζικά εργαστήρια τεχνητής νοημοσύνης έχουν βελτιώσει σημαντικά τις επιδόσεις τους μέσα σε σχετικά μικρό χρονικό διάστημα και πλέον δεν περιορίζονται στην προσπάθεια να ακολουθήσουν τις αμερικανικές εταιρείες.

Ο στόχος είναι να φτάσουν στο ανώτατο επίπεδο και, σε συγκεκριμένες εφαρμογές, να το ξεπεράσουν.

Νέα μοντέλα από εταιρείες όπως η Moonshot και η Alibaba έχουν ήδη παρουσιάσει πολύ υψηλές επιδόσεις σε συγκριτικές δοκιμές, πλησιάζοντας τα ισχυρότερα συστήματα της Anthropic σε ορισμένες κατηγορίες.

Η ByteDance παίζει πιο επιθετικά από τους ανταγωνιστές της

Στελέχη της αγοράς αναφέρουν ότι αρκετά κινεζικά AI labs εκπαιδεύουν πλέον μοντέλα αντίστοιχης κλίμακας.

Ωστόσο, η ByteDance εμφανίζεται ως μία από τις πιο επιθετικές εταιρείες του κλάδου, τόσο ως προς το μέγεθος των επενδύσεων όσο και ως προς τους τεχνολογικούς στόχους που θέτει.

Τα τελευταία τρία χρόνια έχει επεκτείνει σημαντικά το δίκτυο των data centers που χρησιμοποιεί για την εκπαίδευση AI μοντέλων και έχει επιταχύνει τις προσλήψεις κορυφαίων ερευνητών.

Παράλληλα, επενδύει σε ολόκληρη την υποδομή που απαιτείται για να αποκτήσει μεγαλύτερη αυτονομία στην τεχνητή νοημοσύνη.

Το Doubao έχει 324 εκατ. ενεργούς χρήστες

Η ByteDance διαθέτει ήδη σημαντική παρουσία στην αγορά AI της Κίνας μέσω του Doubao.

Η εφαρμογή αποτελεί το βασικό καταναλωτικό προϊόν τεχνητής νοημοσύνης της εταιρείας και έχει φτάσει περίπου τους 324 εκατομμύρια ενεργούς χρήστες τον μήνα, καθιστώντας την μία από τις δημοφιλέστερες υπηρεσίες AI στην κινεζική αγορά.

Το τεράστιο αυτό κοινό μπορεί να αποτελέσει σημαντικό πλεονέκτημα για την ByteDance, καθώς της προσφέρει άμεση δυνατότητα ενσωμάτωσης νέων AI τεχνολογιών σε εκατοντάδες εκατομμύρια χρήστες.

Σε αντίθεση με αρκετούς ανταγωνιστές της, η εταιρεία προτιμά να κρατά τα περισσότερα μοντέλα της κλειστού κώδικα.

Ισχυρή παρουσία και στο AI video

Η εταιρεία δεν περιορίζεται στα γλωσσικά μοντέλα.

Το SeeDance, σύστημα δημιουργίας βίντεο μέσω τεχνητής νοημοσύνης, συγκαταλέγεται ήδη μεταξύ των πιο προηγμένων εργαλείων του είδους του διεθνώς.

Η εμπειρία της ByteDance από το TikTok της δίνει σημαντικό πλεονέκτημα σε τομείς όπως η εικόνα, το βίντεο, οι αλγόριθμοι προτάσεων και η επεξεργασία πολυμεσικού περιεχομένου.

Η εταιρεία μπορεί έτσι να συνδυάσει μεγάλα γλωσσικά μοντέλα με τεχνολογία παραγωγής εικόνας και βίντεο, δημιουργώντας πιο ολοκληρωμένα πολυτροπικά συστήματα AI.

Επενδύει δυναμικά στο cloud

Παράλληλα με τα καταναλωτικά προϊόντα, η ByteDance αναπτύσσει και το επιχειρηματικό της σκέλος μέσω του Volcano Engine.

Η cloud πλατφόρμα προσφέρει υπηρεσίες τεχνητής νοημοσύνης σε επιχειρήσεις και αποτελεί βασικό κομμάτι της προσπάθειας της εταιρείας να ανταγωνιστεί μεγάλους παρόχους υποδομών.

Η στρατηγική θυμίζει σε σημαντικό βαθμό το μοντέλο των αμερικανικών τεχνολογικών κολοσσών, όπου η ανάπτυξη προηγμένων AI μοντέλων συνδέεται άμεσα με την πώληση υπολογιστικής ισχύος και επιχειρηματικών υπηρεσιών.

Θέλει να σχεδιάζει και δικά της AI chips

Η ByteDance εξετάζει παράλληλα την ανάπτυξη δικών της εξειδικευμένων τσιπ για τεχνητή νοημοσύνη.

Η συγκεκριμένη κίνηση έχει ιδιαίτερη σημασία λόγω των περιορισμών που έχουν επιβληθεί από τις Ηνωμένες Πολιτείες στις εξαγωγές προηγμένων chips προς την Κίνα.

Η δυνατότητα δημιουργίας εσωτερικού hardware θα μπορούσε να μειώσει την εξάρτηση από ξένους κατασκευαστές και να επιτρέψει στην εταιρεία να ελέγχει μεγαλύτερο μέρος της αλυσίδας ανάπτυξης των AI συστημάτων της.

Η μάχη της τεχνητής νοημοσύνης δεν κρίνεται πλέον μόνο στα μοντέλα. Κρίνεται στα chips, στα data centers, στην ενέργεια και στην πρόσβαση σε τεράστιους υπολογιστικούς πόρους.

Η επόμενη μεγάλη μάχη στο AI

Η ανάπτυξη ενός μοντέλου έως 10 τρισ. παραμέτρων δείχνει το μέγεθος των φιλοδοξιών της ByteDance.

Η εταιρεία διαθέτει ήδη εκατοντάδες εκατομμύρια χρήστες, τεράστιες υποδομές και σημαντική εμπειρία σε αλγορίθμους και πολυμεσικό περιεχόμενο.

Το μεγάλο ερώτημα είναι αν το νέο σύστημα θα μπορέσει να μετατρέψει αυτή την κλίμακα σε πραγματικά κορυφαίες επιδόσεις.

Αν η ByteDance πετύχει τον στόχο της, η επόμενη φάση του παγκόσμιου ανταγωνισμού στην τεχνητή νοημοσύνη μπορεί να μην είναι απλώς μάχη μεταξύ αμερικανικών εταιρειών, αλλά μια πολύ πιο άμεση τεχνολογική σύγκρουση ΗΠΑ και Κίνας.

Πηγή: Pagenews.gr