Apple เปิดเผยว่าฟีเจอร์ Apple Intelligence ที่เพิ่งประกาศออกมาใหม่ได้รับการพัฒนาโดยใช้ Tensor Processing Units (TPU) ของ Google แทนที่จะใช้ตัวเร่งความเร็วฮาร์ดแวร์ที่ NVIDIA ใช้กันอย่างแพร่หลาย เช่น H100 ทางเลือกที่ไม่คาดคิดนี้ได้รับการระบุรายละเอียดในเอกสารวิจัยอย่างเป็นทางการของ Apple ซึ่งเผยให้เห็นแนวทางของบริษัทในการพัฒนา AI เอกสารดังกล่าวได้สรุปว่าระบบที่ติดตั้งชิป TPUv4 และ TPUv5 ของ Google มีบทบาทสำคัญในการสร้าง Apple Foundation Models (AFM) อย่างไร โมเดลเหล่านี้ รวมถึงเซิร์ฟเวอร์ AFM และ AFM-on-device ได้รับการออกแบบมาเพื่อขับเคลื่อนฟีเจอร์ Apple Intelligence ทั้งแบบออนไลน์และออฟไลน์ที่เปิดตัวใน WWDC 2024 สำหรับการฝึกอบรมเซิร์ฟเวอร์ AFM ที่มีพารามิเตอร์ 6.4 พันล้านตัว ซึ่งเป็นโมเดลภาษาที่ใหญ่ที่สุดของ Apple บริษัทได้ใช้ชิป TPUv4 ที่น่าประทับใจจำนวน 8,192 ชิป ซึ่งจัดเตรียมไว้เป็นชิปสไลซ์ขนาด 8x1024 กระบวนการฝึกอบรมประกอบด้วยแนวทางสามขั้นตอน โดยประมวลผลโทเค็นทั้งหมด 7.4 ล้านล้านโทเค็น ในขณะเดียวกัน โมเดล AFM-on-device ที่มีพารามิเตอร์ 3 พันล้านตัวซึ่งกะทัดรัดกว่า ซึ่งได้รับการปรับให้เหมาะสมสำหรับการประมวลผลบนอุปกรณ์ ได้รับการฝึกโดยใช้ชิป TPUv5p จำนวน 2,048 ชิ้น
ข้อมูลการฝึกของ Apple มาจากแหล่งต่างๆ รวมถึงเว็บครอว์เลอร์ของ Applebot และชุดข้อมูลคุณภาพสูงที่ได้รับอนุญาต บริษัทได้รวมรหัส คณิตศาสตร์ และชุดข้อมูลสาธารณะที่คัดเลือกมาอย่างรอบคอบเพื่อเพิ่มความสามารถของโมเดล ผลการเปรียบเทียบประสิทธิภาพที่แบ่งปันในเอกสารชี้ให้เห็นว่าทั้งเซิร์ฟเวอร์ AFM และ AFM-on-device ต่างก็โดดเด่นในด้านต่างๆ เช่น การปฏิบัติตามคำสั่ง การใช้เครื่องมือ และการเขียน ทำให้ Apple กลายเป็นคู่แข่งที่แข็งแกร่งในการแข่งขันด้าน AI แม้ว่าจะเข้าสู่ตลาดได้ค่อนข้างช้า อย่างไรก็ตาม กลยุทธ์การเจาะตลาด AI ของ Apple นั้นซับซ้อนกว่าคู่แข่งด้าน AI รายอื่นๆ มาก เมื่อพิจารณาจากฐานผู้ใช้จำนวนมหาศาลของ Apple และอุปกรณ์หลายล้านเครื่องที่เข้ากันได้กับ Apple Intelligence แล้ว AFM จึงมีศักยภาพที่จะเปลี่ยนแปลงปฏิสัมพันธ์ของผู้ใช้กับอุปกรณ์ไปในทางที่ดี โดยเฉพาะอย่างยิ่งสำหรับงานประจำวัน ดังนั้น การปรับแต่งโมเดล AI สำหรับงานเหล่านี้จึงมีความสำคัญก่อนที่จะนำไปใช้งานจริงอย่างแพร่หลาย คุณสมบัติที่คาดไม่ถึงอีกอย่างหนึ่งคือความโปร่งใสจาก Apple ซึ่งโดยทั่วไปแล้วบริษัทจะรู้จักกันดีในเรื่องความลับ การเติบโตของ AI กำลังเปลี่ยนแปลงวิธีการของ Apple บางอย่าง และการเปิดเผยการทำงานภายในเหล่านี้ถือเป็นเรื่องที่น่าสนใจเสมอ
ที่มา : TechPowerUp
ที่มา : TechPowerUp