Foxconn ประกาศเปิดตัว Large Language Model (LLM) ที่ได้รับการปรับปรุงจาก Llama 3.1 ของ Meta

Foxconn บริษัทที่รู้จักกันดีในการผลิต iPhone และผลิตภัณฑ์ฮาร์ดแวร์อื่นๆ ของ Apple สร้างความประหลาดใจให้กับทุกคนด้วยการประกาศเปิดตัวโมเดลภาษาขนาดใหญ่รุ่นแรก (LLM) ที่เรียกว่า FoxBrain ซึ่งมีจุดประสงค์เพื่อใช้ในการปรับปรุงการผลิตและการจัดการห่วงโซ่อุปทาน

ผู้ผลิตชาวไต้หวันกล่าวว่า FoxBrain ได้รับการฝึกด้วย GPU H100 ของ Nvidia เพียง 120 ตัวเท่านั้น LLM นี้ได้รับการพัฒนาโดยอิงตามสถาปัตยกรรม Llama 3.1 ของ Meta โดยมีพารามิเตอร์ 70 พันล้านรายการผ่านการกลั่น แนวคิดการปรับปรุง LLM เกี่ยวข้องกับการใช้โมเดล "ผู้ปกครอง" และการฝึกโมเดล "ลูก" ตามการตอบสนองของโมเดลนั้น นอกจากนี้ Foxconn ยังยอมรับว่า LLM ของพวกเขาไม่ดีเท่ากับโมเดลที่ได้รับการปรับปรุงของ DeepSeek (จีน) แต่ประสิทธิภาพโดยรวมนั้นใกล้เคียงกับมาตรฐานระดับโลกมาก

เมื่อพูดถึงความสำเร็จนี้ ดร. Yung-Hui Li ผู้อำนวยการศูนย์วิจัยปัญญาประดิษฐ์แห่งสถาบันวิจัย Hon Hai (Foxconn) กล่าวว่า:

ในช่วงไม่กี่เดือนที่ผ่านมา การพัฒนาความสามารถในการใช้เหตุผลและการใช้งาน GPU อย่างมีประสิทธิภาพได้กลายมาเป็นแนวโน้มหลักในด้าน AI โมเดล FoxBrain ของเราใช้กลยุทธ์การฝึกอบรมที่มีประสิทธิภาพมาก โดยเน้นที่การปรับปรุงกระบวนการฝึกอบรมให้เหมาะสม แทนที่จะสะสมพลังการประมวลผลโดยไม่คิด

"ด้วยวิธีการฝึกอบรมที่ได้รับการออกแบบอย่างพิถีพิถันและการเพิ่มประสิทธิภาพทรัพยากร เราจึงประสบความสำเร็จในการสร้างแบบจำลอง AI ในท้องถิ่นที่มีความสามารถในการใช้เหตุผลที่แข็งแกร่ง"

Foxconn ประกาศเปิดตัว Large Language Model (LLM) ที่ได้รับการปรับปรุงจาก Llama 3.1 ของ Meta

Foxconn ไม่เพียงแต่ประกอบผลิตภัณฑ์ของ Apple เท่านั้น แต่ยังผลิตเซิร์ฟเวอร์ AI ของ Nvidia อีกด้วย ร่วมกับ GPU H100 จำนวน 120 ตัว FoxBrain จะถูกปรับขนาดขึ้นโดยใช้เครือข่าย Quantum-2 InfiniBand ของ Nvidia และการฝึกอบรมใช้เวลาเพียงประมาณ 4 สัปดาห์ (สำหรับต้นทุนการคำนวณรวม 2,688 วัน GPU) Foxconn สร้างโทเค็นข้อมูลก่อนการฝึกคุณภาพสูงจำนวน 98,000 ล้านรายการในภาษาจีนดั้งเดิมโดยมีความยาวหน้าต่างบริบทสูงสุดถึง 128,000 โทเค็น

ความร่วมมือระหว่าง Foxconn และ Nvidia ไม่ใช่เรื่องใหม่ และทั้งสองบริษัทยังทำงานในโครงการอื่นๆ อีกด้วย รวมถึงการสร้างโรงงานผลิต GPU Blackwell ที่ใหญ่ที่สุดในโลก

นอกจากนี้ Nvidia ยังได้มอบซูเปอร์คอมพิวเตอร์ Taipei-1 ให้กับ Foxconn เพื่อทำให้กระบวนการฝึกอบรมเบื้องต้นของโมเดลเสร็จสมบูรณ์ Foxconn กล่าวว่า FoxBrain จะกลายเป็น “เครื่องยนต์สำคัญ” ที่จะยกระดับแพลตฟอร์มหลักทั้งสามของบริษัท ได้แก่ การผลิตอัจฉริยะ ยานยนต์ไฟฟ้าอัจฉริยะ และเมืองอัจฉริยะ

Sign up and earn $1000 a day ⋙

Leave a Comment

1314 คืออะไร?

1314 คืออะไร?

1314 เป็นตัวเลขที่วัยรุ่นมักใช้เป็นรหัสแสดงความรัก อย่างไรก็ตาม ไม่ใช่ทุกคนที่รู้ว่า 1314 คืออะไรและหมายถึงอะไร

วิธีปกป้องสุขภาพจิตและร่างกายของคุณเมื่ออยู่ในสภาพแวดล้อมที่เป็นพิษ

วิธีปกป้องสุขภาพจิตและร่างกายของคุณเมื่ออยู่ในสภาพแวดล้อมที่เป็นพิษ

การจัดการกับสถานการณ์ที่เป็นพิษอาจเป็นเรื่องยากอย่างยิ่ง ต่อไปนี้เป็นเคล็ดลับบางประการที่จะช่วยให้คุณจัดการกับสภาพแวดล้อมที่เป็นพิษได้อย่างชาญฉลาดและรักษาความสงบในจิตใจ

ดนตรีช่วยกระตุ้นสมองอย่างไร

ดนตรีช่วยกระตุ้นสมองอย่างไร

คนส่วนใหญ่รู้ว่าดนตรีไม่ได้มีไว้เพื่อความบันเทิงเพียงอย่างเดียว แต่ยังมีประโยชน์อื่นๆ อีกมากมาย ต่อไปนี้เป็นวิธีบางอย่างที่ดนตรีช่วยกระตุ้นการพัฒนาสมองของเรา

สารอาหารที่ขาดหายมากที่สุดในอาหาร

สารอาหารที่ขาดหายมากที่สุดในอาหาร

การรับประทานอาหารเป็นสิ่งสำคัญมากต่อสุขภาพของเรา แต่อาหารของเราส่วนใหญ่มักขาดสารอาหารสำคัญทั้ง 6 ชนิดนี้

วิธีใช้แอป CK Club ของ Circle K เพื่อรับข้อเสนอสุดพิเศษ

วิธีใช้แอป CK Club ของ Circle K เพื่อรับข้อเสนอสุดพิเศษ

หากต้องการรับข้อมูลโปรโมตจาก Circle K อย่างรวดเร็วที่สุด คุณควรติดตั้งแอป CK Club แอปพลิเคชันช่วยบันทึกการชำระเงินเมื่อช้อปปิ้งหรือชำระเงินที่ Circle K รวมถึงจำนวนแสตมป์ที่สะสมไว้

Instagram จะอนุญาตให้ใช้ Reels ยาวได้ถึง 3 นาที

Instagram จะอนุญาตให้ใช้ Reels ยาวได้ถึง 3 นาที

Instagram เพิ่งประกาศว่าจะอนุญาตให้ผู้ใช้โพสต์วิดีโอ Reels ได้ยาวสูงสุด 3 นาที ซึ่งเพิ่มขึ้นเป็นสองเท่าจากเดิมที่จำกัดไว้ที่ 90 วินาที

วิธีดูข้อมูล CPU ของ Chromebook

วิธีดูข้อมูล CPU ของ Chromebook

บทความนี้จะแนะนำวิธีการดูข้อมูล CPU ตรวจสอบความเร็ว CPU โดยตรงบน Chromebook ของคุณ

8 สิ่งเจ๋งๆ ที่คุณสามารถทำได้ด้วยแท็บเล็ต Android รุ่นเก่า

8 สิ่งเจ๋งๆ ที่คุณสามารถทำได้ด้วยแท็บเล็ต Android รุ่นเก่า

หากคุณไม่อยากขายหรือให้แท็บเล็ตเครื่องเก่าของคุณไป คุณสามารถใช้งานได้ 5 วิธี คือ เป็นกรอบรูปคุณภาพสูง เครื่องเล่นเพลง เครื่องอ่านอีบุ๊กและนิตยสาร เครื่องช่วยทำงานบ้าน และเป็นหน้าจอรอง

วิธีการทำเล็บสวยอย่างรวดเร็ว

วิธีการทำเล็บสวยอย่างรวดเร็ว

คุณอยากมีเล็บสวย เงางาม และสุขภาพดีอย่างรวดเร็ว เคล็ดลับง่ายๆ สำหรับเล็บสวยๆ ด้านล่างนี้จะมีประโยชน์กับคุณ

ความลับของแรงบันดาลใจด้านสีที่เฉพาะนักออกแบบเท่านั้นที่รู้

ความลับของแรงบันดาลใจด้านสีที่เฉพาะนักออกแบบเท่านั้นที่รู้

บทความนี้จะรวบรวมเคล็ดลับที่ได้รับแรงบันดาลใจจากสี ซึ่งแบ่งปันโดยนักออกแบบชั้นนำจากชุมชน Creative Market เพื่อให้คุณได้ชุดสีที่สมบูรณ์แบบในทุกครั้ง

ทุกสิ่งที่คุณต้องการเพื่อแทนที่แล็ปท็อปของคุณด้วยโทรศัพท์

ทุกสิ่งที่คุณต้องการเพื่อแทนที่แล็ปท็อปของคุณด้วยโทรศัพท์

คุณสามารถแทนที่แล็ปท็อปด้วยโทรศัพท์ของคุณได้จริงหรือไม่? ใช่ แต่คุณจะต้องมีอุปกรณ์เสริมที่เหมาะสมเพื่อเปลี่ยนโทรศัพท์ของคุณให้เป็นแล็ปท็อป

เร็วๆ นี้ ChatGPT จะสามารถมองเห็นทุกอย่างที่เกิดขึ้นบนหน้าจอของคุณได้

เร็วๆ นี้ ChatGPT จะสามารถมองเห็นทุกอย่างที่เกิดขึ้นบนหน้าจอของคุณได้

สิ่งสำคัญอย่างหนึ่งในวิดีโอเต็มรูปแบบของงานนี้คือมีการสาธิตฟีเจอร์แอป ChatGPT ที่กำลังจะเปิดตัว แต่ไม่ได้มีการเปิดเผยรายละเอียดที่แท้จริง ความสามารถของ ChatGPT คือการดูทุกสิ่งที่เกิดขึ้นบนหน้าจออุปกรณ์ของผู้ใช้

AI กำลังเรียนรู้ที่จะหลอกมนุษย์แม้จะได้รับการฝึกให้ซื่อสัตย์

AI กำลังเรียนรู้ที่จะหลอกมนุษย์แม้จะได้รับการฝึกให้ซื่อสัตย์

AI ชั้นนำหลายตัวแม้จะได้รับการฝึกให้ซื่อสัตย์ แต่ก็เรียนรู้ที่จะหลอกลวงผ่านการฝึกฝน และชักจูงผู้ใช้ให้มีความเชื่อที่ผิด ๆ อย่างเป็นระบบ จากผลการศึกษาวิจัยใหม่ล่าสุด

วิธีการเปลี่ยนคำถามใน ChatGPT

วิธีการเปลี่ยนคำถามใน ChatGPT

ขณะนี้ ChatGPT มีตัวเลือกการเปลี่ยนคำถามเพื่อให้ผู้ใช้สามารถแก้ไขคำถามหรือเนื้อหาที่พวกเขากำลังแลกเปลี่ยนกับ ChatGPT ได้

วิธีการระบุรหัส QR ปลอมและรักษาข้อมูลของคุณให้ปลอดภัย

วิธีการระบุรหัส QR ปลอมและรักษาข้อมูลของคุณให้ปลอดภัย

รหัส QR อาจดูไม่เป็นอันตรายจนกว่าคุณจะสแกนรหัส QR ที่ไม่ดีแล้วพบสิ่งที่ไม่น่าไว้ใจโยนเข้ามาในระบบของคุณ หากคุณต้องการรักษาโทรศัพท์และข้อมูลของคุณให้ปลอดภัย มีหลายวิธีในการระบุรหัส QR ปลอม