Foxconn ประกาศเปิดตัว Large Language Model (LLM) ที่ได้รับการปรับปรุงจาก Llama 3.1 ของ Meta

Foxconn บริษัทที่รู้จักกันดีในการผลิต iPhone และผลิตภัณฑ์ฮาร์ดแวร์อื่นๆ ของ Apple สร้างความประหลาดใจให้กับทุกคนด้วยการประกาศเปิดตัวโมเดลภาษาขนาดใหญ่รุ่นแรก (LLM) ที่เรียกว่า FoxBrain ซึ่งมีจุดประสงค์เพื่อใช้ในการปรับปรุงการผลิตและการจัดการห่วงโซ่อุปทาน

ผู้ผลิตชาวไต้หวันกล่าวว่า FoxBrain ได้รับการฝึกด้วย GPU H100 ของ Nvidia เพียง 120 ตัวเท่านั้น LLM นี้ได้รับการพัฒนาโดยอิงตามสถาปัตยกรรม Llama 3.1 ของ Meta โดยมีพารามิเตอร์ 70 พันล้านรายการผ่านการกลั่น แนวคิดการปรับปรุง LLM เกี่ยวข้องกับการใช้โมเดล "ผู้ปกครอง" และการฝึกโมเดล "ลูก" ตามการตอบสนองของโมเดลนั้น นอกจากนี้ Foxconn ยังยอมรับว่า LLM ของพวกเขาไม่ดีเท่ากับโมเดลที่ได้รับการปรับปรุงของ DeepSeek (จีน) แต่ประสิทธิภาพโดยรวมนั้นใกล้เคียงกับมาตรฐานระดับโลกมาก

เมื่อพูดถึงความสำเร็จนี้ ดร. Yung-Hui Li ผู้อำนวยการศูนย์วิจัยปัญญาประดิษฐ์แห่งสถาบันวิจัย Hon Hai (Foxconn) กล่าวว่า:

ในช่วงไม่กี่เดือนที่ผ่านมา การพัฒนาความสามารถในการใช้เหตุผลและการใช้งาน GPU อย่างมีประสิทธิภาพได้กลายมาเป็นแนวโน้มหลักในด้าน AI โมเดล FoxBrain ของเราใช้กลยุทธ์การฝึกอบรมที่มีประสิทธิภาพมาก โดยเน้นที่การปรับปรุงกระบวนการฝึกอบรมให้เหมาะสม แทนที่จะสะสมพลังการประมวลผลโดยไม่คิด

"ด้วยวิธีการฝึกอบรมที่ได้รับการออกแบบอย่างพิถีพิถันและการเพิ่มประสิทธิภาพทรัพยากร เราจึงประสบความสำเร็จในการสร้างแบบจำลอง AI ในท้องถิ่นที่มีความสามารถในการใช้เหตุผลที่แข็งแกร่ง"

Foxconn ประกาศเปิดตัว Large Language Model (LLM) ที่ได้รับการปรับปรุงจาก Llama 3.1 ของ Meta

Foxconn ไม่เพียงแต่ประกอบผลิตภัณฑ์ของ Apple เท่านั้น แต่ยังผลิตเซิร์ฟเวอร์ AI ของ Nvidia อีกด้วย ร่วมกับ GPU H100 จำนวน 120 ตัว FoxBrain จะถูกปรับขนาดขึ้นโดยใช้เครือข่าย Quantum-2 InfiniBand ของ Nvidia และการฝึกอบรมใช้เวลาเพียงประมาณ 4 สัปดาห์ (สำหรับต้นทุนการคำนวณรวม 2,688 วัน GPU) Foxconn สร้างโทเค็นข้อมูลก่อนการฝึกคุณภาพสูงจำนวน 98,000 ล้านรายการในภาษาจีนดั้งเดิมโดยมีความยาวหน้าต่างบริบทสูงสุดถึง 128,000 โทเค็น

ความร่วมมือระหว่าง Foxconn และ Nvidia ไม่ใช่เรื่องใหม่ และทั้งสองบริษัทยังทำงานในโครงการอื่นๆ อีกด้วย รวมถึงการสร้างโรงงานผลิต GPU Blackwell ที่ใหญ่ที่สุดในโลก

นอกจากนี้ Nvidia ยังได้มอบซูเปอร์คอมพิวเตอร์ Taipei-1 ให้กับ Foxconn เพื่อทำให้กระบวนการฝึกอบรมเบื้องต้นของโมเดลเสร็จสมบูรณ์ Foxconn กล่าวว่า FoxBrain จะกลายเป็น “เครื่องยนต์สำคัญ” ที่จะยกระดับแพลตฟอร์มหลักทั้งสามของบริษัท ได้แก่ การผลิตอัจฉริยะ ยานยนต์ไฟฟ้าอัจฉริยะ และเมืองอัจฉริยะ

Sign up and earn $1000 a day ⋙

Leave a Comment

ความแตกต่างระหว่างทีวีธรรมดากับสมาร์ททีวี

ความแตกต่างระหว่างทีวีธรรมดากับสมาร์ททีวี

สมาร์ททีวีเข้ามาครองโลกอย่างแท้จริง ด้วยคุณสมบัติที่ยอดเยี่ยมมากมายและการเชื่อมต่ออินเทอร์เน็ต เทคโนโลยีได้เปลี่ยนแปลงวิธีการชมทีวีของเรา

ทำไมช่องแช่แข็งไม่มีแสง แต่ตู้เย็นมี?

ทำไมช่องแช่แข็งไม่มีแสง แต่ตู้เย็นมี?

ตู้เย็นเป็นเครื่องใช้ไฟฟ้าที่คุ้นเคยในครัวเรือน ตู้เย็นโดยทั่วไปจะมี 2 ช่อง โดยช่องแช่เย็นจะมีขนาดกว้างขวางและมีไฟที่เปิดอัตโนมัติทุกครั้งที่ผู้ใช้งานเปิด ในขณะที่ช่องแช่แข็งจะแคบและไม่มีไฟส่องสว่าง

2 วิธีในการแก้ไขความแออัดของเครือข่ายที่ทำให้ Wi-Fi ช้าลง

2 วิธีในการแก้ไขความแออัดของเครือข่ายที่ทำให้ Wi-Fi ช้าลง

เครือข่าย Wi-Fi ได้รับผลกระทบจากปัจจัยหลายประการนอกเหนือจากเราเตอร์ แบนด์วิดท์ และสัญญาณรบกวน แต่ยังมีวิธีชาญฉลาดบางอย่างในการเพิ่มประสิทธิภาพเครือข่ายของคุณ

วิธีดาวน์เกรดจาก iOS 17 เป็น iOS 16 โดยไม่สูญเสียข้อมูลโดยใช้ Tenorshare Reiboot

วิธีดาวน์เกรดจาก iOS 17 เป็น iOS 16 โดยไม่สูญเสียข้อมูลโดยใช้ Tenorshare Reiboot

หากคุณต้องการกลับไปใช้ iOS 16 ที่เสถียรบนโทรศัพท์ของคุณ นี่คือคำแนะนำพื้นฐานในการถอนการติดตั้ง iOS 17 และดาวน์เกรดจาก iOS 17 เป็น 16

เมื่อกินโยเกิร์ตเป็นประจำทุกวัน จะเกิดอะไรขึ้นกับร่างกาย?

เมื่อกินโยเกิร์ตเป็นประจำทุกวัน จะเกิดอะไรขึ้นกับร่างกาย?

โยเกิร์ตเป็นอาหารที่ยอดเยี่ยม กินโยเกิร์ตทุกวันดีจริงหรือ? เมื่อคุณกินโยเกิร์ตทุกวัน ร่างกายจะเปลี่ยนแปลงไปอย่างไรบ้าง? ลองไปหาคำตอบไปด้วยกัน!

ข้าวประเภทไหนดีต่อสุขภาพมากที่สุด?

ข้าวประเภทไหนดีต่อสุขภาพมากที่สุด?

บทความนี้จะกล่าวถึงประเภทของข้าวที่มีคุณค่าทางโภชนาการสูงสุดและวิธีเพิ่มประโยชน์ด้านสุขภาพจากข้าวที่คุณเลือก

วิธีตื่นนอนให้ตรงเวลาในตอนเช้า

วิธีตื่นนอนให้ตรงเวลาในตอนเช้า

การกำหนดตารางเวลาการนอนและกิจวัตรประจำวันก่อนเข้านอน การเปลี่ยนนาฬิกาปลุก และการปรับเปลี่ยนการรับประทานอาหารเป็นมาตรการบางประการที่จะช่วยให้คุณนอนหลับได้ดีขึ้นและตื่นนอนตรงเวลาในตอนเช้า

เคล็ดลับสำหรับการเล่น Rent Please! การจำลองผู้ให้เช่าบ้านสำหรับมือใหม่

เคล็ดลับสำหรับการเล่น Rent Please! การจำลองผู้ให้เช่าบ้านสำหรับมือใหม่

ขอเช่าหน่อยคะ! Landlord Sim เป็นเกมจำลองมือถือบน iOS และ Android คุณจะเล่นเป็นเจ้าของอพาร์ทเมนท์และเริ่มให้เช่าอพาร์ทเมนท์โดยมีเป้าหมายในการอัพเกรดภายในอพาร์ทเมนท์ของคุณและเตรียมพร้อมสำหรับผู้เช่า

รหัสป้องกันหอคอยในห้องน้ำล่าสุดและวิธีการป้อนรหัส

รหัสป้องกันหอคอยในห้องน้ำล่าสุดและวิธีการป้อนรหัส

รับรหัสเกม Bathroom Tower Defense Roblox และแลกรับรางวัลสุดน่าตื่นเต้น พวกเขาจะช่วยคุณอัพเกรดหรือปลดล็อคหอคอยที่สร้างความเสียหายได้มากขึ้น

โครงสร้าง สัญลักษณ์ และหลักการทำงานของหม้อแปลงไฟฟ้า

โครงสร้าง สัญลักษณ์ และหลักการทำงานของหม้อแปลงไฟฟ้า

มาเรียนรู้เรื่องโครงสร้าง สัญลักษณ์ และหลักการทำงานของหม้อแปลงแบบแม่นยำที่สุดกันดีกว่า

4 วิธีที่ AI ช่วยทำให้สมาร์ททีวีดีขึ้น

4 วิธีที่ AI ช่วยทำให้สมาร์ททีวีดีขึ้น

ตั้งแต่คุณภาพของภาพและเสียงที่ดีขึ้นไปจนถึงการควบคุมด้วยเสียงและอื่นๆ อีกมากมาย คุณสมบัติที่ขับเคลื่อนด้วย AI เหล่านี้ทำให้สมาร์ททีวีดีขึ้นมาก!

เหตุใด ChatGPT จึงดีกว่า DeepSeek

เหตุใด ChatGPT จึงดีกว่า DeepSeek

ในตอนแรกผู้คนมีความหวังสูงกับ DeepSeek ในฐานะแชทบอท AI ที่ทำการตลาดในฐานะคู่แข่งที่แข็งแกร่งของ ChatGPT จึงรับประกันถึงความสามารถและประสบการณ์การแชทอันชาญฉลาด

พบกับ Fireflies.ai: เลขานุการ AI ฟรีที่ช่วยให้คุณประหยัดเวลาทำงานหลายชั่วโมง

พบกับ Fireflies.ai: เลขานุการ AI ฟรีที่ช่วยให้คุณประหยัดเวลาทำงานหลายชั่วโมง

การจดรายละเอียดสำคัญๆ ลงไปขณะจดบันทึกข้อมูลสำคัญอื่นๆ อาจเกิดขึ้นได้ง่าย และการพยายามจดบันทึกในขณะสนทนาอาจทำให้เสียสมาธิได้ Fireflies.ai คือคำตอบ

วิธีเลี้ยง Axolotl ใน Minecraft, ฝึก Salamander ใน Minecraft

วิธีเลี้ยง Axolotl ใน Minecraft, ฝึก Salamander ใน Minecraft

Axolot ใน Minecraft จะเป็นผู้ช่วยที่ดีสำหรับผู้เล่นเมื่อปฏิบัติการใต้น้ำ หากพวกเขารู้วิธีใช้มัน

A Quiet Place: The Road Ahead การกำหนดค่าเกมพีซี

A Quiet Place: The Road Ahead การกำหนดค่าเกมพีซี

การกำหนดค่าของ A Quiet Place: The Road Ahead ได้รับการจัดอันดับค่อนข้างสูง ดังนั้นคุณต้องพิจารณาการกำหนดค่าก่อนตัดสินใจดาวน์โหลด