แผ่นเวเฟอร์ซิลิคอนที่มีลวดลายในห้องปลอดฝุ่นแสดงถึงกระบวนการผลิตเบื้องหลังชิปหน่วยความจำและชิปจัดเก็บข้อมูล
บริษัท Micron Technology ออกแบบและผลิตผลิตภัณฑ์หน่วยความจำและอุปกรณ์จัดเก็บข้อมูลแบบเซมิคอนดักเตอร์ ผลิตภัณฑ์ที่รู้จักกันดีที่สุด ได้แก่ DRAM, NAND flash และ NOR flash ซึ่งใช้ในศูนย์ข้อมูล คอมพิวเตอร์ส่วนบุคคล โทรศัพท์ ยานยนต์ และระบบอื่นๆ ความเชื่อมโยงกับปัญญาประดิษฐ์ (AI) นั้นเห็นได้ชัดเจนเป็นพิเศษในหน่วยความจำแบนด์วิดท์สูง (HBM): รูปแบบ DRAM ที่รวดเร็วและกะทัดรัด ซึ่งติดตั้งอยู่ใกล้กับโปรเซสเซอร์ประสิทธิภาพสูงเพื่อช่วยให้ข้อมูลไหลเวียนได้อย่างต่อเนื่องระหว่างการฝึกฝนและการอนุมาน AI
ข้อสรุปที่สำคัญคือ ประสิทธิภาพของ AI ขึ้นอยู่กับมากกว่าแค่หน่วยประมวลผล โมเดลจะทำงานได้อย่างมีประสิทธิภาพก็ต่อเมื่อข้อมูล พารามิเตอร์ของโมเดล และผลลัพธ์ระหว่างขั้นตอนต่างๆ ไปถึงหน่วยประมวลผลได้อย่างรวดเร็วเพียงพอ Micron จัดหาหน่วยความจำหลายชั้นในลำดับชั้นนั้น ชั้นใดสำคัญที่สุดนั้นขึ้นอยู่กับปริมาณงาน และการซื้อหน่วยความจำที่เร็วขึ้นก็ไม่ได้แก้ปัญหาคอขวดของ AI ทุกอย่างได้เสมอไป
บริษัท Micron Technology ผลิตอะไรบ้าง?
Micron เป็นบริษัทผลิตเซมิคอนดักเตอร์สำหรับหน่วยความจำและอุปกรณ์จัดเก็บข้อมูล ไม่ใช่บริษัทผู้ผลิตโมเดล AI หรือผู้ให้บริการคลาวด์คอมพิวติ้ง บริษัทพัฒนาและผลิตชิปและโมดูลที่จำหน่ายในอุปกรณ์อิเล็กทรอนิกส์และโครงสร้างพื้นฐานหลากหลายประเภท ผลิตภัณฑ์ของบริษัทประกอบด้วย:
DRAM: หน่วยความจำทำงานชั่วคราวความเร็วสูงที่ใช้โดยโปรเซสเซอร์ DRAM ในเซิร์ฟเวอร์ทั่วไปมักอยู่ในรูปแบบโมดูล DDR5 ส่วน HBM เป็นสถาปัตยกรรม DRAM เฉพาะทางที่ได้รับการปรับให้เหมาะสมสำหรับแบนด์วิดท์สูงมากหน่วยความจำแฟลช NAND: หน่วยความจำแบบไม่ลบเลือนที่ใช้ในไดรฟ์โซลิดสเตท (SSD) และอุปกรณ์อื่นๆ NAND สามารถเก็บข้อมูลไว้ได้แม้ในขณะที่ไฟดับ ทำให้เหมาะสำหรับไฟล์โมเดล ชุดข้อมูล และจุดตรวจสอบหน่วยความจำ NOR flash: หน่วยความจำแบบไม่ลบเลือนชนิดหนึ่ง ที่นิยมใช้สำหรับเฟิร์มแวร์และโค้ดอื่นๆ ที่ต้องอ่านได้อย่างน่าเชื่อถือ
ผลิตภัณฑ์ของ Micron มีบทบาทและข้อดีข้อเสียที่แตกต่างกัน: หน่วยความจำใช้งาน (Working Memory) ออกแบบมาเพื่อการเข้าถึงข้อมูลที่รวดเร็ว ในขณะที่หน่วยจัดเก็บข้อมูล (Storage) สามารถจัดเก็บข้อมูลได้ในปริมาณมากด้วยต้นทุนต่อบิตที่ต่ำกว่า แต่โดยทั่วไปแล้วจะมีเวลาแฝงในการเข้าถึงสูงกว่าแคตตาล็อกผลิตภัณฑ์อย่างเป็นทางการ และรายงาน Form 10-K ปีงบประมาณ 2026 ล่าสุด ของบริษัท ได้อธิบายถึงธุรกิจหน่วยความจำและหน่วยจัดเก็บข้อมูลไว้อย่างละเอียด
เหตุใดหน่วยความจำจึงมีความสำคัญอย่างยิ่งต่อ AI?
ตัวเร่งความเร็ว AI ทำการคำนวณจำนวนมาก แต่การคำนวณนั้นต้องการข้อมูล ในระหว่างการฝึกโมเดล ระบบจะอ่านค่าถ่วงน้ำหนักของโมเดลและตัวอย่างการฝึกซ้ำๆ และเขียนผลลัพธ์ชั่วคราว ในระหว่างการอนุมาน ระบบจะอ่านค่าถ่วงน้ำหนักและประมวลผลคำขอของผู้ใช้แต่ละรายการ ในขณะที่ยังคงรักษาบริบทและข้อมูลชั่วคราวอื่นๆ ไว้ หากข้อมูลมาถึงช้ากว่าที่โปรเซสเซอร์จะใช้งานได้ โปรเซสเซอร์จะใช้เวลาในการรอ
ดังนั้น หน่วยความจำจึงส่งผลต่อข้อจำกัดในทางปฏิบัติหลายประการ ได้แก่ ปริมาณข้อมูลที่สามารถคงอยู่ใกล้กับโปรเซสเซอร์ได้ ความเร็วในการส่งข้อมูล จำนวนคำขอที่สามารถทำงานพร้อมกันได้ และปริมาณพลังงานที่ระบบใช้ในการเคลื่อนย้ายข้อมูลนั้น แบนด์วิดท์หน่วยความจำที่สูงขึ้นสามารถช่วยงานที่ถูกจำกัดด้วยการเคลื่อนย้ายข้อมูลได้ ความจุมีความสำคัญเมื่อแบบจำลอง บริบท หรือชุดคำขอต้องพอดีกับระดับหน่วยความจำเฉพาะ อย่างไรก็ตาม ทั้งสองอย่างไม่ได้ทำให้ระบบเร็วขึ้นโดยอัตโนมัติหากปัจจัยจำกัดอยู่ที่อื่น
HBM, DRAM สำหรับเซิร์ฟเวอร์ และ SSD อยู่ในตำแหน่งใด
หน่วยความจำหรือพื้นที่จัดเก็บ บทบาททั่วไปของ AI สิ่งที่ต้องประเมิน HBM หน่วยความจำแบนด์วิดท์สูงมาก ใกล้กับตัวเร่งความเร็ว AI ความจุต่อตัวเร่งความเร็ว แบนด์วิดท์ กำลังไฟ และความเข้ากันได้กับแพลตฟอร์ม DRAM เซิร์ฟเวอร์ DDR5 และโมดูลอื่นๆ หน่วยความจำระบบสำหรับซีพียูและภาระงานของเซิร์ฟเวอร์ รองรับการเตรียมข้อมูลและกระบวนการที่กว้างขึ้น ความจุ, ความหน่วง, แบนด์วิดท์, กำลังไฟ และประเภทโมดูลที่รองรับ SSD สำหรับศูนย์ข้อมูลที่ใช้ NAND พื้นที่จัดเก็บข้อมูลถาวรสำหรับชุดข้อมูล ไฟล์โมเดล จุดตรวจสอบ และงานบริการข้อมูลที่เลือกไว้ ความจุ, พฤติกรรมการอ่าน/เขียน, ความทนทาน, เวลาแฝง และต้นทุนรวม
HBM สร้างขึ้นโดยการเรียงซ้อนชิป DRAM และเชื่อมต่อเข้าด้วยกันผ่านอินเทอร์เฟซที่กว้างมาก ตำแหน่งที่อยู่ติดกับโปรเซสเซอร์ช่วยลดระยะทางในการส่งข้อมูลและช่วยให้สามารถส่งข้อมูลได้หลายบิตพร้อมกัน ปัจจุบัน Micron ระบุว่า HBM4 36GB แบบ 12 ชั้น กำลังอยู่ในขั้นตอนการผลิตจำนวนมาก และกล่าวว่าผลิตภัณฑ์นี้ให้แบนด์วิดท์มากกว่า 2.8 เทราไบต์ต่อวินาทีต่อชั้น นี่คือข้อมูลจำเพาะของผลิตภัณฑ์ที่ Micron เผยแพร่ ไม่ใช่การรับประกันว่าเซิร์ฟเวอร์ AI ทุกเครื่องจะสามารถทำความเร็วแอปพลิเคชันได้ตามที่กำหนด โปรดดูข้อมูลผลิตภัณฑ์ HBM ของบริษัท สำหรับพอร์ตโฟลิโอและคุณสมบัติปัจจุบัน
หน่วยความจำ DRAM สำหรับเซิร์ฟเวอร์มีพื้นที่ทำงานที่ใหญ่กว่าสำหรับ CPU และกระบวนการของระบบ SSD อยู่ในระดับที่ต่ำกว่า: สามารถจัดเก็บชุดข้อมูลขนาดใหญ่กว่ามากและคงข้อมูลไว้ได้โดยไม่ต้องใช้พลังงาน แต่ไม่สามารถทดแทน HBM ในฐานะหน่วยความจำที่เร็วที่สุดของตัวเร่งความเร็วได้ นอกจากนี้ Micron ยังจำหน่ายโมดูล DRAM ที่ใช้พลังงานต่ำกว่าสำหรับศูนย์ข้อมูล ความสมดุลที่ดีที่สุดขึ้นอยู่กับว่าข้อมูลรออยู่ที่ใดในระบบนั้นๆ
กิจกรรมด้าน AI ในปัจจุบันของ Micron บอกอะไรแก่ผู้อ่านบ้าง?
รายงานผลประกอบการประจำปี 2026 ของ Micron ซึ่งเผยแพร่เมื่อวันที่ 30 กันยายน 2026 ระบุถึงผลประกอบการประจำปีที่ทำสถิติสูงสุด และกล่าวว่าความต้องการศูนย์ข้อมูลที่ขับเคลื่อนด้วย AI กำลังเพิ่มความต้องการหน่วยความจำและพื้นที่จัดเก็บข้อมูล แบบฟอร์ม 10-K ปี 2026 ระบุว่าการเติบโตของความต้องการนั้นแซงหน้าความสามารถของอุตสาหกรรมในการเพิ่มอุปทาน และ Micron ได้ปรับเปลี่ยนอุปทาน DRAM บางส่วนไปยังลูกค้าศูนย์ข้อมูลและไฮเปอร์สเกลคลาวด์ สิ่งนี้ให้บริบทเกี่ยวกับบทบาทของ Micron ในโครงสร้างพื้นฐาน AI: บริษัทจำหน่ายส่วนประกอบสำคัญที่ผู้สร้างแพลตฟอร์มต้องการ ในขณะที่ประสิทธิภาพและความต้องการที่แท้จริงยังคงขึ้นอยู่กับการออกแบบระบบและการใช้งานของลูกค้าผลประกอบการที่เผยแพร่เมื่อวันที่ 30 กันยายน 2026 และเอกสารที่ยื่นต่อ SEC เป็นแหล่งข้อมูลหลักสำหรับข้อความเหล่านั้น
การเปิดเผยข้อมูลเหล่านั้นไม่ใช่การคาดการณ์ว่าการขาดแคลนหรือราคาสูงจะคงอยู่ตลอดไป ไมครอนเองอธิบายว่าหน่วยความจำเป็นอุตสาหกรรมที่มีวัฏจักร: อุปทาน อุปสงค์ ส่วนผสมของผลิตภัณฑ์ และราคาสามารถเปลี่ยนแปลงได้ ในขณะที่การสร้างและตรวจสอบกำลังการผลิตต้องใช้เวลา เอกสารที่ยื่นต่อหน่วยงานกำกับดูแลยังระบุด้วยว่า HBM อาจต้องการเวเฟอร์และห้องปลอดฝุ่นมากกว่า DRAM ทั่วไปต่อบิต ความต้องการด้าน AI อาจมีความสำคัญในเชิงพาณิชย์ ในขณะที่ธุรกิจยังคงมีความเสี่ยงต่อต้นทุนการผลิต การแข่งขัน จังหวะเวลาของลูกค้า และวัฏจักรของตลาด
จะรู้ได้อย่างไรว่าหน่วยความจำคือปัญหาคอขวด?
สำหรับทีมที่กำลังประเมินขนาดของระบบ AI ควรเริ่มต้นด้วยปริมาณงานและพฤติกรรมที่วัดได้ ไม่ใช่จากชื่อผลิตภัณฑ์ ตัวชี้วัดที่มีประโยชน์ ได้แก่:
การใช้งานและการหยุดชะงักของตัวเร่งความเร็ว: การใช้งานต่ำควบคู่ไปกับหลักฐานที่แสดงว่าข้อมูลมาถึงช้าเกินไป อาจบ่งชี้ถึงปัญหาด้านหน่วยความจำหรือไปป์ไลน์ข้อมูล การใช้งานต่ำเพียงอย่างเดียวไม่ได้พิสูจน์ว่า HBM เป็นสาเหตุการใช้งานหน่วยความจำและเหตุการณ์หน่วยความจำไม่เพียงพอ: หากน้ำหนัก บริบท หรือคำขอพร้อมกันเกินความจุที่มีอยู่ ทีมอาจจำเป็นต้องใช้โมเดลขนาดเล็กกว่า ลดขนาดชุดข้อมูล การแบ่งพาร์ติชัน หรือหน่วยความจำระดับอื่นปริมาณงานและเวลาแฝง: วัดจำนวนโทเค็นต่อวินาที เวลาแฝงของคำขอ และปริมาณงานภายใต้การผสมผสานของข้อความแจ้งเตือนและการทำงานพร้อมกันที่เกิดขึ้นจริง เปรียบเทียบก่อนและหลังการเปลี่ยนแปลงการกำหนดค่าที่ควบคุมได้กำลังไฟและต้นทุนระบบโดยรวม: ส่วนประกอบที่เร็วขึ้นอาจทำให้ต้นทุนการซื้อและการใช้งานสูงขึ้น ควรประเมินระบบระบายความร้อน กำลังไฟของเซิร์ฟเวอร์ ระบบเครือข่าย ซอฟต์แวร์ และหน่วยความจำไปพร้อมกัน
หากแบนด์วิดท์ที่มากขึ้นช่วยปรับปรุงปริมาณงานที่วัดได้หรือความหน่วงท้าย (tail latency) ในราคาที่ยอมรับได้ แสดงว่าหน่วยความจำน่าจะเป็นข้อจำกัดที่สำคัญ หากการอัปเกรดแบบเดียวกันเปลี่ยนแปลงเพียงเล็กน้อย ให้ตรวจสอบข้อจำกัดด้านการประมวลผล ประสิทธิภาพของเคอร์เนล การสื่อสารระหว่างตัวเร่งความเร็ว การโหลดข้อมูล การจัดตารางเวลาของซอฟต์แวร์ หรือพลังงานและการระบายความร้อน การตรวจสอบนี้จะช่วยหลีกเลี่ยงการจ่ายเงินสำหรับความจุที่เวิร์กโหลดไม่สามารถใช้งานได้
ผู้ซื้อควรเปรียบเทียบอะไรบ้างก่อนเลือกใช้หน่วยความจำ AI?
เปรียบเทียบแพลตฟอร์มโดยรวมแทนที่จะพิจารณาเฉพาะข้อมูลจำเพาะของหน่วยความจำเพียงอย่างเดียว ตรวจสอบปริมาณ HBM ที่ใช้งานได้ต่อตัวเร่งความเร็ว ว่ารุ่นและบริบทเป้าหมายเหมาะสมหรือไม่ รุ่นของหน่วยความจำที่รองรับ ความจุ DRAM ของเซิร์ฟเวอร์ พฤติกรรมของ SSD สำหรับงานจัดเก็บข้อมูลที่เกี่ยวข้อง และรายละเอียดการจัดหาและการรับรองจากผู้จำหน่าย จากนั้นทำการทดสอบประสิทธิภาพของเวิร์กโหลดที่คุณตั้งใจจะใช้งาน รวมถึงการทำงานพร้อมกันและขนาดข้อมูลที่สมจริง
Micron มีความสำคัญเพราะหน่วยความจำเป็นปัจจัยสำคัญพื้นฐานของโครงสร้างพื้นฐาน AI และผลิตภัณฑ์ของ Micron ครอบคลุมหลายระดับ ตั้งแต่ HBM ไปจนถึง DRAM สำหรับเซิร์ฟเวอร์และ SSD นั่นไม่ได้หมายความว่าการใช้งาน AI ทุกครั้งจำเป็นต้องใช้หน่วยความจำที่ทันสมัยที่สุด หรือว่าผู้จำหน่ายรายเดียวจะเป็นตัวกำหนดประสิทธิภาพของระบบ ผลลัพธ์ที่ได้คือการกำหนดค่าที่ตรงกับความต้องการด้านความจุและปริมาณงานของแบบจำลอง ภายในขีดจำกัดด้านพลังงาน ความพร้อมใช้งาน และต้นทุน ควรเปลี่ยนการออกแบบเมื่อการวัดแสดงให้เห็นถึงข้อจำกัดที่แตกต่างออกไป ไม่ใช่เพียงเพราะมีหน่วยความจำรุ่นใหม่กว่าออกมา