Chatbot ใหม่จาก Deepseek ได้สร้างผลกระทบอย่างมีนัยสำคัญในตลาด AI แนะนำตัวเองด้วยคำแถลงที่น่าสนใจ:
สวัสดีฉันถูกสร้างขึ้นเพื่อให้คุณสามารถถามอะไรก็ได้และรับคำตอบที่อาจทำให้คุณประหลาดใจ
โมเดล AI นี้ไม่เพียง แต่กลายเป็นคู่แข่งที่น่าเกรงขาม แต่ยังมีส่วนร่วมในการลดลงของราคาหุ้นที่ใหญ่ที่สุดของ Nvidia
รูปภาพ: Ensigame.com
สิ่งที่แยกความแตกต่างของแบบจำลองของ Deepseek คือสถาปัตยกรรมที่เป็นนวัตกรรมและวิธีการฝึกอบรมซึ่งรวมถึง:
Multi-Token Prediction (MTP): เทคนิคนี้ช่วยให้แบบจำลองสามารถทำนายคำได้หลายคำพร้อมกันโดยการวิเคราะห์ส่วนต่าง ๆ ของประโยคการปรับปรุงทั้งความแม่นยำและประสิทธิภาพอย่างมีนัยสำคัญ
ส่วนผสมของผู้เชี่ยวชาญ (MOE): การใช้เครือข่ายประสาท 256 แห่งโดยมีการเปิดใช้งานแปดครั้งสำหรับงานการประมวลผลโทเค็นแต่ละครั้งสถาปัตยกรรมนี้จะเพิ่มความเร็วในการฝึกอบรม AI และเพิ่มประสิทธิภาพ
ความสนใจแฝงหลายหัว (MLA): โดยการมุ่งเน้นไปที่ส่วนที่สำคัญที่สุดของประโยคและการแยกรายละเอียดที่สำคัญซ้ำ ๆ MLA จะลดโอกาสในการขาดข้อมูลที่สำคัญทำให้ AI สามารถจับภาพความแตกต่างที่สำคัญได้
Deepseek การเริ่มต้นของจีนที่โดดเด่นอ้างว่าได้พัฒนาโมเดล AI ที่มีค่าใช้จ่ายน้อยที่สุดโดยระบุว่าพวกเขาใช้เงินเพียง 6 ล้านเหรียญสหรัฐในการฝึกอบรม Deepseek V3 โดยใช้โปรเซสเซอร์กราฟิกเพียง 2048
รูปภาพ: Ensigame.com
อย่างไรก็ตามนักวิเคราะห์จาก Semianalysis ได้เปิดเผยว่า Deepseek ดำเนินการโครงสร้างพื้นฐานการคำนวณมากมายซึ่งประกอบด้วย GPU Nvidia Hopper ประมาณ 50,000 ตัวรวมถึง 10,000 H800 หน่วย, 10,000 H100s และ H20 GPU เพิ่มเติม ทรัพยากรเหล่านี้กระจายไปทั่วศูนย์ข้อมูลหลายแห่งและใช้สำหรับการฝึกอบรม AI การวิจัยและการสร้างแบบจำลองทางการเงิน
การลงทุนทั้งหมดของ บริษัท ในเซิร์ฟเวอร์อยู่ที่ประมาณ 1.6 พันล้านดอลลาร์โดยมีค่าใช้จ่ายในการดำเนินงานประมาณ 944 ล้านดอลลาร์
Deepseek เป็น บริษัท ในเครือของกองทุนป้องกันความเสี่ยงของจีนสูง-บินสูงซึ่งก่อตั้งการเริ่มต้นเป็นแผนก AI ที่เน้นการแยกต่างหากในปี 2566 ซึ่งแตกต่างจากผู้เริ่มต้นส่วนใหญ่ที่พึ่งพาผู้ให้บริการคลาวด์ Deepseek เป็นเจ้าของศูนย์ข้อมูล บริษัท ยังคงได้รับเงินสนับสนุนตนเองเพิ่มความยืดหยุ่นและความเร็วในการตัดสินใจ
รูปภาพ: Ensigame.com
นอกจากนี้นักวิจัยบางคนที่ Deepseek ได้รับมากกว่า $ 1.3 ล้านต่อปีดึงดูดความสามารถระดับสูงจากมหาวิทยาลัยจีนชั้นนำ (บริษัท ไม่ได้จ้างผู้เชี่ยวชาญต่างประเทศ)
แม้จะมีการลงทุนเหล่านี้การเรียกร้องของ Deepseek ในการฝึกอบรมรูปแบบล่าสุดในราคาเพียง 6 ล้านเหรียญดูเหมือนไม่สมจริง ตัวเลขนี้มีเพียงบัญชีสำหรับการใช้งาน GPU ในระหว่างการฝึกอบรมก่อนและไม่รวมค่าใช้จ่ายในการวิจัยการปรับแต่งแบบจำลองการประมวลผลข้อมูลและต้นทุนโครงสร้างพื้นฐานโดยรวม
นับตั้งแต่ก่อตั้งขึ้น Deepseek ได้ลงทุนกว่า 500 ล้านดอลลาร์ในการพัฒนา AI โครงสร้างขนาดกะทัดรัดช่วยให้การใช้งานนวัตกรรมของ AI มีประสิทธิภาพและมีประสิทธิภาพซึ่งแตกต่างจาก บริษัท ที่มีขนาดใหญ่และมีระบบราชการมากขึ้น
รูปภาพ: Ensigame.com
ตัวอย่างของ Deepseek แสดงให้เห็นว่า บริษัท AI อิสระที่ได้รับการสนับสนุนอย่างดีสามารถแข่งขันกับผู้นำอุตสาหกรรมได้ อย่างไรก็ตามผู้เชี่ยวชาญทราบว่าความสำเร็จของ บริษัท ส่วนใหญ่เกิดจากการลงทุนที่สำคัญการพัฒนาทางเทคนิคและทีมที่แข็งแกร่งแทนที่จะเป็น "งบประมาณปฏิวัติ" สำหรับการพัฒนารูปแบบ AI
ถึงกระนั้นค่าใช้จ่ายของ Deepseek ก็ยังคงต่ำกว่าคู่แข่ง ตัวอย่างเช่น Deepseek ใช้จ่าย $ 5 ล้านใน R1 ในขณะที่ CHATGPT4O มีค่าใช้จ่าย $ 100 ล้านในการฝึกอบรม
