विश्व एआई प्रोसेसर बजारको आकार सन् २०२४ मा ४३.७ अर्ब अमेरिकी डलर रहेकोमा सन् २०२५–२०३३ को पूर्वानुमान अवधिमा २४.९% को चक्रवृद्धि वार्षिक वृद्धिदर (CAGR) का साथ सन् २०३३ सम्म ३२३.८ अर्ब अमेरिकी डलर पुग्ने अपेक्षा गरिएको छ।
एआई प्रोसेसर बजारको गति हाल ट्रान्जिस्टर घनत्व र फ्लोटिंग-प्वाइन्ट गतिको लागि आक्रामक प्रतिस्पर्धाद्वारा परिभाषित गरिएको छ। एन्भिडियाको ब्ल्याकवेल B200 प्रोसेसरहरूमा अब २०८ अर्ब ट्रान्जिस्टर छन्, जुन अघिल्लो पुस्ताको H100 भन्दा दोब्बर भन्दा बढी हो। फलस्वरूप, B200 ले एकल GPU बाट २० पेटाफ्लप्स एआई प्रदर्शन प्रदान गर्दछ, जुन यसको पूर्ववर्तीको ४ पेटाफ्लप्सबाट ठूलो उछाल हो। एएमडी (AMD) ले १५३ अर्ब ट्रान्जिस्टर सहितको MI300X एक्सेलरेटर बजारमा ल्याएको छ। यस्तो घनत्वले यी चिपहरूलाई फ्रन्टियर मोडेलहरूको लागि गणना आवश्यकताहरूको ज्यामितीय वृद्धि ह्यान्डल गर्न अनुमति दिन्छ।
नवप्रवर्तन फस्टाउँदै गरेको एआई प्रोसेसर बजारमा परम्परागत GPU आर्किटेक्चरभन्दा बाहिर फैलिएको छ। सेरेब्रास सिस्टम्स (Cerebras Systems) को WSE-3 ले ४ ट्रिलियन ट्रान्जिस्टरलाई वेफर-साइजको चिपमा प्याक गरेको छ, जसमा ९००,००० एआई-अप्टिमाइज्ड कम्प्युट कोरहरू छन्। WSE-3 ले १२५ पेटाफ्लप्सको चरम एआई प्रदर्शन प्रदान गर्दछ। यसैबीच, हाइपरस्केलरहरूले कस्टम सिलिकन अप्टिमाइज गरिरहेका छन्, एडब्ल्यूएस (AWS) को ट्रेनियम2 चिपहरूले प्रति चिप १.३ पेटाफ्लप्स प्रदान गर्दछ। एउटा AWS ट्रेनियम2 अल्ट्रासर्भर क्लस्टरले ८३.२ पेटाफ्लप्स डेन्स FP8 कम्प्युट पावर प्रदान गर्दछ। गुगल (Google) को ट्रिलियमले v5e को तुलनामा प्रति चिप पीक कम्प्युटमा ४.७ गुणा वृद्धि प्रदान गर्दछ, जसमा पडहरू २३४.९ पेटाफ्लप्स BF16 पीक कम्प्युट प्राप्त गर्न २५६ चिप्स सम्म स्केल हुन्छन्।
एआई प्रोसेसर बजारमा मुख्य निष्कर्षहरू
| विवरण | तथ्यांक |
|---|---|
| बजार पूर्वानुमान (२०३३) | ३२३.८ अर्ब अमेरिकी डलर |
| चक्रवृद्धि वार्षिक वृद्धिदर (CAGR) | २५.९६% |
| सबैभन्दा ठुलो क्षेत्र (२०२४) | उत्तर अमेरिका (४६.१२%) |
| प्रोसेसर प्रकार | GPU (ग्राफिक्स प्रोसेसिंग युनिट) (३५.४२%) |
| स्थापना मोड | क्लाउड / डाटा सेन्टर (६५.५६%) |
| अनुप्रयोग | उपभोक्ता इलेक्ट्रोनिक्स (३७.४६%) |
| अन्त-प्रयोगकर्ता उद्योग | आईटी र दूरसञ्चार (३४.४०%) |
प्रमुख चालकहरू
-
जेनेरेटिभ मोडेलहरूको बढ्दो मागले उच्च-प्रदर्शन कम्प्युटिङ हार्डवेयरको आवश्यकता।
-
एज कम्प्युटिङ पूर्वाधारको विस्तारले स्थानीयकृत कम-लेटेन्सी प्रोसेसिंग आवश्यक पार्छ।
-
अटोमोटिभ स्वायत्ततामा भएको प्रगतिले वास्तविक-समय अनुमान क्षमताहरूको आवश्यकता।
प्रमुख प्रवृत्तिहरू
-
एन्भिडिया (Nvidia) मा निर्भरता कम गर्न हाइपरस्केलरहरूद्वारा कस्टम ASIC विकास।
-
उपज र स्केलेबिलिटी सुधार गर्न चिपलेट आर्किटेक्चरको अपनत्व।
-
मानक उपभोक्ता केन्द्रीय प्रोसेसरहरू (CPU) मा न्यूरल प्रोसेसिंग युनिट (NPU) को एकीकरण।
प्रमुख चुनौतीहरू
-
उच्च-घनत्व भएका सर्भर क्लस्टरहरूमा ताप व्यवस्थापनको कठिनाइ।
-
मेमोरी ब्यान्डविथको सीमितताले कच्चा थ्रुपुट गतिमा अवरोध।
-
विविध हार्डवेयर आर्किटेक्चरहरूको लागि सफ्टवेयर स्ट्याकहरू अप्टिमाइज गर्ने जटिलता।
एआई प्रोसेसर प्रदर्शन स्केलिंगको लागि HBM3e मेमोरी क्षमता महत्वपूर्ण
मोडेलको आकार बढ्दै जाँदा मेमोरी क्षमता एआई प्रोसेसर बजारको लागि प्राथमिक अवरोधको रूपमा उभिएको छ। एन्भिडिया (Nvidia) को B200 ले प्रति GPU १९२ GB HBM3e मेमोरी एकीकृत गरेको छ, जसले ८ TB/s को ब्यान्डविथ हासिल गरेको छ। समान मागहरू पूरा गर्न, एन्भिडिया H200 ले मेमोरी १४१ GB HBM3e मा स्तरवृद्धि गरेको छ, जसले ४.८ TB/s ब्यान्डविथ प्रदान गर्दछ। हाइपरस्केलरहरू पनि यसै पछि लागिरहेका छन्, एडब्ल्यूएस ट्रेनियम2 चिपहरूमा ९६ GB HBM3 मेमोरी र २.९ TB/s ब्यान्डविथ रहेको छ। गुगल ट्रिलियम TPU हरू ३२ GB HBM ले सुसज्जित छन्, जुन अघिल्लो v5e को क्षमताको दोब्बर हो, ठुला कार्यभारहरूलाई समर्थन गर्न।
आपूर्तिकर्ताहरूले एआई प्रोसेसर बजारको भोक मेटाउन उत्पादन बढाइरहेका छन्। सामसङ (Samsung) को HBM3e 12H ले प्रति चिप ३६ GB को क्षमता प्रदान गर्दछ र प्रति स्ट्याक १,२८० GB/s को ब्यान्डविथ हासिल गर्दछ। एसके हाइनिक्स (SK Hynix) ले सन् २०२५ को अन्त्यसम्म आफ्नो HBM उत्पादन क्षमता प्रति महिना १७०,००० वेफरहरू पुग्ने प्रक्षेपण गरेको छ। यद्यपि, अभावको समस्या कायमै छ। एसके हाइनिक्स (SK Hynix) ले रिपोर्ट गरेअनुसार यसको HBM उत्पादन क्षमता सन् २०२५ भर र सन् २०२६ सम्म बिक्री भइसकेको छ। यस्तो मागको तीव्रताले HBM सबै हार्डवेयर निर्माताहरूको लागि एक महत्वपूर्ण रणनीतिक सम्पत्ति भएको संकेत गर्दछ।
CoWoS प्याकेजिङ क्षमताको सीमितताले विश्वव्यापी एआई प्रोसेसर उपलब्धता प्रतिबन्धित
उत्पादन सीमितताहरूले हाल एआई प्रोसेसर बजारको माथिल्लो सीमा निर्धारण गरिरहेको छ। टीएसएमसी (TSMC) को CoWoS क्षमता सन् २०२५ को अन्त्यसम्म प्रति महिना ७०,००० देखि ८०,००० वेफरहरू पुग्ने प्रक्षेपण गरिएको छ। यो मात्रा सन् २०२४ को अन्त्यमा देखिएको प्रति महिना ३५,००० देखि ४०,००० वेफरहरूको क्षमताको तुलनामा दोब्बर हो। यी विस्तारहरूको बाबजुद, अवरोधहरू कायम छन्। सन् २०२४ को मध्यमा सामसङ (Samsung) HBM3e 12H को TSV प्रक्रियाको लागि उपज दर ४०% र ६०% को बीचमा रिपोर्ट गरिएको थियो, जसले यी उच्च-प्रदर्शन कम्पोनेन्टहरूमा संलग्न उत्पादन जटिलतालाई उजागर गर्दछ।
उपलब्धताले एआई प्रोसेसर बजारका सबै खेलाडीहरूलाई असर गर्छ। एन्भिडियाको डाटा सेन्टर GPU को लागि अग्रता समय सन् २०२४ मा ३०-४० हप्तामा स्थिर भयो, जुन ५२ हप्ता भन्दा बढीको शिखरबाट सुधार हो। इन्टेलले सन् २०२५ को लागि आफ्नो Gaudi 3 ढुवानी लक्ष्य २००,०००–२५०,००० युनिटमा समायोजन गर्यो। ट्रेन्डफोर्सले सन् २०२५ सम्म HBM ले कुल DRAM बजार मूल्यको ३०% भन्दा बढी हिस्सा ओगट्ने प्रक्षेपण गरेको छ। यी तथ्यांकहरूले पुष्टि गर्दछ कि उन्नत प्याकेजिङ र मेमोरी एकीकरण लजिक सिलिकन जत्तिकै महत्वपूर्ण छन्।
हाइपरस्केलर पुँजी प्रवाहले एआई प्रोसेसर बजारको विस्फोटक वृद्धिलाई इन्धन
"ठुला चार" टेक दिग्गजहरूले प्रभुत्व कायम गर्न बजारमा रेकर्ड पुँजी प्रवाह गरिरहेका छन्। एडब्ल्यूएस (AWS) ले सन् २०२५ मा पूर्वाधार खर्च (CapEx) मा लगभग १०० अर्ब अमेरिकी डलर खर्च गर्ने प्रक्षेपण गरिएको छ। माइक्रोसफ्ट सन् २०२५ को लागि ८० अर्ब डलर CapEx को प्रक्षेपणका साथ पछ्याउँदै छ, जबकि गुगलले ७५ अर्ब डलर खर्च गर्ने पूर्वानुमान गरिएको छ। मेटाको सन् २०२५ को लागि प्रक्षेपित CapEx ६० अर्ब डलर छ। सामूहिक रूपमा, यी चार हाइपरस्केलरहरूको संयुक्त CapEx सन् २०२५ मा ३१५ अर्ब डलर पुग्ने अपेक्षा गरिएको छ, जसले चिप डिजाइनरहरूको लागि ठुलो राजस्व पूल सिर्जना गर्दछ।
प्रत्यक्ष हार्डवेयर खरिदले एआई प्रोसेसर बजारमा यो लगानीको स्केललाई उजागर गर्दछ। मेटाले आफ्नो पूर्वाधारको लागि ३५०,००० एन्भिडिया H100 GPU हरू खरिद गरेको पुष्टि गर्यो। एएमडीले सन् २०२४ को लागि डाटा सेन्टर AI GPU को आफ्नो राजस्व लक्ष्य ४.५ अर्ब डलर वा सोभन्दा बढीमा पुर्यायो। यसको विपरीत, इन्टेलले सन् २०२४ मा Gaudi 3 राजस्व ५०० मिलियन डलर भन्दा कम हुने अपेक्षा गरेको छ, जसले बजार कब्जामा भिन्नता देखाउँछ। यी वित्तीय प्रतिबद्धताहरूले विश्वव्यापी रूपमा अर्को-पुस्ताको कम्प्युट क्लस्टरहरूको द्रुत तैनातीलाई रेखांकित गर्दछ।
उच्च-गति फेब्रिक्सले एकीकृत एआई प्रोसेसर सुपरकम्प्युटिङ क्लस्टरहरू सक्षम पार्छन्
एआई प्रोसेसर बजारको आवश्यकता पूरा गर्न चिपहरूले एकीकृत सुपरकम्प्युटरको रूपमा काम गर्नुपर्छ। एन्भिडिया (Nvidia) को NVLink 5.0 ले प्रति GPU १.८ TB/s को द्विदिशात्मक ब्यान्डविथ हासिल गर्दछ, जुन PCIe Gen 5 भन्दा १४ गुणा बढी ब्यान्डविथ हो। GB200 NVL72 र्याकमा रहेको NVLink Spine ले १३० TB/s को डाटा स्थानान्तरण दरलाई सहज बनाउँछ। गुगलको जुपिटर डाटा सेन्टर नेटवर्क ब्यान्डविथ ट्रिलियम TPU हरूलाई समर्थन गर्न १३ पेटाबिट्स प्रति सेकेन्ड सम्म स्केल हुन्छ। यस्तो जडानले हजारौं व्यक्तिगत प्रोसेसरहरूलाई बिना लेटेन्सी दण्ड एकल मोडेललाई एकै साथ प्रशिक्षण दिन अनुमति दिन्छ।
प्रोप्राइटरी फेब्रिक्स एआई प्रोसेसर बजारमा मुख्य भिन्नता बन्दै गइरहेका छन्। गुगल ट्रिलियममा ३.२ Tbps को इन्टरचिप इन्टरकनेक्ट ब्यान्डविथ रहेको छ। एडब्ल्यूएस ट्रेनियम2 ले क्लस्टरमा १००,००० चिप्स सम्म स्केल गर्न न्यूरोनलिंक (NeuronLink) इन्टरकनेक्ट प्रयोग गर्दछ। यी प्रविधिहरू आवश्यक छन् किनकि यदि डाटा चिपहरू बीच कुशलतापूर्वक सार्न सकिएन भने कच्चा कम्प्युट पावर बेकार छ। फेब्रिक प्रदर्शनमा केन्द्रित हुनुले प्रमाणित गर्दछ कि नेटवर्क अब प्रोसेसर डिजाइनको अभिन्न अंग हो।
चरम पावर घनत्वले एआई प्रोसेसर तैनाती मोडेलहरूलाई चुनौती दिन्छ
उर्जा घनत्वले एआई प्रोसेसर बजारको भौतिक आवश्यकताहरूलाई पुन: आकार दिइरहेको छ। सन् २०२५ मा एआई-अप्टिमाइज्ड सर्भर र्याकहरूलाई ४० kW देखि १०० kW सम्म पावर चाहिन्छ, जुन परम्परागत र्याकहरूको लागि आवश्यक ५-१५ kW भन्दा तीव्र वृद्धि हो। एकल एन्भिडिया (Nvidia) B200 GPU को थर्मल डिजाइन पावर (TDP) १,००० वाट छ। फलस्वरूप, विश्वव्यापी डाटा सेन्टरको पानी खपत सन् २०२५ मा ५६० अर्ब लिटर पुग्ने प्रक्षेपण गरिएको छ। माइक्रोसफ्टले आफ्नो एआई डाटा सेन्टरहरूमा प्रयोग हुने उर्जाको प्रति kWh १.८ देखि १२ लिटर पानी खपत हुने रिपोर्ट गर्दछ।
यी प्रभावहरूलाई कम गर्न एआई प्रोसेसर बजारमा दक्षता नवप्रवर्तनहरू देखा पर्दैछन्। ग्रोकको LPU आर्किटेक्चरले उत्पन्न प्रति टोकन १ देखि ३ जुलको उर्जा दक्षता हासिल गरेको दाबी गर्दछ। परम्परागत GPU-आधारित अनुमानले प्रति टोकन १० देखि ३० जुल खपत गर्ने अनुमान गरिएको छ। एडब्ल्यूएस ट्रेनियम2 क्लस्टरहरू GPU हरूको तुलनामा सुधारिएको उर्जा दक्षताका साथ १.३ एक्साफ्लप्स कम्प्युट समर्थन गर्न डिजाइन गरिएका छन्। सरोकारवालाहरूले AI पूर्वाधार स्केलिंग आर्थिक र वातावरणीय रूपमा व्यवहार्य रहन सुनिश्चित गर्न प्रदर्शन-प्रति-वाट मेट्रिक्सलाई प्राथमिकता दिइरहेका छन्।
प्रिमियम मूल्य निर्धारण संरचनाहरूले वर्तमान एआई प्रोसेसर बजार अर्थशास्त्रको विशेषता
उच्च लागतले बजारको वर्तमान अवस्थाको विशेषता हो। एकल एन्भिडिया (Nvidia) H100 GPU को बजार मूल्य २५,००० अमेरिकी डलर देखि ४०,००० अमेरिकी डलर सम्म छ। एन्भिडिया H200 युनिटहरूको मूल्य मात्राको आधारमा ३०,००० अमेरिकी डलर देखि ४०,००० अमेरिकी डलर बीचमा छ। पूर्ण सेरेब्रास CS-3 (Cerebras CS-3) प्रणालीको मूल्य २ मिलियन अमेरिकी डलर देखि ३ मिलियन अमेरिकी डलरको बीचमा रहेको अनुमान गरिएको छ। एन्भिडिया H100 GPU हरूको लागि क्लाउड भाडा मूल्य २.१० अमेरिकी डलर देखि ५.०० अमेरिकी डलर प्रति घण्टासम्म छ।
प्रतिस्पर्धाले एआई प्रोसेसर बजारमा नयाँ मूल्य निर्धारण मोडेलहरू परिचय गराइरहेको छ। ग्रोक (Groq) ले Llama 3 70B अनुमानको लागि प्रति मिलियन इनपुट टोकन ०.५९ अमेरिकी डलर र प्रति मिलियन आउटपुट टोकन ०.७९ अमेरिकी डलर शुल्क लिन्छ। HBM3e मेमोरीको मूल्य मानक DDR5 मेमोरीको तुलनामा लगभग ५ गुणा प्रिमियम रहेको छ। यी तथ्यांकहरूले देखाउँदछ कि हार्डवेयर लागतहरू ठुलो भए तापनि, अन्त-प्रयोगकर्ताहरूको लागि परिचालन लागतहरू छनौट गरिएको विशिष्ट आर्किटेक्चरको आधारमा अधिक भिन्न हुँदैछन्।
फ्रन्टियर मोडेल आवश्यकताहरूसँग मेल खान एआई प्रोसेसर आर्किटेक्चरहरू विकसित
एआई प्रोसेसर बजारमा हार्डवेयर विशिष्टताहरू अब मोडेल आर्किटेक्चरहरूद्वारा निर्धारित गरिन्छ। सेरेब्रास WSE-3 (Cerebras WSE-3) ले २४ ट्रिलियन प्यारामिटर सम्मका मोडेलहरूलाई प्रशिक्षण समर्थन गर्दछ। एन्भिडिया ब्ल्याकवेलआर्किटेक्चरले १० ट्रिलियन प्यारामिटर सम्म स्केलिंग मोडेलहरूलाई समर्थन गर्दछ। ग्रोकले Llama 3.3 को लागि १२८,००० टोकनको सन्दर्भ विन्डो समर्थन गर्दछ। यस्ता क्षमताहरूले सुनिश्चित गर्दछ कि हार्डवेयरले फ्रन्टियर आर्टिफिसियल इन्टेलिजेन्स मोडेलहरूको विशाल वेट म्याट्रिक्सहरू भौतिक रूपमा समायोजन गर्न सक्छ।
अनुमान गति एआई प्रोसेसर बजारको लागि एक महत्वपूर्ण मेट्रिक हो। Llama 3 70B ग्रोक LPU हार्डवेयरमा प्रति सेकेन्ड २८४ टोकनको गतिमा चल्छ। स्पेकुलेटिभ डिकोडिङको साथ, ग्रोकमा Llama 3.3 70B ले १,६६० टोकन प्रति सेकेन्डको गति पुग्न सक्छ। यसको विपरीत, एन्भिडिया H100 सामान्यतया Llama 2/3 70B मोडेलहरू लगभग १०० टोकन प्रति सेकेन्डमा चलाउँछ। एआई PC हरूमा अब वास्तविक-समय अनुमान समर्थन गर्न कम्तीमा ४० TOPS भएको NPU हुनु आवश्यक छ।
राष्ट्रिय रणनीतिक चासो र एज उपकरणहरूले एआई प्रोसेसर मागलाई इन्धन
राष्ट्रिय चासोहरूले एआई प्रोसेसर बजारमा मागको नयाँ लहर चलाइरहेका छन्। फ्रान्सले कुल १०९ अर्ब युरो (लगभग १२७ अर्ब अमेरिकी डलर) को एआई-सम्बन्धित लगानी घोषणा गर्यो। साउदी अरेबियाको पब्लिक इन्भेस्टमेन्ट फन्डले एआई पूर्वाधारमा ४० अर्ब अमेरिकी डलरको लगानीलाई समर्थन गरिरहेको छ। जापानले सन् २०२४ मा एआई सेमीकन्डक्टर क्षमताहरू सुरक्षित गर्न विशेष रूपमा ३.७ अर्ब अमेरिकी डलर कोष स्वीकृत गर्यो। एडब्ल्यूएस परियोजना रेनियर (Project Rainier) ले आन्तरिक कार्यभारहरूको लागि सयौं हजारौं ट्रेनियम2 चिपहरू भएको क्लस्टर निर्माण गरिरहेको छ।
एज कम्प्युटिङले एकै साथ एआई प्रोसेसर बजारको पहुँच विस्तार गरिरहेको छ। माइक्रोसफ्टको Copilot+ PC मानकलाई कम्तीमा १६ GB RAM चाहिन्छ। इन्टेलका लुनार लेक (Lunar Lake) प्रोसेसरहरू एक्लै NPU को लागि ४०+ TOPS को लक्ष्य राख्छन्। क्वालकमको स्न्यापड्रागन एक्स एलिट (Snapdragon X Elite) NPU ले ४५ TOPS प्रदान गर्दछ।
क्यानालिसले सन् २०२४ मा विश्वव्यापी रूपमा ४८ मिलियन एआई-सक्षम पीसीहरू ढुवानी हुने प्रक्षेपण गरेको छ। यस्ता विविध तैनाती लक्ष्यहरूले प्रमाणित गर्दछ कि एआई कम्प्युट विश्वव्यापी टेक्नोलोजी स्ट्याकको हरेक तहमा व्याप्त हुँदैछ।
एआई प्रोसेसर बजारका प्रमुख खेलाडीहरू:
-
एन्भिडिया (NVIDIA)
-
इन्टेल (Intel)
-
बाइडु (Baidu)
-
एएमडी (AMD)
-
गुगल (Google)
-
आईबीएम (IBM)
-
क्वालकम (Qualcomm Technologies)
-
माइक्रोसफ्ट (Microsoft)
-
हुवावे (Huawei)
-
सामसङ (Samsung)
-
एप्पल (Apple)
-
एसके हाइनिक्स (SK Hynix Inc.)
-
अन्य प्रमुख खेलाडीहरू
मुख्य बजार विभाजन:
प्रोसेसर प्रकार अनुसार
-
GPU (ग्राफिक्स प्रोसेसिंग युनिट)
-
CPU (केन्द्रीय प्रोसेसिंग युनिट)
-
FPGA (फिल्ड-प्रोग्रामेबल गेट एरे)
-
ASIC (एप्लिकेसन-स्पेसिफिक इन्टिग्रेटेड सर्किट)
-
NPU (न्यूरल प्रोसेसिंग युनिट)
-
TPU (टेन्सर प्रोसेसिंग युनिट)
स्थापना मोड अनुसार
-
क्लाउड / डाटा सेन्टर
-
एज / अन-डिवाइस
अन्त-प्रयोगकर्ता उद्योग अनुसार
-
आईटी र दूरसञ्चार
-
अटोमोटिभ
-
उपभोक्ता इलेक्ट्रोनिक्स
-
स्वास्थ्य सेवा
-
BFSI (बैंकिङ, वित्तीय सेवा र बीमा)
-
औद्योगिक
अनुप्रयोग अनुसार
-
उपभोक्ता इलेक्ट्रोनिक्स
-
अटोमोटिभ
-
स्वास्थ्य सेवा
-
औद्योगिक स्वचालन
-
एयरोस्पेस र रक्षा
-
खुद्रा र रोबोटिक्स
क्षेत्र अनुसार
-
उत्तर अमेरिका
-
युरोप
-
एशिया प्रशान्त
-
मध्य पूर्व र अफ्रिका
-
दक्षिण अमेरिका
-
(एजेन्सीहरुको सहयोगमा)
स्नेहा झा