एआय अलायन्स: पहिल्या वर्षात वेगवान वाढ

ओपन सोर्स एआय मधील मोठे बदल

ऐतिहासिकदृष्ट्या, ओपन-सोर्स AI डेव्हलपमेंट विखुरलेले होते, ज्यामुळे अनेकदा कमी कार्यक्षम मॉडेल्स तयार होत होते. 2023 पूर्वी, GPT-2 च्या जवळपास क्षमता असलेल्या AI मॉडेल्सना प्रशिक्षित करण्यासाठी काही गैर-नफा संस्थांकडे संसाधने होती. मोठ्या तंत्रज्ञान कंपन्यांनी प्रोप्रायटरी AI लँडस्केपवर वर्चस्व गाजवले, तर ओपन-सोर्स AI चा वापर मर्यादित होता.

2023 हे वर्ष एक महत्त्वाचे वळण ठरले. परवानगी असलेल्या परवान्यांसह अनेक नवीन बेस मॉडेल्स रिलीज झाले, त्यानंतर Meta ने Microsoft सोबत भागीदारीत त्याचे ओपन-सोर्स Llama 2 मॉडेल रिलीज केले. या घटनेमुळे सहा महिन्यांत 10,000 हून अधिक साधित (derivative) मॉडेल्स तयार झाली. ओपन-सोर्स AI डेव्हलपमेंटच्या नवीन युगाची सुरुवात झाली.

महत्वाकांक्षी ध्येये आणि प्रतिष्ठित सुकाणू समिती

या पार्श्वभूमीवर, AI अलायन्सने सुरुवातीपासूनच अनेक प्रभावी उद्दिष्ट्ये निश्चित केली. यात खालील गोष्टींचा समावेश आहे:

• मुक्त सहकार्याला प्रोत्साहन देणे
• AI साठी प्रशासन आणि मार्गदर्शक तत्त्वे स्थापित करणे
• बेंचमार्किंग साधने आणि स्पष्ट धोरणे विकसित करणे
• शैक्षणिक उपक्रमांना प्राधान्य देणे
• मजबूत हार्डवेअर इकोसिस्टमचे (Ecosystem) पालनपोषण करणे

अलायन्सची ताकद त्याच्या सुकाणू समितीच्या सदस्यांमुळे अधिक वाढते, ज्यात नामांकित व्यावसायिक संस्था आणि विद्यापीठांचा समावेश आहे.

सदस्यत्वाचे निकष: खुलेपणा आणि सहकार्यासाठी वचनबद्धता

AI अलायन्सचे सदस्य होण्यासाठी, संस्थेने चार प्रमुख निकष पूर्ण केले पाहिजेत:

1. मिशनसोबत संरेखन: संभाव्य सदस्याने सुरक्षितता, मुक्त विज्ञान आणि नवोपक्रमाला प्रोत्साहन देण्याच्या मिशनशी सहमत असणे आवश्यक आहे.
2. प्रकल्पांसाठी वचनबद्धता: सदस्यांनी अलायन्सच्या मिशनशी जुळणाऱ्या महत्त्वपूर्ण प्रकल्पांवर काम करण्यासाठी समर्पित असणे आवश्यक आहे.
3. विविध दृष्टिकोन: संभाव्य सदस्यांनी जागतिक सदस्यत्वामध्ये विविध दृष्टिकोन आणि संस्कृतींमध्ये योगदान देण्यास तयार असले पाहिजे, जे सध्या 140 पेक्षा जास्त संस्था आहेत आणि पुढे वाढण्याची अपेक्षा आहे.
4. प्रतिष्ठा: AI अलायन्स अशा सदस्यांचा शोध घेते ज्यांची AI ओपन-सोर्स समुदायात शिक्षक, बिल्डर किंवा समर्थक म्हणून ओळखली जाणारी प्रतिष्ठा आहे.

सदस्यांचे वर्गीकरण: बिल्डर्स, एनेबलर्स आणि एडवोकेट्स

अलायन्स सदस्य सामान्यत: तीनपैकी एका श्रेणीत येतात:

• बिल्डर्स: हे सदस्य AI चा वापर करून मॉडेल्स, डेटासेट, साधने आणि ॲप्लिकेशन्स तयार करण्यासाठी जबाबदार असतात.
• एनेबलर्स: हे सदस्य ट्यूटोरियल, वापराची उदाहरणे (use cases) आणि सामान्य समुदाय समर्थनाद्वारे ओपन AI तंत्रज्ञानाचा अवलंब करण्यास प्रोत्साहन देतात.
• एडवोकेट्स: हे सदस्य AI अलायन्स इकोसिस्टमच्या (Ecosystem) फायद्यांवर जोर देतात आणि संस्थात्मक नेते, सामाजिक हितधारक आणि नियामक संस्थांमध्ये लोकांचा विश्वास आणि सुरक्षितता वाढवतात.

सहा प्रमुख लक्ष केंद्रे: AI इकोसिस्टमसाठी एक समग्र दृष्टीकोन

AI अलायन्स सहा प्रमुख लक्ष केंद्रांमध्ये त्याच्या दीर्घकालीन प्राधान्यक्रमांची व्याख्या करते. तथापि, हे लक्षात घेणे महत्त्वाचे आहे की अलायन्स संपूर्ण AI इकोसिस्टमसाठी एक समग्र दृष्टीकोन घेते, समुदाय सदस्य आणि विकासकांना एक किंवा अधिक क्षेत्रांमध्ये सहभागी होण्यासाठी आणि आवडी किंवा प्राधान्यक्रम बदलल्यास जुळवून घेण्यासाठी प्रोत्साहित करते.

सहा प्रमुख लक्ष केंद्रे येथे आहेत:

कौशल्ये आणि शिक्षण

हे क्षेत्र AI ज्ञानाला विस्तृत प्रेक्षकांपर्यंत पोहोचवण्यासाठी समर्पित आहे, ज्यामध्ये AI च्या जोखमींचे मूल्यांकन करणारे ग्राहक आणि व्यावसायिक नेते, तसेच AI ॲप्लिकेशन्स तयार करणारे विद्यार्थी आणि विकासक यांचा समावेश आहे. विशिष्ट क्षेत्रांमध्ये तज्ञांचे मार्गदर्शन मिळवण्याची प्रक्रिया सुलभ करणे हे त्याचे उद्दिष्ट आहे आणि त्यात मॉडेल मूल्यमापन उपक्रमाचा समावेश आहे.

2024 मध्ये, अलायन्सने ‘गाईड टू इसेन्शियल कॉम्पिटेन्सीज फॉर एआय’ प्रकाशित केले, जे AI मधील प्रमुख भूमिका आणि त्या भूमिकांसाठी आवश्यक कौशल्ये ओळखण्यासाठी केलेल्या विस्तृत सर्वेक्षणाचा परिणाम आहे. हे मार्गदर्शक नुकतेच प्रकाशित झाले असले तरी, त्यात आधीच नऊ सुधारणा झाल्या आहेत आणि प्रारंभिक सर्वेक्षणात ओळखल्या गेलेल्या समस्यांचे निराकरण करण्यासाठी पुढील सर्वेक्षण नियोजित आहे.

विश्वास आणि सुरक्षितता

हे महत्त्वपूर्ण क्षेत्र सर्व AI ॲप्लिकेशन्सच्या यशासाठी आवश्यक असलेल्या विश्वास आणि सुरक्षिततेच्या घटकांचा शोध घेते. मॉडेल्स आणि ॲप्लिकेशन्स उच्च-गुणवत्तेचे, सुरक्षित आणि विश्वासार्ह आहेत याची खात्री करण्यासाठी बेंचमार्क, साधने आणि पद्धती वापरल्या जातात. यामध्ये वर्तनाच्या विकसित होत असलेल्या मानकांचे समर्थन आणि जोखमींना प्रभावी प्रतिसाद यांचा समावेश आहे.

या क्षेत्रातील कार्यरत गट विश्वास आणि सुरक्षिततेशी संबंधित सर्वोत्तम संकल्पना गोळा करतो आणि वापरकर्त्यांना त्यांना आवश्यक असलेल्या तज्ञांशी जोडतो. ‘स्टेट ऑफ ओपन सोर्स एआय ट्रस्ट अँड सेफ्टी — एंड ऑफ 2024 एडिशन’ सर्वेक्षण, AI अलायन्सच्या वेबसाइटवर प्रकाशित झाले आहे, ज्यामध्ये या क्षेत्रातील गरजा आणि यश दोन्ही ठळकपणे दर्शविले आहेत. अनेक AI अलायन्स सदस्यांद्वारे संशोधन आणि विकास प्रयत्नांद्वारे संशोधन आणि पर्यावरणीय अंतर दूर केले जात आहे.

ॲप्लिकेशन्स आणि साधने

हा गट कार्यक्षम आणि मजबूत AI-सक्षम ॲप्लिकेशन्स तयार करण्यासाठी साधने आणि तंत्रांचा शोध घेण्यावर लक्ष केंद्रित करतो. AI ॲप्लिकेशन्सच्या प्रयोगांना आणि चाचणीला सुलभ करण्यासाठी, तसेच नवोपक्रमाला गती देण्यासाठी हे एक AI लॅब देखील विकसित करत आहे.

हार्डवेअर एनेबलमेंट

हे क्षेत्र AI सॉफ्टवेअर स्टॅक हार्डवेअर-अज्ञेयवादी (hardware-agnostic) असल्याची खात्री करून एक मजबूत AI हार्डवेअर ॲक्सिलेरेटर इकोसिस्टमला (Ecosystem) प्रोत्साहन देण्यासाठी समर्पित आहे. MLIR आणि Triton सारखी तंत्रज्ञान उच्च-कार्यक्षमता हार्डवेअर पोर्टेबिलिटीसाठी महत्त्वपूर्ण सॉफ्टवेअर साधने आहेत. ही साधने संस्थांना त्यांच्या पसंतीच्या हार्डवेअरचा लाभ घेण्यास, लवचिकता आणि कार्यप्रदर्शन वाढवण्यास आणि प्रोप्रायटरी सिस्टमवरील अवलंबित्व कमी करण्यास सक्षम करतात.

फाउंडेशन मॉडेल्स आणि डेटासेट

हे क्षेत्र कमी सेवा असलेल्या क्षेत्रांसाठी मॉडेल्सवर लक्ष केंद्रित करते, ज्यामध्ये बहुभाषिक, मल्टीमॉडल, टाइम सिरीज, विज्ञान आणि इतर डोमेनचा समावेश आहे. उदाहरणार्थ, विज्ञान आणि डोमेन-विशिष्ट मॉडेल्स हवामान बदल, आण्विक शोध आणि सेमीकंडक्टर उद्योगाला लक्ष्य करतात.

प्रभावी मॉडेल्स आणि AI ॲप्लिकेशन आर्किटेक्चरसाठी स्पष्ट प्रशासन आणि वापराच्या अधिकारांसह उपयुक्त डेटासेट आवश्यक आहेत. ‘ओपन ट्रस्टेड डेटा इनिशिएटिव्ह’ अशा डेटासेटसाठी आवश्यकता स्पष्ट करत आहे आणि अनुरूप डेटासेटची कॅटलॉग तयार करत आहे. या उपक्रमाचा उद्देश कायदेशीर, कॉपीराइट आणि गोपनीयतेच्या समस्यांबद्दलच्या चिंता दूर करणे आहे.

समर्थन (Advocacy)

एक निरोगी आणि मुक्त AI इकोसिस्टम (Ecosystem) तयार करण्यासाठी नियामक धोरणांचे समर्थन करणे आवश्यक आहे. सर्व AI धोरणे आणि नियमांनी संतुलित दृष्टिकोन दर्शविला पाहिजे, पक्षपाती नसावा.

विश्वास आणि सुरक्षिततेचा सखोल अभ्यास: 2025 उपक्रम

AI अलायन्समध्ये ट्रस्ट आणि सेफ्टी हे एक महत्त्वपूर्ण आणि विस्तृत क्षेत्र आहे, ज्यामध्ये द्वेषपूर्ण भाषण, पक्षपात आणि इतर हानिकारक सामग्री शोधण्यासाठी आणि कमी करण्यासाठी साधनांवर काम करणारे अनेक तज्ञ आहेत. ‘ट्रस्ट अँड सेफ्टी इव्हॅल्युएशन इनिशिएटिव्ह’ हा 2025 साठी एक मोठा उपक्रम आहे, जो मूल्यमापनाच्या संपूर्ण स्पेक्ट्रमचे एकत्रीकरण करतो – केवळ सुरक्षिततेसाठीच नाही, तर कार्यप्रदर्शन आणि इतर क्षेत्रांसाठी देखील जेथे AI मॉडेल्स आणि ॲप्लिकेशन्सची प्रभावीता तपासणे महत्त्वाचे आहे. एक उप-प्रकल्प आरोग्य, कायदा आणि वित्त यासारख्या डोमेननुसार विशिष्ट सुरक्षितता प्राधान्यक्रम शोधत आहे.

2025 च्या मध्यामध्ये, AI अलायन्स एक हगिंग फेस (Hugging Face) लीडरबोर्ड प्रकाशित करण्याची योजना आखत आहे जे विकासकांना हे करण्यास सक्षम करेल:

• त्यांच्या गरजा पूर्ण करणारी मूल्यमापने शोधा
• मुक्त मॉडेल्स त्या मूल्यमापनांविरुद्ध कसे कार्य करतात याची तुलना करा
• ती मूल्यमापने डाउनलोड करा आणि त्यांची स्वतःची खाजगी मॉडेल्स आणि AI ॲप्लिकेशन्स तपासण्यासाठी वापरा

हा उपक्रम विविध वापराच्या प्रकरणांमधील (use cases) महत्त्वपूर्ण सुरक्षितता आणि अनुपालन पैलूंवर मार्गदर्शन देखील करेल.

ऑन-प्रिमाइस AI ला समर्थन: हार्डवेअर-अज्ञेयवादी (Hardware-Agnostic) सॉफ्टवेअर स्टॅक

सर्व AI मॉडेल इनवोकेशन होस्ट केलेल्या व्यावसायिक सेवांवर अवलंबून राहणार नाहीत. काही परिस्थितींमध्ये एअर-गॅप केलेल्या (air-gapped) उपायांची आवश्यकता असते. AI-सक्षम स्मार्ट एज उपकरणे नवीन, लहान आणि शक्तिशाली मॉडेल्सना ऑन-प्रिमाइस (on-premises), अनेकदा इंटरनेट कनेक्शनशिवाय तैनात करत आहेत. या वापराच्या प्रकरणांना (use cases) समर्थन देण्यासाठी आणि लवचिक हार्डवेअर कॉन्फिगरेशनसह मोठ्या प्रमाणात मॉडेल सर्व्हिंग सुलभ करण्यासाठी, AI अलायन्स हार्डवेअर-अज्ञेयवादी (hardware-agnostic) सॉफ्टवेअर स्टॅक विकसित करत आहे.

सहकार्याची वास्तविक उदाहरणे: SemiKong आणि DANA

दोन उदाहरणे दर्शवतात की अलायन्स सदस्यांमधील खुल्या सहकार्यामुळे सर्वांसाठी महत्त्वपूर्ण फायदे कसे मिळत आहेत:

SemiKong

SemiKong हे तीन अलायन्स सदस्यांचे सहयोगी प्रयत्न आहे. त्यांनी सेमीकंडक्टर उत्पादन प्रक्रिया डोमेनसाठी खास ओपन-सोर्स लार्ज लँग्वेज मॉडेल तयार केले. उत्पादक नवीन उपकरणे आणि प्रक्रियांच्या विकासाला गती देण्यासाठी या मॉडेलचा लाभ घेऊ शकतात. SemiKong मध्ये सेमीकंडक्टर उपकरणांच्या भौतिकशास्त्र आणि रसायनशास्त्राबद्दल विशेष ज्ञान आहे. अवघ्या सहा महिन्यांत, SemiKong ने जागतिक सेमीकंडक्टर उद्योगाचे लक्ष वेधून घेतले.

टोकियो इलेक्ट्रॉनने (Tokyo Electron) तयार केलेल्या डेटासेटचा वापर करून Llama 3 बेस मॉडेलला फाइन-ट्यून करून (fine-tuning) SemiKong विकसित केले गेले. या ट्यूनिंग प्रक्रियेमुळे एक उद्योग-विशिष्ट जनरेटिव्ह AI मॉडेल तयार झाले, ज्यामध्ये सामान्य बेस मॉडेलच्या तुलनेत सेमीकंडक्टर एचिंग प्रक्रियेचे (etching processes) उत्कृष्ट ज्ञान आहे. SemiKong वर एक तांत्रिक अहवाल उपलब्ध आहे.

DANA (Domain-Aware Neurosymbolic Agents)

DANA हे एटोमॅटिक इंक. (Aitomatic Inc.) (सिलिकॉन व्हॅलीमध्ये स्थित) आणि फेनरीर इंक. (Fenrir Inc.) (जपानमध्ये स्थित) यांचा संयुक्त विकास आहे. हे आता लोकप्रिय असलेल्या एजंट आर्किटेक्चरचे (agent architecture) प्रारंभिक उदाहरण दर्शवते, जेथे मॉडेल्स इतर साधनांसह एकत्रित केले जातात जेणेकरून पूरक क्षमता प्रदान करता येतील. जरी मॉडेल्स एकट्याने प्रभावी परिणाम साधू शकत असले, तरी अनेक अभ्यासांनी दर्शविले आहे की LLM अनेकदा चुकीची उत्तरे देतात. SemiKong पेपरमध्ये नमूद केलेल्या 2023 च्या अभ्यासात, सामान्य LLM त्रुटी 50% असल्याचे मोजले गेले, तर DANA च्या तर्क (reasoning) आणि नियोजन (planning) साधनांच्या पूरक वापरामुळे लक्ष्यित ॲप्लिकेशन्ससाठी अचूकता 90% पर्यंत वाढली.

DANA न्यूरोसिम्बोलिक एजंट्स (neurosymbolic agents) वापरते जे न्यूरल नेटवर्कच्या पॅटर्न ओळखण्याच्या क्षमतांना सिम्बोलिक तर्कासह (symbolic reasoning) एकत्र करतात, ज्यामुळे कठोर तर्कशास्त्र आणि नियम-आधारित समस्या-समाधान सक्षम होते. तार्किक तर्क, नियोजन (planning) साधनांसह (जसे की असेंब्ली-लाइन प्रक्रिया डिझाइन करणे), अचूक आणि विश्वासार्ह परिणाम तयार करते जे औद्योगिक गुणवत्ता नियंत्रण प्रणाली आणि स्वयंचलित नियोजन आणि शेड्युलिंगसाठी आवश्यक आहेत.

DANA ची उपयोगिता अनेक डोमेनमध्ये विस्तारलेली आहे. उदाहरणार्थ, आर्थिक अंदाज आणि निर्णय घेण्यामध्ये, DANA बाजारातील ट्रेंड समजू शकते आणि जटिल सिद्धांतांवर आधारित अंदाज लावू शकते, संरचित आणि असंरचित डेटा दोन्ही वापरून. हीच क्षमता वैद्यकीय साहित्य आणि संशोधन माहिती मिळवण्यासाठी आणि त्याचे मूल्यांकन करण्यासाठी वापरली जाऊ शकते, हे सुनिश्चित करते की निदान आणि उपचार स्थापित वैद्यकीय प्रोटोकॉल आणि पद्धतींचे पालन करतात. थोडक्यात, DANA रुग्णांचे परिणाम सुधारू शकते आणि गंभीर रुग्णांच्या ॲप्लिकेशन्समधील त्रुटी कमी करू शकते.

सतत वाढीसाठी मजबूत पाया

AI अलायन्सने 2025 ची सुरुवात मजबूत स्थितीत केली, ज्यामध्ये 23 देशांतील सदस्य आणि प्रमुख AI आव्हानांवर लक्ष केंद्रित करणारे अनेक कार्यरत गट आहेत. अलायन्समध्ये 90 पेक्षा जास्त सक्रिय प्रकल्पांमध्ये गुंतलेले 1,200 हून अधिक कार्यरत-गट सहयोगी आहेत. आंतरराष्ट्रीय स्तरावर, AI अलायन्सने 10 देशांमध्ये आयोजित केलेल्या कार्यक्रमांमध्ये भाग घेतला आहे, 20,000 हून अधिक लोकांपर्यंत पोहोचले आहे आणि संशोधक आणि विकासकांना AI तयार करण्यात आणि वापरण्यात मदत करण्यासाठी महत्त्वपूर्ण AI विषयांवर पाच मार्गदर्शक तत्त्वे प्रकाशित केली आहेत.

AI अलायन्सने IBM च्या ग्रॅनाइट फॅमिली (Granite family) आणि Meta च्या Llama मॉडेल्स सारख्या मॉडेल्सवर AI वापरण्यासाठी उदाहरणे प्रकाशित केली आहेत. त्याच्या ‘रेसिपी’ च्या वाढत्या संग्रहामध्ये RAG, नॉलेज ग्राफ, न्यूरोसिम्बोलिक सिस्टीम आणि उदयोन्मुख एजंट प्लॅनिंग आणि रिझनिंग आर्किटेक्चरसह सामान्य ॲप्लिकेशन पॅटर्नसाठी सर्वात लोकप्रिय ओपन लायब्ररी आणि मॉडेल्सचा लाभ घेतला जातो.

स्केलिंग अप: 2025 आणि पुढीलसाठी महत्त्वाकांक्षी योजना

2025 मध्ये, AI अलायन्स आपली पोहोच आणि प्रभाव दहा पटीने वाढवण्यासाठी वचनबद्ध आहे. त्याचे दोन नवीन प्रमुख उपक्रम, ज्यांची आधी चर्चा केली आहे, ते ‘ओपन ट्रस्टेड डेटा इनिशिएटिव्ह’ आणि ‘ट्रस्ट अँड सेफ्टी इव्हॅल्युएशन इनिशिएटिव्ह’ आहेत. AI अलायन्स AI ॲप्लिकेशन तंत्रज्ञान विकसित आणि चाचणी करण्यासाठी एक उद्योग-मानक समुदाय लॅब स्थापन करण्याची योजना आखत आहे. त्याचे डोमेन-विशिष्ट मॉडेल उपक्रम विकसित होत राहतील. उदाहरणार्थ, नवीन क्लायमेट अँड सस्टेनेबिलिटी वर्किंग ग्रुप (Climate and Sustainability Working Group) हवामान बदल आणि त्याचे शमन (mitigation) यामधील प्रमुख आव्हानांना सामोरे जाण्यासाठी मल्टीमॉडल फाउंडेशन मॉडेल्स आणि ओपन-सोर्स सॉफ्टवेअर टूलिंग विकसित करण्याची योजना आखत आहे.

2030 पर्यंत, AI जागतिक अर्थव्यवस्थेत अंदाजे $20 ट्रिलियनचे योगदान देईल असा अंदाज आहे. तोपर्यंत, असा अंदाज आहे की 70% औद्योगिक AI ॲप्लिकेशन्स ओपन-सोर्स AI वर चालतील. AI व्यावसायिकांची कमतरता आजच्यापेक्षा अधिक तीव्र होण्याची अपेक्षा आहे. AI अलायन्स सदस्य विविध तज्ञांपर्यंत पोहोचण्यासाठी आणि संसाधने शेअर करण्यासाठी इतर सदस्यांशी सहयोग करून हे आव्हान कमी करू शकतील.

AI अलायन्स लिनक्स फाउंडेशन (Linux Foundation), अपाचे सॉफ्टवेअर फाउंडेशन (Apache Software Foundation) आणि ओपन सोर्स इनिशिएटिव्ह (Open Source Initiative) सारख्या इतर यशस्वी ओपन-सोर्स संस्थांच्या वाढीच्या मार्गाचे अनुसरण करत आहे. यामध्ये खालील गोष्टींचा समावेश आहे:

• सर्वसमावेशक AI शिक्षण आणि कौशल्य कार्यक्रम
• जबाबदार AI साठी जागतिक समर्थन
• AI सुरक्षितता आणि विश्वासार्हता सुनिश्चित करण्यासाठी, तसेच विकास आणि वापरामध्ये सुलभता आणण्यासाठी साधने तयार करणे
• शैक्षणिक संस्थांसोबत सहयोगी संशोधन

AI अलायन्सचे नेतृत्व विकासक आणि संशोधक, तसेच व्यवसाय आणि सरकारी नेत्यांना आकर्षित करत राहील. AI अलायन्सच्या नेतृत्वाने 2025 साठी जागतिक सहकार्याचे स्केलिंग हे त्याचे मुख्य मिशन म्हणून स्थापित केले आहे. एकंदरीत, AI अलायन्समध्ये एक प्रभावी जागतिक शक्ती बनण्याचा पाया आहे जी कृत्रिम बुद्धिमत्तेच्या भविष्याला आकार देईल, सुधारेल आणि नवीन गोष्टींचा शोध घेईल.