Meta ਨੇ Llama 4 ਸੀਰੀਜ਼ ਜਾਰੀ ਕੀਤੀ, ਜਿਸ ਵਿੱਚ ਮਲਟੀਮੋਡਲ ਸਮਰੱਥਾ ਅਤੇ 10 ਮਿਲੀਅਨ ਟੋਕਨ ਤੱਕ ਦਾ ਵਿਸ਼ਾਲ ਸੰਦਰਭ ਹੈ। ਇਹ MoE ਆਰਕੀਟੈਕਚਰ 'ਤੇ ਅਧਾਰਤ ਹੈ ਅਤੇ DeepSeek R1 ਵਰਗੇ ਮਾਡਲਾਂ ਦਾ ਮੁਕਾਬਲਾ ਕਰਨ ਲਈ ਤਿਆਰ ਕੀਤਾ ਗਿਆ ਹੈ। Maverick (400B) ਅਤੇ Scout (109B) ਹੁਣ ਉਪਲਬਧ ਹਨ।
Meta Platforms ਨੇ Llama 4 ਸੀਰੀਜ਼ ਪੇਸ਼ ਕੀਤੀ ਹੈ, ਜੋ ਕਿ ਕੰਪਨੀ ਦੇ ਓਪਨ ਮਾਡਲਾਂ ਦਾ ਅਗਲਾ ਕਦਮ ਹੈ। ਇਸ ਵਿੱਚ Scout, Maverick, ਅਤੇ Behemoth ਸ਼ਾਮਲ ਹਨ, ਜੋ ਵੱਖ-ਵੱਖ ਕਾਰਜਾਂ ਲਈ ਬਣਾਏ ਗਏ ਹਨ ਅਤੇ ਮਲਟੀ-ਮੋਡਲ ਸਿਖਲਾਈ 'ਤੇ ਆਧਾਰਿਤ ਹਨ, ਜਿਸ ਨਾਲ AI ਮੁਕਾਬਲੇਬਾਜ਼ੀ ਨੂੰ ਨਵਾਂ ਰੂਪ ਮਿਲ ਸਕਦਾ ਹੈ।
Meta ਦੇ Llama 4 LLM ਲਾਂਚ 'ਚ ਦੇਰੀ ਦੀਆਂ ਖਬਰਾਂ ਹਨ, ਕਥਿਤ ਤੌਰ 'ਤੇ ਤਕਨੀਕੀ ਕਮੀਆਂ ਅਤੇ OpenAI ਵਰਗੇ ਵਿਰੋਧੀਆਂ ਦੇ ਮੁਕਾਬਲੇ ਘੱਟ ਪ੍ਰਦਰਸ਼ਨ ਕਾਰਨ। ਕੰਪਨੀ ਕਾਰੋਬਾਰੀ ਅਪਣਾਉਣ ਲਈ API 'ਤੇ ਧਿਆਨ ਕੇਂਦਰਤ ਕਰ ਰਹੀ ਹੈ, ਜਦੋਂ ਕਿ ਨਿਵੇਸ਼ਕ ਚਿੰਤਾਵਾਂ ਕਾਰਨ ਸਟਾਕ 'ਚ ਗਿਰਾਵਟ ਆਈ ਹੈ।
Meta Platforms ਆਪਣੇ ਪ੍ਰਮੁੱਖ ਵੱਡੇ ਭਾਸ਼ਾਈ ਮਾਡਲ, Llama 4, ਨੂੰ ਜਲਦੀ ਹੀ ਲਾਂਚ ਕਰਨ ਦੀ ਤਿਆਰੀ ਵਿੱਚ ਹੈ। ਹਾਲਾਂਕਿ, ਲਾਂਚ ਵਿੱਚ ਦੇਰੀ ਹੋਈ ਹੈ, ਜੋ ਜਨਰੇਟਿਵ AI ਦੀਆਂ ਚੁਣੌਤੀਆਂ ਨੂੰ ਦਰਸਾਉਂਦਾ ਹੈ। ਇਹ ਕਦਮ OpenAI ਦੇ ChatGPT ਤੋਂ ਬਾਅਦ ਤੇਜ਼ ਹੋਈ AI ਦੌੜ ਵਿੱਚ Meta ਲਈ ਰਣਨੀਤਕ ਤੌਰ 'ਤੇ ਮਹੱਤਵਪੂਰਨ ਹੈ।
ਇੱਕ ਹੈਰਾਨੀਜਨਕ ਪ੍ਰਯੋਗ ਵਿੱਚ, Meta ਦਾ Llama AI ਮਾਡਲ Windows 98 ਅਤੇ 128MB RAM 'ਤੇ ਚਲਾਇਆ ਗਿਆ। Marc Andreessen ਨੇ ਇਸਨੂੰ ਉਜਾਗਰ ਕੀਤਾ, ਤਕਨੀਕੀ ਸੰਭਾਵਨਾਵਾਂ ਅਤੇ ਕੰਪਿਊਟਿੰਗ ਦੇ ਇਤਿਹਾਸਕ ਮਾਰਗ 'ਤੇ ਸਵਾਲ ਖੜ੍ਹੇ ਕੀਤੇ। ਇਹ ਪ੍ਰਾਪਤੀ Exo Labs ਦੁਆਰਾ ਤਕਨੀਕੀ ਚੁਣੌਤੀਆਂ, ਜਿਵੇਂ ਕਿ ਪੁਰਾਣੇ ਹਾਰਡਵੇਅਰ, ਡਾਟਾ ਟ੍ਰਾਂਸਫਰ, ਅਤੇ ਸੀਮਤ ਮੈਮੋਰੀ, ਨੂੰ ਪਾਰ ਕਰਕੇ ਕੀਤੀ ਗਈ ਸੀ।
NVIDIA ਦੀ FFN Fusion ਤਕਨੀਕ transformer ਮਾਡਲਾਂ ਵਿੱਚ ਲਗਾਤਾਰ FFN ਪਰਤਾਂ ਨੂੰ ਸਮਾਨਾਂਤਰ ਕਰਕੇ ਵੱਡੇ ਭਾਸ਼ਾਈ ਮਾਡਲਾਂ (LLMs) ਦੀ inference ਕੁਸ਼ਲਤਾ ਨੂੰ ਵਧਾਉਂਦੀ ਹੈ। ਇਸਨੇ Llama-405B ਨੂੰ Ultra-253B-Base ਵਿੱਚ ਬਦਲਿਆ, ਗਤੀ ਵਧਾਈ, ਲਾਗਤ ਘਟਾਈ, ਅਤੇ ਪ੍ਰਦਰਸ਼ਨ ਬਰਕਰਾਰ ਰੱਖਿਆ।
Meta ਨੇ ਇੰਡੋਨੇਸ਼ੀਆ ਵਿੱਚ Meta AI ਅਤੇ AI Studio ਪੇਸ਼ ਕੀਤਾ ਹੈ, ਜੋ Llama 3.2 'ਤੇ ਅਧਾਰਤ ਹੈ ਅਤੇ Bahasa Indonesia ਦਾ ਸਮਰਥਨ ਕਰਦਾ ਹੈ। ਇਸ ਵਿੱਚ 'Imagine' ਫੀਚਰ ਅਤੇ ਕ੍ਰਿਏਟਰਾਂ ਲਈ AI-ਸੰਚਾਲਿਤ ਮਾਰਕੀਟਿੰਗ ਟੂਲ ਸ਼ਾਮਲ ਹਨ। Meta ਦਾ ਉਦੇਸ਼ AI ਨੂੰ ਆਪਣੇ ਪਲੇਟਫਾਰਮਾਂ ਵਿੱਚ ਡੂੰਘਾਈ ਨਾਲ ਜੋੜਨਾ ਅਤੇ ਵਿਗਿਆਪਨ ਨੂੰ ਸਵੈਚਾਲਤ ਕਰਨਾ ਹੈ।
ਵੱਡੇ ਭਾਸ਼ਾਈ ਮਾਡਲਾਂ (LLMs) ਜਿਵੇਂ Llama ਅਤੇ Mistral ਨੂੰ ਤਕਨੀਕੀ ਖੇਤਰਾਂ ਲਈ ਅਨੁਕੂਲ ਬਣਾਉਣਾ। ਫਾਈਨ-ਟਿਊਨਿੰਗ (CPT, SFT, DPO/ORPO) ਅਤੇ SLERP ਮਰਜਿੰਗ ਦੀ ਵਰਤੋਂ ਨਾਲ ਨਵੀਆਂ ਸਮਰੱਥਾਵਾਂ ਦਾ ਉਭਾਰ, ਖਾਸ ਕਰਕੇ ਵੱਡੇ ਮਾਡਲਾਂ ਵਿੱਚ।
Nvidia ਨੇ Project G-Assist ਪੇਸ਼ ਕੀਤਾ ਹੈ, ਇੱਕ ਪ੍ਰਯੋਗਾਤਮਕ ਔਨ-ਡਿਵਾਈਸ AI ਸਹਾਇਕ ਜੋ GeForce RTX GPUs 'ਤੇ ਸਥਾਨਕ ਤੌਰ 'ਤੇ ਚੱਲਦਾ ਹੈ। ਇਹ ਗੇਮਿੰਗ ਅਤੇ ਸਿਸਟਮ ਪ੍ਰਬੰਧਨ ਲਈ ਪ੍ਰਸੰਗਿਕ ਮਦਦ, ਅਨੁਕੂਲਨ ਅਤੇ ਨਿਗਰਾਨੀ ਪ੍ਰਦਾਨ ਕਰਦਾ ਹੈ, ਕਲਾਉਡ-ਅਧਾਰਿਤ ਹੱਲਾਂ ਤੋਂ ਵੱਖਰਾ ਹੈ।
ਇੱਕ ਹਾਲੀਆ ਅਦਾਲਤੀ ਦਸਤਾਵੇਜ਼ ਨੇ ਮੈਟਾ ਅਤੇ ਇਸਦੇ Llama AI ਮਾਡਲ ਦੇ ਹੋਸਟਾਂ ਵਿਚਕਾਰ ਇੱਕ ਮਾਲੀਆ-ਵੰਡ ਮਾਡਲ ਨੂੰ ਦਰਸਾਉਂਦੇ ਹੋਏ, ਇੱਕ ਮਹੱਤਵਪੂਰਨ ਸਮਝੌਤੇ 'ਤੇ ਰੌਸ਼ਨੀ ਪਾਈ ਹੈ।
