Artikel ini menyoroti kemajuan signifikan dalam pengembangan agen AI real-time oleh OpenAI yang dapat dikembangkan hanya dalam 20 menit. Teknologi ini menunjukkan potensi efisiensi tinggi dalam aplikasi bertenaga AI, dengan interaksi data yang efisien, kerangka kerja agen kolaboratif multi-level, dan penanganan tugas yang fleksibel.
Artikel ini membahas tentang mekanisme perhatian baru, Multi-matrix Factorization Attention (MFA), yang secara signifikan mengurangi penggunaan memori KV cache pada Large Language Models (LLM) tanpa mengorbankan kinerja. MFA dan variannya, MFA-KR, melampaui MLA dan setara dengan MHA tradisional dengan penghematan memori hingga 93.7%. MFA dirancang agar sederhana, mudah direproduksi, dan kompatibel dengan berbagai metode Pos-embedding, menjadikannya solusi efektif untuk mengatasi hambatan memori dalam inferensi LLM.
Evolutionaryscale's ESM3, model biologis dengan 98 miliar parameter, merevolusi pemahaman dan manipulasi protein. ESM3 mengubah struktur dan fungsi 3D protein menjadi alfabet diskrit, memungkinkan pemrosesan simultan urutan, struktur, dan fungsi protein. API ESM3 gratis kini tersedia, didukung oleh Yann LeCun, dan model ini memiliki potensi besar dalam bidang medis.
Microsoft telah memperkenalkan MatterGen, model bahasa besar revolusioner yang dirancang untuk menciptakan material anorganik. Model ini secara signifikan meningkatkan proporsi material stabil dan unik yang dihasilkan, dan juga menghasilkan struktur yang sepuluh kali lebih dekat dengan minimum energi lokal DFT.
Amazon menantang dominasi Starlink dengan Project Kuiper, konstelasi satelit LEO miliaran dolar. Memanfaatkan AWS dan sumber daya besar, Kuiper menargetkan pasar telekomunikasi global triliunan dolar, mengatasi hambatan besar untuk membentuk kembali konektivitas global meskipun ada risiko eksekusi yang signifikan.
