නව ආකෘති නිකුතු: අති-විරල MoE, පරිවෘත්තීය පර්යේෂණ සහ විද්‍යාත්මක AI

කේතනය, කාර්යාල, පාඨ සහ දෘෂ්ටි කාර්යයන් ඉලක්ක කරගත් විවෘත-බර බහු-ආකාර (multimodal) අති-විරල මිශ්‍ර-ප්‍රවීණ (mixture-of-experts) ආකෘතියක් අගෝස්තු 26 වන දා නිකුත් කරන ලදී. එයට ප්‍රධාන පරාමිතීන් බිලියන 125ක් සහ N-gram කාවැදීම් බිලියන 51ක් ඇති අතර, ටෝකනයකට සක්‍රීය බිලියන 6ක් සහ ටෝකන 262,000ක විවෘත සන්දර්භයක් ඇත; කළමනාකරණය කරන ලද අනුවාදයක් ටෝකන මිලියනයක සන්දර්භයක් සහ මෙවලම් ලබා දෙයි. සීමාවන් අතර විශාල මතක ප්‍රමාණය, විකුණුම්කරු-වාර්තිත මිණුම්ලකුණු සහ යෙදවුම් සංකීර්ණත්වය වේ. බර ලබාගත හැක; කළමනාකරණ මිල ගණන් නිශ්චිත සීමාවේදී ස්වාධීනව තහවුරු කර නැත.

පරිවෘත්තීය අනාවැකි පර්යේෂණ සඳහා ස්වයං-අධීක්ෂිත අඛණ්ඩ-ග්ලුකෝස්-අධීක්ෂක (continuous-glucose-monitor) පදනම් ආකෘතියක් ද නිකුත් කරන ලද අතර, එය මන්දගාමී-තත්ත්ව සහ සිදුවීම් ද්විත්ව ප්‍රවාහ සහ ස්වල්ප-උදාහරණ මාරුවීම (few-shot transfer) භාවිත කරයි. එය කර්තෘ-වාර්තිත මිණුම් සහිත පූර්ව-මුද්‍රණයක් වන අතර සායනික අනුමැතියක් නැත.

ව්‍යාපාරික අවධානයක් ඇති නියුරල්-ඔපරේටර් (neural-operator) විද්‍යාත්මක AI ආකෘතියක් නිවේදනය කරන ලද නමුත්, රාජ්‍ය නොවන බර, මිල ගණන් සහ ස්වාධීන මිණුම්ලකුණු තවම ලබාගත නොහැක.