آمازون در حال توسعه مدل بسیار بزرگی به نام Olympus است.
طبق گزارش منتشر شده، آمازون در حال توسعه مدل زبانی بسیار بزرگی به نام Olympus است. این مدل دو تریلیون پارامتر داشته و از مدلهای بزرگ موجود نظیر GPT-4 نیز بزرگتر است (GPT-4 حدود یک تریلیون پارامتر دارد). تعداد پارامترهای مدل، تعداد متغیرهای مجهول برای آموزش آن را مشخص میکند. هر چقدر تعداد این پارامترها بیشتر باشد سایز مدل بیشتر شده و آموزش آن نیز هزینهبرتر میشود. اما زیاد شدن تعداد پارامترها الزاماً به معنای بهبود عملکرد نیست. آمازون قبلاً مدل کوچکتری به نام Titan را معرفی کرده بود. همچنین آمازون اخیراً با سرمایهگذاری هنگفت در آنتروپیک (اینجا را بخوانید)، یکی از مدعیان بزرگ هوشمصنوعی، تلاش کرد از ترند این روزها عقب نماند. توسعه Olympus توسط Rohit Prasad مدیر سابق آلکسا هدایت میشود. در حال حاضر جزئیات بیشتری از این خبر منتشر نشده است.
#amazon
#olympus
@dumannewsletter
طبق گزارش منتشر شده، آمازون در حال توسعه مدل زبانی بسیار بزرگی به نام Olympus است. این مدل دو تریلیون پارامتر داشته و از مدلهای بزرگ موجود نظیر GPT-4 نیز بزرگتر است (GPT-4 حدود یک تریلیون پارامتر دارد). تعداد پارامترهای مدل، تعداد متغیرهای مجهول برای آموزش آن را مشخص میکند. هر چقدر تعداد این پارامترها بیشتر باشد سایز مدل بیشتر شده و آموزش آن نیز هزینهبرتر میشود. اما زیاد شدن تعداد پارامترها الزاماً به معنای بهبود عملکرد نیست. آمازون قبلاً مدل کوچکتری به نام Titan را معرفی کرده بود. همچنین آمازون اخیراً با سرمایهگذاری هنگفت در آنتروپیک (اینجا را بخوانید)، یکی از مدعیان بزرگ هوشمصنوعی، تلاش کرد از ترند این روزها عقب نماند. توسعه Olympus توسط Rohit Prasad مدیر سابق آلکسا هدایت میشود. در حال حاضر جزئیات بیشتری از این خبر منتشر نشده است.
#amazon
#olympus
@dumannewsletter