Digitable: Channel
140 subscribers
173 photos
12 videos
3 files
116 links
digitable.ru | Твой путеводитель в разработке ПО, от стажера/джуна до техлида, ex-workers и workers Microsoft, Xsolla, Roadmunk, Adjust, Контур, НЛМК, Т1, Аквелон
Download Telegram
#дайджестпачкамемов #meme #top5 #0000

шарь друзьям/коллегам – пусть подписываются, ну или просто лайк поставь и дальше иди работай, ты время видел?
🔥3
#дайджестпачкамемов #meme #top5 #0000

кодеры есть, а если найду? подписывайся (если подписан лайк поставь) и иди работай дальше, дедлайн близка!
😁2👍1
#современныезнания #benchmarks #llm #ai

Как понять какая LLM лучше и почему?

MMLU (аббревиатура от Measuring Massive Multitask Language Understanding) — это эталонный набор задач (бенчмарк), предназначенный для оценки способностей больших языковых моделей (LLM) по широкому кругу предметных областей.

Бенчмарк был разработан в 2020 году командой исследователей под руководством Дэна Хендрикса (Dan Hendrycks) из UC Berkeley и опубликован на конференции ICLR в 2021 году.

Цель MMLU — проверить, насколько модель усваивает разнообразные знания и умения, приобретённые на этапе предобучения.

MMLU-Pro, например, использует 12к вопросов вместо 4-ёх :D

• Источник: https://systems-analysis.ru/wiki/MMLU_benchmark
• GitHub: https://github.com/hendrycks/test
• Публикация: https://arxiv.org/abs/2009.03300
• Пост на kaggle как это может работать: https://huggingface.co/blog/open-llm-leaderboard-mmlu
• Пост на huggingfacce про open llm leaderboard: https://huggingface.co/blog/open-llm-leaderboard-mmlu
• И еще можно гуглить про MMLU-Pro: дашик вот https://artificialanalysis.ai/evaluations/mmlu-pro
1
#golang #programming #effectivego #youtube #learning

Нашел хороший видос-озвучка публикации Effective Go, быстренько позволит узнать основные приколдесы вокруг языка а-ля встроенного форматировщика, скобок, комментариев, нейминг

Подойдет для свитчеров с жаб, шарпов и жабаскриптов, и всяких питухонов

https://youtu.be/r1IQbWoM8os

• Русский перевод Effective Go – GitHub: https://github.com/0x0FACED/effective-go-ru
• Оригинал на английском: https://go.dev/doc/effective_go

Ещё я тут подумал, что было бы неплохо сделать плейлист на канале, куда буду складывать другие "полезные" видосики по IT, поэтому подпишись на youtube-канал, чтобы плейлист был под рукой)

Уже добавил туда десяток интересных роликов с других каналов) потом на https://courses.digitable.life/ опубликую тогда

Ссылка на плейлист
👍21