Я много раз говорил, что недолюбливаю текущие популярные крупные онлайн-школы по программированию, разработке и IT.
Одна из причин - мне катострофически не нравится, как там преподают. Что в принципе подход, что качество материала. Каждый мой сотрудник, для которого я покупал курс, сталкивался с ситуацией "Ожидание <-> Реальность". Ну вы поняли.
А вот ещё подъехало стороннее мнение из твиттера, которое многое объясняет, и с которым я не могу не согласиться.
Всё очень плохо в общем =)
Одна из причин - мне катострофически не нравится, как там преподают. Что в принципе подход, что качество материала. Каждый мой сотрудник, для которого я покупал курс, сталкивался с ситуацией "Ожидание <-> Реальность". Ну вы поняли.
А вот ещё подъехало стороннее мнение из твиттера, которое многое объясняет, и с которым я не могу не согласиться.
Всё очень плохо в общем =)
Неделю я ждал, пока Selectel объединят оптической сетью сервера Школково. Наконец-то пробил час, прислали «Настраивайте вот так вот всё».
Настроил, линка нет. Мы тут с Дмитрием, что был на последнем стриме, всю голову сломали, что же это такое может быть.
Бились мы, бились, ничего не придумали.
Отписал в тикет, говорю не работает ничего, линка нет ребят, может вы там чего не так сделали?
А надо отметить, что ни одна установка сервера у нас не проходила полностью гладко, то они VLAN-ы напутают, то на роутере порт не включат… тоже всё по неделе-две было.
Но на этот раз ответ меня просто убил - Ой, мы кабели действительно не сделали…
🤔
Настроил, линка нет. Мы тут с Дмитрием, что был на последнем стриме, всю голову сломали, что же это такое может быть.
Бились мы, бились, ничего не придумали.
Отписал в тикет, говорю не работает ничего, линка нет ребят, может вы там чего не так сделали?
А надо отметить, что ни одна установка сервера у нас не проходила полностью гладко, то они VLAN-ы напутают, то на роутере порт не включат… тоже всё по неделе-две было.
Но на этот раз ответ меня просто убил - Ой, мы кабели действительно не сделали…
🤔
Немного сухой статистики и фактов.
В целях машинного обучения и в частности использования CatBoost - лучше брать дешёвые #GPU нового поколения, нежели несколько крутых старого.
Обучение модели на одном и том же датасете:
- Quadro P4000, 8GB, Pascal, 1792 CUDA cores --- 43 сек.
- 1x GTX 1660, Pascal, 6 GB, 1408 CUDA cores --- 45 сек.
- 2x GTX 1660, Pascal, 2x6 GB, 2x1408 CUDA cores --- 38 сек.
- RTX 2060, Turing, 6GB, 1920 CUDA cores --- 35 сек.
Теперь вот интересно было бы сравнить результат нескольких 2060 в одном сервере, но увы они у меня распиханы по разным серверам. Однозначно понятно, что Pascal брать смысла нет никакого. Может быть вся суть именно в поддержке INT8 внутри CUDA? Не знаю, но очень интересно.
Тестируемый датасет - 720k объектов по 22 фичи в 1к итераций.
PS: Судя по последним новостям, чтобы на #NVidia Ampere посмотреть - нужны ещё какие-то новенькие блоки питания с нестандартной схемой(привет, интеловские 12v?)
В целях машинного обучения и в частности использования CatBoost - лучше брать дешёвые #GPU нового поколения, нежели несколько крутых старого.
Обучение модели на одном и том же датасете:
- Quadro P4000, 8GB, Pascal, 1792 CUDA cores --- 43 сек.
- 1x GTX 1660, Pascal, 6 GB, 1408 CUDA cores --- 45 сек.
- 2x GTX 1660, Pascal, 2x6 GB, 2x1408 CUDA cores --- 38 сек.
- RTX 2060, Turing, 6GB, 1920 CUDA cores --- 35 сек.
Теперь вот интересно было бы сравнить результат нескольких 2060 в одном сервере, но увы они у меня распиханы по разным серверам. Однозначно понятно, что Pascal брать смысла нет никакого. Может быть вся суть именно в поддержке INT8 внутри CUDA? Не знаю, но очень интересно.
Тестируемый датасет - 720k объектов по 22 фичи в 1к итераций.
PS: Судя по последним новостям, чтобы на #NVidia Ampere посмотреть - нужны ещё какие-то новенькие блоки питания с нестандартной схемой(привет, интеловские 12v?)
Внезапный подарок
Промокод на бесплатный домен в зоне .SITE
Регистрировать здесь https://www.reg.ru/domain/new/?rlink=reflink-25357
Кто использовал промокод - напишите в чат, чтоб другие знали, что всё и надо было раньше.
Ну а если вам нужен домен, а промокод уже кто-то использовал - вот вам постоянный промик на 5%:
Промокод на бесплатный домен в зоне .SITE
BDB8-A9E7-E88E-9A5EРегистрировать здесь https://www.reg.ru/domain/new/?rlink=reflink-25357
Кто использовал промокод - напишите в чат, чтоб другие знали, что всё и надо было раньше.
Ну а если вам нужен домен, а промокод уже кто-то использовал - вот вам постоянный промик на 5%:
4FFF-A7CD-83A0-CE0Ewww.reg.ru
Купить домен | Зарегистрировать доменное имя по выгодной цене в REG.ru
🚀 Компания REG.ru предлагает купить домен в более чем 745 зонах по низким ценам! Для регистрации доменного имени доступны национальные, международные и европейские зоны!
Нашёл ещё промокоды на домен .SITE, скорее всего они ещё активны, я не помню, использовал их или нет.
5DAA-78ED-A645-0D1B
3A99-A60A-3ACC-90F5
3749-959A-C52E-6400
9308-64C4-5A5B-88F4
56EE-85F1-3062-DD37
CE5C-BE5C-3094-0D82
D868-41E9-F9BA-1607
4483-455D-8FD2-E9CF
AF83-2679-1BFD-02A7
Пандемия - двигатель прогресса музыкальной и IT индустрии
Онлайн-концертами уже никого не удивишь.
Пандемия дала сильный толчок всем онлайн событиям. Вбейте в YouTube: live quarantine или quarantine sessions - тонна контента.
Особенно стоит отметить американскую скрипачку Lindsey Stirling.
Она дала первый концерт в VR ещё в 2019 году, а 20 августа 2020 года сделала ещё один благотворительный VR концерт с полностью виртуальным персонажем на основе платформы WaveXR. На этом концерте было собрано $54 000 в пользу детского онкологического исследовательского госпиталя. Вполне солидная сумма для события, учитывая, что здесь не было прямых спонсоров - только пожертвования.
Но побудило меня про это всё написать другой эвент, который пройдет 5 сентября в 20:00 по MSK.
Запрещенная в России польская Death Metal группа Behemoth устраивает весьма необычный онлайн-концерт.
Это прямая трансляция в 4K, но интересно здесь вот что:
1. Это не случайный, спонтанный или сделанный на коленке YouTube стрим. Нам обещают кинематографичный опыт(cinematic experience), а сам концерт будет в необычном месте. На сайте пишут про secret place in Poland, но в Youtube видео уже пробел спойлер, что это бывшая церковь, что интересно пересекается с названием эвент «In Absenia Dei»(«В отсутствии Бога»). Да, религиозным, вероятно, смотреть не стоит, но они и так избегают эту группу наверняка.
2. Под кинематографичностью подразумевается не просто грамотные видео операторы, а в целом вся концепция: будет сценарий, сюжет, спецэффекты и всё-всё-всё, что есть в обычных фильмах. Судя по анонсам - это будет своего рода финал Game Of Thrones в мире музыки. Всё то шоу, что трудно реализуемо, и по сути бессмысленно для зрителей на дальних рядах, на обычных концертах - теперь доступно у вас на диване с отменной картинкой и исключительным качеством звука.
3. Концерт платный и есть два вида билетов:
..... 1. Можно посмотреть Directors Cut, т.е. видео-режиссер будет переключать камеру как на записях концерта(только это вживую).
..... 2. А можно доплатить $6 и получить опцию Multi-Cam. Т.е. Ты сам можешь переключать между восемью камерами и смотреть с нужного тебе ракурса. А можешь и смотреть в Directors Cut. И всё это в 4K.
4. Как и на любом офлайн-концерте, здесь тоже будет группа на разогреве - Imperial Triumphant. Судя по всему, разогрев можно будет посмотреть и без билетов, поскольку его будут транслировать на YouTube.
5. Ну и конечно же можно купить мерч!
Записи концерта будут, но только посмотреть их можно в первые 72 часа после концерта.
Сам эвент будет транслировать французская компания Omnilive(сайт которой, почему-то в России не открывается) на базе платформы компании api.video. Они уже устраивали подобные концерты, но в более мелком масштабе. И кстати там была какая-то social activity - интересно, будет ли что-нибудь такое тут.
Мне же здесь очень интересна именно технологическая составляющая, потому что протащить 8 одновременных стримов(+1 directors cut) в отличном качестве и без явных артефактов звукового сжатия - весьма интересная задача.
Всё особенно усугубляется тем, что во время пандемии все интернет-каналы и без того перегружены, а зрители будут крайне разочарованы любым даже малейшим лагом во время концерта.
Что, посмотрим насколько удачно пройдет эта смелая затея, и как с этим со всем справятся ребята из Omnilive.
Ну и конечно же мне интересно как они будут защищать поток от пиратства)))
Релевантные ссылки по теме этого поста будут у нас в чате: https://t.me/DevHype_Chat
Онлайн-концертами уже никого не удивишь.
Пандемия дала сильный толчок всем онлайн событиям. Вбейте в YouTube: live quarantine или quarantine sessions - тонна контента.
Особенно стоит отметить американскую скрипачку Lindsey Stirling.
Она дала первый концерт в VR ещё в 2019 году, а 20 августа 2020 года сделала ещё один благотворительный VR концерт с полностью виртуальным персонажем на основе платформы WaveXR. На этом концерте было собрано $54 000 в пользу детского онкологического исследовательского госпиталя. Вполне солидная сумма для события, учитывая, что здесь не было прямых спонсоров - только пожертвования.
Но побудило меня про это всё написать другой эвент, который пройдет 5 сентября в 20:00 по MSK.
Запрещенная в России польская Death Metal группа Behemoth устраивает весьма необычный онлайн-концерт.
Это прямая трансляция в 4K, но интересно здесь вот что:
1. Это не случайный, спонтанный или сделанный на коленке YouTube стрим. Нам обещают кинематографичный опыт(cinematic experience), а сам концерт будет в необычном месте. На сайте пишут про secret place in Poland, но в Youtube видео уже пробел спойлер, что это бывшая церковь, что интересно пересекается с названием эвент «In Absenia Dei»(«В отсутствии Бога»). Да, религиозным, вероятно, смотреть не стоит, но они и так избегают эту группу наверняка.
2. Под кинематографичностью подразумевается не просто грамотные видео операторы, а в целом вся концепция: будет сценарий, сюжет, спецэффекты и всё-всё-всё, что есть в обычных фильмах. Судя по анонсам - это будет своего рода финал Game Of Thrones в мире музыки. Всё то шоу, что трудно реализуемо, и по сути бессмысленно для зрителей на дальних рядах, на обычных концертах - теперь доступно у вас на диване с отменной картинкой и исключительным качеством звука.
3. Концерт платный и есть два вида билетов:
..... 1. Можно посмотреть Directors Cut, т.е. видео-режиссер будет переключать камеру как на записях концерта(только это вживую).
..... 2. А можно доплатить $6 и получить опцию Multi-Cam. Т.е. Ты сам можешь переключать между восемью камерами и смотреть с нужного тебе ракурса. А можешь и смотреть в Directors Cut. И всё это в 4K.
4. Как и на любом офлайн-концерте, здесь тоже будет группа на разогреве - Imperial Triumphant. Судя по всему, разогрев можно будет посмотреть и без билетов, поскольку его будут транслировать на YouTube.
5. Ну и конечно же можно купить мерч!
Записи концерта будут, но только посмотреть их можно в первые 72 часа после концерта.
Сам эвент будет транслировать французская компания Omnilive(сайт которой, почему-то в России не открывается) на базе платформы компании api.video. Они уже устраивали подобные концерты, но в более мелком масштабе. И кстати там была какая-то social activity - интересно, будет ли что-нибудь такое тут.
Мне же здесь очень интересна именно технологическая составляющая, потому что протащить 8 одновременных стримов(+1 directors cut) в отличном качестве и без явных артефактов звукового сжатия - весьма интересная задача.
Всё особенно усугубляется тем, что во время пандемии все интернет-каналы и без того перегружены, а зрители будут крайне разочарованы любым даже малейшим лагом во время концерта.
Что, посмотрим насколько удачно пройдет эта смелая затея, и как с этим со всем справятся ребята из Omnilive.
Ну и конечно же мне интересно как они будут защищать поток от пиратства)))
Релевантные ссылки по теме этого поста будут у нас в чате: https://t.me/DevHype_Chat
Совсем забыл скинуть вам материалы по #Linux:
Общее - https://habr.com/ru/post/501442/
Сервисы systemd - https://teletype.in/@usbkiller/ByWylIhkU
bash - https://max-ko.ru/23-vvedenie-v-bash-shell.html
Пакеты и репозитории - https://interface31.ru/tech_it/2019/09/linux-nachinayushhim-chast-5-upravlenie-paketami.html
Ссылочки любезно подобраны матёрым админом Дмитрием, что был на последнем стриме.
Общее - https://habr.com/ru/post/501442/
Сервисы systemd - https://teletype.in/@usbkiller/ByWylIhkU
bash - https://max-ko.ru/23-vvedenie-v-bash-shell.html
Пакеты и репозитории - https://interface31.ru/tech_it/2019/09/linux-nachinayushhim-chast-5-upravlenie-paketami.html
Ссылочки любезно подобраны матёрым админом Дмитрием, что был на последнем стриме.
Хабр
Основные linux-команды для новичка
Linux — это операционная система. Как винда (windows), только более защищенная. В винде легко подхватить вирус, в линуксе это практически невозможно. А еще линукс бесплатный, и ты сам себе хозяин:...
Ад, боль и третье сентября
Барух Шуфутинский перевернул календарь и нас тут же покинул один из серверов Школково(тот самый, на котором 64 TB HDD).
Запустил я обучаться новую модель Нейроматрицы и через час сервер потух. Ребята в ДЦ ребутали, KVM подключали во все дырки, но ни картинки, ни реакции на клавиатуру, ни бута.
Я делаю ставку на то, что во время транспортировки там что-то откуда-то выскочило и коротит, либо не контачит. Вероятнее всего питание GPU - отклеилась наша изолента, выскачил пин с разъема питания или просто что-то замкнуло на корпус.
Слава Docker Swarm-у, благодаря которому всё перебалансировалось автоматом и никто даже ничего не почувствовал. Однако отсутствие дополнительных быстрых винтов в рейде будут ощущаться, когда мы стартанём обучение по всем предметам 10 сентября.
Собственно завтра один очень ответственный и прекрасный сотрудник Школково поедет за сервером в ДЦ, привезёт его к себе. Мы удалённо будем пытаться понять, почему этот юнит не стартует и как-то пытаться это исправить.
Дальше у нас расклады следующие:
1. Самый оптимистичный - мы находим причину и везём обратно, всё круто и хорошо
2. Не супер крутой, но сойдёт - проблема в GPU. Вытаскиваем GPU и живём без этой видеокарты. Благо есть ещё 3 GPU, которые работают в других серверах. Тензорные расчёты и машинное обучение перенесём на один из моих серверов.
3. Неведомая фигня - мы не поймём, в чем проблема. В этом случае мы экстренно запихиваем винты в мой сервер или в спешке собираем новый. Волшебный сервер отправляется в Тамбов и ждёт выздоравления Виктора с руками из плеч.
Ну и вероятно, это знак от вселенной, что надо брать сервак под раздачу записей, который я давно собирался - с 15 HDD по 10 TB. А эти сервера полностью отдать под локигу, БД и прямые трансляции.
Пожелайте нам удачи завтра!
Барух Шуфутинский перевернул календарь и нас тут же покинул один из серверов Школково(тот самый, на котором 64 TB HDD).
Запустил я обучаться новую модель Нейроматрицы и через час сервер потух. Ребята в ДЦ ребутали, KVM подключали во все дырки, но ни картинки, ни реакции на клавиатуру, ни бута.
Я делаю ставку на то, что во время транспортировки там что-то откуда-то выскочило и коротит, либо не контачит. Вероятнее всего питание GPU - отклеилась наша изолента, выскачил пин с разъема питания или просто что-то замкнуло на корпус.
Слава Docker Swarm-у, благодаря которому всё перебалансировалось автоматом и никто даже ничего не почувствовал. Однако отсутствие дополнительных быстрых винтов в рейде будут ощущаться, когда мы стартанём обучение по всем предметам 10 сентября.
Собственно завтра один очень ответственный и прекрасный сотрудник Школково поедет за сервером в ДЦ, привезёт его к себе. Мы удалённо будем пытаться понять, почему этот юнит не стартует и как-то пытаться это исправить.
Дальше у нас расклады следующие:
1. Самый оптимистичный - мы находим причину и везём обратно, всё круто и хорошо
2. Не супер крутой, но сойдёт - проблема в GPU. Вытаскиваем GPU и живём без этой видеокарты. Благо есть ещё 3 GPU, которые работают в других серверах. Тензорные расчёты и машинное обучение перенесём на один из моих серверов.
3. Неведомая фигня - мы не поймём, в чем проблема. В этом случае мы экстренно запихиваем винты в мой сервер или в спешке собираем новый. Волшебный сервер отправляется в Тамбов и ждёт выздоравления Виктора с руками из плеч.
Ну и вероятно, это знак от вселенной, что надо брать сервак под раздачу записей, который я давно собирался - с 15 HDD по 10 TB. А эти сервера полностью отдать под локигу, БД и прямые трансляции.
Пожелайте нам удачи завтра!
Концерт Behemoth прошел и это было очень круто. Правда в прямом эфире 4К я не видел, но в записи есть.
Ну а сам стрим они защитили только подписанными ссылками(Tokenized URL), раздавая все через Akamai CDN.
Ну а сам стрим они защитили только подписанными ссылками(Tokenized URL), раздавая все через Akamai CDN.
В воскресенье будем собирать сервак за пол ляма!
Поскольку у многих в воскресенье будут вебы - вопрос к аудитории - когда проведём веб?
Очень хотим уложиться в 2 - 2.5 часа.
Поскольку у многих в воскресенье будут вебы - вопрос к аудитории - когда проведём веб?
Очень хотим уложиться в 2 - 2.5 часа.
Когда-нибудь мне может надоесть разговаривать с мошенниками и возвращать их на правильный путь... и будем сразу обращаться в органы со всеми материалами для следственных действий...😩
Если кто из Тамбова есть тут, кто хочет подработать или набраться опыта в этом вашем IT и разработке - у меня в офисе место освободилось 🙂
Пишите @bethrezen
Пишите @bethrezen
Ребята, у нас тут внезапный стрим - мы всё таки собираем сервер за пол миллиона! Сроки поджимают и его надо быстренько собрать и отправить в понедельник в ДЦ.
Присоединяйтесь в 16:30
https://www.youtube.com/watch?v=shuu4IDmTkc&feature=youtu.be
PS: Стрим исключительно 18+
#МамкинСборщик
Присоединяйтесь в 16:30
https://www.youtube.com/watch?v=shuu4IDmTkc&feature=youtu.be
PS: Стрим исключительно 18+
#МамкинСборщик
YouTube
Мамкин сборщик: собираем СЕРВЕР за ПОЛ МИЛЛИОНА 18+
CPU: Ryzen 3900XRAM: 4x32GB DDR4-3200Mhz KingstonMB: AsRock X470D4USSD: 512Gb Samsung 970 ProHDD: 8x16TB Seagate SkyHawkAI GPU: RTX 2060 Super INNO3DNet: Mel...
Прошлый сервер для Школково уже в дата-центре.🔥
Настало время нового сервера!
🔜 В воскресенье в 17:00 будем собирать сервер для моего мини-стартапа StreamStack™ - защищенного видео-хостинга. Да, у этой технологии теперь появилось имя, а сама технология теперь будет доступна другим компаниям(но школьно-ЕГЭшные тематики её не получат, потому что это исключительная привелегия Школково).
Конфигурация сервака:
CPU: AMD Ryzen 3900X
RAM: 4x32GB DDR4-3200Mhz Kingston
MB: ASUS ROG STRIX X570-F GAMING
SSD: 2TB Gigabyte Aorus PCIe 4.0
HDD: 8x8TB Seagate Exos
GPU: 2x Gigabyte GTX 1660
Net: Mellanox ConnectX-4 Lx 10GbE
Подписывайтесь, ставьте лайки и самое главное «Колокольчик» включите.
https://youtu.be/qqoLYVCpESQ
💪 #МамкинСборщик
Настало время нового сервера!
🔜 В воскресенье в 17:00 будем собирать сервер для моего мини-стартапа StreamStack™ - защищенного видео-хостинга. Да, у этой технологии теперь появилось имя, а сама технология теперь будет доступна другим компаниям(но школьно-ЕГЭшные тематики её не получат, потому что это исключительная привелегия Школково).
Конфигурация сервака:
CPU: AMD Ryzen 3900X
RAM: 4x32GB DDR4-3200Mhz Kingston
MB: ASUS ROG STRIX X570-F GAMING
SSD: 2TB Gigabyte Aorus PCIe 4.0
HDD: 8x8TB Seagate Exos
GPU: 2x Gigabyte GTX 1660
Net: Mellanox ConnectX-4 Lx 10GbE
Подписывайтесь, ставьте лайки и самое главное «Колокольчик» включите.
https://youtu.be/qqoLYVCpESQ
💪 #МамкинСборщик