В пятницу расскажу про один сервис, который не имеет отношения к теме канала, но который мне очень понравился. Развернул у себя дома и пользуюсь постоянно. Речь пойдёт про open source проект Audiobookshelf. С его помощью я не только удобно слушаю аудиокниги, но и наконец-то начал наводить порядок в своём архиве.
Книги в печатном и аудиоформате я читаю и слушаю почти всю жизнь. Во многом мы состоим из того, какой контент в себя погрузили, поэтому я стараюсь хоть каким-то способом загружать в себя интересные книги. На чтение у меня катастрофически не хватает времени. За последние пару лет, как переехал в дом, наверное ни одной книги не прочитал, хотя кучу накупил. Стоят как напоминание о себе на столе в моём кабинете рядом с рабочим местом. Заботы о детях и по хозяйству сыпятся как из рога изобилия и занимают всё свободное время. Даже не знаю, глобально хорошо это или плохо, но пока так. Есть только 20-30 минут чтения перед сном для детей.
Себе остались аудиокниги, которые я слушаю, ложась спать. Уже давно вошла эта привычка. Заменила собой просмотр всякой видеоерунды на смартфоне. Аудиокнига успокаивает, отвлекает от различных мыслей и помогает засыпать. Возможно, это не совсем полезно, слушать прямо перед сном, но мне реально так проще засыпать. Если не отвлекаться, то постоянно всякие свои заботы и проблемы перебираю в голове. Я заметил ещё с рождения первого ребёнка, что с аудиосказкой проще заснуть, да и в целом интересно слушать, когда ставил ему сказки или полноценные аудиоспектакли. Это вообще кайф. С тех пор и сам стал слушать.
Так вот, возвращаясь к Audiobookshelf. Она очень легко устанавливается и настраивается. Буквально один Docker контейнер. Запустил - и всё готово. Если не хочется Docker - есть apt и rpm репозиторий и пакет. Для смартфона бесплатное приложение из Google Play или RuStore.
Отмечу то, что лично мне понравилось в Audiobookshelf:
▪️Умеет склеивать разбитую на файлы книгу в один общий трек. Аудиокниги с торрентов качаются постоянно разбитые на разные части, главы, книги и т.д. Обычно это куча файлов, которые без какой-то программы слушать неудобно. Audiobookshelf сама распознаёт различное разбиение и склеивает его. Я не знаю, что там за алгоритмы, но все мои книги она склеила нормально.
▪️Если у аудиофайлов есть метаданные, Audiobookshelf забирает их сама. Если ничего нет, то вручную заполняется название и автор, а дальше она ищет книгу на публичных площадках и заполняет недостающие метаданные - жанр, описание, год выхода, обложка и т.д.
▪️Удобное приложение для смартфона, которое запоминает, на чём остановился, имеет таймер сна, оглавление и переход по главам. Пользоваться им удобно.
Заполнение архива книг ручное. Может его можно как-то автоматизировать, особенно с учётом возможностей ИИ, но я заполняю сам, в том числе для того, чтобы перебрать свой архив, который состоит из сетевой папки на NAS, куда просто всё копировалось без какой-то системы и не разбиралось.
Теперь я всё это аккуратно перебираю, загружаю в Audiobookshelf. Программа пересохраняет это в своё хранилище на диске, и на выходе я получаю ту же папку со всеми книгами, только уже в формате Автор - Книга. И уже это хранилище можно бэкапить, а из первоисточника - удалить.
Опубликовал Audiobookshelf по доменному имени через reverse proxy, настроил доступ через VPN и при желании из любого места со смартфона по интернету или в локалке могу слушать книги. В случае необходимости книгу можно сохранять в смартфоне, чтобы слушать в офлайн. Можно создавать разных пользователей и давать им доступ. Подключил сына, научил пользоваться. Он тоже любит слушать.
Если любите аудиокниги - рекомендую программу. Она простая, удобная, бесплатная. Да, надо один раз заморочиться и наполнить, но зато потом нет никаких привязок к сервисам или интернету.
❗️Если заметка вам полезна, не забудьте 👍 и забрать в закладки.
———
ServerAdmin:📱 Telegram | 🌐 Сайт | 📲 MAX 😩
#разное
Книги в печатном и аудиоформате я читаю и слушаю почти всю жизнь. Во многом мы состоим из того, какой контент в себя погрузили, поэтому я стараюсь хоть каким-то способом загружать в себя интересные книги. На чтение у меня катастрофически не хватает времени. За последние пару лет, как переехал в дом, наверное ни одной книги не прочитал, хотя кучу накупил. Стоят как напоминание о себе на столе в моём кабинете рядом с рабочим местом. Заботы о детях и по хозяйству сыпятся как из рога изобилия и занимают всё свободное время. Даже не знаю, глобально хорошо это или плохо, но пока так. Есть только 20-30 минут чтения перед сном для детей.
Себе остались аудиокниги, которые я слушаю, ложась спать. Уже давно вошла эта привычка. Заменила собой просмотр всякой видеоерунды на смартфоне. Аудиокнига успокаивает, отвлекает от различных мыслей и помогает засыпать. Возможно, это не совсем полезно, слушать прямо перед сном, но мне реально так проще засыпать. Если не отвлекаться, то постоянно всякие свои заботы и проблемы перебираю в голове. Я заметил ещё с рождения первого ребёнка, что с аудиосказкой проще заснуть, да и в целом интересно слушать, когда ставил ему сказки или полноценные аудиоспектакли. Это вообще кайф. С тех пор и сам стал слушать.
Так вот, возвращаясь к Audiobookshelf. Она очень легко устанавливается и настраивается. Буквально один Docker контейнер. Запустил - и всё готово. Если не хочется Docker - есть apt и rpm репозиторий и пакет. Для смартфона бесплатное приложение из Google Play или RuStore.
Отмечу то, что лично мне понравилось в Audiobookshelf:
▪️Умеет склеивать разбитую на файлы книгу в один общий трек. Аудиокниги с торрентов качаются постоянно разбитые на разные части, главы, книги и т.д. Обычно это куча файлов, которые без какой-то программы слушать неудобно. Audiobookshelf сама распознаёт различное разбиение и склеивает его. Я не знаю, что там за алгоритмы, но все мои книги она склеила нормально.
▪️Если у аудиофайлов есть метаданные, Audiobookshelf забирает их сама. Если ничего нет, то вручную заполняется название и автор, а дальше она ищет книгу на публичных площадках и заполняет недостающие метаданные - жанр, описание, год выхода, обложка и т.д.
▪️Удобное приложение для смартфона, которое запоминает, на чём остановился, имеет таймер сна, оглавление и переход по главам. Пользоваться им удобно.
Заполнение архива книг ручное. Может его можно как-то автоматизировать, особенно с учётом возможностей ИИ, но я заполняю сам, в том числе для того, чтобы перебрать свой архив, который состоит из сетевой папки на NAS, куда просто всё копировалось без какой-то системы и не разбиралось.
Теперь я всё это аккуратно перебираю, загружаю в Audiobookshelf. Программа пересохраняет это в своё хранилище на диске, и на выходе я получаю ту же папку со всеми книгами, только уже в формате Автор - Книга. И уже это хранилище можно бэкапить, а из первоисточника - удалить.
Опубликовал Audiobookshelf по доменному имени через reverse proxy, настроил доступ через VPN и при желании из любого места со смартфона по интернету или в локалке могу слушать книги. В случае необходимости книгу можно сохранять в смартфоне, чтобы слушать в офлайн. Можно создавать разных пользователей и давать им доступ. Подключил сына, научил пользоваться. Он тоже любит слушать.
Если любите аудиокниги - рекомендую программу. Она простая, удобная, бесплатная. Да, надо один раз заморочиться и наполнить, но зато потом нет никаких привязок к сервисам или интернету.
❗️Если заметка вам полезна, не забудьте 👍 и забрать в закладки.
———
ServerAdmin:
#разное
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
👍121👎1
Астра Мониторинг впустил ИИ-агентов в системы мониторинга заказчика
И приглашает вас увидеть, что получилось.
Новый продукт команды AMAIA — агентный ИИ-слой над мониторингом. ИИ-агенты объединяют данные из разных систем, сами пишут инструменты для проверок, находят причины ошибок и помогают их устранить. Опыт разборов копится в базе знаний.
Вебинар «ИИ над мониторингом: одна платформа, разные задачи, ваши модели»
📅 16 октября в 14:00 (МСК)
Команда Астра Мониторинга покажет:
💠 чем ИИ-слой отличается от чат-ботов и систем автоматизации;
💠 как в рознице ИИ-агенты находят застрявшие заявки и следят за ценами конкурентов;
💠 как AMAIA оценивает загрузку ресурсов и помогает планировать размещение проектов;
💠 почему выбор модели решается настройкой;
💠 как начать: один процесс, один доступ, один человек.
🤩 Участникам — специальные условия запуска AMAIA.
Зарегистрироваться
И приглашает вас увидеть, что получилось.
Новый продукт команды AMAIA — агентный ИИ-слой над мониторингом. ИИ-агенты объединяют данные из разных систем, сами пишут инструменты для проверок, находят причины ошибок и помогают их устранить. Опыт разборов копится в базе знаний.
Вебинар «ИИ над мониторингом: одна платформа, разные задачи, ваши модели»
📅 16 октября в 14:00 (МСК)
Команда Астра Мониторинга покажет:
💠 чем ИИ-слой отличается от чат-ботов и систем автоматизации;
💠 как в рознице ИИ-агенты находят застрявшие заявки и следят за ценами конкурентов;
💠 как AMAIA оценивает загрузку ресурсов и помогает планировать размещение проектов;
💠 почему выбор модели решается настройкой;
💠 как начать: один процесс, один доступ, один человек.
Зарегистрироваться
Please open Telegram to view this post
VIEW IN TELEGRAM
👎14👍11
время (обычно беру период в 2 недели), что мне понравились.
⇨ Как я прошёл путь от эникея до Lead DevOps | Моя карьера в IT
Личная история карьеры конкретного человека. Такая первичка, мне кажется, всегда интересна. Но мало кто готов её выкладывать. Так что автору однозначно плюс за то, что сделал это.
🔥TrueNAS решила одну из главных проблем с хранилищами в Proxmox
Авторы ОС для хранилища TrueNAS выпустили плагин для интеграции с PVE. TrueNAS и так часто выбирают для отказоустойчивых хранилищ в том числе под диски виртуальных машин. А с интеграцией стало ещё удобнее. Например, теперь диски VM могут напрямую размещаться в ZFS томах на TrueNAS, и их снепшоты создаются там же. Получается хорошая open source связка продуктов. В видео автор демонстрирует, как всё это вместе работает.
⇨ Домашняя сеть мечты: Wi-Fi 7 + 10Gb от UniFi — ОПРАВДАНО или НЕТ?
Быстрая локальная сеть на богатом. Админка у UniFi контроллера, конечно, топ. Мне лично дома пока 1Гбит/c хватает.
⇨ A Better Way to Run Terminal Agents!
Обзор терминального мультиплексора Herdr. Это что-то типа Tmux, с заточкой под работу с ИИ-агентами. Мне лично понравилось, буду пробовать. Думаю, сделаю заметку по нему.
⇨ TUIOS заставляет Herdr и Tmux выглядеть пережитками прошлого
Предыдущий автор хвалит Herdr, а этот его хоронит и предлагает замену - TUIOS. Похоже на рэп-баттлы прошлого 😁. Этот терминальный менеджер выглядит действительно необычно и функционально, но лично меня не впечатлил. То ли дело клавиатура автора. Ниже обзор похожей клавиатуры.
⇨ Год с эргономичной клавиатурой. Действительно ли удобно?
К сожалению, в видео в основном обзор устройств, а не опыт работы с ними. Тем не менее, я получил представление, что это такое. Навскидку, очень сильно отличается от обычной клавиатуры, придётся долго привыкать. У меня к обычным клавам претензий нет, поэтому для себя не вижу смысла.
⇨ Which Proxmox Storage Should You Use?
База по хранилищам в PVE: локальная директория, LVM и LVM-thin, ZFS, NFS, Ceph. Плюс некоторые советы автора по тому, где и что использовать. Интересно будет только тем, кто с темой не знаком. По сути - пересказ документации с комментариями.
⇨ Mimo 2.6 Flash | Лайт-модель от Xiaomi
Кому интересно, чисто для справки. У Xiaomi тоже есть своя открытая модель. Модель, как модель, ничего особенного. Из-за того, что маленькая, можно спокойно погонять на обычном домашнем компе. Автор привёл примеры, на что она способна.
⇨ Как использовать ИИ-Агенты на МАКСИМУМ | Роадмап
База по современным агентам. Автор хорошо структурирует и рассказывает. Но это чисто теория для тех, кто ещё не в теме. Остальным интересно не будет.
⇨ LiteLLM - Прокси для твоих llm! Зачем? И что он дает?
Обзор популярного в наше время софта для проксирования запросов в LLM в зависимости от условий. Что-то уходит в те или иные облачные модели, что-то в локальные и т.д. Для личного использования не особо актуально, если вы прям не кодите с утра до вечера и не выедаете все лимиты. Хотя я много видел отзывов на эту шутку в том числе и у себя на канале в комментариях. Кто-то использует LiteLLM для обхода ограничения Claude Code при использовании неподдерживаемых моделей.
⇨ БОЛЕЕ 2 МЛРД токенов в день: МОЩНЕЙШАЯ станция NVIDIA DGX от Gigabyte
Обзор рабочей станции за 15 млн. рублей😳, которая выглядит почти как обычный десктоп. Не знаю, насколько реально её у нас купить, но в нескольких магазинах выставлена на продажу. В США она $100 000+ стоит.
⇨ 477к за ИИ-сервер, оно того стоило?
Наш ответ на дорогущие рабочие станции. Автор рассказывает про свои изыскания при построении рабочей станции под локальный AI. Тут уже народные решения на базе Авито. Можно повторить, при желании. Видео, без шуток, интересное, особенно для тех, кто что-то подобное собирает. Тут концентрированный личный опыт и советы автора, а не рассуждения.
———
ServerAdmin:
#видео
Please open Telegram to view this post
VIEW IN TELEGRAM
YouTube
Как я прошёл путь от эникея до Lead DevOps | Моя карьера в IT
Надежный хостинг FirstVDS! Переходи по ссылке и получай скидку 25% на первый месяц на любой тариф https://firstvds.ru/s/hyp7a
ПОДПИСЫВАЙСЯ НА КАНАЛ В МАКС:
https://max.ru/channel_worlditech
В этом видео рассказываю о своём пути в IT: с чего начинал, как…
ПОДПИСЫВАЙСЯ НА КАНАЛ В МАКС:
https://max.ru/channel_worlditech
В этом видео рассказываю о своём пути в IT: с чего начинал, как…
👍33👎5
Когда я работал в одной небедной компании, там регулярно обновляли парк оборудования, а старое просто списывали. Это же касалось и клиентских рабочих станций с мониторами. Помню, как директор как-то зашёл к нам в отдел и предложил, чтобы мы куда-то отдали старые системники: в школу или интернат. Типа, что им пропадать просто так. Они были ещё вполне рабочие. Просто была возможность покупать поновее, вот и покупали. Эх, были времена...
У нас некому было этим заниматься, да и не понятно, как вообще всё это провернуть. Поэтому старьё либо разбирали себе, либо просто выкидывали. У меня напарник иногда на авито что-то продавал. Мне всё это было не интересно, не хотелось даже связываться.
На днях мне написал один незнакомый человек и попросил рассказать аудитории про их социальный проект и частную акцию под названием «Подари компьютеру вторую жизнь». Суть в том, что если вы списываете какие-то старые, но исправные компьютеры, то не выкидывайте их, а отдайте в эту программу. А они потом на основе заявок от учебных заведений, передадут их им.
Мне идея откликнулась, сразу вспомнил историю со списанными компьютерами, поэтому я вам это всё и пишу. Отдельно отмечу, что с данной организацией я не знаком. Просто передаю информацию. В своей жизни я сам много занимался благотворительностью лично, пока был безсемейный, поэтому знаю, что есть много организаций и людей, которые реально делают полезные вещи. В клубе волонтёров я активно участвовал несколько лет и объездил с ними большое количество детских домов. Так, что если вам откликается подобная деятельность, рекомендую.
Моего интереса в этом никакого нет, с организацией я никак не связан. Если надумаете отдать компьютеры, пишите напрямую Елене Мартыновой. Оборудование заберут транспортной компанией, пристроят, а вам отправят фото/видео отчет от школы (с неподдельными детскими эмоциями).
#разное
У нас некому было этим заниматься, да и не понятно, как вообще всё это провернуть. Поэтому старьё либо разбирали себе, либо просто выкидывали. У меня напарник иногда на авито что-то продавал. Мне всё это было не интересно, не хотелось даже связываться.
На днях мне написал один незнакомый человек и попросил рассказать аудитории про их социальный проект и частную акцию под названием «Подари компьютеру вторую жизнь». Суть в том, что если вы списываете какие-то старые, но исправные компьютеры, то не выкидывайте их, а отдайте в эту программу. А они потом на основе заявок от учебных заведений, передадут их им.
Мне идея откликнулась, сразу вспомнил историю со списанными компьютерами, поэтому я вам это всё и пишу. Отдельно отмечу, что с данной организацией я не знаком. Просто передаю информацию. В своей жизни я сам много занимался благотворительностью лично, пока был безсемейный, поэтому знаю, что есть много организаций и людей, которые реально делают полезные вещи. В клубе волонтёров я активно участвовал несколько лет и объездил с ними большое количество детских домов. Так, что если вам откликается подобная деятельность, рекомендую.
Моего интереса в этом никакого нет, с организацией я никак не связан. Если надумаете отдать компьютеры, пишите напрямую Елене Мартыновой. Оборудование заберут транспортной компанией, пристроят, а вам отправят фото/видео отчет от школы (с неподдельными детскими эмоциями).
#разное
4👍131👎4
🔹 как определить RPO и RTO для критичных сервисов;
🔹 как защитить бэкапы от шифровальщика;
🔹 как учесть зависимости систем и ресурсы для восстановления;
🔹 как каналы связи влияют на скорость бэкапа и восстановления;
🔹 когда достаточно обычных бэкапов, а когда нужны репликация, Hardened Repository и DRaaS;
🔹 как подготовить план аварийного восстановления и протестировать его.
— Матрица систем и зависимостей
— Таблица определения и согласования RPO / RTO
— Технический runbook аварийного восстановления
— Отчёт о тестовом восстановлении ИТ-сервиса
— Карта готовности одного критичного сервиса к восстановлению
— Рабочая тетрадь «Стратегия восстановления данных и ИТ-сервисов»
Please open Telegram to view this post
VIEW IN TELEGRAM
👍12👎1
Вот мы и вступили в новую реальность, когда стали пропадать датацентры целиком, что повлекло за собой длительную остановку различных сервисов. Например, я сегодня не смог отправить документы по ЭДО от 1С. Сервис лежит второй день и обещает подняться при хороших раскладах 14-го октября, а при плохих - 16-го. Вот обновляемая новость на эту тему.
Хотя по большому счёту, ничего особенного, чего бы не случалось раньше, не произошло. Уже горели целиком датацентры ранее, и не по одному, а парой, с потерей всей инфраструктуры и бэкапов. Удивительно в наше время видеть такой сервис, как 1С ЭДО и Отчётность, работающий только в рамках облака одного провайдера без проработки механизма переключения на другого. Он мог прилечь и ранее по различным причинам. Такие длительные сроки восстановления говорят о том, что вопрос быстрого восстановления сервиса у другого провайдера не рассматривали и делают теперь всё в авральном режиме. Собственно, они сами об этом и говорят:
Специалисты ГК "Астрал" и фирмы "1С" в непрерывном круглосуточном режиме работают над восстановлением сервисов 1С-ЭДО, 1С-ЭПД, 1С-Отчетность. Ориентировочный срок возобновления штатной работы сервисов - 14.10.26. Но поскольку могут быть сложности при запуске сервисов на инфраструктуре новых дата-центров, возможен перенос срока на 16.10.26.
Получился хороший стресс тест для всех - пользователей, инженеров, владельцев бизнеса. Например, некоторое время не работала Яндекс.Почта ещё после отключения первого ДЦ. Я как раз в тот момент ждал код подтверждения на почту, чтобы войти в один сервис. Уже тогда задумался, что сильно завишу от почтового ящика, на который очень много завязано. И вот сейчас он уже второй день работает кое-как. Для меня это стало уязвимым местом. Кто-то в Яндекс.Диске потерял свои файлы, думаю, что часть безвозвратно.
В общем, пришло время всем пересмотреть свои подходы к построению инфраструктуры и использованию облачных сервисов. Теперь точно нельзя просто взять и перенести всё в облако. Их, как минимум, должно быть 2 в разных компаниях и регионах, а бэкапы где-то у себя в загашнике. Ну а если удары по ДЦ продолжатся, то безальтернативным вариантом будет возврат к своим стойкам и серверам где-то в офисе или на складе. Лишь бы было где и на что сервера для них купить по текущим ценам. Ну и естественно, всё это приведёт к удорожанию инфраструктуры и всего, что на неё завязано.
❓ Вы как-то пострадали от повреждения двух ДЦ Яндекса? Я не могу воспользоваться 1С ЭДО, подписать документы и получить по ним оплату. Прилёг портал my.kaspersky.com, где я управляю компами детей. Не могу им экранное время изменить с каникул на учебные дни. Ну и с почтой небольшие проблемы. Вроде всё. По работе никто не пострадал. У моих клиентов нет денег на ресурсы Яндекс.Облака. Используем либо своё железо, либо арендные дедики и colocation. Бэкапы с инфры провайдеров забираю во вне.
p.s. реклама выше в тему оказалась, хотя изначально не задумывалась так, тема давно обозначена была
———
ServerAdmin:📱 Telegram | 🌐 Сайт | 📲 MAX 😩
#печаль #грусть
Хотя по большому счёту, ничего особенного, чего бы не случалось раньше, не произошло. Уже горели целиком датацентры ранее, и не по одному, а парой, с потерей всей инфраструктуры и бэкапов. Удивительно в наше время видеть такой сервис, как 1С ЭДО и Отчётность, работающий только в рамках облака одного провайдера без проработки механизма переключения на другого. Он мог прилечь и ранее по различным причинам. Такие длительные сроки восстановления говорят о том, что вопрос быстрого восстановления сервиса у другого провайдера не рассматривали и делают теперь всё в авральном режиме. Собственно, они сами об этом и говорят:
Специалисты ГК "Астрал" и фирмы "1С" в непрерывном круглосуточном режиме работают над восстановлением сервисов 1С-ЭДО, 1С-ЭПД, 1С-Отчетность. Ориентировочный срок возобновления штатной работы сервисов - 14.10.26. Но поскольку могут быть сложности при запуске сервисов на инфраструктуре новых дата-центров, возможен перенос срока на 16.10.26.
Получился хороший стресс тест для всех - пользователей, инженеров, владельцев бизнеса. Например, некоторое время не работала Яндекс.Почта ещё после отключения первого ДЦ. Я как раз в тот момент ждал код подтверждения на почту, чтобы войти в один сервис. Уже тогда задумался, что сильно завишу от почтового ящика, на который очень много завязано. И вот сейчас он уже второй день работает кое-как. Для меня это стало уязвимым местом. Кто-то в Яндекс.Диске потерял свои файлы, думаю, что часть безвозвратно.
В общем, пришло время всем пересмотреть свои подходы к построению инфраструктуры и использованию облачных сервисов. Теперь точно нельзя просто взять и перенести всё в облако. Их, как минимум, должно быть 2 в разных компаниях и регионах, а бэкапы где-то у себя в загашнике. Ну а если удары по ДЦ продолжатся, то безальтернативным вариантом будет возврат к своим стойкам и серверам где-то в офисе или на складе. Лишь бы было где и на что сервера для них купить по текущим ценам. Ну и естественно, всё это приведёт к удорожанию инфраструктуры и всего, что на неё завязано.
❓ Вы как-то пострадали от повреждения двух ДЦ Яндекса? Я не могу воспользоваться 1С ЭДО, подписать документы и получить по ним оплату. Прилёг портал my.kaspersky.com, где я управляю компами детей. Не могу им экранное время изменить с каникул на учебные дни. Ну и с почтой небольшие проблемы. Вроде всё. По работе никто не пострадал. У моих клиентов нет денег на ресурсы Яндекс.Облака. Используем либо своё железо, либо арендные дедики и colocation. Бэкапы с инфры провайдеров забираю во вне.
p.s. реклама выше в тему оказалась, хотя изначально не задумывалась так, тема давно обозначена была
———
ServerAdmin:
#печаль #грусть
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
👍69👎4
Рассказываю про небольшой трюк, который я лично на днях проделал для решения небольшой задачи. Есть одиночная VPS на Debian 12. Задача - обновить её до 13-й версии и попутно обновить версию PHP. Задача довольно простая, но всё равно потенциально опасная. Наживую такие обновления делать не рекомендую. Там бывают проблемы с зависимостями, на разрешение которых уходит некоторое время. Я сталкивался не раз.
Расскажу, как это сделать по-нормальному, а потом, как это сделал я. Настраивается новая система и делается миграция. Попутно приводится в порядок инфраструктура, документация, настройки, в идеале в этот момент пишется или актуализируется автоматизация, чтобы потом можно было быстро мигрировать в другое место, если твой ДЦ сгорит.
Но в данном случае это одиночная арендованная VPS без какой-либо обвязки вокруг. С неё даже образ нормально не снять. Я поступил следующим образом. Создал у себя в тестовом контуре VM и добавил к ней второй диск такого же размера, как у VPS. С этой VM сделал следующее:
Прямо наживую запустил посекторное копирование удалённого диска sda на свой локальный sdb. В моём случае диск был 60 ГБ, нормально скопировался примерно за час без единого разрыва. При этом на сервере был запущен сервер MySQL.
Очевидно, что консистентную копию таким образом не сделать, но мне и не надо. Если бы побились данные, я бы их накатил из бэкапа. Мне главное окружение скопировать, чтобы не воспроизводить его вручную.
У этой виртуалки отключил основной диск, а sdb, на который залил копию VPS, сделал загрузочным. После этого успешно загрузился в полной копии VPS. Система ругнулась при запуске, что у неё повреждена файловая система, что ожидаемо. Запустил
Выполнил всё, что мне было нужно. Там возникли проблемы. Убедился, что исправил все ошибки, записал команды и воспроизвёл на VPS.
Способ выглядит жутко колхозным и на первый взгляд нерабочим, но на деле я такое проворачивал уже не один раз. Ранее были заметки на эту тему. Он вполне рабочий, система всегда копируется нормально. Иногда только данные бьются, которые изменились в процессе копирования. Но сама система, как правило, приезжает в рабочем состоянии. Конечно, если есть доступ к образу диска, а тем более, к снепшотам, проще копировать его. Причём это можно сделать так же наживую. Тоже побьётся файловая система, но в целом систему можно будет починить и запустить.
Основное преимущество этого способа - не надо останавливать исходную машину вообще. И не надо ставить дополнительное ПО. К примеру, сюда можно было бы установить Veeam Agent for Linux и снять образ с его помощью. Но для разовых задач не хочется ничего лишнего устанавливать. Задача решена и без этого.
———
ServerAdmin:📱 Telegram | 🌐 Сайт | 📲 MAX 😩
#linux
Расскажу, как это сделать по-нормальному, а потом, как это сделал я. Настраивается новая система и делается миграция. Попутно приводится в порядок инфраструктура, документация, настройки, в идеале в этот момент пишется или актуализируется автоматизация, чтобы потом можно было быстро мигрировать в другое место, если твой ДЦ сгорит.
Но в данном случае это одиночная арендованная VPS без какой-либо обвязки вокруг. С неё даже образ нормально не снять. Я поступил следующим образом. Создал у себя в тестовом контуре VM и добавил к ней второй диск такого же размера, как у VPS. С этой VM сделал следующее:
# ssh -T root@1.2.3.4 'dd if=/dev/sda bs=16M status=none' | dd of=/dev/sdb bs=16M iflag=fullblock status=progress conv=fsyncПрямо наживую запустил посекторное копирование удалённого диска sda на свой локальный sdb. В моём случае диск был 60 ГБ, нормально скопировался примерно за час без единого разрыва. При этом на сервере был запущен сервер MySQL.
Очевидно, что консистентную копию таким образом не сделать, но мне и не надо. Если бы побились данные, я бы их накатил из бэкапа. Мне главное окружение скопировать, чтобы не воспроизводить его вручную.
У этой виртуалки отключил основной диск, а sdb, на который залил копию VPS, сделал загрузочным. После этого успешно загрузился в полной копии VPS. Система ругнулась при запуске, что у неё повреждена файловая система, что ожидаемо. Запустил
fsck -y, потом перезагрузил систему. Она при загрузке запустила ещё раз проверку диска, все ошибки исправила, и я получил полностью рабочую копию своей VPS. Даже базу данных не пришлось перезаливать. СУБД запустилась в режиме innodb_force_recovery. Мне этого было достаточно, хотя какие-то таблицы и побились. Я только поменял IP адрес, поправил файрвол под реалии своего тестового контура и отладил обновление.Выполнил всё, что мне было нужно. Там возникли проблемы. Убедился, что исправил все ошибки, записал команды и воспроизвёл на VPS.
Способ выглядит жутко колхозным и на первый взгляд нерабочим, но на деле я такое проворачивал уже не один раз. Ранее были заметки на эту тему. Он вполне рабочий, система всегда копируется нормально. Иногда только данные бьются, которые изменились в процессе копирования. Но сама система, как правило, приезжает в рабочем состоянии. Конечно, если есть доступ к образу диска, а тем более, к снепшотам, проще копировать его. Причём это можно сделать так же наживую. Тоже побьётся файловая система, но в целом систему можно будет починить и запустить.
Основное преимущество этого способа - не надо останавливать исходную машину вообще. И не надо ставить дополнительное ПО. К примеру, сюда можно было бы установить Veeam Agent for Linux и снять образ с его помощью. Но для разовых задач не хочется ничего лишнего устанавливать. Задача решена и без этого.
———
ServerAdmin:
#linux
Please open Telegram to view this post
VIEW IN TELEGRAM
1👍112👎1
Что будет, если убрать репликацию с диска?☁️
В K2 Cloud проверили и запустили сетевые нереплицируемые NVMe-диски, одни из самых быстрых в РФ. Диск не хранит копии данных, поэтому вся его мощность работает на скорость.
Участие бесплатное. Подробности и регистрация по ссылке.
В K2 Cloud проверили и запустили сетевые нереплицируемые NVMe-диски, одни из самых быстрых в РФ. Диск не хранит копии данных, поэтому вся его мощность работает на скорость.
20 октября на онлайн-митапе ребята покажут, где рождается скорость, как устроен такой диск внутри и как не уронить систему при отказе.
Участие бесплатное. Подробности и регистрация по ссылке.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍10👎5
Один мой знакомый, читатель и автор своего небольшого канала поделился любопытной практической информацией (ссылка на его заметку) на тему использования ZFS в PVE. Я о ней не знал и не сталкивался с описанной проблемой, хотя ситуация не такая уж и редкая, а информация важная!
Смысл в том, что все виртуальные блочные устройства ZFS на одной физической машине объединяются в общий пул потоков ZVOL. И если у вас 2 пула - один на быстрых NVME, а второй - на медленных HDD, запросы к ним будут сливаться в общий поток. При нагрузке на пул с HDD и выстраивании очереди запросов к нему, в эту же очередь встают и запросы на пулы с остальными дисками. В итоге, сильно нагрузив ZVOL на одном медленном пуле, вы получаете задержки с ZVOL на других, более быстрых пулах.
На практике это выглядит так. Ночью вы запускаете бэкап большой ВМ, виртуальный диск которой находится в ZVOL на медленном HDD-пуле. При интенсивном чтении этого диска рабочие потоки ZVOL могут оказаться заняты, из-за чего увеличиваются задержки запросов к виртуальным дискам на NVMe, хотя сами NVMe практически не загружены.
Я лично похожую схему использования дисков применяю повсеместно. Если сервера общего назначения, то так и делаю - быстрые диски под нагрузки, а большие медленные - под локальные бэкапы, чтобы можно было оперативно восстановиться в случае чего, не вытягивая тяжёлые бэкапы по сети, либо под локальное хранение статики.
Другое дело, что я в таких схемах не использую ZFS. Под рабочей нагрузкой мне не нужны возможности ZFS, как и для локальных бэкапов. Поэтому лично я с такой проблемой не сталкивался. ZFS обычно ставлю на бэкап серверы с кучей дисков. Там я вижу использование этой ФС оправданной и полезной. В остальных случаях, если не нужны снэпшоты именно в реализации ZFS, не вижу смысла её использовать.
Автор решил проблему в лоб самым простым и очевидным способом - вынес NVME диски на LVM-thin, отделив их от общего пула потоков ZFS. Это сразу решило проблему узкого горлышка.
Я немного поспрашивал ИИ на эту тему. Он подтвердил, что это архитектурная особенность ZFS, которую он увидел в исходниках. Там же есть и комментарии разработчиков на этот счёт:
We can have up to zvol_threads concurrent i/o's being processed for all zvols on the system. This is typically a vast improvement over the zvol_request_sync=1 behavior of one i/o at a time per zvol. However, an even better design would be for zvol_request() to initiate the zio directly, and then be notified by the zio_done callback, which would call END_IO().
Каким-то образом обыграть эту ситуацию можно, меняя параметры:
◽️ 0 - асинхронная обработка через общий пул потоков ZVOL.
◽️ 1 - обработка непосредственно в контексте вызывающего потока, без передачи в общий пул ZVOL.
Казалось бы, второй вариант решает проблему конкуренции между пулами. Но разработчики предупреждают, что такая схема может существенно ухудшить параллелизм и производительность i/o. Поэтому использовать её без тестирования не стоит.
Можно увеличить кол-во потоков
Ещё вариант - изменить механизм очереди -
Если от ZFS отказываться не хочется, а проблема настройками не решается, то я бы замедлил скорость снятия бэкапов программно, чтобы уменьшить очередь к медленным дискам. Теоретически, это в той или иной мере должно решить проблему.
В общем, как я всегда говорил и говорю, ZFS - нишевая файловая система под конкретные задачи и потребности. У неё много возможностей, нюансов и настроек. Ставить её по умолчанию, как ФС общего назначения, не стоит. Преимущества вам могут оказаться не нужны, а все особенности и недостатки вы по умолчанию потянете за собой.
❗️Если заметка вам полезна, не забудьте 👍 и забрать в закладки.
———
ServerAdmin:📱 Telegram | 🌐 Сайт | 📲 MAX 😩
#pve #zfs
Смысл в том, что все виртуальные блочные устройства ZFS на одной физической машине объединяются в общий пул потоков ZVOL. И если у вас 2 пула - один на быстрых NVME, а второй - на медленных HDD, запросы к ним будут сливаться в общий поток. При нагрузке на пул с HDD и выстраивании очереди запросов к нему, в эту же очередь встают и запросы на пулы с остальными дисками. В итоге, сильно нагрузив ZVOL на одном медленном пуле, вы получаете задержки с ZVOL на других, более быстрых пулах.
На практике это выглядит так. Ночью вы запускаете бэкап большой ВМ, виртуальный диск которой находится в ZVOL на медленном HDD-пуле. При интенсивном чтении этого диска рабочие потоки ZVOL могут оказаться заняты, из-за чего увеличиваются задержки запросов к виртуальным дискам на NVMe, хотя сами NVMe практически не загружены.
Я лично похожую схему использования дисков применяю повсеместно. Если сервера общего назначения, то так и делаю - быстрые диски под нагрузки, а большие медленные - под локальные бэкапы, чтобы можно было оперативно восстановиться в случае чего, не вытягивая тяжёлые бэкапы по сети, либо под локальное хранение статики.
Другое дело, что я в таких схемах не использую ZFS. Под рабочей нагрузкой мне не нужны возможности ZFS, как и для локальных бэкапов. Поэтому лично я с такой проблемой не сталкивался. ZFS обычно ставлю на бэкап серверы с кучей дисков. Там я вижу использование этой ФС оправданной и полезной. В остальных случаях, если не нужны снэпшоты именно в реализации ZFS, не вижу смысла её использовать.
Автор решил проблему в лоб самым простым и очевидным способом - вынес NVME диски на LVM-thin, отделив их от общего пула потоков ZFS. Это сразу решило проблему узкого горлышка.
Я немного поспрашивал ИИ на эту тему. Он подтвердил, что это архитектурная особенность ZFS, которую он увидел в исходниках. Там же есть и комментарии разработчиков на этот счёт:
We can have up to zvol_threads concurrent i/o's being processed for all zvols on the system. This is typically a vast improvement over the zvol_request_sync=1 behavior of one i/o at a time per zvol. However, an even better design would be for zvol_request() to initiate the zio directly, and then be notified by the zio_done callback, which would call END_IO().
Каким-то образом обыграть эту ситуацию можно, меняя параметры:
zvol_request_sync = 0 или 1◽️ 0 - асинхронная обработка через общий пул потоков ZVOL.
◽️ 1 - обработка непосредственно в контексте вызывающего потока, без передачи в общий пул ZVOL.
Казалось бы, второй вариант решает проблему конкуренции между пулами. Но разработчики предупреждают, что такая схема может существенно ухудшить параллелизм и производительность i/o. Поэтому использовать её без тестирования не стоит.
Можно увеличить кол-во потоков
zvol_threads, но всё равно нет гарантии, что все эти потоки не будут заняты медленным пулом. Ещё вариант - изменить механизм очереди -
zvol_use_blk_mq = 1. Но тут надо тестировать на практике, потому что потоки будут по-прежнему в одном общем пуле, изменится распределение. Не факт, что при нагрузке на медленный пул, запросы к быстрому не будут вставать в очередь.Если от ZFS отказываться не хочется, а проблема настройками не решается, то я бы замедлил скорость снятия бэкапов программно, чтобы уменьшить очередь к медленным дискам. Теоретически, это в той или иной мере должно решить проблему.
В общем, как я всегда говорил и говорю, ZFS - нишевая файловая система под конкретные задачи и потребности. У неё много возможностей, нюансов и настроек. Ставить её по умолчанию, как ФС общего назначения, не стоит. Преимущества вам могут оказаться не нужны, а все особенности и недостатки вы по умолчанию потянете за собой.
❗️Если заметка вам полезна, не забудьте 👍 и забрать в закладки.
———
ServerAdmin:
#pve #zfs
Please open Telegram to view this post
VIEW IN TELEGRAM
👍72👎4
Небольшая рекомендация по теме Zabbix. У них есть партнёр - initMAX. Это довольно популярная компания в своей области. Они много всего сделали полезного для Zabbix. Регулярно выступают на Zabbix Summit, пишут инструкции и различные дополнения для Zabbix. Расскажу о наиболее полезных вещах, про которые знаю.
1️⃣ Репозиторий с шаблонами. Тут много хороших шаблонов. Несмотря на то, что шаблонов для Zabbix в целом немало, но все они разного качества. У initMAX они обычно неплохие. Например, я пользуюсь их шаблоном для Synology.
2️⃣ Zabbix MCP Server и Zabbix AI Skills. Качественная обвязка для работы с Zabbix с помощью LLM. Команда Zabbix обещала свой MCP сервер выпустить вместе с релизом 8.0, но я пока ещё не видел информации о нём. Этот MCP сервер наиболее качественный и популярный, особенно в связке со скилами. Всё никак руки не доходят поплотнее поработать с этим. Не придумаю задачу, которую было бы удобно решать с ИИ. Я Zabbix неплохо знаю и обычно довольно быстро там что-то меняю или нахожу. А для деплоя и без MCP всё пишется агентами. Не представляю, где меня ИИ в этих задачах может ускорить. Основная проблема - спам уведомлений из-за некачественных или неоткалиброванных шаблонов. В своих шаблонах я и так знаю, где и что надо подкрутить.
Если используете в работе с Zabbix ИИ и MCP, расскажите, какие задачи с ними решаете. Я планирую проработать момент с обновлением шаблонов после выхода 8-й версии. Вручную это муторно и долго. Тут ИИ должен хорошо помочь и ускорить.
3️⃣ Каталог расширений. Это набор как платных, так и бесплатных модулей для Zabbix, которые меняют или дополняют основную функциональность. Покажу на конкретном примере.
Я изначально не думал, что кого-то, кроме меня, раздражают всплывающие заголовки виджетов во время наведения на них мышки. То есть ты отключаешь отображения заголовка и его нет, высвобождается лишнее место на дашборде, которого часто не хватает. Но если ты наведёшь мышку, то заголовок начинает всплывать. Когда виджетов много, постоянно всплывают эти заголовки во время перемещения мыши по дашборду. Меня это всегда раздражало. И судя по всему, не только меня.
У initMAX есть бесплатный модуль, который это исправляет. Ставится так:
То есть удобно сделано, через пакеты, поддерживается и обновляется. Теперь, если ты отключил заголовки, они при наведении будут всплывать только в режиме редактирования, но не просмотра. Мне это очень нравится 😁 У них много разных модулей, можете сами посмотреть, что там вам покажется полезным.
Ещё у них инструкции неплохие были, но сейчас не уверен, что они ещё актуальны. С приходом ИИ большого смысла в них нет. Он их уже и так изучил и может изложить с подробностями.
❗️Если заметка вам полезна, не забудьте 👍 и забрать в закладки.
———
ServerAdmin:📱 Telegram | 🌐 Сайт | 📲 MAX 😩
#zabbix
Если используете в работе с Zabbix ИИ и MCP, расскажите, какие задачи с ними решаете. Я планирую проработать момент с обновлением шаблонов после выхода 8-й версии. Вручную это муторно и долго. Тут ИИ должен хорошо помочь и ускорить.
Я изначально не думал, что кого-то, кроме меня, раздражают всплывающие заголовки виджетов во время наведения на них мышки. То есть ты отключаешь отображения заголовка и его нет, высвобождается лишнее место на дашборде, которого часто не хватает. Но если ты наведёшь мышку, то заголовок начинает всплывать. Когда виджетов много, постоянно всплывают эти заголовки во время перемещения мыши по дашборду. Меня это всегда раздражало. И судя по всему, не только меня.
У initMAX есть бесплатный модуль, который это исправляет. Ставится так:
# wget https://repo.initmax.com/zabbix/release/initmax-release-latest_all.deb# dpkg -i initmax-release-latest_all.deb# apt update && apt install zabbix-module-hidewidgetheaderТо есть удобно сделано, через пакеты, поддерживается и обновляется. Теперь, если ты отключил заголовки, они при наведении будут всплывать только в режиме редактирования, но не просмотра. Мне это очень нравится 😁 У них много разных модулей, можете сами посмотреть, что там вам покажется полезным.
Ещё у них инструкции неплохие были, но сейчас не уверен, что они ещё актуальны. С приходом ИИ большого смысла в них нет. Он их уже и так изучил и может изложить с подробностями.
❗️Если заметка вам полезна, не забудьте 👍 и забрать в закладки.
———
ServerAdmin:
#zabbix
Please open Telegram to view this post
VIEW IN TELEGRAM
GitHub
GitHub - initMAX/Zabbix-Templates: Production-ready Zabbix templates for infrastructure, networks, applications, security, Linux…
Production-ready Zabbix templates for infrastructure, networks, applications, security, Linux, TLS, CVE checks and media types. - initMAX/Zabbix-Templates
👍73👎1
Выделенный сервер для сайта от 5 810 ₽/мес.
Если VPS уже не хватает, а переплачивать за мощное современное железо нет смысла, можно рассмотреть бюджетные выделенные серверы Рег.облака.
Одна из конфигураций:
• Xeon E3-1270v3, 4 ядра / 8 потоков
• 16 ГБ RAM
• 2 × 240 ГБ SSD
Подойдёт для WordPress, 1С-Битрикс, небольшого интернет-магазина или нескольких сайтов. Ресурсы сервера не делятся с соседями, а SSD помогают обеспечить предсказуемую работу проектов.
При заказе можно бесплатно установить BitrixEnv и перенести данные на сервер.
Посмотреть конфигурации
Если VPS уже не хватает, а переплачивать за мощное современное железо нет смысла, можно рассмотреть бюджетные выделенные серверы Рег.облака.
Одна из конфигураций:
• Xeon E3-1270v3, 4 ядра / 8 потоков
• 16 ГБ RAM
• 2 × 240 ГБ SSD
Подойдёт для WordPress, 1С-Битрикс, небольшого интернет-магазина или нескольких сайтов. Ресурсы сервера не делятся с соседями, а SSD помогают обеспечить предсказуемую работу проектов.
При заказе можно бесплатно установить BitrixEnv и перенести данные на сервер.
Посмотреть конфигурации
👎24👍7