Если интересны более глубокие технические подробности про waffinity, можно почитать доклад с USENIX, там есть и презентация, и аудио. Скорее всего этот доклад Justin и использовал для написания поста. Кому-нибудь попадались похожие доклады от других вендоров СХД? Делитесь!
#waffinity #ONTAP
https://www.usenix.org/conference/osdi16/technical-sessions/presentation/curtis-maury

​​Полтора месяца назад я искал добровольцев с AFF и 9.4 в чате канала. Все было ради возможности посмотреть сколько данных уехало бы в холодный слой, если бы использовался FabricPool. В 9.4 появилась опция, которая позволяет посмотреть объем данных, к которым не было никаких обращений за последние 30 дней. Напомню, что FabricPool — это агрегат, к которому присоединяется медленный слой в виде объектного хранилища. Это может быть StorageGRID, Amazon S3, Azure Blob, IBM COS. Через процедуру FPVR можно использовать и другие объектные хранилища, работающие по S3. Есть клиенты, у которых прицеплен Cloudian.
Есть несколько политик тиринга данных. Можно отправлять в облако только снепшоты, а можно отправлять продуктивные холодные данные. Тиринг работает на уровне 4КБ блоков. FabricPool поддерживается на AFF, FAS (только с all-ssd агрегатами), ONTAP Select и Cloud Volumes.
Ниже на скриншоте результат сбора статистики за 30+ дней у клиента на продакшн системе на агрегате с почти полусотней инстансов MySQL. Снепшоты не используются.
Для включения статистки надо использовать опцию агрегата:-is-inactive-data-reporting-enabled true

На скриншоте performance-tier-inactive-user-data-percent — это процент от общей ёмкости тома (size).
#FabricPool #S3 #StorageGRID #ONTAP #AFF

​​​​Вместе с релизом ONTAP 9.5GA доступен симулятор. Ссылка на его скачивание переехала туда же где и образа для железа.
Партнёры кроме симулятора могут использовать Lab on Demand, там уже пару недель доступна лаба ONTAP 9.5 Early Access v1.0.

UPDATE. Читатели поправили. Вместе с образами ONTAP 9.5 для железа лежит образ ONTAP для симулятора, но это не полноценный симулятор. Образ можно использовать для обновления уже развернутого симулятора. Видимо OVA шаблон с 9.5 появится позже в привычном месте — https://mysupport.netapp.com/cgi-bin/simulator
#ONTAP

​​В ONTAP 9.4 появилась поддержка SMB 3.0 Multichannel, а вот и technical report на эту тему — TR-4740. SMB 3.0 Multichannel. Accelerate SMB 3.0 Performance for Applications. Некоторые при личном общении жаловались мне, что TR читать не успевают, документов много, информации много. Ну так я тоже не читаю TR от корки до корки. Вполне хватает скачать TR, пробежаться по нему глазами, если попадается что-то интересное, то можно немного углубиться в детали. В итоге в голове создается общая картина и понимаю возможностей ONTAP. Мозг запоминает, что в целом система так умеет. А когда через какое-то время возникается вопрос, то помнишь, что был на эту тему TR и знаешь где искать ответ.
#TR #SMB #ONTAP

https://www.netapp.com/us/media/tr-4740.pdf

Вышло обновление ONTAP Select Deploy 2.11. Напомню, что ONTAP Select состоит из двух элементов: образа ONTAP Select с самой операционной системой, которая работает на нодах, последняя доступная версия совпадает с версией просто ONTAP - 9.5; и ONTAP Select Deploy - отдельная виртуальная машина, которая отвечает за развёртывание кластера и используется как медиатор в двухнодовых конфигурациях. Deploy обновляется независимо от образа ONTAP Select. Что нового в Deploy 2.11:
- Upgrading an evaluation license to a production license
- Use of external storage with MetroCluster SDS
- Enhanced support for KVM on Red Hat Enterprise Linux 7.6 and CentOS 7.6
#ONTAP #Select #SDS

​​Немного обновлений по решениям для ML/AI.
Обновился документ NetApp Verified Architecture — NetApp ONTAP AI, Powered by NVIDIA. Scalable AI Infrastructure: Designing for Real-World Deep Learning Use Cases. Это документ про дизайн решения NetApp ONTAP AI. Приятный шкафчик с AFF A800, NVIDIA DGX-1 и Cisco Nexus 3232C 100GbE. Программная часть работает на NVIDIA GPU Cloud Deep Learning Software Stack и NetApp Trident. Поддержка на всё решение от одного вендора, можно на выбор обращаться к NetApp или NVIDIA. Из того, что заметил сразу, в этой версии документа AFF A800 тестировали уже с 7 системами NVIDIA DGX-1. То что A800 выдержит нагрузку более 4 DGX-1 указывалоссь и ранее, но не было соответствующих тестов. С ONTAP AI используется подход, который применяется к FlexPod. Можно использовать и младшие модели AFF, если нет необходимости в производительности A800.
Есть и второй документ, в котром подробно описано развёртывние решения ONTAP AI.
И в скором времени должны появиться результаты тетсирования NetApp AFF c NVIDIA DGX-2.
#nvidia #ONTAP #AI #ML #DL #Cisco #AFF
https://www.netapp.com/us/media/nva-1121-design.pdf
https://www.netapp.com/us/media/nva-1121-deploy.pdf

В продолжение темы, о том как за 20 минут развернуть решение ONTAP AI, включая сеть, СХД и серверы, с помощью Ansible.
https://blog.netapp.com/how-to-configure-ontap-ai-in-20-minutes-with-ansible-automation/

​​Упустил важное обновление для ONTAP Select. С выходом Select Deploy 2.11.2 появился плагин для vCenter, который позволяет выполнять все операции по развёртыванию и управлению кластером ONTAP Select из интерфейса vCenter. Плагин устанавливается через Select Deploy, в который после этого можно не заглядывать, функциональность плагина совпадает с возможностями Deploy.

#ONTAP #Select #VMware

Тизер ONTAP внутри Kubernetes. Пока неясно для чего 🙂 Мой прогноз, что для NetApp Cloud Volumes on-prem.
https://twitter.com/octav/status/1118638087930773505

Настало время весенних анонсов. В прошлом году в это же время был объявлен выход AFF A800. В этом году вышла AFF A320. Но у меня пока не готов пост про A320. Поэтому почитайте о том, что нас ждёт в ONTAP 9.6.
#ONTAP
https://alikulov.me/blog/all/chto-novogo-v-ontap-9-6/

Видео с развёртыванием ONTAP Select — SDS вариант ONTAP. Вся процедура на готовой инфраструктуре VMware занимает 10 минут. Кроме VMware можно использовать KVM.
#ONTAP #Select
https://youtu.be/kmvox-D6UrE

Обновился TR-4684. Implementing and Configuring Modern SANs with NVMe/FC. Это уже 4 версия документа. Когда я постил его в первый раз, ONTAP был версии 9.4. С тех пор достаточно много изменений в 9.5 и 9.6. За изменениями лучше сразу идти в раздел 6 NVMe/FC Features and Limitations на странице 16.
#TR #ONTAP #NVMe #FC #SAN #AFF
https://t.me/storagetalks/519

Интересный выпуск подкаста на тему улучшений в TCP стеке ONTAP 9.6.
Если кратко, то в 9.6 перешли на новый алгоритм TCP congestion control. До этого использовался Reno/New Reno. Теперь — CUBIC.
Основная выгода при использовании репликации на большие расстояния для так называемых LFN-сетей (long fat networks). Сети с большой пропускной способностью и высокими задержками.
В тестах NetApp CUBIC снижает общее время репликации SnapMirror в 3-5 раз по сравнению со старым алгоритмом.
Кроме этого есть польза для MCC IP, SnapMirror-Sync и FabricPool.
Если хотите больше подробностей, то слушайте подкаст. Там в гостях один из соавторов RFC 8312 CUBIC for Fast Long-Distance Networks — Richard Scheffenegger, он работает в NetApp и у него прекрасный австрийский акцент 😉
Полезные ссылки по теме:
https://en.wikipedia.org/wiki/TCP_congestion_control
https://en.wikipedia.org/wiki/CUBIC_TCP

#TCP #networking #ONTAP #SnapMirror #FabricPool

​​Новый Technical Report. TR-4788. Architecting I/O-Intensive MongoDB Databases on NetApp. Рекомендации по архитектуре решения для использования MongoDB с ONTAP для БД, котрые требуют много IOPS с низкими задержками (I/O-Intensive Databases).
#TR #AFF #ONTAP #Select #Cloud #MongoDB
https://www.netapp.com/us/media/tr-4788.pdf

​​Недавно была новость про то, что FlexCache теперь бесплатен. Если хочется подробнее узнать о том, как работает эта технология предлагаю почитать TR-4743. FlexCache in NetApp ONTAP Version 9.6.
#ONTAP #FlexCache #NFS
https://www.netapp.com/us/media/tr-4743.pdf

​​Очередной TR на тему AI. NVA-1138-DESIGN. NetApp ONTAP AI with Mellanox Spectrum Switches. Есть анлогичные документы с коммутаторами от Cisco, а также серверами DGX-1 и DGX-2 от nvidia.
#nvidia #ONTAP #AI #ML #DL #AFF
https://www.netapp.com/us/media/nva-1138-design.pdf

Neil Anderson обновил свой HOWTO
How to Build an #ONTAP Lab for Free? v9.6 на основе free open-source #VyOS router

https://www.flackbox.com/netapp-simulator

Возвращаюсь из глубокого отпуска.
С недавнего врмени NetApp стал публиковать роли и плейбуки на Ansible Galaxy — это репозиторий готовых ролей и плейбуков. Я так понимаю это часть перехода от хранения всех 3rd-party модулей вместе с кодом Ansible к использованию коллекций. Подробнее про коллекции в документации или вебинаре.
Для примера коллекция с модулями и плейбуками для ONTAP. Там есть готовые роли для создания кластера, SVM, настройки SnapMirror, SAN и NAS.
https://galaxy.ansible.com/netapp/ontap

#Ansible #ONTAP

В ONTAP 9.7 появилась тестовая поддержка протокола S3. Пока это еще preview со всеми вытекающими ограничениями — небогатая функциональность, не рекомендуется использовать для критичных данных. Но вендор готов помочь в настройке и траблшутинге. Основное применение — edge-хранилище для IoT, транспорта и т.д. В будущем обещают интеграцию со StorageGRID при помощи CloudSync. Для хранения данных используются FabricPool, производительность соизмерима с производительностью NAS-протоколов в ONTAP. Поддерживается на AFF, FAS и ONTAP Select.
Как попробовать описано в TR-4814. S3 Public Preview. ONTAP 9.7
#S3 #ONTAP
https://www.netapp.com/us/media/tr-4814.pdf

TR-4743. FlexCache in ONTAP 9.7
В 9.7 добавили поддержку нескольких существующих функций ONTAP для FlexCache.
Навскидку — MetroCluster, FlexGroup в качестве источника кэша. Подробнее в TR. Кстати, FlexCache, теперь бесплатный.
https://www.netapp.com/us/media/tr-4743.pdf

TR-4515. ONTAP AFF All SAN Array Systems
Подробнеее про NetApp ASA.
https://www.netapp.com/us/media/tr-4515.pdf

#AFF #ONTAP #FlexCache

​​До 10 мая 2020 года в комплекте с Flash Bundle для AFF A300, A700 и A800 идёт бесплатная лицензия на NetApp Cloud Volumes ONTAP Premium (CVO) на 2 года. Лицензия на одну ноду, можно использовать до 368TiB ёмкости в AWS, Azure или GCP. Само собой, придётся заплтить за ресурсы облачного провайдера. NetApp CVO позволяет использовать SnapMirror для репликации данных между облаками и on-prem системами FAS/AFF/Select.

#Cloud #CVO #ONTAP