StorageTalks
819 members
85 photos
17 files
633 links
Полезные материалы про системы хранения данных NetApp, немного о конкурентах и просто интересные ссылки.
🚮 🔃 💽 💾 🍖 🔃 🏆 & 😌 🖇

С вопросами к @alikulov

Обсуждения в чате: https://t.me/storagediscussions

Филиал в вебе: http://storagetalks.net
Download Telegram
to view and join the conversation
​​У Demartek, которые сравнивали производительность SCSI FC и NVMe-oF на NetApp A700s, есть довольно неплохое сравнение интерфейсов/протоколов доступа к данным. Это собранный в одном месте набор справочной информации с максимальными скоростями, типами конекторов, планами по развитию и т.д. Они периодически обновляют эту страницу, так что добавляйте её в закладки. Полезно для общего развития и как справочник.
#NVMe #iSCSI #FC #InfiniBand #NAS
http://www.demartek.com/Demartek_Interface_Comparison.html
Подробная kb-статья про настройку NVMe-oF на SLES12 и ONTAP 9.4. Требуется логин.
#NVMe
https://kb.netapp.com/app/answers/answer_view/a_id/1076721
Brocade совместно с NetApp выпустил брошюру NVMe over Fibre Channel for Dummies. Будет полезно не только "чайникам".
#NVMe #FC
У меня уже неделю в закладках лежит документ из серии NetApp Verified Architecture с архитектурой совместного решенеия NetApp и Broadcom для Oracle поверх NVMeoF — NetApp and Broadcom Modern SAN Cloud-Connected Flash Solution. Oracle and SUSE NetApp Verified Architecture Design Edition. А тут им поделились в соседнем канале. В документе описано решение с использованием AFF A700s и Brocade G620, подробно описано как настроена сеть, как разбиты диски и т.д., вплоть до точных версий прошивок HBA. Посчитана экономия от перехода с SCSI FC на NVMe over FC. Тут самое важное, что вместо 2 целых инженеров вам теперь хватит половины инженера. И основная проблема куда девать второую половину инженера 🙂
#NVMe #AFF #brocade #Oracle
NVMe принёс нам не менее 5 вариантов NVMeoF, а кроме этого у нас еще будет борьба форматов дисков. Сейчас используются 2.5 SFF, а Samsung и Intel уже давно анонсировали более компактные варианты SSD в виде “линеек”. У Intel это EDSFF (Enterprise & Datacenter Storage Form Factor), у Samsung — NGSFF (Next-Generation Small Form Factor) или NF1. При этом они физически не совместимы друг с другом. Samsung уместил 36 линеек в 1U, Intel — 32, линейки Samsung ещё и в 3 раза короче, 110мм против 325мм. Вчера Samsung анонсировал, что они запускают 8TB NF1 NVMe SSD. Обещают, что к октябрю этого года формат NGSFF будет принят JEDEC — это ассоциация производителей полупроводниковой продукции.
#NVMe #Samsung #Intel
https://news.samsung.com/global/samsung-introduces-8tb-ssd-for-data-centers-in-next-generation-nf1-form-factor
Я был неправ, когда упомянул в прошлом посте только Samsung и Intel. Вариантов форматов NVMe SSD чуточку больше. Есть еще варианты от HPE совместно с Dell, от Lenovo. И это конечно без учета AIC и M.2.
Я такой умный теперь, потому что посмотрел видео с NVMe Devoloper Day 2018, в котором как раз и рассказывают про то, какие форматы есть, с какими сложностями сталкиваются их проектировщики.
#NVMe
https://youtu.be/W8q6kDVLuJw
​​TR-4684. Implementing and Configuring Modern SANs with NVMe/FC
Документ описывает общие концепции NVMe и NVMe over Fabrics, как реализована поддержка NVMe/FC в ONTAP, какие преимущества в производительности, какие сейчас существуют ограничения. Основное ограничение сейчас — нет поддержки мультипасинга, связано это с тем, что протокол всё ещё находится в активной фазе развития. Вообще NetApp является основным автором спецификации ANA (Asymmetric Namespace Access) — это аналог ALUA. Но предложения были ратифицированы только в марте 2018. К этому моменту разработка ONTAP 9.4 явно была уже в фазе тестирования и добавлять новую функциональность было бессмысленно. Но в следующих релизах всё будет.
В конце документа очень обширная подборка полезных ссылок на стандарты, документы, видео. Например, там есть сравнение RoCE с iWARP за авторством Mellanox. Несложно догадаться какой протокол оказывается лучше, но читать всё равно полезно и интересно.
#TR #ONTAP #NVMe #FC #SAN #AFF

https://www.netapp.com/us/media/TR-4684.pdf
J Metz, который является R&D Engineer Storage Networking and Solutions в Cisco и членом Совета директоров SNIA, написал пост про NVMe-oF для самых маленьких. Я узнал оттуда, что бывают нестандартные реализации NVMe over Fabrics. Жаль, что J Metz не упоминает конкретные компании, которые пошли нестандартным путём.
#NVMe
https://jmetz.com/2018/08/nvme-over-fabrics-for-absolute-beginners/

Можно дополнительно посмотреть его выступление на Storage Field Day 16. Там он рассказывает про то, чем занимается SNIA и про NVMe-oF.
https://www.youtube.com/watch?v=eknj7mWm_LQ
https://www.youtube.com/watch?v=HfcZwkPzj4w
Видео на выходные. Плейлист с презентациями от NVM Express Promouter Group, которые были на Flash Memory Summit 2018. Сам посмотреть не успел ещё, так что ничего конкретного рекомендовать к просмотру не могу.
#NVMe
https://www.youtube.com/playlist?list=PLJMP5bTTaoXkvaHFZL6oZyCx5pjjOyAlP
Немного про пользу NVMe для баз данных. Основной посыл, что низкие задержки для БД важнее высоких показателей IOPS. К сожалению в посте мало технических деталей. Тут я полагаюсь на авторитет автора. Jeffrey Steiner я несколько раз слушал лично на NetApp Insight. Он автор многих Technical Reports, связанных с работой Oracle на NetApp.
#Oracle #NVMe
https://words.ofsteiner.com/2018/08/24/netapp-nvme-for-your-database/

https://www.netapp.com/us/media/tr-3633.pdf
https://www.netapp.com/us/media/tr-4591.pdf
https://www.netapp.com/us/media/tr-4592.pdf
​​Вышла новая версия ОС для NetApp E-series — SANtricity OS 11.50. И это очень приятное обновление, потому что теперь EF570 и E5700 поддерживают NVMe over RoCE. Если кто забыл, то эти модели уже около года поддерживают NVMe over IB.
Что нового:
- NVMe over RoCE interface - An NVMe over Ethernet (RoCE) host connection can now be ordered for EF570 or E5700 E-Series controllers. System Manager includes new functions for configuring the network connection to the host (available from the Hardware page or from Settings > System), and functions for viewing data about the NVMe over RoCE connections to the storage array (available from Support > Support Center or from Settings > System).
- Manual drive selection for Volume Groups - In addition to convenient automatic selection, you now have the option to select individual drives when you create a Volume Group. In general, automatic drive selection is recommended but the individual drive selection option is available for those with special drive location requirements.
- Remote mirror setup - It is now possible to set up a mirroring relationship between some combination of E2800/EF280 and E5700/EF570 from within SANtricity System Manager. Previously this required SANtricity Storage Manager enterprise management window, and this is still the case if a storage system other than those mentioned is involved.
- SANtricity Unified Manager - SANtricity Unified Manager is a separately installed, browser-based application that discovers and manages E2800/EF280 and E5700/EF570 storage systems. This is not strictly speaking a new feature of System Manager, but it provides a new browser-based enterprise framework from which SANtricity System Manager can be launched for discovered systems. The new E-Series SANtricity Unified Manager can be downloaded from the NetApp Support software downloads area.
- 32Gb/s Fibre Channel and 25Gb/s iSCSI host interface cards available for EF280/E2800 platform
#NVMe #ESeries
​​Обновился совместный с Broadcom документ из серии NetApp Verified Architecture с архитектурой решенеия для Oracle поверх NVMeoF — NetApp and Broadcom Modern SAN Cloud-Connected Flash Solution. Oracle and SUSE NetApp Verified Architecture Design Edition. В документе описано решение с использованием AFF A700s и Brocade G620, подробно описано как настроена сеть, как разбиты диски и т.д., вплоть до точных версий прошивок HBA. Посчитана экономия от перехода с SCSI FC на NVMe over FC.
Я не перечитывал документ, но самое заметное изменение это более подробные графики с производительностью. Хороший аргумент в пользу использования NVMe-oF даже в системах NetApp AFF с SAS SSD. Напомню, NVMe-oF поддерживается в A300, A700, A700s и A800. В ONTAP 9.5 добавили поддержку ANA - Asymmetrical Namespace Acsess, аналог ALUA.
#NVMe #AFF #brocade #Oracle
https://www.netapp.com/us/media/nva-1126-design.pdf
Что нового нас ожидает в ONTAP 9.5. Много хорошего и приятного 🙂
- Синхронный SnapMirror. Можно переключаться с асинхронного на синхронный SnapMirror и обратно без baseline transfer.
- Возвращение FlexCache томов. Кэширование файлового доступа внутри кластера или на удаленных кластерах. Кэшируются операции чтения, записи и работа с метаданными. По поводу записи пока не совсем ясно, раньше было проксирование операций записи.
- BGP LIFs.
- Изменения в репортинге логической ёмкости. Теперь можно назначить квоты на логическую ёмкость.
- MAX Data. Это поддержка PMEM на стороне сервера с тирингом в ONTAP. Миллионы IOPS с задержками 10-12 микросекунд. Продукт, который появился благодаря приобретению стартапа Plexistor. Если интересно, то поищите, в канале уже были посты на эту тему.
- NetApp Data Availability Services (NDAS). Решение для резервного копирования в облако или объектное хранилище.
- NVMe over FC теперь поддерживает ANA для multipathing’а. ANA — аналог ALUA, но для NVMe-oF. Это часть стандарта NVMe-oF и пока NetApp первый, кто поддерживает multipathing на основе стандарта, который должен стать общепринятым в индустрии.
- Технологии эффектиновсти стали на 15% эффективнее. Вроде как за счёт улучшения работы компрессии.
- SnapLock теперь поддерживает движок Unified SnapMirror (XDP) и 1023 снепшота на том.
- MetroCluster IP теперь работает на расстоянии до 700 км и поддерживаются контроллеры A300 и FAS8200.
Подробнее и с картинками по ссылке. Как появятся release notes, пройдёмся по нововведениям ещё раз.
#ONTAP #SnapMirror #NVMe #MCC
https://whyistheinternetbroken.wordpress.com/2018/10/24/ontap95-announced/
​​Еще один совместный документ NetApp и Broadcom из серии NetApp Verified Architecture теперь с архитектурой решенеия для MongoDB поверх NVMe-oF — NetApp and Broadcom Modern SAN Cloud-Connected Flash Solution. MongoDB and SUSE NetApp Verified Architecture Design Edition.
#NVMe #AFF #MongoDB #brocade
https://www.netapp.com/us/media/nva-1127-design.pdf
Свежие Technical Reports.
TR-4766. NetApp E-Series and NVMe over Fabrics Support. Nonvolatile Memory Express over InfiniBand and RoCE on E-Series Systems.
Полезный документ с общим описанием того, как реализована работа NVMe-oF в E-series.
https://www.netapp.com/us/media/tr-4766.pdf

TR-4736. SANtricity Web Services API. Built-In and Central Management Capabilities.
Про RESTful API на E-series. Все новые модели имеют встроенный API на борту. Для использования API со старыми моделями (E2700/E5600) и/или для управления несколькими массивами можно использовать отдельный сервер с Web Services Proxy. Поддерживается Windows и Linux.
https://www.netapp.com/us/media/tr-4736.pdf

TR-4755. BeeGFS with NetApp E-Series. Solution Deployment.
Использование E-series в качестве “строительных блоков” для параллельной кластерной файловой системы BeeGFS.
https://www.netapp.com/us/media/tr-4755.pdf

TR-4598. FabricPool Best Practices. ONTAP 9.5
Из названия всё ясно. Обновленная версия документа, с учётом того, что появилось в ONTAP 9.5.
https://www.netapp.com/us/media/tr-4598.pdf

TR-4757. SAP Applications on Microsoft Azure using NetApp Cloud Volumes ONTAP.
Рекомендации по использованию Cloud ONTAP для SAP в Azure. Есть аналогичный документ про использование Azure NetApp Files (TR-4746), давал на него ссылку несколько недель назад.
https://www.netapp.com/us/media/tr-4757.pdf

TR-4763. Best Practices for Networking and Network Maintenance on NetApp SolidFire Storage Systems.
О правильной настройке сети для SolidFire.
https://www.netapp.com/us/media/tr-4763.pdf

#TR #ESeries #NVMe #SAP #HANA #Cloud #FabricPool #SolidFire #iSCSI
​​TR-4767. NetApp AFF A800 Performance with Oracle RAC Database.
Внутренний тест A800, симулирующий нагрузку Oracle 100% SELECT и 75% SELECT / 25% UPDATE. Первый профиль сугубо для красоты. Что мне больше всего нравится в таких тестах, так это возможность проследить как растёт производительность с выходом нового оборудование и что ещё важнее с выходом новых версий ONTAP. В документе есть графики тестов ONTAP 9.4 и 9.5. По ссылке старый TR, в котором описаны тесты A700 и есть графики AFF8080A ещё с cDOT 8.3.1.

В текущем документе есть сравнение производительности FC и NVMe/FC. Задержки на стороне хостов впечатляют.

#AFF #NVMe #FC #Oracle #TR
https://www.netapp.com/us/media/tr-4767.pdf
На StorageReview вышел обзор NetApp AFF A800. Мне не очень нравятся тесты производительности, которые проводят на SR, но зато в статье есть geek porn 🙂
На что обратить внимание? Если две СХД разного класса и разной мощности показывают одинаковые результаты в тесте, то значит узким местом была не СХД. И такой тест не имеет практической пользы для сравнения двух СХД. Я про тест SQL Server Performance.
Второй момент, про который не стоит забывать, A800 тестировалась с инлайн технологиями эффективности, они включены по-умолчанию. Если их выключить, то в случае с NetApp изменения производительности не будет. Но у многих других вендоров производительность меняется при включении/выключении технологий эффективности.
И в тесте не использовали NVMe over FC. Я так понял, что будет ещё один тест.
#AFF #NVMe
https://storagereview.com/netapp_aff_a800_review
​​Всё что вы хотели знать про AFF A320. Точнее всё, что я про неё знаю и чем могу поделиться 🙂

#AFF #NVMe
https://alikulov.me/blog/all/netapp-aff-a320/
Обновился TR-4684. Implementing and Configuring Modern SANs with NVMe/FC. Это уже 4 версия документа. Когда я постил его в первый раз, ONTAP был версии 9.4. С тех пор достаточно много изменений в 9.5 и 9.6. За изменениями лучше сразу идти в раздел 6 NVMe/FC Features and Limitations на странице 16.
#TR #ONTAP #NVMe #FC #SAN #AFF
https://t.me/storagetalks/519
Анонсирован массив NetApp EF600. E2E NVMe массив, работающий под управлением SANtricity OS. На момент запуска поддерживаются 100Gb NVMe/RoCE, 100Gb NVMe/InfiniBand, 32Gb NVMe/FC, а вот SCSI FC будет доступен только в Октябре 2019.
Надеюсь, что в ближайшее время протестируют в SPC, а пока обещают следующую производительность:
<100µs up to 200,000 4K random write IOPS
<100µs up to 150,000 4K random read IOPS
<250µs up to 2,000,000 4K random read IOPS
#ESeries #AFA #EF #NVMe
https://blog.netapp.com/ef600-all-flash-array/