StorageTalks

storagetalks @ telegram, 853 members, 666 posts since 2016

Полезные материалы про системы хранения данных NetApp, немного о конкурентах и просто интересные ссылки.
🚮 🔃 💽 💾 🍖 🔃 🏆 & 😌 🖇

С вопросами к @alikulov

Обсуждения в чате: t.me/storagediscussions

Филиал в вебе: storagetalks.net

Posts by tag «AFF»:

storagetalks, August 09, 14:19

​​Новый Technical Report. TR-4788. Architecting I/O-Intensive MongoDB Databases on NetApp. Рекомендации по архитектуре решения для использования MongoDB с ONTAP для БД, котрые требуют много IOPS с низкими задержками (I/O-Intensive Databases).

#TR #AFF #ONTAP #Select #Cloud #MongoDB

www.netapp.com/us/media/tr-4788.pdf

storagetalks, June 26, 20:09

Обновился TR-4684. Implementing and Configuring Modern SANs with NVMe/FC. Это уже 4 версия документа. Когда я постил его в первый раз, ONTAP был версии 9.4. С тех пор достаточно много изменений в 9.5 и 9.6. За изменениями лучше сразу идти в раздел 6 NVMe/FC Features and Limitations на странице 16.

#TR #ONTAP #NVMe #FC #SAN #AFF

t.me/storagetalks/519

StorageTalks

​​TR-4684. Implementing and Configuring Modern SANs with NVMe/FC Документ описывает общие концепции NVMe и NVMe over Fabrics, как реализована поддержка NVMe/FC в ONTAP, какие преимущества в производительности, какие сейчас существуют ограничения. Основное ограничение сейчас — нет поддержки мультипасинга, связано это с тем, что протокол всё ещё находится в активной фазе развития. Вообще NetApp является основным автором спецификации ANA (Asymmetric Namespace Access) — это аналог ALUA. Но предложения были ратифицированы только в марте 2018. К этому моменту разработка ONTAP 9.4 явно была уже в фазе тестирования и добавлять новую функциональность было бессмысленно. Но в следующих релизах всё будет. В конце документа очень обширная подборка полезных ссылок на стандарты, документы, видео. Например, там есть сравнение RoCE с iWARP за авторством Mellanox. Несложно догадаться какой протокол оказывается лучше, но читать всё равно полезно и интересно. #TR #ONTAP #NVMe #FC #SAN #AFF https://www.netapp.com/us/media/TR-4684.pdf


storagetalks, May 08, 13:22

​​Всё что вы хотели знать про AFF A320. Точнее всё, что я про неё знаю и чем могу поделиться 🙂

#AFF #NVMe

alikulov.me/blog/all/netapp-aff-a320/

storagetalks, May 08, 08:27

На StorageReview вышел обзор NetApp AFF A800. Мне не очень нравятся тесты производительности, которые проводят на SR, но зато в статье есть geek porn 🙂

На что обратить внимание? Если две СХД разного класса и разной мощности показывают одинаковые результаты в тесте, то значит узким местом была не СХД. И такой тест не имеет практической пользы для сравнения двух СХД. Я про тест SQL Server Performance.

Второй момент, про который не стоит забывать, A800 тестировалась с инлайн технологиями эффективности, они включены по-умолчанию. Если их выключить, то в случае с NetApp изменения производительности не будет. Но у многих других вендоров производительность меняется при включении/выключении технологий эффективности.

И в тесте не использовали NVMe over FC. Я так понял, что будет ещё один тест.

#AFF #NVMe

storagereview.com/netapp_aff_a800_review

NetApp AFF A800 Review | StorageReview.com - Storage Reviews

The AFF A800 is the top-of-the-line ONTAP all-flash storage array from NetApp, which at launch offered an industry-first, end-to-end NVMe/FC over 32Gb FC, as well as 100GbE connectivity. To date, we have been working our way through the all-flash AFF lineup, starting with the potent A200 (having since been replaced by the A220) as well as the A300. Both of the units we previously reviewed won Editor’s Choice awards. Today we will be looking at the NVMe-based A800 powerhouse that offers the same ONTAP benefits of the previously reviewed models, as well as exponentially faster performance and lower latency. While this initial review focuses on system performance over Fibre Channel, subsequent articles will dive into the A800's end-to-end NVMe over Fabrics (NVMeoF) support. 


storagetalks, April 25, 16:25

​​NetApp Tech ONTAP Podcast. Episode 185 – Oracle on MAX Data

Послушал подкаст про Oracle с MAX Data.

Так как не всем удобно слушать подкасты, да ёще и на английском, я во время прослушивания набросал заметки с тем, что мне показалось интересным.

Писать про то, что такое MAX Data не буду. Про этом было много раз на канале, поищите.

- В будущих версиях будет поддерживаться DAS как tier 2.

- С выходом Optane стало хорошо, намного больше ёмкость в сравнении c NVDIMM.

- Зачем вообще MAX Data, почему бы просто не использовать Optane? Производительность локальной Persistent Memory c функциональностью промышленного решения — снепшоты, синхронная репликация на MAX Recovery, асинхронная репликация SnapMirror на другую СХД, в облако.

- Для работы с Optane в режиме AppData придётся переписывать приложение. С MAX Data в этом нет необходимости. Приложение работает с POSIX-совместимой файловой системой — m1fs.

- Как поменялись ожидания/возможности по latency за последние годы. На HDD хотели 8-10 мс, на AFA - 1 мс, c PM и MAX Data - 20 мкс.

- Даёт уверенность, что если база медленная, то теперь это ТОЧНО не СХД.

- Вариант использования: Data files на m1fs, redo на обычном LUN.

- При создании снепшота m1fs делает снепшот у себя на хосте, AFF делает снепшот того, что есть в LUN. После из этого собирается один общий снепшот на AFF.

- Кроме Oracle тестировали с PostgreSQL и MySQL. PostgreSQL проще для интеграции со снепшотами.

Сегодня попался в презентации график производительности для MAX Data и AFF A220. Размер базы 5ТБ, сколько было Optane неизвестно, но понятно, что для таких задержек working set должен был помещаться в Optane целиком. По-умолчанию предлагается считать, что для OLTP Oracle working set — 10%.

#Optane #MAXData #AFF #Oracle

whyistheinternetbroken.wordpress.com/2019/04/12/ep185-oracle-max-data/

А вот небольшой привет от Dan Isaacs, который участвовал в записи подкаста. Он Technical Marketing Engineer в NetApp. Думаю многим попадались его презентации и Technical Reports.

twitter.com/danisaacs/status/1121085530370916352

Dan Isaacs

@NetApp_Russia @Oracle Spasibo vam, moi druz'ya! (my High School foreign language is finally paying off!)


storagetalks, April 12, 12:56

Обзор Samsung 983 ZET SSD на основе Z-NAND у Tom's Hardware. Samsung позиционирует Z-NAND как конкурента для Intel Optane. Судя по графикам производительности, лучше всего 983 ZET SSD проявит себя в качестве кэша на чтение. У NetApp были планы по использованию Z-NAND как кэша в AFF системах. Но пока в продукт, доступный на рынке, это не вылилось. Хотя графики и PoC показывали.

#AFA #AFF #ZNAND

www.tomshardware.com/reviews/samsung-983-zet-z-nand-optane-ssd,6036.html

Samsung 983 ZET SSD Review: Z-NAND Takes On Optane - Tom's Hardware

Samsung's new Z-NAND powered 983 ZET goes toe-to-toe with Intel's Optane.


storagetalks, April 08, 13:43

​​TR-4767. NetApp AFF A800 Performance with Oracle RAC Database.

Внутренний тест A800, симулирующий нагрузку Oracle 100% SELECT и 75% SELECT / 25% UPDATE. Первый профиль сугубо для красоты. Что мне больше всего нравится в таких тестах, так это возможность проследить как растёт производительность с выходом нового оборудование и что ещё важнее с выходом новых версий ONTAP. В документе есть графики тестов ONTAP 9.4 и 9.5. По ссылке старый TR, в котором описаны тесты A700 и есть графики AFF8080A ещё с cDOT 8.3.1.

В текущем документе есть сравнение производительности FC и NVMe/FC. Задержки на стороне хостов впечатляют.

#AFF #NVMe #FC #Oracle #TR

www.netapp.com/us/media/tr-4767.pdf

storagetalks, March 19, 08:43

​​Немного обновлений по решениям для ML/AI.

Обновился документ NetApp Verified Architecture — NetApp ONTAP AI, Powered by NVIDIA. Scalable AI Infrastructure: Designing for Real-World Deep Learning Use Cases. Это документ про дизайн решения NetApp ONTAP AI. Приятный шкафчик с AFF A800, NVIDIA DGX-1 и Cisco Nexus 3232C 100GbE. Программная часть работает на NVIDIA GPU Cloud Deep Learning Software Stack и NetApp Trident. Поддержка на всё решение от одного вендора, можно на выбор обращаться к NetApp или NVIDIA. Из того, что заметил сразу, в этой версии документа AFF A800 тестировали уже с 7 системами NVIDIA DGX-1. То что A800 выдержит нагрузку более 4 DGX-1 указывалоссь и ранее, но не было соответствующих тестов. С ONTAP AI используется подход, который применяется к FlexPod. Можно использовать и младшие модели AFF, если нет необходимости в производительности A800.

Есть и второй документ, в котром подробно описано развёртывние решения ONTAP AI.

И в скором времени должны появиться результаты тетсирования NetApp AFF c NVIDIA DGX-2.

#nvidia #ONTAP #AI #ML #DL #Cisco #AFF

www.netapp.com/us/media/nva-1121-design.pdf

www.netapp.com/us/media/nva-1121-deploy.pdf

В продолжение темы, о том как за 20 минут развернуть решение ONTAP AI, включая сеть, СХД и серверы, с помощью Ansible.

blog.netapp.com/how-to-configure-ontap-ai-in-20-minutes-with-ansible-automation/

storagetalks, March 14, 15:56

Вышел документ из серии NetApp Verified Architecture — FlexPod Express with VMware vSphere 6.7U1 and NetApp AFF A220 with Direct-Attached IP-Based Storage. Но если месяц назад документ(t.me/storagetalks/692) был про дизайн решения, то этот уже про подробную процедуру деплоймента.

#FlexPod #AFF #VMware

www.netapp.com/us/media/nva-1131-deploy.pdf

StorageTalks

Документ из серии NetApp Verified Architecture — FlexPod Express with VMware vSphere 6.7U1 and NetApp AFF A220 with Direct-Attached IP-Based Storage. FlexPod для самых маленьких. Из интересного ONTAP 9.5 и прямое подключение по IP в UCS Mini Fabric Interconnect, поддерживается iSCSI SAN Boot и NFS для датасторов. Вместо AFF можно использовать FAS2750/20. Это документ с концептуальной архитектурой, позже должен появиться документ с подробно расписанным деплойментом. #FlexPod #AFF #VMware https://www.netapp.com/us/media/nva-1130-design.pdf


storagetalks, February 14, 17:34

Дэйв Хитц ушёл на пенсию. Такие дела.

Хотя в его случае это сложно назвать пенсией. Почитайте его пост, там он пишет о том, чем будет заниматься вместо NetApp. При этом он оставляет за собой должность Founder Emeritus — Заслуженный Основатель в Отставке.

blog.netapp.com/dave-hitz-retiring-from-netapp/

Today I Am Retiring From NetApp | NetApp Blog

Today I am retiring from NetApp. It sounds so abrupt, written out like that, but it is a gradual transition. I have been cutting back my NetApp time for the last couple of years, and especially the past few months, and I won’t suddenly disappear.


​​В дополнение к сообщению про SPEC SFS 2014 пост в блоге NetApp. Там наглядные графики.

#SPEC_SFS #AFF #FlexGroup

blog.netapp.com/keep-on-scalin-how-flexgroup-volumes-scale-out-performance/

storagetalks, February 14, 16:55

​​На Blocks & Files, сайдпроекте The Register, короткая статья о том какие быстрые WekaIO. В очередной раз протестировали свои системы в SPEC SFS 2014 и оказались быстрее всех. Вообще у SPEC SFS 2014 5 вариантов с разными типами нагрузки. Но абсолютное большинство вендоров почему-то тестируют системы в SFS2014 swbuild. Поэтому рассматривать остальные варианты теста, пока там всего пара вендоров, не имеет особого смысла. Ну и в статье забыли указать, что 12 февраля был опубликован результат теста 12-нодового кластера NetApp AFF A800. И этот кластер быстрее решения WekaIO. 6200 условных билдов в секунду против 5700. ORT (Overall Response Time) около 800 мкс. 3.1 млн млн операций в секунду. 39 GB секунду. В общем не забывайте заглядывать в источники, когда читаете новости. Заодно можно будет узнать, что 6 нод WekaIO — это на самом деле 23 сервера в 6 шасси Supermicro BigTwin 🤷‍♂️

Забавно, что ранее уже были опубликованы тесты с 4 и 8 нодами A800. А теперь в нужный момент появились результаты 12-нодовой системы. Подозреваю, что где-то уже лежат результаты тестирования 24 нод A800.

#AFF #SPEC_SFS

spec.org/sfs2014/results/sfs2014swbuild.html

storagetalks, February 12, 10:24

Документ из серии NetApp Verified Architecture — FlexPod Express with VMware vSphere 6.7U1 and NetApp AFF A220 with Direct-Attached IP-Based Storage. FlexPod для самых маленьких. Из интересного ONTAP 9.5 и прямое подключение по IP в UCS Mini Fabric Interconnect, поддерживается iSCSI SAN Boot и NFS для датасторов. Вместо AFF можно использовать FAS2750/20. Это документ с концептуальной архитектурой, позже должен появиться документ с подробно расписанным деплойментом.

#FlexPod #AFF #VMware

www.netapp.com/us/media/nva-1130-design.pdf

Download nva-1130-design.pdf 0.87 MB

storagetalks, November 29, 2018

​​Воу! NetApp протестировал AFF A800 в SPEC SFS2014 swbuild. Тестировали две конфигурации из 4 и 8 нод. Использовались FlexGroup. Напомню про старый пост с тестированием FAS8200, там есть описание того, что из себя представляет SPEC SFS2014swbuild. C A800 получили результат в 2200 и 4200 билдов в секунду. ORT (Overall Response Time) ниже 800 мкс. 1.1 млн и 2.1 млн операций в секунду. 13.9GB и 26.5GB секунду. Предыдущий лучший результат показали DDN — 1500 билдов.

#AFF #SPEC_SFS

blocksandfiles.com/2018/11/29/netapp-blows-filer-benchmark-to-smithereens/

storagetalks, November 20, 2018

​​Полтора месяца назад я искал добровольцев с AFF и 9.4 в чате канала. Все было ради возможности посмотреть сколько данных уехало бы в холодный слой, если бы использовался FabricPool. В 9.4 появилась опция, которая позволяет посмотреть объем данных, к которым не было никаких обращений за последние 30 дней. Напомню, что FabricPool — это агрегат, к которому присоединяется медленный слой в виде объектного хранилища. Это может быть StorageGRID, Amazon S3, Azure Blob, IBM COS. Через процедуру FPVR можно использовать и другие объектные хранилища, работающие по S3. Есть клиенты, у которых прицеплен Cloudian.

Есть несколько политик тиринга данных. Можно отправлять в облако только снепшоты, а можно отправлять продуктивные холодные данные. Тиринг работает на уровне 4КБ блоков. FabricPool поддерживается на AFF, FAS (только с all-ssd агрегатами), ONTAP Select и Cloud Volumes.

Ниже на скриншоте результат сбора статистики за 30+ дней у клиента на продакшн системе на агрегате с почти полусотней инстансов MySQL. Снепшоты не используются.

Для включения статистки надо использовать опцию агрегата:-is-inactive-data-reporting-enabled true

На скриншоте performance-tier-inactive-user-data-percent — это процент от общей ёмкости тома (size).

#FabricPool #S3 #StorageGRID #ONTAP #AFF

Компания Netwell в поисках активного и талантливого "Менеджера по продуктам резервного копирования" (Backup product manager).

Задачи: пресейл и развитие бизнеса.

#реклама #вакансия #Москва #BDM #backup

telegra.ph/Business-Development-Manager-backup-11-19

Менеджер по продуктам резервного копирования (Backup product manager)

Обязанности: Технический маркетинг: ∙ Продвижение продуктов на рынке ∙ Создание интереса к предлагаемым продуктам и решениям ∙ Информационная поддержка партнеров и клиентов по заданному направлению ∙ Проведение переговоров, выезд на встречи с партнерам и клиентами, проведение презентаций Продуктовая и предпродажная работа: ∙ Развитие и поддержание отношений с вендорами ∙ Ведение пайплайна сделок, отчетность перед вендором ∙ Квалификация и анализ входящих задач, постановка задачи для создания спецификации…


storagetalks, October 31, 2018

​​Еще один совместный документ NetApp и Broadcom из серии NetApp Verified Architecture теперь с архитектурой решенеия для MongoDB поверх NVMe-oF — NetApp and Broadcom Modern SAN Cloud-Connected Flash Solution. MongoDB and SUSE NetApp Verified Architecture Design Edition.

#NVMe #AFF #MongoDB #brocade

www.netapp.com/us/media/nva-1127-design.pdf

storagetalks, October 24, 2018

​​Обновился совместный с Broadcom документ из серии NetApp Verified Architecture с архитектурой решенеия для Oracle поверх NVMeoF — NetApp and Broadcom Modern SAN Cloud-Connected Flash Solution. Oracle and SUSE NetApp Verified Architecture Design Edition. В документе описано решение с использованием AFF A700s и Brocade G620, подробно описано как настроена сеть, как разбиты диски и т.д., вплоть до точных версий прошивок HBA. Посчитана экономия от перехода с SCSI FC на NVMe over FC.

Я не перечитывал документ, но самое заметное изменение это более подробные графики с производительностью. Хороший аргумент в пользу использования NVMe-oF даже в системах NetApp AFF с SAS SSD. Напомню, NVMe-oF поддерживается в A300, A700, A700s и A800. В ONTAP 9.5 добавили поддержку ANA - Asymmetrical Namespace Acsess, аналог ALUA.

#NVMe #AFF #brocade #Oracle

www.netapp.com/us/media/nva-1126-design.pdf

storagetalks, October 16, 2018

​​​​Обновился документ по деплойменту FlexPod Express. Теперь там AFF A220 и vSphere 6.7.

Кстати, понял, что это неплохой документ по настройке СХД с нуля для новичков. И необязательно, чтобы в инфраструктуре была Cisco.

#FlexPod #VMware #Cisco #AFF

www.netapp.com/us/media/nva-1123-deploy.pdf

storagetalks, September 27, 2018

​​​​Обновилось несколько technical reports связанных с рекомендациями по работе SAP HANA на системах FAS и AFF с использованием FC и NFS. Решил заодно собрать в этом посте все TR, связанные с SAP HANA. Кстати, кроме NetApp только один вендор сертифицировал единую линейку оборудования, которая поддерживает SAN и NAS. Это INFINIDAT. Но при этом с точки зрения масштабирования нет решений равных NAS кластеру из A800. Максимально поддерживается 384 ноды SAP HANA (следующее ближайшее значение у Huawei - 200 нод). Хотя конечно вряд ли кому-то потребуются такие инсталляции.

Список всех сертифицированных СХД:

www.sap.com/dmc/exp/2014-09-02-hana-hardware/enEN/enterprise-storage.html

Storage Best Practices:

TR-4435. SAP HANA on NetApp AFF Systems with NFS

www.netapp.com/us/media/tr-4435.pdf

TR-4436. SAP HANA on NetApp AFF Systems with FC Protocol

www.netapp.com/us/media/tr-4436.pdf

TR-4290. SAP HANA on NetApp FAS Systems with NFS

www.netapp.com/us/media/tr-4290.pdf

TR-4384. SAP HANA on NetApp FAS Systems with FC Protocol

www.netapp.com/us/media/tr-4384.pdf

TR-4338. SAP HANA on VMware vSphere with NetApp FAS and All Flash FAS Systems

www.netapp.com/us/media/tr-4338.pdf

Management:

TR-4018. Integrating NetApp ONTAP Systems with SAP Landscape Management

www.netapp.com/us/media/tr-4018.pdf

TR-4667. Automating SAP System Copies Using the SnapCenter 4.0 SAP HANA Plug-In

www.netapp.com/us/media/tr-4667.pdf

Backup and DR:

TR-4646. SAP HANA Disaster Recovery with Asynchronous Storage Replication. Using SnapCenter 4.0 SAP HANA Plug-In

www.netapp.com/us/media/tr-4646.pdf

TR-4614. SAP HANA Backup and Recovery with SnapCenter

www.netapp.com/us/media/tr-4614.pdf

TR-4711. SAP HANA Backup and Recovery using NetApp Storage Systems and Commvault Software

www.netapp.com/us/media/tr-4711.pdf

#SAP #AFF #NAS #SAN #TR #SnapCenter #Commvault #SnapMirror

storagetalks, August 01, 2018

​​Сотрудничество NetApp c NVIDIA вылилось в новый продукт — NetApp ONTAP AI. Приятный шкафчик с AFF A800, NVIDIA DGX-1 и Cisco Nexus 3232C 100GbE. Программная часть работает на NVIDIA GPU Cloud Deep Learning Software Stack и NetApp Trident. Поддержка на всё решение от одного вендора, можно на выбор обращаться к NetApp или NVIDIA. Есть документ с валидированной архитектурой, в котрой используется одна AFF A800 и 4 сервера DGX-1. В документе подробно описана архитектура решения, конфигурация серверов, СХД и коммутаторов. Приведены результаты тестов производительности. Для доступа используется NFS и FlexGroups. В конфигурации 1:4 загрузка контроллеров A800 ниже 20%, задержки ниже 700 мкс. То есть еще остаются ресурсы для подключения серверов. В случае с ONTAP AI работает подход FlexPod. Необязательно брать конкретные модели AFF и определенное количество серверов DGX-1. Если такая можная СХД не требуется, то можно использовать A700s, A300 или даже A220. И это всё равно будет ONTAP AI.

#nvidia #ONTAP #AI #ML #DL #Cisco #AFF

www.netapp.com/us/media/nva-1121-design.pdf

blog.netapp.com/accelerate-your-journey-to-ai-with-netapp-and-nvidia/

www.netapp.com/us/products/ontap-ai.aspx

www.netapp.com/us/company/news/press-releases/news-rel-20180801-692736.aspx

storagetalks, July 25, 2018

Очередная подборка свежих Technical Reports.

TR-4572. The NetApp Solution for Ransomware

Немного обновили документ о том, как бороться с вирусами-шифровальщиками. Снепшоты, репликация, FPolicy.

Как раз недавно этот вопрос обсуждался в нашем чате и было приятно прочитать о том, что клиенты счастливы, что снепшоты спасли их данные от шифрования.

Напомню про пост на Хабре на ту же тему - habr.com/post/332098/

#TR #ransomware

www.netapp.com/us/media/tr-4572.pdf

TR-4704. Deploying Veritas NetBackup with NetApp E-Series Storage

Документ описывает как использовать E-серию в качестве репозитория резервных копий Veritas NetBackup. В этом случае данные могут храниться на любой СХД. И описывается как бекапить данные с E-серии за счёт интеграции на уровне снепшотов.

#backup #veritas #netbackup #ESeries

www.netapp.com/us/media/tr-4704.pdf

TR-4598. FabricPool Best Practices. ONTAP 9.4

Рекомендации по использованию FabricPool. Это тиринг данных с ONTAP в объектное хранилище (AWS, Azure, StorageGRID). В 9.4 добавили возможность отправлять в облако не только данные из снепшотов, но и активные данные. Работает для AFF, all-SSD агрегатов на FAS, для ONTAP Select (на HDD тоже), в ONTAP Cloud.

#tiering #ONTAP #S3 #cloud #Select

www.netapp.com/us/media/tr-4598.pdf

TR-4400. VMware vSphere Virtual Volumes with ONTAP

Хороший документ, в котором собрано практически всё что нужно знать о работе VVols на ONTAP. Актуализировали информацию для VASA Provider 7.2. Например, подробно описали как работают QoS для VVol. Есть информация о том, как обеспечивать сохранность VASA Provider. Как бекапить VVols с помощью Commvault и Veeam.

#VVols #VMware #ONTAP

www.netapp.com/us/media/tr-4400.pdf

​​TR-4630. NetApp HCI with VMware Horizon 7

VDI на HCI с сайзингом, тестами производительности при помощи Login VSI. Тестировалось 8 маленьких вычислительных нод (7 под десктопы, 1 для инфраструктуры) и 4 маленькие ноды хранения. Напомню, что все ноды имеют три варианта small, medium, large. В такой конфигурации производительность ограничивалась вычислительными нодами, производительности нод хранения было с запасом. Дополнительно сравнили производительность большой ноды с маленькими. Из интересного сравнили изменение производительности до и после применения патчей от Spectre и Meltdown.

#TR #VMware #Horizon #HCI #SolidFire

www.netapp.com/us/media/tr-4630.pdf

​​TR-4684. Implementing and Configuring Modern SANs with NVMe/FC

Документ описывает общие концепции NVMe и NVMe over Fabrics, как реализована поддержка NVMe/FC в ONTAP, какие преимущества в производительности, какие сейчас существуют ограничения. Основное ограничение сейчас — нет поддержки мультипасинга, связано это с тем, что протокол всё ещё находится в активной фазе развития. Вообще NetApp является основным автором спецификации ANA (Asymmetric Namespace Access) — это аналог ALUA. Но предложения были ратифицированы только в марте 2018. К этому моменту разработка ONTAP 9.4 явно была уже в фазе тестирования и добавлять новую функциональность было бессмысленно. Но в следующих релизах всё будет.

В конце документа очень обширная подборка полезных ссылок на стандарты, документы, видео. Например, там есть сравнение RoCE с iWARP за авторством Mellanox. Несложно догадаться какой протокол оказывается лучше, но читать всё равно полезно и интересно.

#TR #ONTAP #NVMe #FC #SAN #AFF

www.netapp.com/us/media/TR-4684.pdf

storagetalks, July 18, 2018

​​Почти год назад я уже писал в канале про компанию Plexistor.

t.me/storagetalks/244

А теперь появляется публичная информация о том, как их решение будет интегрировано с NetApp AFF. Называться это будет NetApp Memory Accelerated Data или MAX Data. На серверах с Persistent Memory будет работать MAX FS, она же M1FS, которая будет зеркалироваться на AFF. Все понимают, что локально подключенные устройства хранения всегда быстрее сетевых СХД, но отстают по функциональности, надежности, гибкости и т.д. С MAX Data получаем очень высокую производительность на серверах и возможность репликации данных, использования снепшотов и прочие прелести AFF. Параллельно NetApp разрабатывает аналог FUSE для работы с Persistent Memory. Пока он называется ZUFS (Zoo FS) — Zero-copy User-mode FS. Файловые системы, работающие на уровне ядра всегда быстрее, чем те, которые работают в user-space. Но остаётся вопрос со скоростью и гибкостью разработки. ZUFS работает быстрее FUSE и написан специально для работы с Persistentent Memory.

#SCM #PM #AFF

blog.netapp.com/an-update-on-the-plexistor-acquisition-introducing-netapp-memory-accelerated-data/

Download nvmw2018-paper97-presentations-slides.pptx 3.05 MB
Download pmandzufsktlvmeetup14nov2017-171115095650.pdf 2.10 MB

storagetalks, July 10, 2018

Подборка свежих Technical Reports.

До того как начал писать пост, думал ссылок немного, а дописал и понял, что получилось на 3 поста. Читайте на здоровье 🙂

TR-4700. SnapCenter Plug-In for Oracle Database. Best Practices

Бекапы Oracle с помощью консистентных снепшотов, клоны для разработчиков и т.д. Как лучше размещать файлы баз данных, стоит ли держать несколько LUNов в одном FlexVol или нет? Сколько ресурсов выделять под сервер SnapCenter.

#Oracle #SnapCenter

www.netapp.com/us/media/tr-4700.pdf

TR-4699. NetApp Active IQ. Telemetry and UI Feature Security

Небольшой документ про ActiveIQ (AutoSupport). Описывает как работает ActiveIQ, какие данные для разных систем передаются, какие протоколы используются, какая польза от всего этого клиентам. Не так давно еще вышел TR-4688. Security and Privacy of NetApp Telemetry Data. Ссылка на него была в канале.

#ActiveIQ

www.netapp.com/us/media/tr-4699.pdf

Пара TR про решения NetApp для Hadoop.

TR-4697. NetApp ONTAP SAN Solution for Hadoop

Надо ли использовать Hadoop кластера с SAN хранилищем. В качестве примера взят AFF A300. Экономия ёмкости, так как можно использовать 2 реплики данных в HDFS, а не 3 как это принято с DAS. Компрессия дала около 30% экономии дискового пространства. В документы есть тесты производительности и сравнение с DAS-вариантом.

#Hadoop

www.netapp.com/us/media/tr-4697.pdf

TR-4382. NetApp In-Place Analytics Module. Best Practices

NetApp In-Place Analytics Module добавляет в Hadoop поддержку NFS. Зачем это? Позволяет компаниям анализировать уже накопленные данные, которые внутри компании хранятся на файловых хранилищах. Можно использовать клоны для тестов и QA, не используя дополнительную ёмкость и экономя время. Использовать несколько дата-центров и облачные сервисы для аналитики данных — SnapMirror позволяет легко реплицировать данные между on-prem СХД и ONTAP в облаке.

Это уже 3 версия модуля. Можно посмотреть на видео как модуль устанавливается, натсраивается и работает.

www.youtube.com/watch?v=8wKyzDkdL7c&list=PLdXI3bZJEw7l8oFkYC_umsBaBX3hqK3Oq&index=1

#Hadoop

www.netapp.com/us/media/tr-4382.pdf

TR-4471. E-Series and EF-Series Reference Architecture and Storage Best Practices with Veeam Backup & Replication 9.5

Использование NetApp E-series в связке с Veeam. Из-за своей невысокой цены и очень хорошой поточной производительности системы E-серии очень хорошо подходят в качестве репозиториев резервных копий Veeam.

#Eseries #Veeam #backup

www.netapp.com/us/media/tr-4471.pdf

TR-4658. NetApp SANtricity Cloud Connector 3.1

Многие не знают, но E-серия у NetApp тоже cloud-connected storage. SANtricity Cloud Connector это бесплатное решение, которое работает на Linux и позволяет бекапить снепшоты в объектные хранилища. Причём возможен бекап на уровне файлов, с гранулярностью восстановления на уровне директорий.

#cloud #ESeries

www.netapp.com/us/media/tr-4658.pdf

Два #TR по использованию FPolicy с решениями от IntraFind и STEALTHbits.

TR-4696. FPolicy Solution Guide for ONTAP: STEALTHbits File Activity Monitor

TR-4670. FPolicy Solution Guide for ONTAP: IntraFind. Full-Text and Enterprise Searches with iFinder5 Elastic Edition for NetApp

Напомню, что FPolicy это фреймворк внутри ONTAP, который позволяет сторонним продуктам получать уведомления при доступе к файлам на системах NetApp FAS. С помощью него сторонние продукты могут строить продивнутые отчеты, ограничивать доступ к конкретным файлам, применять квоты и т.д. Например, на основе FPolicy работает анивирусное сканирование файловы ресурсов.

#NAS #FPolicy

www.netapp.com/us/media/tr-4696.pdf

www.netapp.com/us/media/tr-4670.pdf

TR-4694. Visualizing NetApp HCI Performance. Using Grafana, Docker, Trident, and Graphite

Построение графиков, дашбородов и т.д. для NetApp HCI и SolidFire при помощи Grafana.

#SolidFire #HCI #Grafana

www.netapp.com/us/media/tr-4694.pdf

TR-4693. FlexPod Datacenter for Epic EHR Deployment Guide. Healthcare Industry Solution

Использование FlexPod для здравоохранения, конкретно с продуктами компании Epic. Это не то чтобы очень актуально для нашего региона. Epic в основном работает в США. Но внутри они используют БД InterSystems Caché, которая мне периодически попадается.

#FlexPod

www.netapp.com/us/media/tr-4693.pdf

TR-4695. Database Storage Tiering with NetApp FabricPool

Применение FabricPool при хранении баз данных. Напомню, что это решение по тирингу холодных данных с flash в облако или приватное объектное хранилище. Может быть очень выгодно именно с базами данных, ведь часто активная работа ведется только с данными, которые записаны в последнее время, а старые данные приходится держать онлайн для месячных или квартальных отчетов.

#FabricPool #AFF

www.netapp.com/us/media/tr-4695.pdf

TR-4613. ONTAP Select on KVM. Product Architecture and Best Practices

ONTAP Select поверх KVM. Самое интересное в этой версии документа — появление Software RAID. Пока он поддерживается только для KVM. Теперь доступны привычные RAID-4, DP и TEC. Также обещается прирост производительности относительно железного RAID-контроллера. Что-то мне подсказывает, что Select на KVM чаще будет обгонять Select на ESXi. Об этом не особо говорят публично, но в IBM Cloud активно используется Select.

#ONTAP #Selelct #KVM

www.netapp.com/us/media/tr-4613.pdf

TR-4375. NetApp MetroCluster for ONTAP 9.3

Для всех кому нужная синхронная репликация. Описание архитектуры NetApp MetroCluster, возможных конфигураций, настройки, взаимодействия с другой функциональностью ONTAP.

#MetroCluster

www.netapp.com/us/media/tr-4375.pdf

#TR

storagetalks, June 19, 2018

На CNews в рамках спецпроекта NetApp вышло интересное интервью с Дмитрием Конягиным из Nvidia Россия. Интервью про “ИИ”, машинное обучение и т.д., где это применяется на практике и как в этом помогают технологии Nvidia и NetApp. Дмитрий будет выступать на NetApp Directions 17 июля в Москве.

#nvidia #AI #ML #DL

storage.cnews.ru/articles/2018-06-14_nvidia_iskusstvennyj_intellekt_uchitsya_sovsem_ne_takkak_chelovek

Nvidia: Искусственный интеллект учится совсем не так, как человек

Системы искусственного интеллекта переживают бурный рост. Это влечет за собой колоссальный рост потребностей в вычислительных мощностях, а следом и опасения, что вычислительные ресурсы скоро будут исчерпаны....


​​Чуть больше про инфраструктуру для AI вычислений. В интервью из предыдущего поста упоминается совместная архитектура Nvidia и NetApp для AI. В качестве вычислительных ресурсов используются NVIDIA DGX-1, в каждом из которых по 8 GPU Tesla V100, для хранения данных можно использовать NetApp AFF A700s или A800, сеть на Cisco Nexus

3232C 100GbE. Решение позволяет легко и независимо масштабировать вычислительные и storage ресурсы. Одной A700 хватает на 4 NVIDIA DGX-1, а A800 вытягивает нагрузку с 5 NVIDIA DGX-1. Дальше можно добавлять AFF контроллеры в кластер, до 24 штук. Это всё прозрачно для серверов, так как используется NFS и FlexGroup. Подробнее об архитектуре можно почитать в тематическом white paper — WP-7267. Scalable AI Infrastructure. Designing For Real-World Deep Learning Use Cases. Там же есть результаты тестирования одной AFF A700s c DGX-1. Ну и кто-то наверное слышал про аналогичную архитектуру от Pure Storage под названием AIRI, маркетинг Pure во всю трубит об этом решении. И вот со сравнением результатов тестирования AFF A700s и Pure AIRI произошла "забавная" история. Об этом я напишу подробнее.

А если интересно почитать про подход NetApp к построению инфраструктуры для AI, то советую еще почитать Santosh Rao (Senior Technical Director for the Data ONTAP Engineering Group) или даже посмотреть видео с его выступлением на Storage Field Day.

В постах в блоге NetApp он рассказывает про то, на что обращать внимание при выборе файловой системы для AI вычислений, как NetApp обеспечивает передачу данных по конвееру данных от edge к core и в облако.

#nvidia #AI #ML #DL #AFF

storagetalks, June 14, 2018

У меня уже неделю в закладках лежит документ из серии NetApp Verified Architecture с архитектурой совместного решенеия NetApp и Broadcom для Oracle поверх NVMeoF — NetApp and Broadcom Modern SAN Cloud-Connected Flash Solution. Oracle and SUSE NetApp Verified Architecture Design Edition. А тут им поделились в соседнем канале. В документе описано решение с использованием AFF A700s и Brocade G620, подробно описано как настроена сеть, как разбиты диски и т.д., вплоть до точных версий прошивок HBA. Посчитана экономия от перехода с SCSI FC на NVMe over FC. Тут самое важное, что вместо 2 целых инженеров вам теперь хватит половины инженера. И основная проблема куда девать второую половину инженера 🙂

#NVMe #AFF #brocade #Oracle

Forwarded from Brocade Russia SAN:

NetApp and Broadcom Modern SAN Cloud-Connected Flash Solution

This NetApp® Verified Architecture has been jointly designed and verified by NetApp and Broadcom Inc. It uses the latest Brocade, Emulex, and SUSE technology solutions along with NetApp all-flash storage, which sets a new standard for enterprise SAN storage and data protection that will drive superior business value.

This document describes a verified, unified modern SAN solution reference architecture, designed by industry leaders Broadcom and NetApp with a first-to-market enterprise NVMe/FC solution. NetApp and Broadcom provide an end-to-end NVMe-powered solution, from host to storage controller, that can help you realize the promise and the benefits of NVMe technology right now.

ent.box.com/s/mc6rgei9u2adoawwnflnr1rej6urufla

storagetalks, May 14, 2018

​​Небольшой анбоксинг NetApp AFF A700s.

#AFF

blog.krogloth.de/unboxed-netapp-aff-a700s/

storagetalks, May 10, 2018

​​Если во время чтения последних новостей у кого-то возник вопрос: “А зачем NVMe-oF в текущих моделях AFF А300, А700, A700s?”, то вот вам отчёт от компании Demartek, которая протестировала A700s на одинаковых нагрузках с NVMe-oF и SCSI FCP. Если кратко, то NVMe-oF дал прирост IOPS на 58% и снижение latency на 34%. Они взяли A700s c 24 960GB SSD, на одной ноде использовали NVMe-oF, на другой — обычный FC. Глядя на графики, не забывайте, что это половина производительности, на которую способна A700s. Из интересного, для получения максимальной производительности потребовалось 4 NVMe namespace против 16 LUN’ов. За счет чего такой прирост производительности? NVMe стек в ONTAP написан с нуля — меньше legacy кода, короче путь данных, меньше переключений контекстов, лучше работает параллелизация.

Спасибо читателям канала за ссылку.

#AFF #NVMe #performance

www.demartek.com/Reports_Free/Demartek_NetApp-Broadcom_NVMe_over_Fibre_Channel_Evaluation_2018-05.pdf

storagetalks, May 08, 2018

​​Ну и конечно самый интересный анонос: AFF A800 — первый end-to-end NVMe all flash массив на рынке. Кроме новой топовой AFF системы вышло небольшое обновление для систем начального уровня — A220 и FAS2700.

#AFF #NVMe

alikulov.me/blog/all/aff-a800-pervy-end-to-end-nvme-all-flash-massiv-na-rynke/

storagetalks, April 10, 2018

​​Опять про деньги. Сравнение продаж all-flash систем за Q4 2017 по вендорам и по линейкам внутри вендора, что куда интереснее 🙂 Dell EMC за год в целом упали. Особенно заметно падение продаж XtremIO, учитывая бешенный рост после того как EMC их купил. All-flash VMAX просели на 16%. Unity подросли на 9%. Вполне возможно это всё результат слияния Dell и EMC. Но не совсем ясно, что будет драйвером роста. Например, у нас в чатике ходят слухи, что, VMAX дальше развивать не будут 🤷‍♂️

NetApp подрос на 25%. По линейкам - основные продажи это AFF. SolidFire продаётся больше, чем EF. Последних продалось на 8.8% меньше, чем год назад. Отдельно показаны результаты по NetApp All-flash FAS и NetApp AFF A-Series, хотя это просто разные поколения одной линейки.

У HPE обороты в сравнении с прошлым годом не изменились. Но на фоне 15% роста рынка, это падение доли. Интересно, что внутри произошло падение продаж all-flash 3Par на 17% и заметный рост Nimble. Хотя Nimble было продано в 2.5 раза меньше, чем 3Par, если такая динамика продолжится, то вполне возможно, что основной СХД для HPE станет Nimble.

Pure уверено растёт. По общей доле 3 место после Dell EMC и NetApp. Хотя HPE и IBM не сильно отстают.

Не забываем, что это цифры за квартал и за год в целом картина может быть немного иной.

#AFF #financial #HPE #Pure #IBM #EMC

www.theregister.co.uk/2018/04/09/analysts_day_reveal_flash_rises_and_falls/

storagetalks, April 09, 2018

​​Новый Technical Report. TR-4674. End-to-End Storage Provisioning for MongoDB. Deploying NetApp OnCommand Workflow Automation for MongoDB. В документе описано как с помощью WFA быстро разворачивать MongoDB сразу в нескольких дата-центрах. Для резервного копирования и/или создания тестовых баз можно использовать SnapCenter. Для MongoDB есть готовый шаблон в Storage Automation Store. Там вообще много все интересного для WFA и не только. Ну и самое главное — вместо Mongo DB может быть что-то другое. Всегда есть возможность соорудить свой workflow для WFA.

#MongoDB #AFF #TR #WFA #automation

www.netapp.com/us/media/tr-4674.pdf

storagetalks, March 14, 2018

​​Результаты от IDC по All Flash Array Market за Q4 2017. Год назад доля NetApp была ≈16%

#IDC #AFF #financial

older first