StorageTalks

storagetalks @ telegram, 403 members, 343 posts since 2016

Полезные материалы про системы хранения данных NetApp, немного о конкурентах и просто интересные ссылки.
🚮 🔃 💽 💾 🍖 🔃 🏆 & 😌 🖇

С вопросами к @alikulov

Обсуждения в чате: t.me/storagediscussions

Филиал в вебе: storagetalks.net

storagetalks, June 19, 14:51

На CNews в рамках спецпроекта NetApp вышло интересное интервью с Дмитрием Конягиным из Nvidia Россия. Интервью про “ИИ”, машинное обучение и т.д., где это применяется на практике и как в этом помогают технологии Nvidia и NetApp. Дмитрий будет выступать на NetApp Directions 17 июля в Москве.

#nvidia #AI #ML #DL

storage.cnews.ru/articles/2018-06-14_nvidia_iskusstvennyj_intellekt_uchitsya_sovsem_ne_takkak_chelovek

Nvidia: Искусственный интеллект учится совсем не так, как человек

Системы искусственного интеллекта переживают бурный рост. Это влечет за собой колоссальный рост потребностей в вычислительных мощностях, а следом и опасения, что вычислительные ресурсы скоро будут исчерпаны....


​​Чуть больше про инфраструктуру для AI вычислений. В интервью из предыдущего поста упоминается совместная архитектура Nvidia и NetApp для AI. В качестве вычислительных ресурсов используются NVIDIA DGX-1, в каждом из которых по 8 GPU Tesla V100, для хранения данных можно использовать NetApp AFF A700s или A800, сеть на Cisco Nexus

3232C 100GbE. Решение позволяет легко и независимо масштабировать вычислительные и storage ресурсы. Одной A700 хватает на 4 NVIDIA DGX-1, а A800 вытягивает нагрузку с 5 NVIDIA DGX-1. Дальше можно добавлять AFF контроллеры в кластер, до 24 штук. Это всё прозрачно для серверов, так как используется NFS и FlexGroup. Подробнее об архитектуре можно почитать в тематическом white paper — WP-7267. Scalable AI Infrastructure. Designing For Real-World Deep Learning Use Cases. Там же есть результаты тестирования одной AFF A700s c DGX-1. Ну и кто-то наверное слышал про аналогичную архитектуру от Pure Storage под названием AIRI, маркетинг Pure во всю трубит об этом решении. И вот со сравнением результатов тестирования AFF A700s и Pure AIRI произошла "забавная" история. Об этом я напишу подробнее.

А если интересно почитать про подход NetApp к построению инфраструктуры для AI, то советую еще почитать Santosh Rao (Senior Technical Director for the Data ONTAP Engineering Group) или даже посмотреть видео с его выступлением на Storage Field Day.

В постах в блоге NetApp он рассказывает про то, на что обращать внимание при выборе файловой системы для AI вычислений, как NetApp обеспечивает передачу данных по конвееру данных от edge к core и в облако.

#nvidia #AI #ML #DL #AFF

storagetalks (Igor Syurtukov), June 14, 13:32

Приглашаем партнеров, заказчиков и всех интересующихся тематикой NetApp посетить конференцию NetApp Directions, которая пройдет 17 июля 2018г. в Hyatt Regency Petrovsky Park (Москва, Ленинградский проспект, 36С33).

Необходима регистрация: www.netapp.ru/company/events/netapp-directions-2018-moscow - здесь же можно ознакомиться с программой и докладчиками.

NetApp Directions – это главное мероприятие года и крупнейшая техническая конференция NetApp в России и СНГ.

NetApp Directions конференция по управлению данными

Главное событие осени, посвященное технологиям хранения и управления данными


storagetalks, June 14, 12:33

У меня уже неделю в закладках лежит документ из серии NetApp Verified Architecture с архитектурой совместного решенеия NetApp и Broadcom для Oracle поверх NVMeoF — NetApp and Broadcom Modern SAN Cloud-Connected Flash Solution. Oracle and SUSE NetApp Verified Architecture Design Edition. А тут им поделились в соседнем канале. В документе описано решение с использованием AFF A700s и Brocade G620, подробно описано как настроена сеть, как разбиты диски и т.д., вплоть до точных версий прошивок HBA. Посчитана экономия от перехода с SCSI FC на NVMe over FC. Тут самое важное, что вместо 2 целых инженеров вам теперь хватит половины инженера. И основная проблема куда девать второую половину инженера 🙂

#NVMe #AFF #brocade #Oracle

Forwarded from Brocade Russia SAN:

NetApp and Broadcom Modern SAN Cloud-Connected Flash Solution

This NetApp® Verified Architecture has been jointly designed and verified by NetApp and Broadcom Inc. It uses the latest Brocade, Emulex, and SUSE technology solutions along with NetApp all-flash storage, which sets a new standard for enterprise SAN storage and data protection that will drive superior business value.

This document describes a verified, unified modern SAN solution reference architecture, designed by industry leaders Broadcom and NetApp with a first-to-market enterprise NVMe/FC solution. NetApp and Broadcom provide an end-to-end NVMe-powered solution, from host to storage controller, that can help you realize the promise and the benefits of NVMe technology right now.

ent.box.com/s/mc6rgei9u2adoawwnflnr1rej6urufla

storagetalks, June 14, 12:11

Углубляемся в детали отчётов от IDC и видим, что NetApp первые по продаже all-flash СХД в России, вторые по продаже SAN. Поздравляю всех причастных к этому результату, в том числе себя :)



storagetalks, June 13, 17:15

​​Теперь про цифры от IDC по all-flash рынку за 1Q18. Публично отчёт не доступен. The Register полагается на цифры от аналитиков Wells Fargo, которые своими глазами видели отчёт 🙂

Итак, рынок вырос на 54.7%. Самый заметный рост у Dell — +88.7%. NetApp вырос на 59.5%. А все остальные росли медленнее рынка.

Интересна разбивка по линейкам оборудования внутри вендоров. Основные продажи у Dell — VMAX и Unity. XtremIO продаётся заметно хуже, особенно если вспомнить, что пару лет назад за квартал их продавали в 3 раза больше.

У NetApp большая часть продаж — AFF. В таблице опять зачем-то разделили предыдущее поколение и текущее.

#IDC #financial #AFA

www.theregister.co.uk/2018/06/11/hpe_and_pure_allflash_array_market_shares_decline/

storagetalks, June 13, 16:52

​​Отдельно есть информация от IDC по External Storage Market в EMEA. Тут рынок вырос на 23.92%, что больше на 4.5%, чем рост во всем мире. И во многом благодаря стараниям Dell. Они выросли почти на 55%. NetApp вырос чуть меньше, чем весь рынок в регионе, HPE выросли, но всего на 11%. У IBM и Hitachi оборот упал. Продажи all-flash решений выросли на 58.7% и составили 32% продаж всех СХД в регионе.

#IDC #financial #EMEA

www.idc.com/getdoc.jsp?containerId=prEMEA43969618

storagetalks, June 13, 16:40

​​IDC опубликовал Worldwide Quarterly Enterprise Storage Systems Tracker за 1Q18. За год рынок вырос на 19.3%. Продажи росли у всех кроме IBM. Но быстрее рынка росли только Dell и NetApp. Соответственно у них доля на рынке выросла, а у остальных вендоров — упала. Продажи all-flash решений за год выросли на 54%.

#IDC #financial

www.idc.com/getdoc.jsp?containerId=prUS43964118

storagetalks, June 08, 15:41

Отличное видео от российского офиса NetApp. Поможет справиться с мыслями о том, что сегодняшняя пятница ненастоящая 🙂

drive.google.com/file/d/1bD-jLuQdb7SO-7JA0B247gmfVGrkh4Pp/view

NetApp_Russia.mp4


storagetalks, June 05, 11:40

Продолжение серии поcтов про изменения в Core Storage в vSphere 6.7. Теперь можно настраивать скорость работы space reclamation. По ссылке очень подробный пост с тестами скорости работы автоматического UNMAP.

#VMware #UNMAP

www.codyhosterman.com/2018/05/whats-new-in-core-storage-in-vsphere-6-7-part-v-rate-control-for-automatic-vmfs-unmap/

What’s New in Core Storage in vSphere 6.7 Part V: Rate Control for Automatic VMFS UNMAP

vSphere 6.7 core storage “what’s new” series: What’s New in Core Storage in vSphere 6.7 Part I: In-Guest UNMAP and Snapshots What’s New in Core Storage in vSphere 6.7 …


storagetalks, June 04, 13:47

В ActiveIQ (AutoSupport) появилась прикольная штука для HCI — сайзер по расширению кластера. Можно выбрать на сколько процентов планируется увеличить текущую нагрузку и ёмкость. Или подробно указать сколько нужно процессорной мощности, памяти, ёмкости и производительности хранилища. В результате получаем модели и количество нод, которые надо добавить в кластер. Как это выглядит можно посмотреть на видео. Кстати, на примере видно как здорово иметь возможность отдельно наращивать вычислительные ноды и ноды для хранения.

#HCI #ActiveIQ

www.youtube.com/watch?v=a2Vv5gSW3Xs

Performing an HCI sizing assessment using NetApp Active IQ Expansion Advisor
NetApp Active IQ Expansion Advisor enables you to assess your NetApp HCI systems to determine whether you need to add compute and storage nodes for new and g...

storagetalks, May 31, 21:46

Forwarded from ONTAP Updates:

Service Update: ONTAP - 9.3P5

Date Posted: 31-MAY-2018

mysupport.netapp.com/NOW/download/software/ontap/9.3P5/

storagetalks, May 31, 13:06

Желающие потыкать в ONTAP 9.4 могут воспользоваться Lab on Demand (labondemand.netapp.com), там появилась соответствующая лаба. Доступ правда только для партнёров. Для других возможен вариант с установкой симулятора ONTAP 9.3 и обновлением его до 9.4.

#LOD #ONTAP

storagetalks, May 28, 07:00

Свежие Technical Reports.

TR-4557. NetApp FlexGroup Volumes. A Technical Overview

Документ подробно описывает работу FlexGroups — масштабируемых файловых контейнеров. Много про производительность. Добавли то, что изменилось в ONTAP 9.4

www.netapp.com/us/media/tr-4557.pdf

TR-4571. NetApp FlexGroup Volume. Best Practices and Implementation Guide

Опять про FlexGroups. Рекомендации по использованию, больше практических примеров, в сравнении с предыдущим документом, и опять про производительность.

www.netapp.com/us/media/tr-4571.pdf

3 TR про альтернативные способы хранения Oracle 🙂 В облаке и на SDS варианте ONTAP. Общие рекомендации, варианты конфигураций, защита данных. Для AWS и ONTAP Select тесты производительности.

TR-4691. Oracle Databases on ONTAP Cloud with Microsoft Azure

www.netapp.com/us/media/tr-4691.pdf

TR-4676. Oracle Databases on ONTAP Cloud with Amazon Web Services

www.netapp.com/us/media/tr-4676.pdf

TR-4690. Oracle Databases on ONTAP Select

www.netapp.com/us/media/tr-4690.pdf

#TR #Oracle #Select #ONTAP #cloud #Select #Azure #AWS #FlexGroup

storagetalks, May 28, 06:00

​​На прошлой неделе NetApp объявил финансовые результаты за Q4 FY18 и за весь FY18. За год оборот вырос на 7%. Если сравнивать 4-ые четверти, то рост 11%. Темп продаж all-flash решений - 2.4 млрд $, YoY рост 43%. Проще говоря, за Q4 продали all-flash на $600 млн, в Q3 это было $500 млн.

На той неделе результатами за прошедшие четверти поделились Nutanix и Pure.

#Q4FY18 #financial

storagetalks, May 22, 14:23

Brocade устраивает вебинар по результатам тестирования NVMe over FC с NetApp. В канале есть ссылка на документ с результатами тестирования от Demartek.

Forwarded from Brocade Russia SAN:

Systems Engineer at Brocade Russia

Demartek Performance Audit: NVMe over Fibre Channel Beats SCSI.

Join our webinar on June 5th

Brocade recently participated in a 3rd party performance audit of NVMe over Fibre Channel versus SCSI FCP protocol. Performed by Demartek in collaboration with NetApp, Emulex and Brocade, the audit delivered crucial insights into the benefits you could gain by adopting this innovative, super-fast protocol.

Join our webinar and learn:

• What aspects of the NVMe stack make it so much more efficient than SCSI

• What applications are expected to benefit most from NVMe over Fibre Channel

• What is on the horizon for NVMe over Fibre Channel

With NVME over Fibre Channel proven to deliver dramatically higher IOPS and lower latency than SCSI FCP, this is time well-invested for the future of your storage networking.

Register now : attendee.gotowebinar.com/register/748636967412485377

storagetalks, May 22, 12:07

Intel подарил нам еще одну уязвимость. Продолжение истории со Spectre и Meltdown. Но уже не так серьезно. Security Advisory от NetApp — security.netapp.com/advisory/ntap-20180521-0001/

Speculative Execution Side Channel Vulnerabilities in NetApp Products | NetApp Product Security

Modern processors utilizing speculative execution and reads are susceptible to vulnerabilities which can allow local unprivileged attackers to gather sensitive data via side channel analysis. These vulnerabilities are referred to as Speculative Store Bypass (Variant 4) and Rogue System Register Read (Variant 3a).


Forwarded from Информация опасносте:

Помните про Spectre и Meltdown? Наверняка многие помнят, возможно, о самой главной новости инфосека этого года. Так вот, а история-то не закончилась! Microsoft и Google совместно сообщили о новой обнаруженной уязвимости под названием Speculative Store Bypass, эксплуатирующей спекуляционные исполнения в современных процессорах. Обновления в Safari, Edge, Chrome, минимизирующие риски Meltdown, вроде как работают и для SSB, но против SSB еще отдельно будет выпущено обновление микрокода процессора, которое приводит к снижению производительности процессора на 2-8%. В обновлении защита от SSB будет выключена по умолчанию, так что админам придется делать выбор между безопасностью и производительностью.

www.us-cert.gov/ncas/alerts/TA18-141A

www.intel.com/content/www/us/en/security-center/advisory/intel-sa-00115.html

bugs.chromium.org/p/project-zero/issues/detail?id=1528

Side-Channel Vulnerability Variants 3a and 4 | US-CERT

Common CPU hardware implementations are vulnerable to the side-channel attacks known as Spectre and Meltdown. Meltdown is a bug that "melts" the security boundaries normally enforced by the hardware, affecting desktops, laptops, and cloud computers. Spectre is a flaw that an attacker can exploit to force a CPU to reveal its data.Variant 3a is a vulnerability that may allow an


storagetalks, May 21, 13:18

Свежие Technical Reports.

TR-4598. FabricPool Best Practices. ONTAP 9.4

Добавили описание изменений и новых функций из ONTAP 9.4. Auto tiering policy, Microsoft Azure Blob support, inactive data reporting, and support for ONTAP Select

www.netapp.com/us/media/tr-4598.pdf

TR-4688. Security and Privacy of NetApp Telemetry Data

Описано какие данные собираются при работе AutoSupport, он же ActiveIQ, для всех продуктов NetApp, которые поддерживают эту функцию. Как эти данные передаются, сколько эти данные хранятся и можно ли их удалить по запросу (да).

www.netapp.com/us/media/tr-4688.pdf

TR-4678. Data Protection and Backup NetApp FlexGroup Volumes

Как работают снепшоты и репликация для FlexGroup — файловых шар, которые размазаны по всему кластеру и состоят из множества FlexVol.

www.netapp.com/us/media/tr-4678.pdf

#TR #FabricPool #FlexGroup #ActiveIQ #SnapMirror #SnapVault

storagetalks, May 21, 13:03

⁣Опубликован документ с референсной архитектрурой NetApp EF280 для Microsoft SQL Server 2017 Data Warehouse Fast Track. EF280 — all-flash вариант E2800. Очень достойные результаты по производительности. Для сравнения с конкурентами можно посмотреть опубликованные отчёты на сайте MS. Например, EF280 показывает лучшую производительность, чем Pure FlashArray//M70.

#TR #ESeries #performance

www.netapp.com/us/media/tr-4687.pdf

SQL Server Data Warehousing | Microsoft

Whether your data is on-premises or in the cloud, or whether your data is structured or unstructured, Microsoft data warehouse solutions offer scale, flexibility, and empower your organization with insight.


EF280 DWFT Reference Architecture Certification

storagetalks, May 21, 07:00

⁣Обновился NetApp PowerShell Toolkit (PSTK). В версии 4.6 добавили поддержку ONTAP 9.4.

#PowerShell #PSTK

community.netapp.com/t5/Microsoft-Cloud-and-Virtualization-Discussions/NetApp-PowerShell-Toolkit-4-6-released/td-p/140316

NetApp PowerShell Toolkit 4.6 released!

Dear PowerShell community, We are glad to announce the release of NetApp PowerShell Toolkit version 4.6 . This unified release has enhancements for Data ONTAP module.    ONTAP PowerShell Module: The latest release adds upto 2210 cmdlets and provides maximum API coverage for ONTAP 9.4 and is backwar...


storagetalks, May 19, 07:34

Forwarded from ONTAP Updates:

Service Update: ONTAP - 9.2P4

Date Posted: 18-MAY-2018

mysupport.netapp.com/NOW/download/software/ontap/9.2P4/

storagetalks, May 16, 17:23

Brocade совместно с NetApp выпустил брошюру NVMe over Fibre Channel for Dummies. Будет полезно не только "чайникам".

#NVMe #FC

Download nvme-over-fibre-channel-for-dummies-brocade.pdf 2.02 MB

storagetalks, May 16, 11:40

⁣Подробная kb-статья про настройку NVMe-oF на SLES12 и ONTAP 9.4. Требуется логин.

#NVMe

kb.netapp.com/app/answers/answer_view/a_id/1076721

storagetalks, May 15, 20:41

Forwarded from Brocade Russia SAN:

Broadcom, NetApp & SUSE Announce Production Availability of the Industry’s First End-to-End NVMe over Fibre Channel Solution Enabling Groundbreaking Application Performance

www.nasdaq.com/press-release/broadcom-netapp--suse-announce-production-availability-of-the-industrys-first-endtoend-nvme-over-20180515-00690

Broadcom, NetApp & SUSE Announce Production Availability of the Industry’s First End-to-End NVMe over Fibre Channel Solution Enabling Groundbreaking Application Performance

SAN JOSE, Calif., May 15, 2018 (GLOBE NEWSWIRE) -- Broadcom Inc. (NASDAQ:AVGO), today announced production availability of the industry's first end-to-end NVMe over Fibre Channel storage solution with NetApp and SUSE.  NVMe over Fibre Channel extends the natively parallel NVMe protocol to run on existing SAN infrastructure fabric while providing massive gains in application productivity and performance so customers can power new projects and get more done, faster.


storagetalks, May 14, 12:32

​​Небольшой анбоксинг NetApp AFF A700s.

#AFF

blog.krogloth.de/unboxed-netapp-aff-a700s/

storagetalks, May 14, 09:16

​​У Demartek, которые сравнивали производительность SCSI FC и NVMe-oF на NetApp A700s, есть довольно неплохое сравнение интерфейсов/протоколов доступа к данным. Это собранный в одном месте набор справочной информации с максимальными скоростями, типами конекторов, планами по развитию и т.д. Они периодически обновляют эту страницу, так что добавляйте её в закладки. Полезно для общего развития и как справочник.

#NVMe #iSCSI #FC #InfiniBand #NAS

www.demartek.com/Demartek_Interface_Comparison.html

storagetalks, May 11, 18:12

Config Advisor обновился до версии 5.3. Что нового:

- Supports ONTAP 9.4 release

- Supports new NetApp platforms: All Flash FAS (AFF) A800, FAS2750, and FAS2720

- Supports new 100G cluster switch from Cisco (Cisco Nexus 3232C)

- MetroCluster visualization from ONTAP AutoSupport data

Что это вообще такое писал ранее —> storagetalks.net/378

StorageTalks

​​Config Advisor обновился до версии 5.2. Это инструмент для проверки правильности настройки СХД. Очень удобно использовать для проверки свежеинсталлированных систем. Проверяет правильно ли подключены полки, настройки DNS, NTP и т.д., актуальность версий прошивок. Всего больше пары сотен проверок. Проверяет FAS/AFF, MetroCluster, FlexPod, FkexArray, E-серию. Запускается на macOS, Windows и Linux. В общем очень полезный и удобный инструмент. Что нового в 5.2: - Supports ONTAP Multifactor Authentication (MFA) for SSH - Supports Config Compare - Stack Visualization tab is added to Visualization section in the View & Analyze tab. - Upgrade and enhancements provided in the graphical user interface (GUI), such as Filter and sort options across all grids, search capability in Raw data viewer, combining Save and Collect buttons, and providing job name for AutoSupport-based collection - Improvement in memory consumption Качать с support-сайта в ToolChest. #ConfigAdvisor #diag


storagetalks, May 11, 14:33

​​Если для доступа к документации вы всё еще по привычке заходите на support-сайт, а потом тратите несколько лишних кликов, чтобы через меню попасть в раздел с документацией, то начинайте использовать docs.netapp.com Почти всё что нужно в одном месте. Кроме ссылок на стандартную справочную документацию есть ссылки на полезные ресурсы вроде Technical Reports и постеров по инсталляции новых систем.

storagetalks, May 11, 13:49

Немного не по теме нашего канала, но думаю многим будет интересно. nginx совместно с издательством O’Reilly бесплатно раздают кинигу "Container Networking: From Docker to Kubernetes”.

#networking #kubernetes #k8s #Docker

twitter.com/mhausenblas/status/988708649039253504

Michael Hausenblas

Seems my "Container Networking: From Docker to Kubernetes" @OReillyMedia book is now available for download via @nginx for free: https://t.co/jZjxabS5Rn Thanks and hope you enjoy reading it! #container #networking #Kubernetes


storagetalks, May 11, 10:42

Очень объемное обновление модулей ONTAP для Ansible. 33 новых и обновленных модуля. Появилось управление клонами, снепшотами, протоколами, сетевыми ресурсами и т.д.

#DevOps #ansible #ONTAP

netapp.io/2018/05/05/ansible-support-receives-massively-expanded-ontap-modules/

Ansible support receives massively expanded ONTAP modules - thePub

Ansible users rejoice. Today NetApp is proud to announce the release of 33 new and updated ONTAP modules for Ansible. Ansible is an open source IT automation framework, initiated and managed by Red Hat, which acts as a layer for connecting automation across DevOps services and tooling. It was created to help developers and IT ... Read more


storagetalks, May 10, 17:51

​​Если во время чтения последних новостей у кого-то возник вопрос: “А зачем NVMe-oF в текущих моделях AFF А300, А700, A700s?”, то вот вам отчёт от компании Demartek, которая протестировала A700s на одинаковых нагрузках с NVMe-oF и SCSI FCP. Если кратко, то NVMe-oF дал прирост IOPS на 58% и снижение latency на 34%. Они взяли A700s c 24 960GB SSD, на одной ноде использовали NVMe-oF, на другой — обычный FC. Глядя на графики, не забывайте, что это половина производительности, на которую способна A700s. Из интересного, для получения максимальной производительности потребовалось 4 NVMe namespace против 16 LUN’ов. За счет чего такой прирост производительности? NVMe стек в ONTAP написан с нуля — меньше legacy кода, короче путь данных, меньше переключений контекстов, лучше работает параллелизация.

Спасибо читателям канала за ссылку.

#AFF #NVMe #performance

www.demartek.com/Reports_Free/Demartek_NetApp-Broadcom_NVMe_over_Fibre_Channel_Evaluation_2018-05.pdf