Архивы infrastructure

Специфика PCI Express в современных серверах

Мне недавно показался интересным вопрос — установки новых крат PCI Express в существующие физические сервера. На первый взгляд банальная задача показала мне, что она требует системного подхода и определенного уровня знания специфики в современном аппаратном обеспечении серверного оборудования. Примечательно, что развитие аппаратных компонент идет таким же бурным темпом, как и прогресс в области программного обеспечения. Уже сменилось несколько поколений шины PCI Express и технология продолжает развиваться. Кроме этого разъемы PCI Express или PCIe различаются по количеству используемых линий передачи данных. Плюс Вы должны учитывать, что выходы на задней панели сервера бывают разными. Все это, а также вопросы совместимости с конкретной операционной системой и конкретным аппаратным сервером делают задачу с платами PCI Express достаточно интересной.

В чем преимущества VSAN ESA перед VSAN OSA

С выходом в 2022 году vSphere vSAN версии 8 компания VMware решила кардинально поменять архитектуру своего HCI решения. Появилась, так называемся vSAN ESA — Express Storage Architecture. Данный тип гиперконвергентного хранилища очень сильно меняет идеологию работы по сравнению со стандартным HCI VMware vSAN, которое теперь стало называться vSAN OSA — Original Storage Architecture. Мое первое впечатление от данного нового решения VMware было таким, что оно предназанчено строго для топовых конфигураций и будет суммарно стоить гораздно больше классического HCI. Однако, рекомендации от разработчиков говорят, что vSAN ESA нужно применять везде где это возможно, и только в исключительных ситуациях смотреть в сторону vSAN OSA. Хотелось бы обобщить мое личное независимое видение по обоим представленным архитектурам, а также сделать выводы действительно ли нужно смотреть при проектировании новых кластеров гиперконвергенции только в сторону ESA.

Апдейт оборудования DELL с пакетами DUP

Столкнулся недавно с интересной особенностью обновления прошивок на серверах Dell, которая является далеко не интуитивно понятной, а информацию о ней еще нужно постараться найти. Хотелось бы поделиться своим опытом, чтобы администраторам и инженерам, работающим с серверами DELL, было проще заниматься вопросами апдейта прошивок, firmware и т.д. Обновления для серверов Dell и их компонентов выходят в виде DUP файлов, которые представляют собой самораспаковывающиеся .exe архивы, которые содержат в себе все необходимые компоненты. Более подробную информацию о данном типе файлов можно почитать на сайте производителя по следующей ссылке.

Как использовать техническую поддержку DELL

Важный вопрос в эксплуатации сложных компьютерных и сетевых систем — обращение к вендору за технической поддержкой. Чем больше и сложнее парк информационных систем в Вашем распоряжении, тем чаще Вам приходиться обращаться к производителю за помощью при возникновении глюков, багов или некорректной конфигурации в железе и программном обеспечении. У компании Dell много интересных сложных технологических продуктов, которые при своем плотном использовании требуют общения с help desk. Как этот процесс сделать максимально эффективным и оперативным постараюсь показать далее по тексту.

Типы дисков в СХД Dell PowerStore

Система хранения данных Dell EMC PowerStore представляет собой следующую ступень развития современных стораджей. Основной упор, который, судя по всему, был сделан при разработке данного продукта — дальнейшее увеличение скорости доступа к данным. Это достигается путем комбинации ряда последних прорывных технологий, как в разработке ПО, так и в аппаратном обеспечении. Мне в рамках данной статьи интересно сконцентрироваться на различных типах дисковых накопителей, которые сейчас начали применяться в СХД. А также на том, какие конкретные преимущества получает потребитель такого продукта. Предыдущие поколения стораджей использовали для хранения информации HDD и SSD диски. При этом даже сейчас в 2023 году многие организации ориентируются прежде всего на массивы с жесткими дисками, так как они позволяют закрыть их потребности с минимальным уровнем затрат. Тем не менее, все ведущие вендоры систем хранения данных акцентируют свое развитие именно на возможностях, которые дают аппаратные новинки.

Разновидности RAM на современных серверах Dell

Вроде бы банальная тема использования планок оперативной памяти на современных серверах на самом деле является не такой уж и простой. Разбирался с этим вопросом недавно для себя на примере серверов Dell. Оказалось, что за последние годы, технологии очень сильно шагнули в этом направлении, и при выборе нового серверного оборудования желательно нужно учитывать различные типы ОЗУ или RAM, которые могут быть использованы в эксплуатации. Думаю, что другие вендоры серверного оборудования используют аналогичные решения. Однако, в контексте данного материала, хотелось бы сконцентрироваться на конкретных серверах Dell PowerEdge. На примере этого оборудования показать тот выбор разнообразия оперативной памяти, который имеется на данный момент у инженеров и системных администраторов.

На текущий момент основные виды оперативки выпускают в виде планок DIMM (Dual Inline Memory Module). Такая динамическая память наиболее распространена в виде UDIMM, RDIMM, и LRDIMM. Кроме этого в продаже появились NVDIMM и DCPMM, которые позволяют обеспечить сохранность информации при выключении сервера. Давайте попытаемся разобраться, что каждый из этих видов ОЗУ представляет из себя и когда лучше их использовать.

Типы портов в SAN FC сети

У сетей SAN или Storage Area Network есть несколько специфических особенностей, которые отличают их от привычных IP сетей. Одна из них наличие разного типа портов в сети SAN. С точки зрения физики и внешнего вида они все абсолютно одинаковые. Однако, с позиции логики работы они могут сильно отличаться. Эта особенность Fibre Channel часто смущает администраторов сетей передачи данных, кому приходится сталкиваться с SAN, в частности, и меня самого. Небольшая статья, которая поможет разложить по полочкам данный вопрос, давно зрела в тайниках моего подсознания, что и стало мотиватором для ее написания. Далее по тексту постараюсь разложить основные нюансы в терминологии сетей FC SAN, что поможет при их проектировании и внедрении.

Подсчет IOPS на RAID массиве

При добавлении нового дискового пространства крайне важно понимать сколько Вам нужно операций чтения/записи или по научному IOPS, а также сколько та или иная дисковая система может Вам выдать таких транзакций в секунду. Такой подсчет в целом не представляет никаких сложностей и доступен любому, кто в ладах со школьной алгеброй. Если с определением объема дискового пространства на RAID массиве, как правило, проблем не возникает, то с подсчетом необходимых, а также доступных IOPS зачастую во многих организациях все обстоит не так гладко. В современных системах хранения данных зачастую используется определенный уровень кеша, технологии tiering, дедупликации и прочие фишки, которые могут влиять на общее значение IOPS. Однако, понимание того, сколько реально операций чтения/записи можно получить от самой дисковой подсистемы дает знание базовой производительности системы, от которого можно отталкиваться при проведении дополнительных расчетов.

Тестирование дисковой системы в Linux

Основные аппаратные ресурсы любого серверного оборудования — это процессор, ОЗУ и дисковая подсистема. Определение их производительности и мониторинг — одни из ключевых задач в эксплуатации такой техники. Тут хотелось бы остановиться на вопросе определения производительности дисковой подсистемы. При этом под таковой я подразумеваю не только один обычный жесткий диск, но и различные сложные системы для хранения данных, которые используются в серверных системах. Современные программно определяемые стораджи настолько далеко ушли в технологиях, что нет смысла в данном контектсе останавливаться на специфике их работы. Давайте рассмотрим ситуацию, когда у нас есть виртуальная или физическая машина с ОС Linux, на которой доступен физический или логический жесткий диск, производительность которого хотелось бы протестировать. Для этих целей идеально подходит небольшая утилита fio. Она очень гибкая и богатая по фунционалу. Позволяет провести разнообразные тесты ввода-вывода дисковых подсистем.

Кеш на SSD в CEPH

Система хранения CEPH уже давно поддерживает функционал кеширования HDD пулов с помощью дисков SSD или NVMe. То есть, сами данные хранятся на массивах медленных HDD дисках, но при этом при оперативной записи/чтении могут использоваться намного более быстрые диски SSD/NVMe. Такой функционал считается одним из базовых в дорогих коммерческих стораджах middle-range уровня. В свое время долгое время занимался такого типа оборудованием. По своему опыту могу сказать, что такое кеширование является одним из важных моментов при выборе СХД в организации. Для Open Source продукта Ceph это важная фича, которая позволяет обеспечить нужную производительность общей системы при использовании шпиндельных дисков при необходимости.