Различия
Здесь показаны различия между двумя версиями данной страницы.
| Предыдущая версия справа и слева Предыдущая версия Следующая версия | Предыдущая версия | ||
|
wiki:руководство_по_ubuntu_server:множественное_связывание_устройств:multipath_devices [2012/05/22 14:14] |
wiki:руководство_по_ubuntu_server:множественное_связывание_устройств:multipath_devices [2012/05/23 15:59] (текущий) |
||
|---|---|---|---|
| Строка 8: | Строка 8: | ||
| =====Устройства множественного связывания===== | =====Устройства множественного связывания===== | ||
| - | Без DM-Multipath каждый канал от серверного узла к контроллеру накопителя рассматривается системой как отдельное устройство, даже когда канал ввода/вывода соединяет тот же сервер с тем же контроллером накопителя. | + | Без DM-Multipath каждый канал от серверного узла к контроллеру накопителя рассматривается системой как отдельное устройство, даже когда канал ввода/вывода соединяет тот же сервер с тем же контроллером накопителя. DM-Multipath предоставляет возможность организации каналов ввода/вывода локально через создание единого устройства множественного связывания поверх основных устройств. |
| - | Without DM-Multipath, each path from a server node to a storage controller is treated by the system as a separate device, even when the I/O path connects the same server node to the same storage controller. DM-Multipath provides a way of organizing the I/O paths logically, by creating a single multipath device on top of the underlying devices. | + | ====Идентификаторы устройств множественного связывания==== |
| - | ====Multipath Device Identifiers==== | + | Каждое устройство множественного связывания имеет международный идентификатор (WWID), который гарантирует глобальную уникальность и неизменность. По умолчанию в имя устройства множественного связывания вставляется его WWID. В качестве альтернативы вы можете установить опцию user_frendly_names в конфигурационном файле, который предписывает DM-Multipath использовать алиас node-unique формы mpathn в качестве имени. Например, узел с двумя адаптерами шины (HBA) подключенными к контроллеру накопителя с двумя портами через единый беззоновый волоконный канал (FC) увидит четыре устройства: /dev/sda, /dev/sdb, /dev/sdc и /dev/sdd. DM-Multipath создает единое устройство с уникальным WWID, которое перенаправляет ввод/вывод на эти четыре зависимых устройства в зависимости от конфигурации. Когда настроечная опция user_friendly_names установлена в yes, имя множественного устройства устанавливается в mpathn. Когда новые устройства попадает под управление DM-Multipath, их можно увидеть в двух разных местах в каталоге /dev: **/dev/mapper/mpathn** и **/dev/dm-n**. |
| - | Each multipath device has a World Wide Identifier (WWID), which is guaranteed to be globally unique and unchanging. By default, the name of a multipath device is set to its WWID. Alternately, you can set the user_friendly_names option in the multipath configuration file, which causes DM-Multipath to use a node-unique alias of the form mpathn as the name. For example, a node with two HBAs attached to a storage controller with two ports via a single unzoned FC switch sees four devices: /dev/sda, /dev/sdb, /dev/sdc, and /dev/sdd. DM-Multipath creates a single device with a unique WWID that reroutes I/O to those four underlying devices according to the multipath configuration. When the user_friendly_names configuration option is set to yes, the name of the multipath device is set to mpathn. When new devices are brought under the control of DM-Multipath, the new devices may be seen in two different places under the /dev directory: /dev/mapper/mpathn and /dev/dm-n. | + | -- Устройства в /dev/mapper создаются раньше в процессе загрузки. Используйте эти имена для доступа к множественным устройствам, например, при создании логических томов. |
| + | -- Устройства в виде /dev/dm-n только для внутреннего использования и никогда не должны использоваться. | ||
| - | The devices in /dev/mapper are created early in the boot process. Use these devices to access the multipathed devices, for example when creating logical volumes. | + | Для информации о настройках по умолчанию для множественных устройств, включая опцию настройки user_friendly_names, смотрите секцию [[wiki:руководство_по_ubuntu_server:множественное_связывание_устройств:configuration|Конфигурационный файл DM-Multipath]]. |
| - | Any devices of the form /dev/dm-n are for internal use only and should never be used. | + | ====Согласованные имена множественных устройств в кластере==== |
| - | For information on the multipath configuration defaults, including the user_friendly_names configuration option, see Section , “Configuration File Defaults”. You can also set the name of a multipath device to a name of your choosing by using the alias option in the multipaths section of the multipath configuration file. For information on the multipaths section of the multipath configuration file, see Section, “Multipaths Device Configuration Attributes”. | + | Когда опция user_friendly_names установлена в yes, имя множественного устройства уникально для узла, но не гарантируется то же самое на всех узлах, использующих это устройство. Также, если вы установили опцию алиаса для устройства в секции multipaths конфигурационного файла multipath.conf, имя не будет автоматически согласовано со всеми узлами кластера. Это не вызовет сложностей при использовании LVM для создания логических устройств на множественном устройстве, но если вам требуется согласовать имена множественных устройств на всех узлах, рекомендуется оставить user_friendly_names значение no и не настраивать алиасы для устройств. По умолчанию, если у вас не установлено user_friendly_names в yes и не настроен алиас для устройства, имя для этого устройства будет совпадать с WWID, которое всегда одно и то же. Если же вы хотите согласованные дружественные имена, определяемые системой для всех узлов в кластере, следуйте данной процедуре: |
| - | ====Consistent Multipath Device Names in a Cluster==== | + | ** Установите все множественные устройства на одной машине. |
| + | ** Заблокируйте все ваши множественные устройства на других машинах, выполнив команды: | ||
| + | <code># service multipath-tools stop | ||
| + | # multipath -F</code> | ||
| + | ** Скопируйте файл /etc/multipath/bindings с первой машины на все остальные в кластере. | ||
| + | ** Восстановите работу сервиса multipathd на всех остальных машинах командой: | ||
| + | <code># service multipath-tools start</code> | ||
| - | When the user_friendly_names configuration option is set to yes, the name of the multipath device is unique to a node, but it is not guaranteed to be the same on all nodes using the multipath device. Similarly, if you set the alias option for a device in the multipaths section of the multipath.conf configuration file, the name is not automatically consistent across all nodes in the cluster. This should not cause any difficulties if you use LVM to create logical devices from the multipath device, but if you require that your multipath device names be consistent in every node it is recommended that you leave the user_friendly_names option set to no and that you not configure aliases for the devices. By default, if you do not set user_friendly_names to yes or configure an alias for a device, a device name will be the WWID for the device, which is always the same. If you want the system-defined user-friendly names to be consistent across all nodes in the cluster, however, you can follow this procedure: | + | Если вы добавляете новое устройство, вам потребуется повторить этот процесс. |
| - | Set up all of the multipath devices on one machine. | + | Таким же образом, если вы настроили алиас для устройства, который хотите согласовать на всех узлах в кластере, вам надо убедиться, что файл /etc/multipath.conf один и тот же на всех узлах кластера, следуя такой же процедуре: |
| - | Disable all of your multipath devices on your other machines by running the following commands: | + | ** Настройте алиасы для множественных устройств в файле multipath.conf на одной машине. |
| + | ** Заблокируйте все ваши множественные устройства на других машинах, выполнив команды: | ||
| + | <code># service multipath-tools stop | ||
| + | # multipath -F</code> | ||
| + | ** Скопируйте файл multipath.conf с первой машины на все остальные в кластере. | ||
| + | ** Восстановите работу сервиса multipathd на всех остальных машинах командой: | ||
| + | <code># service multipath-tools start</code> | ||
| - | # service multipath-tools stop | + | Если вы добавляете новое устройство , вам потребуется повторить процесс. |
| - | # multipath -F | + | |
| - | Copy the /etc/multipath/bindings file from the first machine to all the other machines in the cluster. | + | ====Атрибуты множественных устройств==== |
| - | Re-enable the multipathd daemon on all the other machines in the cluster by running the following command: | + | В дополнение к опциям user_friendly_names и alias, множественные устройства имеют ряд атрибутов. Вы можете изменить эти атрибуты для определенных множественных устройств, создавая секции этих устройств в секции multipath конфигурационного файла. Для информации по секции multipath конфигурационного файла смотрите секцию [[wiki:руководство_по_ubuntu_server:множественное_связывание_устройств:configuration|Конфигурационный файл DM-Multipath]]. |
| - | # service multipath-tools start | + | ====Множественные устройства в логических томах==== |
| - | If you add a new device, you will need to repeat this process. | + | После создания множественных устройств вы можете использовать их имена так же как и имя физического устройства при создании физических томов LVM. Например, если /dev/mapper/mpatha имя множественного устройства, следующая команда пометит /dev/mapper/mpatha как физический том: |
| + | <code># pvcreate /dev/mapper/mpatha</code> | ||
| - | Similarly, if you configure an alias for a device that you would like to be consistent across the nodes in the cluster, you should ensure that the /etc/multipath.conf file is the same for each node in the cluster by following the same procedure: | + | Вы можете использовать полученный физический том LVM при создании группы томов LVM так же, как вы использовали бы другое физическое устройство. |
| - | Configure the aliases for the multipath devices in the in the multipath.conf file on one machine. | + | <note>Если вы пытаетесь создать физический том LVM на все устройство, на котором у вас сконфигурированы разделы, команда pvcreate приведет к ошибке.</note> |
| - | Disable all of your multipath devices on your other machines by running the following commands: | + | Когда вы создаете логический том LVM, который использует массив носителей как активно/пассивное множественное устройство в качестве зависимых физических устройств, вы должны включить фильтры в lvm.conf для исключения дисков, на которых основано множественное устройство. Это нужно для ситуации, когда массив автоматически меняет активный маршрут на пассивный при получении [ошибки] ввода/вывода и множественное устройство будет обходить ошибку и восстанавливаться после сбоя всякий раз как LVM сканирует пассивный маршрут, если устройство не отфильтровано. Для активно/пассивных массивов, которые требуют команду для перевода пассивного маршрута в активное состояние, LVM каждый раз выводит предупреждение. Для фильтрования всех SCSI устройств в конфигурационном файле LVM (lvm.conf), включите следующий фильтр в секцию devices файла: |
| + | <code>filter = [ "r/block/", "r/disk/", "r/sd.*/", "a/.*/" ]</code> | ||
| - | # service multipath-tools stop | + | После изменений в /etc/lvm.conf необходимо обновить initrd так, чтобы этот файл был скопирован туда, где фильтры имеют максимальную важность, во время загрузки. Выполните: |
| - | # multipath -F | + | <code>update-initramfs -u -k all</code> |
| - | Copy the multipath.conf file from the first machine to all the other machines in the cluster. | + | <note>Каждый раз, как меняется /etc/lvm.conf или /etc/multipath.conf, initrd должен быть создан заново для отражения этих изменений. Это обязательно когда "черные списки" и фильтры необходимы для поддержания стабильной настройки хранилища.</note> |
| - | + | ||
| - | Re-enable the multipathd daemon on all the other machines in the cluster by running the following command: | + | |
| - | + | ||
| - | # service multipath-tools start | + | |
| - | + | ||
| - | When you add a new device you will need to repeat this process. | + | |
| - | + | ||
| - | ====Multipath Device attributes==== | + | |
| - | + | ||
| - | In addition to the user_friendly_names and alias options, a multipath device has numerous attributes. You can modify these attributes for a specific multipath device by creating an entry for that device in the multipaths section of the multipath configuration file. For information on the multipaths section of the multipath configuration file, see Section, "Configuration File Multipath Attributes". | + | |
| - | + | ||
| - | ====Multipath Devices in Logical Volumes==== | + | |
| - | + | ||
| - | After creating multipath devices, you can use the multipath device names just as you would use a physical device name when creating an LVM physical volume. For example, if /dev/mapper/mpatha is the name of a multipath device, the following command will mark /dev/mapper/mpatha as a physical volume. | + | |
| - | + | ||
| - | # pvcreate /dev/mapper/mpatha | + | |
| - | + | ||
| - | You can use the resulting LVM physical device when you create an LVM volume group just as you would use any other LVM physical device. | + | |
| - | + | ||
| - | If you attempt to create an LVM physical volume on a whole device on which you have configured partitions, the pvcreate command will fail. | + | |
| - | + | ||
| - | When you create an LVM logical volume that uses active/passive multipath arrays as the underlying physical devices, you should include filters in the lvm.conf to exclude the disks that underlie the multipath devices. This is because if the array automatically changes the active path to the passive path when it receives I/O, multipath will failover and failback whenever LVM scans the passive path if these devices are not filtered. For active/passive arrays that require a command to make the passive path active, LVM prints a warning message when this occurs. To filter all SCSI devices in the LVM configuration file (lvm.conf), include the following filter in the devices section of the file. | + | |
| - | + | ||
| - | filter = [ "r/block/", "r/disk/", "r/sd.*/", "a/.*/" ] | + | |
| - | + | ||
| - | After updating /etc/lvm.conf, it's necessary to update the initrd so that this file will be copied there, where the filter matters the most, during boot. Perform: | + | |
| - | + | ||
| - | update-initramfs -u -k all | + | |
| - | + | ||
| - | Every time either /etc/lvm.conf or /etc/multipath.conf is updated, the initrd should be rebuilt to reflect these changes. This is imperative when blacklists and filters are necessary to maintain a stable storage configuration. | + | |
| ---- | ---- | ||
