ATA over Ethernet (AoE) на Debian Etch

Кому это полезно

Если на одной машине диск переполнен, а на другой есть свободное место, и вы не хотите копировать данные.
Для простых SAN-решений в пределах локальной сети без сложного стека iSCSI.

Важно: AoE работает только в пределах локальной сети (Ethernet) и не имеет встроенной аутентификации. Для работы в небезопасной сети требуется дополнительная защита канала.

Подготовка ядра

Сначала проверьте, включена ли поддержка AoE в вашем текущем ядре. Опция конфигурации называется CONFIG_ATA_OVER_ETH. Пример проверки:

host:/# grep ATA_OVER /boot/config-`uname -r`

CONFIG_ATA_OVER_ETH=m  
host:/#

Если поддержка отсутствует, пересоберите ядро или включите модуль через конфигурацию устройства:

Device Drivers -->
  |- Block Devices --->
      |-   ATA over Ethernet support

Загрузите модуль aoe:

host:/# modprobe aoe

Проверьте syslog на предмет успешной инициализации:

host:/#tail /var/log/syslog

Oct 10 11:54:07 host kernel: aoe: aoe_init: AoE v22 initialised.  
host:/#

Сервер — экспортируем диск (vblade)

Установите утилиту vblade на сервере:

server:/# apt-get install vblade

Ожидаемый вывод установки (сокращённо) в примере:

Reading package lists... Done  
Building dependency tree... Done  
The following NEW packages will be installed:  
  vblade  
[...]  
Unpacking vblade (from .../archives/vblade_11-1_i386.deb) ...  
Setting up vblade (11-1) ...  
server:/#

Экспортируйте блоковое устройство или раздел. В примере экспортируется /dev/sdd5 объёмом 5 ГБ:

server:/# vbladed 0 1 eth0 /dev/sdd5

Пояснение: каждому AoE-устройству соответствует пара Major/Minor (major 0–65535, minor 0–255). Так как AoE работает поверх Ethernet, указываем интерфейс (например, eth0).

Важно: указывайте правильный интерфейс и проверяйте, что на сервере нет конфликтующих настроек сети.

Клиент — подключаем AoE-устройство

На клиенте также должен быть загружен модуль aoe и установлены пользовательские утилиты:

client:/# apt-get install aoetools

Обнаружьте доступные AoE-устройства:

client:/# aoe-discover

Посмотрите статус и список устройств:

client:/# aoe-stat

Пример вывода:

      e0.1         5.000GB   eth0 up  
client:/#

Устройство появится как /dev/etherd/e0.1. Просмотр каталога:

client:/# ls -al /dev/etherd/

total 4  
drwxr-xr-x  2 root root     140 2007-10-10 13:30 .  
drwxr-xr-x 16 root root   14660 2007-10-10 13:30 ..  
c-w--w----  1 root disk 152,  3 2007-10-10 13:30 discover  
brw-rw----  1 root disk 152,16 2007-10-10 13:30 e0.1  
cr--r-----  1 root disk 152,  2 2007-10-10 13:30 err  
c-w--w----  1 root disk 152,  4 2007-10-10 13:30 interfaces  
-rw-r--r--  1 root root       5 2007-10-10 13:00 revalidate

Как использовать устройство

Как только устройство появилось, создайте файловую систему и монтируйте как обычный блоковый диск:

client:/# mkfs.ext3 /dev/etherd/e0.1

После создания файловой системы можно подключать устройство через mount и использовать как любой локальный диск. Помните о сетевых задержках: AoE — блочное устройство по сети.

Краткий план действий (минимальный SOP)

На сервере: установить vblade, запустить vbladed с параметрами Major, Minor, интерфейс, устройство.
На клиенте: установить aoetools, загрузить модуль aoe (modprobe aoe), выполнить aoe-discover.
На клиенте: проверить aoe-stat, создать файловую систему mkfs и смонтировать.
Тест: выполнить запись/чтение и убедиться в целостности.

Чек-листы по ролям

Чек-лист: Сервер

Установлен пакет vblade
Выбран и проверен экспортируемый блок (cat /proc/partitions)
Запущен vbladed с корректным интерфейсом
Фаервол разрешает трафик внутри L2 сети

Чек-лист: Клиент

Модуль aoe загружен (lsmod | grep aoe)
Установлены aoetools
aoe-discover возвращает устройство
Смонтирована файловая система и выполнены тесты записи

Сравнение с iSCSI

AoE: проще, работает на канальном уровне (L2), нет встроенной аутентификации, легче настроить в локальной сети.
iSCSI: более функционален, работает на сетевом уровне (TCP/IP), поддерживает аутентификацию (CHAP), подходит для удалённых сетей и интеграции с корпоративными SAN.

Когда выбрать AoE: если нужно быстро и просто расшарить диск в пределах одного локального сегмента и нет требований к безопасности на сетевом уровне.

Когда это не подходит

Если требуется доступ через роутеры или через Интернет — AoE не маршрутизируется по умолчанию.
Если нужна встроенная аутентификация и шифрование — рассматривайте iSCSI + IPSec или iSCSI через VPN.
Для критичных продакшн-систем с множеством клиентов и сложной авторизацией AoE не всегда лучший выбор.

Отладка и типичные проблемы

Устройство не появляется: проверьте modprobe aoe и aoe-discover; убедитесь, что vblade запущен на сервере и интерфейсы в том же L2 сегменте.
Низкая производительность: проверьте перегруженность сетевого интерфейса, duplex/скорость порта, MTU.
Права доступа к /dev/etherd/*: проверьте владельцев и группы, используйте udev для постоянных правил.

Критерии приёмки

Устройство /dev/etherd/eX.Y обнаружено на клиенте
Создана и смонтирована файловая система, данные читаются/пишутся без ошибок в тестах
Производительность соответствует ожиданиям (локальная сетевая пропускная способность)

Безопасность и соответствие

AoE не шифрует и не аутентифицирует соединение. Если в сети есть риск постороннего доступа, используйте сегментацию VLAN, шифрование на уровне канала (VPN) или переход на iSCSI с аутентификацией.

Краткий словарь

AoE: ATA over Ethernet — протокол передачи блочных команд ATA по Ethernet.
vblade: демон, экспортирующий локальные устройства через AoE.
aoetools: набор клиентских утилит для обнаружения и управления AoE-устройствами.
Initiator/Target: инициатор (клиент) запрашивает доступ; таргет (сервер) предоставляет устройство.

Заключение

AoE — лёгкий способ расшарить блоковые устройства по локальной сети без установки сложного стека. Для простых сценариев и ограниченных сетевых сегментов это быстрый и удобный инструмент. Для продакшн-решений с высокими требованиями к безопасности и маршрутизации рассмотрите iSCSI или добавьте защиту канала.

Примечание: тестируйте на неключевых данных перед использованием в рабочей среде.