python-compute/README.md

149 lines
6.5 KiB
Markdown
Raw Normal View History

2023-06-17 20:07:50 +03:00
# Node Agent
Агент для работы на ворк-нодах.
2023-07-22 23:59:49 +03:00
# Как это должно выглядеть
`node-agent` должен стать обычным DEB-пакетом. Вместе с самим приложением пойдут вспомагательные утилиты:
2023-07-28 01:01:32 +03:00
- `na-vmctl` virsh на минималках, который дёргает код из Node Agent. Выполняет базовые операции с VM, установку и миграцию и т.п. Реализована частично.
- `na-vmexec`. Обёртка для вызова QEMU guest agent на машинах, больше нчего уметь не должна. Реализована целиком.
- `na-volctl`. Предполагается здесь оставить всю работу с дисками. Не реализована.
2023-07-22 23:59:49 +03:00
2023-07-28 01:01:32 +03:00
Этими утилитами нет цели заменять virsh, бцдет реализован только специфичный для Node Agent функционал.
2023-07-22 23:59:49 +03:00
Зависимости (версии из APT репозитория Debian 12):
- `python3-lxml` 4.9.2
- `python3-docopt` 0.6.2
- `python3-libvirt` 9.0.0 (актуальная новее)
2023-07-28 01:01:32 +03:00
Минимальная поддерживаемая версия Python — `3.11`, потому, что можем.
2023-07-22 23:59:49 +03:00
# Классы
Весь пакет разбит на модули, а основной функционал на классы.
## `ConfigLoader`
Наследуется от `UserDict`. Принимает в конструктор путь до файла, после чего экземпляром `ConfigLoader` можно пользоваться как обычным словарём. Вызывается внутри `LibvirtSession` при инициализации.
## `LibvirtSession`
Устанавливает сессию с libvirtd и создаёт объект virConnect. Класс умеет принимать в конструктор один аргумент — путь до файла конфигурации, но его можно опустить.
2023-06-17 20:07:50 +03:00
2023-07-22 23:59:49 +03:00
```python
from node_agent import LibvirtSession
session = LibvirtSession()
session.close()
2023-06-17 20:07:50 +03:00
```
2023-07-22 23:59:49 +03:00
Также этот класс является контекстным менеджером и его можно использвоать так:
```python
from node_agent import LibvirtSession, VirtualMachine
with LibvirtSession() as session:
vm = VirtualMachine(session, 'имя_вм')
vm.status
2023-06-17 20:07:50 +03:00
```
2023-07-22 23:59:49 +03:00
## `VirtualMachine`
2023-07-28 01:01:32 +03:00
Класс для базового управления виртуалкой. В конструктор принимает объект LibvirtSession и создаёт объект `virDomain`.
2023-07-22 23:59:49 +03:00
## `QemuAgent`
2023-06-17 20:07:50 +03:00
2023-07-28 01:01:32 +03:00
Класс для работы с агентом на гостях. Инициализируется аналогично `VirtualMachine`. Его можно считать законченным. Он умеет:
2023-06-17 20:07:50 +03:00
2023-07-22 23:59:49 +03:00
- Выполнять шелл команды через метод `shellexec()`.
2023-07-28 01:01:32 +03:00
- Выполнять любые команды QEMU через `execute()`.
2023-07-22 23:59:49 +03:00
2023-07-28 01:01:32 +03:00
Также способен:
2023-07-22 23:59:49 +03:00
- Поллить выполнение команды. То есть можно дождаться вывода долгой команды.
2023-07-28 01:01:32 +03:00
- Декодировать base64 вывод STDERR и STDOUT если надо.
- Отправлять данные на STDIN.
## `XMLConstructor`
Класс для генерации XML конфигов для либвирта и редактирования XML. Пока умеет очень мало и требует перепиливания. Возможно стоит разбить его на несколько классов. Пример работы с ним:
```python
from node_agent.xml import XMLConstructor
domain_xml = XMLConstructor()
domain_xml.gen_domain_xml(
name='13',
title='',
vcpus=2,
cpu_vendor='Intel',
cpu_model='Broadwell',
memory=2048,
volume='/srv/vm-volumes/ef0bcd68-02c2-4f31-ae96-14d2bda5a97b.qcow2',
)
tags_meta = {
'name': 'tags',
'children': [
{'name': 'god_mode'},
{'name': 'service'}
]
}
domain_xml.add_meta(tags_meta, namespace='http://half-it-stack.org/xmlns/tags-meta', nsprefix='tags')
print(domain_xml.to_string())
```
В итоге должен получиться какой-то конфиг для ВМ.
Имеет метод `construct_xml()`, который позволяет привести словарь Python в XML элемент (обхект `lxml.etree.Element`). Пример:
```python
>>> from lxml.etree import tostring
>>> from na.xml import XMLConstructor
>>> xml = XMLConstructor()
>>> tag = {
... 'name': 'mytag',
... 'values': {
... 'firstname': 'John',
... 'lastname': 'Doe'
... },
... 'text': 'Hello!',
... 'children': [{'name': 'okay'}]
... }
>>> element = xml.construct_xml(tag)
>>> print(tostring(element).decode())
'<mytag firstname="John" lastname="Doe">Hello!<okay/></mytag>'
>>>
```
Функция рекурсивная, так что теоретически можно положить бесконечное число вложенных элементов в `children`. С аргументами `namespace` и `nsprefix` будет сгенерирован XML с неймспейсом, Ваш кэп.
2023-06-17 20:07:50 +03:00
# TODO
2023-07-22 23:59:49 +03:00
- [ ] Установка ВМ
2023-07-28 01:01:32 +03:00
- [x] Конструктор XML (базовый)
2023-08-24 22:36:12 +03:00
- [ ] Метод создания дисков
- [ ] Дефайн, запуск и автостарт ВМ
2023-07-22 23:59:49 +03:00
- [ ] Управление дисками
- [ ] Удаление ВМ
- [ ] Изменение CPU
- [ ] Изменение RAM
- [ ] Миграция ВМ между нодами
- [x] Работа с qemu-ga
- [x] Управление питанием
2023-08-24 22:36:12 +03:00
- [x] Вкл/выкл автостарт ВМ
2023-07-22 23:59:49 +03:00
- [ ] Статистика потребления ресурсов
- [ ] Получение инфомрации из/о ВМ
- [ ] SSH-ключи
- [ ] Сеть
2023-08-24 22:36:12 +03:00
- [ ] Создание снапшотов
2023-06-17 20:07:50 +03:00
2023-07-22 23:59:49 +03:00
# Заметки
xml.py наверное лучше реализовать через lxml.objectify: https://stackoverflow.com/questions/47304314/adding-child-element-to-xml-in-python
???: https://www.geeksforgeeks.org/reading-and-writing-xml-files-in-python/
2023-06-17 20:07:50 +03:00
2023-07-22 23:59:49 +03:00
Минимальный рабочий XML: https://access.redhat.com/documentation/ru-ru/red_hat_enterprise_linux/6/html/virtualization_administration_guide/section-libvirt-dom-xml-example