Этот сайт лучше всего просматривать в современном браузере с включённым JavaScript.

очистка заданий(Tasks) в WebUI

molik

Всем привет

На WebUI, в вкладке Tasks, висит задание "Executing -> Deleting image".

Удалял диск в статусе "Illegal", задание выполнилось с ошибкой, потом удалили полностью ВМ. Но задание, так и осталось висеть во вкладке "Tasks".

Образа который удаляется уже нет, и на самом SPM хосте тоже нет никаких заданий.

подскажите, как можно избавится от этого задания? подозреваю это где-то в базе может висеть.

перезагрузка engine не помогла.

danyasny

systemctl restart ovirt-engine

molik

Dan Yasny написал

systemctl restart ovirt-engine

не помогло.

Может полностью ВМ с engine ребутнуть?

danyasny

вряд ли это поможет. или таск все еще висит на хостах, или он застрял в бд (что должно было исправиться рестартом сервиса)

Алексей Максимов

Здравствуйте.

Была похожая проблема. Манипуляции с энджином тоже не помогли. Как я тогда понял, проблема с залипшими джобами может выходить из SPM. Попробуйте отловить джоб и очистить его по методу из этой заметки: oVirt 4.2.5 - Ошибка передачи роли SPM между хостами - SPM due to a failure to stop the current SPM

molik

Dan Yasny написал

вряд ли это поможет. или таск все еще висит на хостах, или он застрял в бд (что должно было исправиться рестартом сервиса)

Рестартом ВМ не помогло тоже.

Наверно залипло где-то в базе.

Как с этим жить, игнорить посто ?)

Алексей Максимов написал

Здравствуйте.

Была похожая проблема. Манипуляции с энджином тоже не помогли. Как я тогда понял, проблема с залипшими джобами может выходить из SPM. Попробуйте отловить джоб и очистить его по методу из этой заметки: oVirt 4.2.5 - Ошибка передачи роли SPM между хостами - SPM due to a failure to stop the current SPM

Да, смотрел, ничего нет:

# vdsm-client Host getAllTasksInfo
{}

danyasny

не в базе а на каком-то из хостов. рестарт машины не поможет, застрял таск а не машина. Надо найти где оно застряло, посмотреть логи, и если не получится разобраться с проблемой, мигрировать машины и рестартануть хост

danyasny

кстати, есть еще и утилита для тасков: https://www.ovirt.org/develop/developer-guide/db-issues/helperutilities/

molik

Что в логах смотреть не знаю. Задание висит на удалении образа, которого уже нет, как и самой ВМ. А в логах одни айдишники.

Какой айдишник принадлежал той ВМ с диском не известно уже и в логах соответственно никак уже не найти концов.

В режм обслуживания не могу перевести хост, ошибка:

Error while executing action:


Cannot switch Host to Maintenance mode. Host has asynchronous running tasks,

wait for operation to complete and retry.

SPM тоже не переносится:

Error while executing action: Cannot force select SPM. The Storage Pool has running tasks.

Аварийно из консоли сервера остаётся перезагрузить SPM хост? Что будет с кластером тогда ?

upd. в логах engine.log, вот такие записи, после не удачной попытки перевести хост в maintenance. Ясно, что это речь про то задание

2018-10-27 06,522-04 WARN (default task-90) There are running tasks on the SPM: 'AsyncTask:{commandId='ba902bfe-8f2b-48f1-bb22-91b0e4ca61a7', rootCommandId='19e37ecf-b0aa-429e-9a90-fd8cf12c5172', storagePoolId='6a1a2096-8fe7-4f7d-a2c9-08c39a5fc215', taskId='b8a49d7b-93e5-4ba6-a138-46cb7d662538', vdsmTaskId='5e30b633-486d-4af0-90c0-cd2f91072f77', stepId='ac7e021d-3186-4702-828f-53023afec890', taskType='deleteImage', status='running'}'

2018-10-27 06,593-04 WARN (default task-87) There are running tasks on the SPM: 'AsyncTask:{commandId='ba902bfe-8f2b-48f1-bb22-91b0e4ca61a7', rootCommandId='19e37ecf-b0aa-429e-9a90-fd8cf12c5172', storagePoolId='6a1a2096-8fe7-4f7d-a2c9-08c39a5fc215', taskId='b8a49d7b-93e5-4ba6-a138-46cb7d662538', vdsmTaskId='5e30b633-486d-4af0-90c0-cd2f91072f77', stepId='ac7e021d-3186-4702-828f-53023afec890', taskType='deleteImage', status='running'}'

molik

Из инфы engine.log, можно попробовать удалить задание с помощью таск-клинер

./taskcleaner.sh -s localhost -p 5432 -d engine -u engine -t b8a49d7b-93e5-4ba6-a138-46cb7d662538

или

./taskcleaner.sh -s localhost -p 5432 -d engine -u engine -с ba902bfe-8f2b-48f1-bb22-91b0e4ca61a7

а, как пароль от бд передать скрипту ?

molik

Запустил скрипт на engine

Само типа выполняющееся задание:

# PGPASSWORD=xRbkLokkpMIl4p3AhdgiFb /usr/share/ovirt-engine/setup/dbutils/taskcleaner.sh -z

b8a49d7b-93e5-4ba6-a138-46cb7d662538 | 5 | 2 | 2018-10-24 05.817-04 | 0 | 230 | ba902bfe-8f2b-48f1-bb22-91b0e4ca61a7 | ac7e021d-3186-4702-828f-53023afec890 | 6a1a2096-8fe7-4f7d-a2c9-08c39a5fc215

удалил:

# PGPASSWORD=xRbkLokkpMIl4p3AhdgiFb /usr/share/ovirt-engine/setup/dbutils/taskcleaner.sh -t b8a49d7b-93e5-4ba6-a138-46cb7d662538


 t
 This will remove the given Task!!!
Caution, this operation should be used with care. Please contact support prior to running this command
Are you sure you want to proceed? 
y

1

# PGPASSWORD=xRbkLokkpMIl4p3AhdgiFb /usr/share/ovirt-engine/setup/dbutils/taskcleaner.sh -c ba902bfe-8f2b-48f1-bb22-91b0e4ca61a7

В WebUI, task всё равно висит. Может подождать надо ?

molik

molik написал

В WebUI, task всё равно висит. Может подождать надо ?

Короче в WebUI, task так и висит.

Но теперь можно хост перевести в maintenace, ошибок нет.

danyasny

вот сейчас может быть как раз можно рестартануть engine для полной очистки

molik

Dan Yasny написал

вот сейчас может быть как раз можно рестартануть engine для полной очистки

сори за поздний ответ.

Не помогает перезагрузка engine.

leonidal6ov

Столкнулся с такой же проблемой.

taskcleaner.sh не помог

Опираясь на:

https://habr.com/ru/post/503192/

https://bugzilla.redhat.com/show_bug.cgi?id=1020909

Инструкция:


# найти postgres
ps aux | grep sql

# доверять всем локальным пользователям
# https://postgrespro.ru/docs/postgrespro/10/auth-pg-hba-conf
cat /var/opt/rh/rh-postgresql10/lib/pgsql/data/pg_hba.conf
# "local" is for Unix domain socket connections only
local   all             all                                     trust

# перезапуск postgresql
su -c "/opt/rh/rh-postgresql10/root/bin/pg_ctl reload -D /var/opt/rh/rh-postgresql10/lib/pgsql/data" - postgres

# зайти в psql
sudo scl enable rh-postgresql10 "psql -d engine -U postgres"

# вывести все джобы:
select * from job order by start_time desc;

# удалить джоб по id
select DeleteJob('c2f04a27-80a3-4215-aa73-e331574be61d');

# выйти из psql
\q

# сброс статуса ВМ
engine=# SELECT vm_guid, status FROM vm_dynamic WHERE status = 15;
               vm_guid                | status 
--------------------------------------+--------
 bf368157-72e2-483c-b690-c8a8d93cc4c8 |     15
(1 строка)

engine=# UPDATE vm_dynamic SET status = 0 WHERE status = 15;
UPDATE 1
engine=# COMMIT;
COMMIT
engine=# \q