5 Replies Latest reply on Nov 11, 2018 9:33 PM by Finikiez

    Проблема пропадания datastore с хостов

    Deepl201110141 Enthusiast

      Здравствуйте!

      На хостах установлена esxi 5.5 и к ним были подключены datastore.

      После восстановления работоспособности СХД возникли проблемы с некоторыми datastore, которые пропали из списка доступных datastore на хостах. Сами LUN, на которых размещены datastore, видны на хостах. Как проверить файловую систему и восстановить подключение пропавших datastore или всё пропало?

      Спасибо!

        • 1. Re: Проблема пропадания datastore с хостов
          Finikiez Master
          vExpert

          Добрый день!

           

          Допустим блочные устройсва у вас доступны, как вы написали.

           

          Какие были проблемы с СХД? Внеплановое отключение по питанию или вы VMFS пробовали отформатировать? или что?

           

          Далее неплохо сначала посмотреть что происходит в логе vmkernel каждого хоста.

          Также проверить с помощью утилиты partedutil есть ли таблица разделов, в которой написано, что vmfs на диске есть. Если ее нет, то ее нужно руками пересоздать

          инструкция тут VMware Knowledge Base

           

          Плюс проверить, не определяется ли VMFS как снапшот VMware Knowledge Base

          • 2. Re: Проблема пропадания datastore с хостов
            Deepl201110141 Enthusiast

            Спасибо, что откликнулись!

            Штатно выключили СХД и после включения получили алерты на обоих контроллерах. Поддержка помогла восстановить работоспособность СХД и сказала, чо бедблоки только на одном datastore. Все остальные должны были "взлететь" нормально - достаточно разобраться в ОС с ними.

            В логах vmkernel и messages ничего не говорится про snapshot.

             

            ~ # partedUtil getptbl /vmfs/devices/disks/naa.6005076802818cd58000000000000005

            gpt

            802048 255 63 12884901888

            1 2048 12884901854 AA31E02A400F11DB9590000C2911D1B8 vmfs 0

            ~ # partedUtil getptbl /vmfs/devices/disks/naa.6005076802818cd58000000000000031

            gpt

            401024 255 63 6442450944

            1 2048 6442450910 AA31E02A400F11DB9590000C2911D1B8 vmfs 0

            ~ # partedUtil getptbl /vmfs/devices/disks/naa.6005076802818cd58000000000000037

            gpt

            267349 255 63 4294967296

            1 2048 4294967262 AA31E02A400F11DB9590000C2911D1B8 vmfs 0

            ~ # partedUtil getptbl /vmfs/devices/disks/naa.6005076802818cd5800000000000000b

            gpt

            401024 255 63 6442450944

            1 2048 6442450910 AA31E02A400F11DB9590000C2911D1B8 vmfs 0

            ~ #

             

            Запуск утилиты partedutil показал, что partition пересоздавать не нужно.

            а вот логи vmkernel по одному из datastore:

             

            2018-11-09T14:04:46.176Z cpu1:75143)WARNING: Res3: 3661: Volume 529c7ec8-811115eb-93bd-3440b5c76c10 ("SPEED2") might be damaged on the disk. Resource cluster metadata corruption has been detected.

            2018-11-09T14:04:46.176Z cpu1:75143)WARNING: [type 1] Invalid totalResources 0 (cluster 0).

            2018-11-09T14:04:46.176Z cpu1:75143)WARNING: Res3: 3661: Volume 529c7ec8-811115eb-93bd-3440b5c76c10 ("SPEED2") might be damaged on the disk. Resource cluster metadata corruption has been detected.

            2018-11-09T14:04:46.176Z cpu1:75143)WARNING: [type 1] Invalid totalResources 0 (cluster 0).

            2018-11-09T14:04:46.176Z
            cpu1:75143)WARNING: Res3: 3661: Volume
            529c7ec8-811115eb-93bd-3440b5c76c10 ("SPEED2") might be damaged on the
            disk. Resource cluster metadata corruption has been detected.

            2018-11-09T14:04:46.176Z cpu1:75143)WARNING: [type 1] Invalid totalResources 0 (cluster 0).

            2018-11-09T14:04:46.176Z
            cpu1:75143)WARNING: Res3: 3661: Volume
            529c7ec8-811115eb-93bd-3440b5c76c10 ("SPEED2") might be damaged on the
            disk. Resource cluster metadata corruption has been detected.

            2018-11-09T14:04:46.176Z cpu1:75143)WARNING: [type 1] Invalid totalResources 0 (cluster 0).

            2018-11-09T14:04:46.176Z
            cpu1:75143)WARNING: Res3: 3661: Volume
            529c7ec8-811115eb-93bd-3440b5c76c10 ("SPEED2") might be damaged on the
            disk. Resource cluster metadata corruption has been detected.

            2018-11-09T14:04:46.176Z cpu1:75143)WARNING: [type 1] Invalid totalResources 0 (cluster 0).

            2018-11-09T14:04:46.176Z
            cpu1:75143)WARNING: Res3: 3661: Volume
            529c7ec8-811115eb-93bd-3440b5c76c10 ("SPEED2") might be damaged on the
            disk. Resource cluster metadata corruption has been detected.

            2018-11-09T14:04:46.176Z cpu1:75143)WARNING: [type 1] Invalid totalResources 0 (cluster 0).

            • 3. Re: Проблема пропадания datastore с хостов
              Finikiez Master
              vExpert

              Датастор SPEED2 не смонтируется, у него повреждение метаданных. Можно попробовать сторонними утилитами попытаться вытащить из него данные или восстаналивать их из бэкапа.

               

              Как много датасторов еще не монтируется?

              Что по ним пишется в vmkernel относительного их naa идентификатров или имен или UUIS?

              • 4. Re: Проблема пропадания datastore с хостов
                Deepl201110141 Enthusiast

                Проблемы ещё по 3 datastore (я присылал по ним результат по партиции - см. выше).

                Т.е. партиции есть, но внутри видимо каша.

                А какие сторонние утилиты вы можете порекомендовать?

                Мы начали развертывать новый кластер параллельно :-(

                • 5. Re: Проблема пропадания datastore с хостов
                  Finikiez Master
                  vExpert

                  По 3 остальным датасторам также стоит увидеть vmkernel лог

                   

                  Можно попробовать R-Studio, но я не знаю, понимает ли она vmfs.

                  Есть компании, которые помогают восстанавливать данные с vmfs.

                   

                  Здесь на форуме на английском языке можно попробовать обратиться к пользователю sanbarrow, вот его сайт sanbarrow.com