VMware Cloud Community
Manuia98
Contributor
Contributor

Some VM doesn't start in test mode at the recovery site

Hi,

After running a recovery plan in test mode i can see in the report that not all VM have start on the recovery site.

In my last test my recovery plan contained 15 VMs and 2 of them (srv-01 and srv-02) haven't start on the recovery sute. One VM have vmware tools up to date and the other not so i don't think that vmware tools are the problem.

So that is the summary of the rapport, i can notice that an operation expired during the step "create a snapshot of writable storage" and that finish by an inactive status during the startup-up step of these VMs.

               

4. Créer un snapshot du stockage inscriptibleErreur - Opération expirée : 900 secondes
4.16. srv-01Erreur - Opération expirée : 900 secondes
4.16.1. Configurer le stockageErreur - Opération expirée : 900 secondes
4.17. srv-02Erreur - Opération expirée : 900 secondes
4.17.1. Configurer le stockageErreur - Opération expirée : 900 secondes
8.12. srv-01Inactif
8.12.1. Démarrage du clientInactif
8.12.2. Personnaliser l'IPInactif
8.12.3. Arrêt du clientInactif
8.12.4. Mettre sous tensionInactif
8.12.5. Attendre VMware ToolsInactif
8.13. srv-02Inactif
8.13.1. Démarrage du clientInactif
8.13.2. Personnaliser l'IPInactif
8.13.3. Arrêt du clientInactif
8.13.4. Mettre sous tensionInactif
8.13.5. Attendre VMware ToolsInactif

Any suggestion how to fix it ?

Regards.

Reply
0 Kudos
10 Replies
virtualg_uk
Leadership
Leadership

Are you using vSphere replication or array based replication (Such as RecoverPoint / MirrorView) for the actual replication?


Graham | User Moderator | https://virtualg.uk
Reply
0 Kudos
Manuia98
Contributor
Contributor

Hi 'im using vSphere replication.

Reply
0 Kudos
Manuia98
Contributor
Contributor

Ok i just done another test on the same recovery plan and this time all VMs started up ... it's worrying that's mean the day i have to failover for real i have to pray that all VMs start up ...

Reply
0 Kudos
virtualg_uk
Leadership
Leadership

I would do a second test just to be sure. Could you send over the export of the failed SRM test report?


Graham | User Moderator | https://virtualg.uk
Reply
0 Kudos
Manuia98
Contributor
Contributor

Hi grba, sorry for the delay, that's the report of the recovery plan which failed to start up the VMs srv-01 and srv-02


      

Rapport de l'historique du plan de récupération
VMware Site Recovery Manager 6.1
Résumé du plan
Nom :M******IE
Description :
Site protégé :srv-*******.****.nc
Site de récupération :srv-******-pra.*****.nc
Résumé d'exécution
Opération :Tester
Options de stockage :Aucune
Démarré par :A***N\t***y
Heure de début :2016-07-20 21:40:52 (UTC 0)
Heure de fin :2016-07-20 21:55:58 (UTC 0)
Temps écoulé :00:15:06
Résultat :Erreurs
Erreurs :6
Avertissements :0
Étape de récupérationRésultatÉtape démarréeÉtape terminéeTemps d'exécution
1. Synchroniser le stockageIgnoré
1.1. Groupe de protection MessagerieIgnoré
1.2. Groupe de protection srv-01Ignoré
2. Restaurer les hôtes de site de récupération en mode VeilleRéussite2016-07-20 21:40:54 (UTC 0)2016-07-20 21:40:55 (UTC 0)00:00:01
3. Interrompre les VM non critiques sur le site de récupérationInactif
4. Créer un snapshot du stockage inscriptibleErreur - Opération expirée : 900 secondes2016-07-20 21:40:56 (UTC 0)2016-07-20 21:55:57 (UTC 0)00:15:01
4.1. Groupe de protection MessagerieRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:40:56 (UTC 0)00:00:00
4.2. Groupe de protection srv-01Réussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:40:56 (UTC 0)00:00:00
4.3. w*****s2.***.ncRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:12 (UTC 0)00:00:16
4.3.1. Configurer le stockageRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:12 (UTC 0)00:00:16
4.4. s*****e.r**.ncRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:13 (UTC 0)00:00:17
4.4.1. Configurer le stockageRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:13 (UTC 0)00:00:17
4.5. srv-****.***.ncRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:45 (UTC 0)00:00:49
4.5.1. Configurer le stockageRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:45 (UTC 0)00:00:49
4.6. w****3.***.ncRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:26 (UTC 0)00:00:30
4.6.1. Configurer le stockageRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:26 (UTC 0)00:00:30
4.7. s***m.***.ncRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:42:43 (UTC 0)00:01:47
4.7.1. Configurer le stockageRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:42:43 (UTC 0)00:01:47
4.8. srv-a*****s.***.ncRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:32 (UTC 0)00:00:36
4.8.1. Configurer le stockageRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:32 (UTC 0)00:00:36
4.9. p***t.r***.ncRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:14 (UTC 0)00:00:18
4.9.1. Configurer le stockageRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:14 (UTC 0)00:00:18
4.10. s*****-01.****.ncRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:19 (UTC 0)00:00:23
4.10.1. Configurer le stockageRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:19 (UTC 0)00:00:23
4.11. s****d.***.ncRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:44 (UTC 0)00:00:48
4.11.1. Configurer le stockageRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:44 (UTC 0)00:00:48
4.12. s*****lf-bis.***.ncRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:46 (UTC 0)00:00:50
4.12.1. Configurer le stockageRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:46 (UTC 0)00:00:50
4.13. w******is.***.ncRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:45 (UTC 0)00:00:49
4.13.1. Configurer le stockageRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:45 (UTC 0)00:00:49
4.14. s*******r.r***.ncRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:27 (UTC 0)00:00:31
4.14.1. Configurer le stockageRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:27 (UTC 0)00:00:31
4.15. s*******2.****.ncRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:46 (UTC 0)00:00:50
4.15.1. Configurer le stockageRéussite2016-07-20 21:40:56 (UTC 0)2016-07-20 21:41:46 (UTC 0)00:00:50
4.16. srv-01Erreur - Opération expirée : 900 secondes2016-07-20 21:40:56 (UTC 0)2016-07-20 21:55:57 (UTC 0)00:15:01
4.16.1. Configurer le stockageErreur - Opération expirée : 900 secondes2016-07-20 21:40:56 (UTC 0)2016-07-20 21:55:57 (UTC 0)00:15:01
4.17. srv-02Erreur - Opération expirée : 900 secondes2016-07-20 21:40:56 (UTC 0)2016-07-20 21:55:57 (UTC 0)00:15:01
4.17.1. Configurer le stockageErreur - Opération expirée : 900 secondes2016-07-20 21:40:56 (UTC 0)2016-07-20 21:55:57 (UTC 0)00:15:01
5. Configurer des réseaux de testInactif
5.1. w*****s2.***.ncRéussite2016-07-20 21:41:12 (UTC 0)2016-07-20 21:41:13 (UTC 0)00:00:01
5.2. s*****e.r**.ncRéussite2016-07-20 21:41:14 (UTC 0)2016-07-20 21:41:14 (UTC 0)00:00:00
5.3. srv-****.***.ncRéussite2016-07-20 21:41:45 (UTC 0)2016-07-20 21:41:46 (UTC 0)00:00:01
5.4. w****3.***.ncRéussite2016-07-20 21:41:27 (UTC 0)2016-07-20 21:41:43 (UTC 0)00:00:16
5.5. s***m.***.ncRéussite2016-07-20 21:42:43 (UTC 0)2016-07-20 21:42:44 (UTC 0)00:00:01
5.6. srv-a*****s.***.ncRéussite2016-07-20 21:41:33 (UTC 0)2016-07-20 21:41:34 (UTC 0)00:00:01
5.7. p***t.r***.ncRéussite2016-07-20 21:41:14 (UTC 0)2016-07-20 21:41:15 (UTC 0)00:00:01
5.8. s*****-01.****.ncRéussite2016-07-20 21:41:19 (UTC 0)2016-07-20 21:41:21 (UTC 0)00:00:02
5.9. s****d.***.ncRéussite2016-07-20 21:41:45 (UTC 0)2016-07-20 21:41:46 (UTC 0)00:00:01
5.10. s*****lf-bis.***.ncRéussite2016-07-20 21:41:46 (UTC 0)2016-07-20 21:41:47 (UTC 0)00:00:01
5.11. w******is.***.ncRéussite2016-07-20 21:41:45 (UTC 0)2016-07-20 21:41:46 (UTC 0)00:00:01
5.12. s*******r.r***.ncRéussite2016-07-20 21:41:27 (UTC 0)2016-07-20 21:41:27 (UTC 0)00:00:00
5.13. s*******2.****.ncRéussite2016-07-20 21:41:46 (UTC 0)2016-07-20 21:41:47 (UTC 0)00:00:01
5.14. srv-01Inactif
5.15. srv-02Inactif
6. Mettre sous tension les VM de priorité 1Inactif
7. Mettre sous tension les VM de priorité 2Erreur - Expiration de l'attente pour VMware Tools au bout de 300 secondes2016-07-20 21:41:16 (UTC 0)2016-07-20 21:46:34 (UTC 0)00:05:18
7.1. srv-****.***.ncRéussite2016-07-20 21:41:47 (UTC 0)2016-07-20 21:44:13 (UTC 0)00:02:26
7.1.1. Démarrage du clientIgnoré
7.1.2. Personnaliser l'IPIgnoré
7.1.3. Arrêt du clientIgnoré
7.1.4. Mettre sous tensionRéussite2016-07-20 21:41:47 (UTC 0)2016-07-20 21:41:54 (UTC 0)00:00:07
7.1.5. Attendre VMware ToolsRéussite2016-07-20 21:41:54 (UTC 0)2016-07-20 21:44:13 (UTC 0)00:02:19
7.2. p***t.r***.ncErreur - Expiration de l'attente pour VMware Tools au bout de 300 secondes2016-07-20 21:41:16 (UTC 0)2016-07-20 21:46:34 (UTC 0)00:05:18
7.2.1. Démarrage du clientIgnoré
7.2.2. Personnaliser l'IPIgnoré
7.2.3. Arrêt du clientIgnoré
7.2.4. Mettre sous tensionRéussite2016-07-20 21:41:16 (UTC 0)2016-07-20 21:41:34 (UTC 0)00:00:18
7.2.5. Attendre VMware ToolsErreur - Expiration de l'attente pour VMware Tools au bout de 300 secondes2016-07-20 21:41:34 (UTC 0)2016-07-20 21:46:34 (UTC 0)00:05:00
8. Mettre sous tension les VM de priorité 3Erreur - Expiration de l'attente pour VMware Tools au bout de 300 secondes2016-07-20 21:46:35 (UTC 0)2016-07-20 21:52:03 (UTC 0)00:05:28
8.1. w*****s2.***.ncRéussite2016-07-20 21:46:36 (UTC 0)2016-07-20 21:49:33 (UTC 0)00:02:57
8.1.1. Démarrage du clientIgnoré
8.1.2. Personnaliser l'IPIgnoré
8.1.3. Arrêt du clientIgnoré
8.1.4. Mettre sous tensionRéussite2016-07-20 21:46:36 (UTC 0)2016-07-20 21:47:03 (UTC 0)00:00:27
8.1.5. Attendre VMware ToolsRéussite2016-07-20 21:47:03 (UTC 0)2016-07-20 21:49:33 (UTC 0)00:02:30
8.2. s*****e.r**.ncRéussite2016-07-20 21:46:36 (UTC 0)2016-07-20 21:50:32 (UTC 0)00:03:56
8.2.1. Démarrage du clientIgnoré
8.2.2. Personnaliser l'IPIgnoré
8.2.3. Arrêt du clientIgnoré
8.2.4. Mettre sous tensionRéussite2016-07-20 21:46:36 (UTC 0)2016-07-20 21:47:00 (UTC 0)00:00:24
8.2.5. Attendre VMware ToolsRéussite2016-07-20 21:47:00 (UTC 0)2016-07-20 21:50:32 (UTC 0)00:03:32
8.3. w****3.***.ncRéussite2016-07-20 21:46:36 (UTC 0)2016-07-20 21:50:28 (UTC 0)00:03:52
8.3.1. Démarrage du clientIgnoré
8.3.2. Personnaliser l'IPIgnoré
8.3.3. Arrêt du clientIgnoré
8.3.4. Mettre sous tensionRéussite2016-07-20 21:46:36 (UTC 0)2016-07-20 21:46:59 (UTC 0)00:00:23
8.3.5. Attendre VMware ToolsRéussite2016-07-20 21:46:59 (UTC 0)2016-07-20 21:50:28 (UTC 0)00:03:29
8.4. s***m.***.ncRéussite2016-07-20 21:46:36 (UTC 0)2016-07-20 21:50:28 (UTC 0)00:03:52
8.4.1. Démarrage du clientIgnoré
8.4.2. Personnaliser l'IPIgnoré
8.4.3. Arrêt du clientIgnoré
8.4.4. Mettre sous tensionRéussite2016-07-20 21:46:36 (UTC 0)2016-07-20 21:47:00 (UTC 0)00:00:24
8.4.5. Attendre VMware ToolsRéussite2016-07-20 21:47:00 (UTC 0)2016-07-20 21:50:28 (UTC 0)00:03:28
8.5. srv-a*****s.***.ncRéussite2016-07-20 21:46:36 (UTC 0)2016-07-20 21:49:43 (UTC 0)00:03:07
8.5.1. Démarrage du clientIgnoré
8.5.2. Personnaliser l'IPIgnoré
8.5.3. Arrêt du clientIgnoré
8.5.4. Mettre sous tensionRéussite2016-07-20 21:46:36 (UTC 0)2016-07-20 21:46:56 (UTC 0)00:00:20
8.5.5. Attendre VMware ToolsRéussite2016-07-20 21:46:56 (UTC 0)2016-07-20 21:49:43 (UTC 0)00:02:47
8.6. s*****-01.****.ncErreur - Expiration de l'attente pour VMware Tools au bout de 300 secondes2016-07-20 21:46:36 (UTC 0)2016-07-20 21:51:55 (UTC 0)00:05:19
8.6.1. Démarrage du clientIgnoré
8.6.2. Personnaliser l'IPIgnoré
8.6.3. Arrêt du clientIgnoré
8.6.4. Mettre sous tensionRéussite2016-07-20 21:46:36 (UTC 0)2016-07-20 21:46:55 (UTC 0)00:00:19
8.6.5. Attendre VMware ToolsErreur - Expiration de l'attente pour VMware Tools au bout de 300 secondes2016-07-20 21:46:55 (UTC 0)2016-07-20 21:51:55 (UTC 0)00:05:00
8.7. s****d.***.ncRéussite2016-07-20 21:46:36 (UTC 0)2016-07-20 21:49:33 (UTC 0)00:02:57
8.7.1. Démarrage du clientIgnoré
8.7.2. Personnaliser l'IPIgnoré
8.7.3. Arrêt du clientIgnoré
8.7.4. Mettre sous tensionRéussite2016-07-20 21:46:36 (UTC 0)2016-07-20 21:46:55 (UTC 0)00:00:19
8.7.5. Attendre VMware ToolsRéussite2016-07-20 21:46:55 (UTC 0)2016-07-20 21:49:33 (UTC 0)00:02:38
8.8. s*****lf-bis.***.ncRéussite2016-07-20 21:46:35 (UTC 0)2016-07-20 21:50:28 (UTC 0)00:03:53
8.8.1. Démarrage du clientIgnoré
8.8.2. Personnaliser l'IPIgnoré
8.8.3. Arrêt du clientIgnoré
8.8.4. Mettre sous tensionRéussite2016-07-20 21:46:35 (UTC 0)2016-07-20 21:46:50 (UTC 0)00:00:15
8.8.5. Attendre VMware ToolsRéussite2016-07-20 21:46:50 (UTC 0)2016-07-20 21:50:28 (UTC 0)00:03:38
8.9. w******is.***.ncRéussite2016-07-20 21:46:36 (UTC 0)2016-07-20 21:49:13 (UTC 0)00:02:37
8.9.1. Démarrage du clientIgnoré
8.9.2. Personnaliser l'IPIgnoré
8.9.3. Arrêt du clientIgnoré
8.9.4. Mettre sous tensionRéussite2016-07-20 21:46:36 (UTC 0)2016-07-20 21:46:56 (UTC 0)00:00:20
8.9.5. Attendre VMware ToolsRéussite2016-07-20 21:46:56 (UTC 0)2016-07-20 21:49:13 (UTC 0)00:02:17
8.10. s*******r.r***.ncErreur - Expiration de l'attente pour VMware Tools au bout de 300 secondes2016-07-20 21:46:36 (UTC 0)2016-07-20 21:52:03 (UTC 0)00:05:27
8.10.1. Démarrage du clientIgnoré
8.10.2. Personnaliser l'IPIgnoré
8.10.3. Arrêt du clientIgnoré
8.10.4. Mettre sous tensionRéussite2016-07-20 21:46:36 (UTC 0)2016-07-20 21:47:03 (UTC 0)00:00:27
8.10.5. Attendre VMware ToolsErreur - Expiration de l'attente pour VMware Tools au bout de 300 secondes2016-07-20 21:47:03 (UTC 0)2016-07-20 21:52:03 (UTC 0)00:05:00
8.11. s*******2.****.ncErreur - Expiration de l'attente pour VMware Tools au bout de 300 secondes2016-07-20 21:46:36 (UTC 0)2016-07-20 21:51:49 (UTC 0)00:05:13
8.11.1. Démarrage du clientIgnoré
8.11.2. Personnaliser l'IPIgnoré
8.11.3. Arrêt du clientIgnoré
8.11.4. Mettre sous tensionRéussite2016-07-20 21:46:36 (UTC 0)2016-07-20 21:46:48 (UTC 0)00:00:12
8.11.5. Attendre VMware ToolsErreur - Expiration de l'attente pour VMware Tools au bout de 300 secondes2016-07-20 21:46:48 (UTC 0)2016-07-20 21:51:49 (UTC 0)00:05:01
8.12. srv-01Inactif
8.12.1. Démarrage du clientInactif
8.12.2. Personnaliser l'IPInactif
8.12.3. Arrêt du clientInactif
8.12.4. Mettre sous tensionInactif
8.12.5. Attendre VMware ToolsInactif
8.13. srv-02Inactif
8.13.1. Démarrage du clientInactif
8.13.2. Personnaliser l'IPInactif
8.13.3. Arrêt du clientInactif
8.13.4. Mettre sous tensionInactif
8.13.5. Attendre VMware ToolsInactif
9. Mettre sous tension les VM de priorité 4Inactif
10. Mettre sous tension les VM de priorité 5Inactif


Reply
0 Kudos
virtualg_uk
Leadership
Leadership

Unfortunately my French isn't too good!

I would set recovery points on your VMs by re configuring the replication for each VM. This way if the VM fails to boot you can revert the DR VM to an earlier point in time snapshot and try to boot again which could get you out of a problem.

Then run another SRM test to get familiar with the new functionality and to test the VMs do actually come back online.


Graham | User Moderator | https://virtualg.uk
Reply
0 Kudos
Manuia98
Contributor
Contributor

Hi grba and thanks for your reply .

And in a real scenario of a failover , do you think if i start up manualy the vm on the DR site could put the VM in an inconsistent state or whatever ?

Regards

Reply
0 Kudos
Manuia98
Contributor
Contributor

Hello,

I haven't solved my problem yet. i did a new recovery plan test today with storage synchronisation and this time 0 Vms started on the the recovery site. That is the report of the recovery plan test :

pastedImage_4.png

Reply
0 Kudos
vbrowncoat
Expert
Expert

Were your sites connected or disconnected when you ran this? What is the bandwidth like between your sites? Is VR operating normally?

Have you opened a support case for this?

Reply
0 Kudos
virtualg_uk
Leadership
Leadership

I cannot see why booting up a VM at DR during a recovery would cause a problem, Ensure it is connecting to an isolated network though.

As far as the error is concerned, I would be looking at logging a case with VMware as it;s too generic to troubleshoot from here.

I hope this helps


Graham | User Moderator | https://virtualg.uk
Reply
0 Kudos