Bonjour la communauté,
J'ai un futur projet de clustering et aimerais utiliser Proxmox.
Je vous décris la config :
- 3 serveurs HP DL360gen10, reliés directement chacun d'eux en SAS 12G sur une baie MSA 2050 (2 contrôleurs / 2 ports par serveur), jusque là, rien d'exceptionnel :)
La question était de savoir si Proxmox allait reconnaitre le stockage SAS et si on peut faire :
- Clustering
- HA
- Live migration
Si oui, y a t il des spécificités, des outils en plus à installer etc...
De plus, quitte à faire de l'opensource, j'aimerais utiliser Proxmox Backup Server pour sauvegarder tout cela. Est ce que cela sera possible ?
J'ai fouiller un peu partout sur le net, je trouve un peu tout et son contraire et surtout du stockage réseau SAN ISCSI NFS ...
En vous remerciant pour votre expertise
Avec Proxmox, et tout HV je pense, la règle est simple: si tu veux faire HA/Live Migration, tous les HV doivent pouvoir accéder à l’image de la VM sur ton stockage. Donc les technos vont varier: -NFS -CIFS -CEPH -iSCSI etc..
Une baie SAS, c’est comme des HD internes. A priori, tu vas physiquement configurer la MSA pour assigner les disques aux différents HV. Mon petit doigt me dit que HP pourrait être capable de basculer un groupe de HDs d’un client vers un autre, mais je doute que Proxmox gère ça.
Pour Proxmox Backup Server, il parle par le réseau avec les HV, donc l’endroit où tu mets le storage ne le concerne pas.
Le 23 févr. 2023 à 08:53, HYVERNAT Philippe Responsable Informatique CHAVS phhyvernat@ch-avs.fr a écrit :
Bonjour la communauté,
J'ai un futur projet de clustering et aimerais utiliser Proxmox.
Je vous décris la config :
- 3 serveurs HP DL360gen10, reliés directement chacun d'eux en SAS 12G sur une baie MSA 2050 (2 contrôleurs / 2 ports par serveur), jusque là, rien d'exceptionnel :)
La question était de savoir si Proxmox allait reconnaitre le stockage SAS et si on peut faire :
Clustering
HA
Live migration
Si oui, y a t il des spécificités, des outils en plus à installer etc...
De plus, quitte à faire de l'opensource, j'aimerais utiliser Proxmox Backup Server pour sauvegarder tout cela. Est ce que cela sera possible ?
J'ai fouiller un peu partout sur le net, je trouve un peu tout et son contraire et surtout du stockage réseau SAN ISCSI NFS ...
En vous remerciant pour votre expertise
-- HYVERNAT Philippe
Responsable Informatique
CH Ain Val de Saône
Rue Pierre Goujon - 01290 Pont de Veyle
Téléphone : 03.85.36.23.50
<VdMaO5kdVx3SjnCg.png><GNsaOj7kKok0rPvw.png>
Liste de diffusion du %(real_name)s http://www.frsag.org/
Bonjour,
Merci pour ce retour
Le but est de configurer les choses simplement, 1 volume pour l'ensemble des VM sur la MSA pour un accès au même volume depuis les 3 PVE pour du live migration sans coupure.
**
Le 23/02/2023 à 09:37, David Ponzone a écrit :
Avec Proxmox, et tout HV je pense, la règle est simple: si tu veux faire HA/Live Migration, tous les HV doivent pouvoir accéder à l’image de la VM sur ton stockage. Donc les technos vont varier: -NFS -CIFS -CEPH -iSCSI etc..
Une baie SAS, c’est comme des HD internes. A priori, tu vas physiquement configurer la MSA pour assigner les disques aux différents HV. Mon petit doigt me dit que HP pourrait être capable de basculer un groupe de HDs d’un client vers un autre, mais je doute que Proxmox gère ça.
Pour Proxmox Backup Server, il parle par le réseau avec les HV, donc l’endroit où tu mets le storage ne le concerne pas.
Le 23 févr. 2023 à 08:53, HYVERNAT Philippe Responsable Informatique CHAVS phhyvernat@ch-avs.fr a écrit :
Bonjour la communauté,
J'ai un futur projet de clustering et aimerais utiliser Proxmox.
Je vous décris la config :
- 3 serveurs HP DL360gen10, reliés directement chacun d'eux en SAS
12G sur une baie MSA 2050 (2 contrôleurs / 2 ports par serveur), jusque là, rien d'exceptionnel :)
La question était de savoir si Proxmox allait reconnaitre le stockage SAS et si on peut faire :
Clustering
HA
Live migration
Si oui, y a t il des spécificités, des outils en plus à installer etc...
De plus, quitte à faire de l'opensource, j'aimerais utiliser Proxmox Backup Server pour sauvegarder tout cela. Est ce que cela sera possible ?
J'ai fouiller un peu partout sur le net, je trouve un peu tout et son contraire et surtout du stockage réseau SAN ISCSI NFS ...
En vous remerciant pour votre expertise
--
**
*HYVERNAT Philippe
*Responsable Informatique
CH Ain Val de Saône
Rue Pierre Goujon - 01290 Pont de Veyle
Téléphone : 03.85.36.23.50
*<VdMaO5kdVx3SjnCg.png><GNsaOj7kKok0rPvw.png>*
Liste de diffusion du %(real_name)s http://www.frsag.org/
En fait, c’est plus un problème côté HP. Si tu sais monter le même volume de la MSA depuis les 3 PVE, y pas de raison que ça marche pas. Proxmox lui, il se contente de démarrer les VM parce qu’il détecte qu’un autre PVE est dead. Après, ça se maquette, quand même.
Le 23 févr. 2023 à 10:24, HYVERNAT Philippe Responsable Informatique CHAVS phhyvernat@ch-avs.fr a écrit :
Bonjour,
Merci pour ce retour
Le but est de configurer les choses simplement, 1 volume pour l'ensemble des VM sur la MSA pour un accès au même volume depuis les 3 PVE pour du live migration sans coupure.
Le 23/02/2023 à 09:37, David Ponzone a écrit :
Avec Proxmox, et tout HV je pense, la règle est simple: si tu veux faire HA/Live Migration, tous les HV doivent pouvoir accéder à l’image de la VM sur ton stockage. Donc les technos vont varier: -NFS -CIFS -CEPH -iSCSI etc..
Une baie SAS, c’est comme des HD internes. A priori, tu vas physiquement configurer la MSA pour assigner les disques aux différents HV. Mon petit doigt me dit que HP pourrait être capable de basculer un groupe de HDs d’un client vers un autre, mais je doute que Proxmox gère ça.
Pour Proxmox Backup Server, il parle par le réseau avec les HV, donc l’endroit où tu mets le storage ne le concerne pas.
Le 23 févr. 2023 à 08:53, HYVERNAT Philippe Responsable Informatique CHAVS <phhyvernat@ch-avs.fr mailto:phhyvernat@ch-avs.fr> a écrit :
Bonjour la communauté,
J'ai un futur projet de clustering et aimerais utiliser Proxmox.
Je vous décris la config :
- 3 serveurs HP DL360gen10, reliés directement chacun d'eux en SAS 12G sur une baie MSA 2050 (2 contrôleurs / 2 ports par serveur), jusque là, rien d'exceptionnel :)
La question était de savoir si Proxmox allait reconnaitre le stockage SAS et si on peut faire :
Clustering
HA
Live migration
Si oui, y a t il des spécificités, des outils en plus à installer etc...
De plus, quitte à faire de l'opensource, j'aimerais utiliser Proxmox Backup Server pour sauvegarder tout cela. Est ce que cela sera possible ?
J'ai fouiller un peu partout sur le net, je trouve un peu tout et son contraire et surtout du stockage réseau SAN ISCSI NFS ...
En vous remerciant pour votre expertise
-- HYVERNAT Philippe
Responsable Informatique
CH Ain Val de Saône
Rue Pierre Goujon - 01290 Pont de Veyle
Téléphone : 03.85.36.23.50
<VdMaO5kdVx3SjnCg.png><GNsaOj7kKok0rPvw.png>
Liste de diffusion du %(real_name)s http://www.frsag.org/ http://www.frsag.org/
Le Thu, Feb 23, 2023 at 08:53:41AM +0100, HYVERNAT Philippe Responsable Informatique CHAVS [phhyvernat@ch-avs.fr] a écrit:
Bonjour la communauté,
J'ai un futur projet de clustering et aimerais utiliser Proxmox.
Je vous décris la config :
- 3 serveurs HP DL360gen10, reliés directement chacun d'eux en SAS 12G sur
une baie MSA 2050 (2 contrôleurs / 2 ports par serveur), jusque là, rien d'exceptionnel :)
Vu de hpe.com ça sait faire de l'iSCSI.
et ça dit "shared" dans la liste des stockages que PVE sait gérer :
https://pve.proxmox.com/wiki/Storage
Bonjour,
On Thu, 23 Feb 2023 11:57:39 +0100 Dominique Rousseau d.rousseau@nnx.com wrote:
Vu de hpe.com ça sait faire de l'iSCSI.
Oui, mais : Interface hôte : 8 Ports 16Gb/8Gb Fibre Channel par système ou 8 Ports 1GbE/10GbE iSCSI par système ou 8 Ports 12Gb SAS par système sont pris en charge selon le modèle de baie
Comme c'est du "ou" et que Philippe dit qu'il a du SAS 12Gb, il est possible que son modele ne puisse pas faire du iSCSI...
Juste en dessous, dans les specs, on lit d'ailleurs :
Contrôleur de stockage : 2 contrôleurs HPE MSA 2050 SAN ou 2 contrôleurs HPE MSA 2050 SAS, pris en charge, selon le modèle
Donc ca sait faire, mais peut-etre pas sans changement...
Paul
Le Thu, Feb 23, 2023 at 12:15:45PM +0100, Paul Rolland (?????????????????????) [rol+frsag@witbe.net] a écrit:
Bonjour,
On Thu, 23 Feb 2023 11:57:39 +0100 Dominique Rousseau d.rousseau@nnx.com wrote:
Vu de hpe.com ça sait faire de l'iSCSI.
(...)
Comme c'est du "ou" et que Philippe dit qu'il a du SAS 12Gb, il est possible que son modele ne puisse pas faire du iSCSI...
Ah oui, c'est pas faux :)
J'ai peut-etre supposé trop vite qu'il parlait du type de disque.
Dans ce cas, faut exposer "une" LUN par serveur connecté, et faire un autre des modes de stockage partagé que PVE supporte entre stockages locaux ( genre Ceph ) ou repliqué ( ZFS )
Ouais ZFS répliqué, ça marche très très bien. Mais vraiment très très bien :)
Evidemment, on perdra X secondes de données (l’intervalle de réplication). Mais si c’est pas tolérable, on parle de HA très sérieuse, donc un infra avec une seule MSA n’est pas acceptable.
Le 23 févr. 2023 à 12:32, Dominique Rousseau d.rousseau@nnx.com a écrit :
Le Thu, Feb 23, 2023 at 12:15:45PM +0100, Paul Rolland (?????????????????????) [rol+frsag@witbe.net] a écrit:
Bonjour,
On Thu, 23 Feb 2023 11:57:39 +0100 Dominique Rousseau d.rousseau@nnx.com wrote:
Vu de hpe.com ça sait faire de l'iSCSI.
(...)
Comme c'est du "ou" et que Philippe dit qu'il a du SAS 12Gb, il est possible que son modele ne puisse pas faire du iSCSI...
Ah oui, c'est pas faux :)
J'ai peut-etre supposé trop vite qu'il parlait du type de disque.
Dans ce cas, faut exposer "une" LUN par serveur connecté, et faire un autre des modes de stockage partagé que PVE supporte entre stockages locaux ( genre Ceph ) ou repliqué ( ZFS )
-- Dominique Rousseau Neuronnexion, Prestataire Internet & Intranet 6 rue des Hautes cornes - 80000 Amiens tel: 03 22 71 61 90 - fax: 03 22 71 61 99 - http://www.neuronnexion.coop _______________________________________________ Liste de diffusion du %(real_name)s http://www.frsag.org/
Une baie MSA 2050 avec port SAS pour connecter les 3 serveurs DL donc pas de réseau entre les hôtes et le stockage
sous vmware on voit le stockage comme du stockage interne mais je voulais m'assurer que sur Proxmox on est la même réaction.
Le 23/02/2023 à 12:38, David Ponzone a écrit :
Ouais ZFS répliqué, ça marche très très bien. Mais vraiment très très bien :)
Evidemment, on perdra X secondes de données (l’intervalle de réplication). Mais si c’est pas tolérable, on parle de HA très sérieuse, donc un infra avec une seule MSA n’est pas acceptable.
Le 23 févr. 2023 à 12:32, Dominique Rousseau d.rousseau@nnx.com a écrit :
Le Thu, Feb 23, 2023 at 12:15:45PM +0100, Paul Rolland (?????????????????????) [rol+frsag@witbe.net] a écrit:
Bonjour,
On Thu, 23 Feb 2023 11:57:39 +0100 Dominique Rousseau d.rousseau@nnx.com wrote:
Vu de hpe.com ça sait faire de l'iSCSI.
(...)
Comme c'est du "ou" et que Philippe dit qu'il a du SAS 12Gb, il est possible que son modele ne puisse pas faire du iSCSI...
Ah oui, c'est pas faux :)
J'ai peut-etre supposé trop vite qu'il parlait du type de disque.
Dans ce cas, faut exposer "une" LUN par serveur connecté, et faire un autre des modes de stockage partagé que PVE supporte entre stockages locaux ( genre Ceph ) ou repliqué ( ZFS )
-- Dominique Rousseau Neuronnexion, Prestataire Internet & Intranet 6 rue des Hautes cornes - 80000 Amiens tel: 03 22 71 61 90 - fax: 03 22 71 61 99 - https://antiphishing.vadesecure.com/v4?f=STUzUm03ckU2YTJtTTVua0nD9PrVLY6Y2oE... _______________________________________________ Liste de diffusion du %(real_name)s https://antiphishing.vadesecure.com/v4?f=STUzUm03ckU2YTJtTTVua0nD9PrVLY6Y2oE...
Liste de diffusion du %(real_name)s https://antiphishing.vadesecure.com/v4?f=STUzUm03ckU2YTJtTTVua0nD9PrVLY6Y2oE...
Pas de réseau mais t’as quand même un seul chassis MSA. Je sais que c’est très solide, mais quand on me parle de HA et que je vois un SPOF, euh, comment dire….
Le 23 févr. 2023 à 13:04, HYVERNAT Philippe Responsable Informatique CHAVS phhyvernat@ch-avs.fr a écrit :
Une baie MSA 2050 avec port SAS pour connecter les 3 serveurs DL donc pas de réseau entre les hôtes et le stockage
sous vmware on voit le stockage comme du stockage interne mais je voulais m'assurer que sur Proxmox on est la même réaction.
oui je comprends.
c'est pas full redondé mais c'est une bonne entrée en matière et limite un peu les coûts.
**
*est ce que quelqu'un l'a déjà essayé ? * ** *C'est la question initiale ;) *
Le 23/02/2023 à 13:18, David Ponzone a écrit :
Pas de réseau mais t’as quand même un seul chassis MSA. Je sais que c’est très solide, mais quand on me parle de HA et que je vois un SPOF, euh, comment dire….
Le 23 févr. 2023 à 13:04, HYVERNAT Philippe Responsable Informatique CHAVS phhyvernat@ch-avs.fr a écrit :
Une baie MSA 2050 avec port SAS pour connecter les 3 serveurs DL donc pas de réseau entre les hôtes et le stockage
sous vmware on voit le stockage comme du stockage interne mais je voulais m'assurer que sur Proxmox on est la même réaction.
Je rejoins David,
Il aurait mieux fallut 2 serveurs relié chacun a 2 baies. Tu as toujours une redondance si un équipement a des problèmes.
Le 23/02/2023 à 13:35, HYVERNAT Philippe Responsable Informatique CHAVS a écrit :
oui je comprends.
c'est pas full redondé mais c'est une bonne entrée en matière et limite un peu les coûts.
**
*est ce que quelqu'un l'a déjà essayé ?
** *C'est la question initiale ;)
Le 23/02/2023 à 13:18, David Ponzone a écrit :
Pas de réseau mais t’as quand même un seul chassis MSA. Je sais que c’est très solide, mais quand on me parle de HA et que je vois un SPOF, euh, comment dire….
Le 23 févr. 2023 à 13:04, HYVERNAT Philippe Responsable Informatique CHAVS phhyvernat@ch-avs.fr a écrit :
Une baie MSA 2050 avec port SAS pour connecter les 3 serveurs DL donc pas de réseau entre les hôtes et le stockage
sous vmware on voit le stockage comme du stockage interne mais je voulais m'assurer que sur Proxmox on est la même réaction.
Liste de diffusion du %(real_name)s http://www.frsag.org/
Bonjour,
Une baie MSA qu'elle soit Fiber Channel, iSCSI, ou SAS se comporte de la même manière, elle présente une LUN à un host.
Donc en présentant une même LUN à 2, 3, 4 hosts avec un système de fichier partagé qu'il soit NFS, VMFS, NTFS/ReFS, QueSais-jeFS, on peut faire des opérations de Live Migration, Storage vMotion, etc.
@job-1/-3 j'en ai installé/utlisé avec de l'Hyper-V Failover Cluster, du cluster vSphere HA. Jamais testé avec Proxmox mais j'imagine que ca doit fonctionner pareil.
En fouillant un peu sur le net j'ai trouvé cet article : https://forum.proxmox.com/threads/proxmox-with-hp-msa-2040-storage.38955/
Bonne fin de semaine à tous. Ludovic
Le ven. 24 févr. 2023, 00:57, mysolo@cynetek.com mysolo@cynetek.com a écrit :
Je rejoins David,
Il aurait mieux fallut 2 serveurs relié chacun a 2 baies. Tu as toujours une redondance si un équipement a des problèmes.
Le 23/02/2023 à 13:35, HYVERNAT Philippe Responsable Informatique CHAVS a écrit :
oui je comprends.
c'est pas full redondé mais c'est une bonne entrée en matière et limite un peu les coûts.
*est ce que quelqu'un l'a déjà essayé ? *
*C'est la question initiale ;) *
Le 23/02/2023 à 13:18, David Ponzone a écrit :
Pas de réseau mais t’as quand même un seul chassis MSA. Je sais que c’est très solide, mais quand on me parle de HA et que je vois un SPOF, euh, comment dire….
Le 23 févr. 2023 à 13:04, HYVERNAT Philippe Responsable Informatique CHAVS phhyvernat@ch-avs.fr a écrit :
Une baie MSA 2050 avec port SAS pour connecter les 3 serveurs DL donc pas de réseau entre les hôtes et le stockage
sous vmware on voit le stockage comme du stockage interne mais je voulais m'assurer que sur Proxmox on est la même réaction.
Liste de diffusion du %(real_name)shttp://www.frsag.org/
Liste de diffusion du %(real_name)s http://www.frsag.org/
Il y a déjà plus de 15 ans, avec des MSA 1000 relié a 2 serveurs, la MSA configuré pour envoyé un raid5 par serveur , il y avait la possibilité de reprendre le volume vu par un serveur sur l'autre serveur, même de voir chaque volume raid5 sur les 2 serveurs. Après à charge des serveurs de géré un filesystem adéquate si c'est monté en écriture des 2 cotés.
Donc, je suppose que c'est tout à fait possible 15 ans après :)
Le 23/02/2023 à 08:53, HYVERNAT Philippe Responsable Informatique CHAVS a écrit :
Bonjour la communauté,
J'ai un futur projet de clustering et aimerais utiliser Proxmox.
Je vous décris la config :
- 3 serveurs HP DL360gen10, reliés directement chacun d'eux en SAS 12G
sur une baie MSA 2050 (2 contrôleurs / 2 ports par serveur), jusque là, rien d'exceptionnel :)
La question était de savoir si Proxmox allait reconnaitre le stockage SAS et si on peut faire :
Clustering
HA
Live migration
Si oui, y a t il des spécificités, des outils en plus à installer etc...
De plus, quitte à faire de l'opensource, j'aimerais utiliser Proxmox Backup Server pour sauvegarder tout cela. Est ce que cela sera possible ?
J'ai fouiller un peu partout sur le net, je trouve un peu tout et son contraire et surtout du stockage réseau SAN ISCSI NFS ...
En vous remerciant pour votre expertise
--
**
*HYVERNAT Philippe
*Responsable Informatique
CH Ain Val de Saône
Rue Pierre Goujon - 01290 Pont de Veyle
Téléphone : 03.85.36.23.50
**
Liste de diffusion du %(real_name)s http://www.frsag.org/
-
David Ponzone -
Dominique Rousseau -
HYVERNAT Philippe Responsable Informatique CHAVS -
Ludovic Scotti -
mysolo＠cynetek.com -
Paul Rolland (ポール・ロラン)