éclaircissement professionnel sur projet investissement

Eclaircissement RAID 5...

Je n'ai pas compris si il est possible de mettre 3 DD en RAID 5, sachant qu'il y aura un DD système en sus, ou bien faut-il nécessairement avoir 4 DD pour pouvoir configurer en RAID 5, en plus du DD système?

Jerry parle de Raid externe plutot que d'installer les disques en interne, quels sont les avantages et inconvénients? Quelle référence fiable pour opter vers cette solution?

N'est-il pas nécessaire pour monter du DVCam et HDV (avec XPress Pro ou PP2), en laissant une possible évolutivité vers la HD si nécessaire, de commencer en HP xw8200 mais avec un mono Xéon 3.4GHz, quitte à en rajouter un ensuite si indispensable?

- HP xw8200 Xéon 3.4, cache 2 Mo, 800 FSB (ou faut-il un Bi-Xéon?)
- 2 Go DDR2-400 ECC reg de mémoire vive
- carte graphique FX1400
- DD Système 74 Go SATA/150 10.000 tpm
- 3 DD 250 Go SATA 3 Gb/s 7200 tpm en RAID 5 (ou 3/4 DD 250 Go SATA 3 Gb/s 7200 tpmRAID 5 externe mais pas encore de réponse)

Cela reste accessible et fiable comme solution, non?

3330 euros TTC auquel on peut ajouter 1 ou 2 écrans NEC 1970NX (720 euros TTC), et un moniteur JVC TM-H 1700G (760 euros TTC), ce qui donne 4800 euros TTC...Ce qui ne parait pas excessif pour le confort donné...En version Bi-Xéon (4100 euros TTC) , on arrive à 5570 euros TTC...On reste quand même en dessous des 10 000 euros que l'on annonce.

 

Pour du Raid 5 il faut 4 disques mini.
Tu peux en effet le faire en interne, soit parce que ta carte mere peux le faire , soit en rajoutant une carte raid 5 ( a partir de 100euros )

Compte tenu de ta crainte et meconnaissance informatique , prend plutot une station HP. Plutot en bi proc tant qu'a faire, surtout si tu veux deja faire du HDV.

Comme je ne suis pas certain que la HP permette le raid 5 d'origine et que cela t'obligera a mettre les mains dans la becane, prend plutot un RAID externe 5 disques, chez Lacie . 1300€ ht , matériel eprouvé testé sur mac et PC , debit soutenu 140 mo/s.

Voir aussi du coté des stations videoplus entierement montées 5500€ complete en avid mais avec peu de stockage et en HPXW4300 ( mais avec moniteurs et ecoutes )

Pour ma part , je regarde plutot désormais du coté des macs.

 

C'est pas par les marques qu'on commence, mais par une architecture sérieuse et évolutible.

En video, ni RAID 3 ni RAID 5, "répartir" des blocs de 64k, et de façon non symétriques, non seulement casse la performance, mais en plus fatigue un DD plus que les autres.

En video, c'est soit RAID1 (la sécurité du mirroring) seul soit
RAID1 combiné à RAID0 (réduction du flux moitié par couple de DD) >> appelé RAID10.

Soit on opte pour un controleur :
-interne (genre 3ware)
-externe (produit combinant 2 DD + 1 controleur)
-soft (Xp Pro permet la gestion de RAID1 (mirroring) (Disk Mgmt)

Si on peux, on vise un carte mère professionnelle (genre Tyan S2895) et on opte pour du Dual Core (2 pro en 1)

Les économies de chandelles finissent toujours par des re-investissements ON THE RUSH.

Et on sort sa calculette, le DV c'est 25 Mbits/sec, alors le moindre bon disque ATA/SATA est OK.

Le débit eSATA c'est 1,5Gbits/sec (Euh... ca va aller?)

Faire une config A/V, c'est de l'archi, des perfs et des standards.

Les descriptifs ci-dessus sont du genre grand public, les composants pro sont à peine plus cher, et le problème n'est ni la RAM, ni les DD, c'est plutot les perfs, la sécu et les I/O.

Jenn.

 

Bonjour,
Une remarque m'intéresse concernant le mirroring: peux tu développer le RAID1 avec Win XP sans controleur spécifique? uniquement avec le soft?
Merci d'avance
@+

 

Jenny tu sembles bien maitriser la chose.
Avec quoi vas tu monter tes rushes de la HVX200 en dvcpro HD ?
( peut etre faut il reposter sur le fil de la HVX 200 ou en créer un nouveau )

Merci
A+++

 

Bonjour,
J'ai toujours lu que le RAID 5 présentait quand même un grand intéret pour le stockage rapide et sécursé des données avec un bon rendement de capacité de stockage par rapport au nombre de disques mis en oeuvre, en particileir par rapport à une configuration en RAID1+0
En effet "Le mode RAID-5 permet d'obtenir des performances très proches de celles obtenues en RAID-0, tout en assurant une tolérance aux pannes élevée, c'est la raison pour laquelle c'est un des modes RAID les plus intéressants en terme de performance et de fiabilité. L'espace disque utile sur une grappe de n disques étant égal à n-1 disques, il est intéressant d'avoir un grand nombre de disques pour "rentabiliser" le RAID-5.
" (Source : http://www.commentcamarche.net/protect/raid.php3)
Alors où est l'erreur?
@+

 

On aborde en corps à corps le sujet...

A titre d'information pour faire avancer le débat, voilà ce qui m'a été proposé sur une base de HP xw8200 Bi-Xéon 3.4 GHz pour du HDV...

soit :

- DD Système 74 Go SATA/150 10.000 tpm
- 2 DD 73 Go U320 SCSI 10.000 tpm + 1 DD 500 Go SATA 3Gb/s NCQ 7200 tpm en RAID 0

soit :

- DD Système 74 Go SATA/150 10.000 tpm
- 3 DD 250 Go SATA 3 Gb/s 7200 tpm en RAID 5
- Carte RAID 5 SATA 4 canaux 3 Ware

"Les descriptifs ci-dessus sont du genre grand public, les composants pro sont à peine plus cher, et le problème n'est ni la RAM, ni les DD, c'est plutot les perfs, la sécu et les I/O. Jenny"

De quels descriptifs parles-tu, car je commence à y perdre mon latin et à regretter la bonne vieille Super 8!!

Si le pb n'est ni la RAM, ni les DD, comment optimises-tu ta station pour obtenir les perfs, la sécu et les I/O?

Quant à la base qui m'a été proposée pour du HDV, c'était une HP xw8200 Bi-Xéon 3.4Ghz, 2 Go de RAM, car au dessus apparemment cela n'a plus d'incidence avec Window XPPro, une carte FX1400...Concernant les DD, cela varie selon les configurateurs et c'est ce que je viens de marquer quelques lignes plus haut...

Maintenant, il est également proposé une station mono processeur sur une base de HP xw4300, et c'est pour ça que je me demandais si une station HP xw8200 mono processeur Xéon 3.4 GHz pour traiter du HDV n'était pas elle aussi pas suffisamment costaud au départ!

A cela s'ajoute la gestion d'After Effect et Photoshop en sus...


Enfin, quels sont ceux qui ont monté ou monte actuellement du HDV, et lequel?

 

Bonsoir,
Juste une remarque: il y a une astuce pour "forcer" Win XP Pro à gérer 3Go de mémoire au lieu des 2 Go de base
@+

 

Jerry,

Edition: DVC Pro HD, Edius Pro Broadcast (option pour le codec) parce que je suis habituée à Canopus, et qu'il a, à ce jour, 2 produits PC et FCP Mac.

Capture: Ni carte P2, ni FS100, mais un ultra-portable VAIO (1,25) qui, grâce à DV Rack (et un add-on codec DVC Aout200-) permet le monitoring calibré et la capture "All in one"
avec 2 DD externes USB minisize (2,5") en RAID1 (VAIO Xp Pro)
Le tout bien moins cher qu'un video assist et une capture "à la FS100" et plus compact sans limite de DD.
Remarque: DV Rack fonctionne sur Mac Intel Core Duo (Boot Camp) (confirmé éditeur)

2) Pour le RAID1 sur Xp Pro, OUI sans contrôleur HW, il suffit d'associer 2 disques durs IDENTIQUES dans "gestion de disques", le système le voit alors comme un seul disque. 2 disques identiques en IDE, ou FW ou USB.

3) "grand public" la carte mère, le type de proc décrit dans les différents posts sont plutôt grand public. Quand on dépense autant en matériel vidéo pur, acheter une carte mère "pro dual prosse" acceptant proc haut de gamme n'est rien à côté.
Si vous attendez de votre config qu'elle puisse faire la vidéo en DV/HDV DVC, qu'en audio elle puisse accepter des plugins en quantité, qu'elle puisse faire de la 3D, vous êtes gagnant à faire une config la plus puissance possible au niveau de la fondation carte-mère+proc+techno de bus+.
Tes 2 config HP , quelle carte-mère? quel support technique? as-tu envisagé une config sur mesure au lieu que l'on t'impose un tout? Bus PCI Express? quel choix de carte d'affichage? as-tu pensé un écran, puis 2 écrans?

Il n'y pas grand écart de prix sur un choix min/MAX de Carte-Mère/Proc/Bus, il faut juste ne pas se fermer les portes "plus tard" , ne pas acheter un système monolithique.

Décompose tes configs proposées par technos:
- techno de proc (mono? biproc?) socket.
- type mem (ram max dans cette techno)
- PCIx PCIe? (x4, x8, x16?)
- AGP? (bof)

Jenn.

 

Xp Pro gère jusqu'à 4Go de RAM et 2 procs.

La carte mère a une gestion mémoire physique qui accepte telle ou telle associaton de barettes RAM donnant telle ou telle config.

Donc, 1ère chose, est-ce que ta carte mère prévoit une config à 3 Go ? Si oui, respectes-tu scrupuleusement les types barettes/emplacement?
Ton BIOS voit 3Go?

A priori si BIOS voit 3Go, Xp voit 3Go, (limite xp Pro > 4Go)

Jenn.

 

Quand "on" te dit "Cette config bi Xeon à 50 GHz" gère le HDV" c'est une phrase qui ne veut rien dire!
Un format vidéo le HDV
Un débit, celui du DV : 25 Mbits/sec
Ceci implique une capture, même un portable "moderne" capture ce flux via FW.

Après cette capture, on a des fichiers des AVIs par exemple avec un codec en particulier (Microsoft, Canopus, etc..)

Pour éditer tes fichiers, il te faut un éditeur (Première, Edius, FCP, Xpress) et LA, la bonne question, (en gros) c'est : Effets en temps réel? avec mon seul hardware (CM+ proc) ? ou avec une carte codec (ou calc, ou DSP) associée?

C'est cette résultante "temps réel" qui compte, permettant de considérer un pallier de puissance machine, le recours à une carte codec ou non, etc ...

Autre aspects, la gestion multiformat dans le même projet, les flux // temps réels, le bon fonctionnement de plugin d'effet temps réels.. etc...

Mais se faire dire "mon bi-machin gère le HDV" ne t'avance à rien !


Jenn.

 

Fausses idées sur le RAID5

Ton article sur le RAID5 survole le concept.
1) On choisit un mode RAID par application.
La généralité de ton article est sûrement valable avec des milliers de fichiers de compta, et... un backup!
2) Oui, parce que le RAID5.. n'est pas fiable, sa parité tournante (symétrie des disques) n'évite pas les secteurs illisibles. Beaucoup pensent : RAID5 = sécurité (et oublie les perfs)

Voci un petit topo RAID5, plus technique:

Le RAID 5 associe le striping et un système à parité répartie. La parité est en effet répartie circulairement sur les différents disques. En cas de défaillance d'un des disques, les données sont toujours accessibles.

Exemple pratique : Considérons trois disques durs A, B et C, de taille identique. Le système va enregistrer le premier bloc en le répartissant sur les disques A et B comme en mode RAID 0 (striping) et, sur le disque C, le résultat de l'opération OU exclusif entre A et B (A xor B). Ensuite il va enregistrer le deuxième bloc en le répartissant sur les disques B et C, puis la parité (B xor C) sur le disque A, et ainsi de suite en faisant permuter circulairement les disques, à chaque bloc. La parité se trouve alors répartie sur tous les disques. En cas de défaillance d'un disque, les données qui s'y trouvaient peuvent être reconstituées par l'opération xor.

Ce système nécessite impérativement un minimum de trois disques durs. Ceux-ci doivent généralement être de même taille, mais un grand nombre de cartes RAID modernes autorisent des disques de tailles différentes.

La capacité de stockage utile réelle, pour un système de n disques de capacité c identiques est de (n − 1) * c. En cas d'utilisation de disques de capacités différentes, on utilisera dans la formule précédente la capacité minimum.

Ainsi, trois disques de 100 Go en RAID 5 offrent 200 Go utiles ; dix disques, 900 Go utiles.

Ce système allie sécurité (grâce à la parité) et bonne disponibilité (grâce à la répartition de la parité). Il permet une bonne disponibilité (même en cas de défaillance d'un des périphériques de stockage).

Il existe une variante : le « RAID 5 orthogonal » où chaque disque a son propre contrôleur. Toutes les autres fonctionnalités sont identiques.

On a trop souvent tendance à croire qu'un système RAID 5 est totalement fiable. Il est en effet généralement admis que la probabilité de défaillance de plusieurs disques est extrèmement faible. (On parle évidemment d'une défaillance entraînant la perte de données définitive sur plusieurs disques et non d'une simple indisponibilité de plusieurs disques). Cela est vrai pour une défaillance générale d'une unité de disque. Cependant, cela est totalement faux si l'on considère comme "défaillance" un secteur illisible.

En effet, dans la pratique, il est très rare que toutes les données d'un volume soient lues régulièrement. Et quand bien même ce serait le cas, la cohérence de la parité n'est que très rarement vérifiée pour des raisons de performances. Il est donc très probable que des défauts tels que les secteurs illisibles ne soient pas détectés pendant une très longue période. Lorsque l'un des disques devient réellement défectueux, la reconstruction nécessite de parcourir l'intégralité des disques restants. On peut alors tomber sur des défauts qui étaient restés invisibles jusque là.

Tout ceci pourrait ne pas être bien grave et occasionner la perte d'une quantité de données minime. Cependant, l'extrème majorité des controleurs raid est incapable de gérer les "défaillances partielles". Ils considèrent généralement qu'un disque contenant un secteur illisible est totalement défaillant. A ce moment là, 2 disques sont considérés défaillants simultanément et le volume RAID 5 devient inutilisable. Il est alors extrèmement difficile de récupérer les données.

Un système RAID 5 doit donc absolument être vérifié et sauvegardé très periodiquement pour s'assurer que l'on ne risque pas de tomber sur ce genre de cas.

En vidéo, c'est pas très pratique !!! Ni performant.

Donc le plus usité est le mode RAID 10
(Il existe RAID 0+1 et RAID 1+0)

RAID 0+1
Ce système est la cascade d'un RAID 0 et d'un RAID 1. Deux groupes agencent chacun n disques en RAID 0, et ces deux groupes s'agencent entre eux en RAID 1. Si un disque tombe en panne dans un des groupements, ce groupement tombe et l'autre fonctionne en RAID 0 uniquement.

Il faut donc un minimum de 4 disques (un groupe contient donc au minimum 2 disques). Les disques durs doivent être de tailles identiques.
[modifier]

RAID 10 (ou RAID1+0)
Cascade d'un RAID 1 et d'un RAID 0. n groupes de deux disques montés en RAID 1, et les groupes sont montés entre eux en RAID 0. Ici, il faut que deux disques d'un même groupe rendent l'âme pour que le tout soit perdu. Ce qui réduit la probabilité.

Le RAID 10 est plus fiable et plus rapide à se reconstruire en cas de panne que le 01. Il est donc plus courant. Comme pour le RAID 0+1, un minimum de quatre disques sont nécessaires.

Enfin, la préconisation RAID10 en vidéo sur disque SATA. (le must actuel)

Vidéo à la demande: Ce marché a une exigence particulière – il ne tolère pas d’interruption dans le flot de données ou de défaillance sur l’image que vous voyez à l’écran. Dans une application typique de système de fichiers, un certain retard peu être toléré car l’utilisateur est plus intéressé par l’obtention des données que par la vitesse d’obtention. Dans la diffusion de vidéo, cependant, il y a une fenêtre de temps critique dans laquelle les données doivent être fournies, sinon, l’image vidéo peut être interrompue. Il est donc impératif que la latence associée à la lecture et à l’écriture des données soit faible et constante. Les architectures de stockage basées sur les bus traditionnels comme SCSI et ATA ont des difficultés à satisfaire les exigences de performance et de latence de la diffusion vidéo. Toutefois, l’architecture point à point de SATA résout ces deux problèmes en permettant une agrégation de disques pour accroître les performances et élimine virtuellement la latence d'arbitrage. L’utilisation du RAID, en particulier du RAID 10, qui associe sauvegarde en miroir (mirroring) et répartition des données (striping), fournit à la fois une haute vitesse et une redondance, ce qui est idéal pour ce marché.

Architecture et I/O first.
(en vidéo, d'autant plus.)

Jenn.

 

Un bon freeware pour la RAM sous Xp Pro:

FreeRAM XP Pro (à Google-izer)

Jenn.

 

blablablabla

....
....
....

au moins on peut être sûr d'une chose : le Repaire est un endroit dont rien ne changera jamais ! :rire:

ainsi, pas de mauvaises surprises ^^

Capololo : panierchinois désire s'adresser aux Pros pour des conseils en station de montage... pas aux joueurs avec du nForce = une station rapide et fiable sans bobos !!

Jennyparis :
* le Raid 5 et le Raid 3 sont courrement utilisés sur des serveurs SAN ou NAS dédiées à la vidéo et au partage des média.
* Par défaut XP reconnait jusqu'à 2 Go de Ram connais tu bien la manip pour faire admettre à Windows XP plus de 2 Go de Ram ?
* Peu importe les carte mères des stations HP, elles restent les meilleures stations Xeon Unes des raisons pour lesquelles on les retrouve dans les boites qui s'y connaissent un minimum

panierchinois : que ce soit DV ou HDV, le SCSI n'est ABSOLIMENT PAS NECESSAIRE !!!!!!!

Par contre pour monter du HDV, il faut une config puissante pour pouvoir décoder les GOP MPEG2 en montage natif ou mouliner les fichiers en passant par un codec intermédiaire.

Dans le cas de Avid, que ce soit Xpress Pro HD ou Media Composer Software (qui sort sous peu) : avec une telle config, ne pas oublier le boitier Mojo
=> sans ce boitier, calcul des effets necessaire pour sortir du bande !

++

SteF

 

Jenny,

Il semble que tu travailles en DVCPro HD et que tu montes sur Canopus?
As-tu par ailleurs une expérience de tournage et de montage en HDV, et laquelle?

Me concernant, je cherche une station qui gère le HDV par codec intermédiaire comme le DNxHD de chez Avid (XPress Pro à mon niveau) car le montage en natif est trop destructeur et impossible à gérer pour une réalisation multicouches avec effets, non?

En terme d'informatique, je suis ignorant et c'est bien pour cela que j'ai ouvert la discussion à partir des bases de configurations qui m'ont été proposées par les professionnels ou que l'on retrouve sur leur sites (VidéoPLus, CTMSolutions, LTS, Avid, Adobe...), afin de faire la part des choses et d'avoir une réponse claire sur l'option la plus fiable...Ce qui sous-entend que les conseils reçus proviennent d'utilisateurs confirmés de HDV afin d'avoir un retour de leur expérience sur le terrain...

Que ce soit un bi-machin ou une patate verte, ma seule préoccupation est de ne pas me tromper de matériel dans mon investissement...Par ailleurs, je me réfère aux configurateurs professionnels qui je l'espère maîtrisent leur sujet!!