Clustering van resources en opslag - Pagina 2
13/10/12 15:49
Voor zover wij nu hebben gezien in tests met AOE/Coraid is de snelheid bij een paar SATA schijven al beperkt tot de snelheid van het netwerk. De juiste opslag oplossing is ook sterk afhankelijk van hoe je het gebruikt (met name grote of kleine bestanden maakt al een belangrijk verschil). Over enkele dagen heb ik ook meer gegevens over random lezen/schrijven met kleine bestanden tov iSCSI met SAS 15k schijven. We zullen zien waar in verhouding de limieten liggen.
14/10/12 14:51
In de meeste gevallen praten we over files van tussen de 200MB en 2GB. Het platform hoeft niet extreem snel te zijn zolang we maar gemakkelijk die 1.2 Miljoen GB per maand eroverheen kunnen trekken. Soms wel met enkele pieken.
14/10/12 14:53
Oorspronkelijk geplaatst door Rubra
Dank voor je reactie. Mag ik vragen om wat voor gegevens het gaat? Is het voornamelijk eenmalige opslag of wordt er achteraf nog veel mee gedaan?
Daarnaast is ons huidige platform super snel en lopen we niet tegen problemen aan. Echter willen we het meer onderhoudbaar. Dus inpluggen van extra server en hoppa daar heb je weer xxTB extra.
14/10/12 21:35
Als je op de huidige manier wilt blijven werken, dan kun je eigenlijk ook gewoon een pxe server pakken met kant en klare images of met kickstartfiles. Server in het rack, booten en klaar.
15/10/12 09:31
Dat kan dus met Scality. Je kunt ook zelf het redundantieniveau (replicas) instellen en zo bepalen hoeveel overhead je kwijt wilt zijn voor redundantie. Je krijgt een RAID-array over meerdere servers die je ook nog eens on-the-fly kunt uitbreiden.
Volgende maand lanceren we zelf een platform op basis van deze software in productieomgeving, maar de beta was erg indrukwekkend.
Als je het wilt zien in de praktijk mag je best even komen kijken als het live is.
Dat zou ik leuk vinden! Kan je een PM doen zodra het draait?
15/10/12 11:53
Beetje ala HP StorageWorks Pnogwat (het vroegere Lefthand). Daarbij kan je je storage omgeving vergroten door een storage node "erbij te prikken".
Super mooi spul, maar niet goedkoop.
15/10/12 11:58
Oorspronkelijk geplaatst door crossplatform
Dat is dus het probleem. We besparen niet op hardware omdat dat gewoon goed moet zijn. Enkel is die 750TB opgebouwd in een kleine 4 maanden en het stijgt snel. De groei is enorm. En dan zijn dat soort oplossingen gewoonweg te prijzig.
15/10/12 12:40
Scality ziet er erg goed uit, moet ik zeggen. Zou prima kunnen aansluiten op jullie behoeftes.
15/10/12 12:57
Klopt! Alleen jammer dat ik nergens prijzen kan vinden.
Ik ga iig alle vorderingen bijhouden in dit topic. Tips en ideeën zijn natuurlijk altijd welkom.
Op basis van een 10gbit netwerk zou het met AOE en meerdere servers goed te doen moeten zijn. Enorm schaalbaar (schroef er een doos bij, 2 commando's op de CLI op de nieuwe server en 2 op de server ervoor en het draait). Mogelijk lukt het ook met een gbit netwerk, maar dan is je groei iets eerder beperkt.
Bij de genoemde hoeveelheden opslag zal vast ook iets met de prijs te doen zijn.
De laag ervoor kun je vervolgens per cluster met een bepaalde taak doen. Dit maakt het super makkelijk om bij te schalen waar het nodig is.