Mein Produktionssystem ist CDH3, (alte, aber immer noch in Gebrauch)Hbase: Region Splitting während in der Region zu schreiben
ich einige Regionen mit storefilesAizeMB über 200K haben. Ich möchte wissen, ob ich eine Region teilen und gleichzeitig in diese Region schreiben kann?
Das macht Hbase, wenn die Region zu groß wird. Aber es ist ein langsamer Prozess und es wird Ihre Schreibperformance beeinflussen.
Die beste Vorgehensweise besteht darin, die Region basierend auf Ihrem Datenmodell bei der Erstellung der Datenbank zu teilen. Hier ist ein kleines Code-Schnipsel:
HTableDescriptor desc = new HTableDescriptor(tableName); // Tablename tablename
HColumnDescriptor coldef = new HColumnDescriptor(Bytes.toBytes("CON"));
desc.addFamily(coldef); // add the cf to the table
// function to get all regions looking at the data
// it is an array which stocks the prefix of each regions
byte[][] regions = getRegions();
admin.createTable(desc, regions);
die Antwort ist NEIN.
Wenn die RegionServer nicht online ist, oder wirft NotServingRegionException, bewegt sich der Master die Region Zustand Offline- und Wieder ordnet sie zu einem anderen RegionServer.
siehe https://hbase.apache.org/book.html#regions.arch.states und https://hbase.apache.org/book.html#arch.region.splits
Kann nicht vorgeTeilBereiche, wenn das System seit mehr als 3 Jahren läuft. Wir haben das automatische Teilen und Überwachen ausgeschaltet. Aber es ist gut zu wissen, dass ich meine großen Regionen manuell teilen kann, während ich an sie schreibe. Danke – Evan
vielleicht können Sie in Erwägung ziehen, die Daten in einen neuen Cluster zu übertragen, jetzt da Sie Ihre Datenbank gut kennen. Eine gute Region Balancing kann Ihre Leistung beim Schreiben verbessern und liest – Whitefret
und für Live-Splitting sehen Force Splitting, aber ich glaube nicht, dass es empfohlen wird – Whitefret