未解決
この投稿は5年以上前のものです
2 Intern
•
439 メッセージ
0
1971
Isilon 重複排除のパフォーマンス影響
Isilon x210およそ40TBのデータを格納しているファイルサーバに対して、重複排除機能を有効化します。
その際にCPU使用率がXX%を超えるなど、パフォーマンス影響有無など、ご存知の方がいらっしゃいましたらご教示いただけないでしょうか。
また実際の環境ではIsilon間でSyncIQ処理など流れていますが、Source側で重複排除を有効化した場合、
Destination側では重複排除されたデータが転送されるのでしょうか。
影響の有無に応じて、土日などでスケジュール実行するなどの考慮が必要となりますので、
ご存知の方がいらっしゃいましたら教えて頂けますでしょうか。
Hiro_319
2 Intern
2 Intern
•
439 メッセージ
0
2017年1月5日 00:00
ありがとうございます。大変助かります。
負荷の少ない休日に実施したいと思います。検証環境下で確認したところ、スケジュールで土曜から開始するように指定できそうでしたが、月曜から処理を一時停止することは可能なのでしょうか。
土日は流して、月〜金まで流さないといったスケジューリングが可能かどうかご教示ください。
また重複排除実施に伴い、CPU使用率がどのくらい上がるのか、容量など含め実績値があればお願いいたします。
ayas
Moderator
Moderator
•
6.7K メッセージ
0
2017年1月5日 00:00
https://support.emc.com/docu49879_White-Paper:-Next-Generation-Storage-Efficiency-with-Isilon-SmartDedupe.pdf?language=en_US のPage 19にはベストプラクティスとしてClusterの稼働が低い時間帯に流すのが良い、という記述が有ります。
フォーラムでも他のプロセスと同時に流しても『パフォーマンスへの影響度は比較的少ない、』とあるものの
While deduplication can run concurrently with other cluster jobs, only a single instance of the deduplication job, albeit with multiple workers, can run at any one time. Although the overall performance impact on a cluster is relatively small, the deduplication job does consume CPU and memory resources.
0では無いためHeavy Traficであったり、high performanceな状況である場合はSmartDedup使用はあまり適切ではない、という事なので基本的に稼働の低い時に流すのがベストだと思います。
参考：https://community.emc.com/community/products/isilon/blog/2015/03/30/smartdedupe--behind-the-curtain
なおSource側で重複排除を有効化した場合、Target側では元のファイルサイズに戻されます。（もちろんそのあと再度Dedupも可能）
詳しくは前述White Paper のPage 21あたりを参照ください。
ayas
Moderator
Moderator
•
6.7K メッセージ
0
2017年1月6日 00:00
マニュアルでの方法はこちらのスレッドにステップバイステップであるので参考にしてください。
EMC Isilon SmartDedupe
なお停止はisi dedupe settings modify --remove-paths
になります。
参考：https://support.emc.com/docu79790_OneFS-8.0.1-CLI-Administration-Guide.pdf?language=en_US
Page 567（任意でのDedupe設定）、568（停止コマンド）～
又スケジューリングに関しては
https://support.emc.com/docu49879_White-Paper:-Next-Generation-Storage-Efficiency-with-Isilon-SmartDedupe.pdf?language=e…
Page 10～にあるGUI設定画面から指定の日時を決められます。（マニュアルだとDirectry指定になるので日時はできなさそうです）
実際のCPU情報はちょっと見つけられず・・・どなたかご存じの方からの書き込みをお待ちしてます。
Hiro_319
2 Intern
2 Intern
•
439 メッセージ
0
2017年1月9日 19:00
ご回答ありがとうございます。
Dedupeジョブに関して、スケジューリング設定により土曜からスタートしようかと思います。
また月~金はジョブを停止させたいのですが、remove-pathsではなく、pauseコマンドにより一時停止し、
次の土曜にResumeすることで再度、途中から再開することは可能でしょうか。(GUIでも同様の操作ができそうでした)
仮にできたとしても月~金までPauseしておくことは問題ないのか、何か懸念点がないかを気にしています。