クラウドサービスプラットフォーム Cosminexus：uCosminexus Grid Processing Server

バッチ処理を分散・並列処理して高速化を実現-uCosminexus Grid Processing Server

膨大かつ多様なデータを活用可能な情報へと高速に処理することがビッグデータの利活用の第一歩です。uCosminexus Grid Processing Serverは、日立のビッグデータ利活用プラットフォームを支える技術「Field to Future Technology＊」の「データ並列化」を実現する製品です。

データの利活用

バッチジョブを分散して複数または1つのサーバ内で並列実行することにより、バッチジョブ全体の処理時間を短縮して高速化するための機能を提供します

*: 「Field to Future Tchnology」の詳細は、ビッグデータ利活用プラットフォームのサイトをご覧ください。

Field to Future Technology （新規ウィンドウを表示）

概要

uCosminexus Grid Processing Serverは、バッチジョブで使用する入力データが分散配置された複数または1つのサーバ内で、バッチ処理を並列実行します。

バッチ処理を並列化し、サーバリソースを柔軟なスケジューリングで活用することで、バッチ業務の処理時間を短縮することができます。処理量によっては、サーバ内だけではなく他のサーバや、さらにクラウドのリソースも活用できます。
例えば夜間に空いているサーバが多い場合に、長時間かかっている夜間バッチ処理を空いているサーバをフル活用して並列実行することで、処理時間を短縮できます。

昼は各々サーバでそれぞれの業務を実行→CPUリソースを利用し、夜間バッチ処理時間を短縮。データを分割してバッチ業務を並列実行

ページの先頭へ

特徴

ビッグデータの利活用

莫大なデータの中からビジネスにとって価値のあるデータを集計するためのバッチ処理には時間が掛かりますが、このバッチ処理を短時間で処理できるため、現場から経営まで、あらゆる場面でデータの活用タイミングを増やすことができます。

uCosminexus Grid Processing Serverを使うことで、大量の基幹データの集計・分析を高速に行うことができ、新たな事実を導き出すような多角的な分析も可能になります。

基幹系データ処理をさらに利活用して、新たな事実を発見

バッチ業務の高速化

逐次的にデータを処理するバッチ処理を、一つのサーバ内で並列実行したり、データが分散配置された複数台のサーバで並列実行したりすることで、バッチ処理時間を大幅に短縮します。
また、より効率的なリソース割り当てができるようなさまざまなスケジューリング機能を提供しており、さらに短時間での処理が可能です。

夜間のバッチ処理の場合

少ない修正と簡単な操作で並列化

既存バッチ処理で使用していたアプリケーション資産を、少ない修正で活用し、分散環境で実行できます。また、データ分割を実施する拡張ソートマージ SORT Version 8 Extended Editionと連携しており、数パラメータを指定することでアプリケーションが処理するデータを分散環境に適した形に加工します。（2013年8月リリース予定の02-00でサポート。）

SORT Version 8 Extended Editionについては、SORT Version 8 Extended Editionのサイトをご覧ください。

SORT Version 8 Extended Editionのサイト（新規ウィンドウを表示）

障害箇所の局所化により処理回復時間を短縮

ジョブを分散並列実行することにより、一部の処理でエラーが発生した場合でも、すべてのジョブをやり直す必要はなく、エラーが発生した処理を再実行するだけで業務全体を回復することができます。

サーバの障害時は別サーバにて業務続行

ジョブの実行前にサーバ障害を検知すると、自動的に別サーバでジョブを実行することができます。

分散しても1ジョブイメージ扱える効率的な運用環境の提供

uCosminexus Grid Processing Serverが分散実行する複数のバッチ処理は、JP1/AJS3のジョブ定義と同じ操作で、1つのジョブとして定義することができます。
また、ジョブ実行時には、複数に分散した処理を、あたかも 1つのバッチ処理を扱うようにシンプルな操作でJP1/AJS3から運用することができます。

JP1/AJS3：JP1/Automatic Job Management System 3