質問

2013年06月24日 13時41分
  • 月間1億件データ!あなたならどうする?

情シスのオープンナレッジ『Syszo』サービス終了のお知らせ

質問

ある案件で月間1億件データが発生するケースがあります。

概要は以下の通りですが、あなたなら

どういうプラットフォーム

どういうミドルウェア、アプリケーション、言語

を選び、

どういうSI会社にSI発注をしますか?

【概要】

30分ごとに1000件発生

1000枚のFOMACard接続端末から同時刻に機械的に発生します。

データ長は200バイト程度

発生したデータを30分後のデータが発生する前までに、加工し別システムへ転送

データは一ヶ月分蓄積し詳細データのままビリングシステムへ

分析のために、30分次データはできる限り30分次データとして
過去分一括参照ができる事が好ましい。

こんな場合、皆さんはどう考えますか?

3件の回答があります

回答

すみません。

30分1000件ではなく

30分70000件の誤りでした。

よろしくお願いします。

回答

私見ですが
まずは、
>どういうSI会社にSI発注をしますか?
これから先に決めるべきかと思います。

要件をまとめて 大容量データマイニングの実績がある企業を検索して相談しましょう。

回答

30分に7万件200バイトで14Mbyteのデータですよね。
秒間38件のデータをさばくトランザクション機能が必要で、
年間1億件
12ヶ月*200バイトで240Gbyteのデータが蓄積される、と。
サーバ償却期間を5年間とすると最終的に1.2Tの容量が発生します。
増加分を見込んで2T程度確保しておくとして、
コレをどのくらいのレスポンスで参照したいか考えると、ある程度見えてくるのではないですかね。
価格とデザインしだいです。
直近1年間だけトランザクションサーバに持って、過去分は別の参照用サーバに格納してオンメモリDB使うとかでも速度は稼げると思います。

私もこれらの情報をSIに投げて提案させると思います。自分で計算して間違っていたら責任取れませんよね。。
裏は取らないといけないと思うので複数の会社に相見積もりとって価格の安すぎる会社に発注しないよう気をつければ大丈夫だと思います。

2013年06月24日 21時15分
csp

あなたもコメントしましょう!