ビッグデータ処理のアイデア

1.プロセスの最適化:最適化SQLは、一時テーブルまたは中間テーブルを使用することを検討してください

2.データベースの最適化:インデックスの合理的な建設、合理的なデザインのテーブル構造、データベースクラスタ

3.フロー:なくによって分離され、一般的に別々に使用されていない、データベースサブライブラリサブテーブルパーティションに格納されたデータ、分割データファイル記憶、バッチプロセスを検討する。原理は、各操作の技術データを最小化することです;

4.キャッシュ技術:以下のキャッシュを読み書き

合理的な利用のNoSQL:MongoDBの、Redisの、memched、HBaseのなど

6.大規模な分散データ・スキーム:Hadoopの、スパーク、嵐等

 

 

種類のNoSQLデータベース:一時的なキーと値のストア(MemcachedのRedisの)、永続的なキーと値のストア(ROMAのRedis)、ドキュメント指向ストレージ(MongoDBはCouchDBの)、列指向ストレージ(CasssandraのHBase)

 

おすすめ

転載: www.cnblogs.com/hzq3554055/p/11999765.html