並列クエリを上手に使いこなす!

並列クエリに向いているもの、向いていないもの 前回までで、並列クエリを実現するプログラム上のテクニックを紹介しました。最終回の今回は並列クエリを効果的に使うための話題をいくつか紹介したいと思います。

田中 宏昌

2008年7月30日 20:00

並列クエリに向いているもの、向いていないもの

 前回までで、並列クエリを実現するプログラム上のテクニックを紹介しました。最終回の今回は並列クエリを効果的に使うための話題をいくつか紹介したいと思います。

 当たり前のことですが、並列クエリをするからには、並列で処理できるプロセスがあるということが大前提です。そのクエリを分散して、バラバラに平行して処理できる必要があります。

 シーケンシャルに(順番に)処理しないと結果がでないようなものでは効果が限定的です。

 例えば、複雑な指標を求める場合などにおいては、対象とする集合の全体を何度もスキャンし、平均値や標準偏差などの統計値を算出することがありますが、こうした「前のクエリの結果を次のクエリで使う」ようなシリアル処理のものは、並列クエリの威力を発揮しにくくなります。

 もっとも、シリアル処理だからといって、並列クエリを使ってもまったく効果が無いというわけではありません。

 「第4回:集約関数を使いこなす(http://www.thinkit.co.jp/article/97/4/)」の標準偏差の項にて紹介したように、個々のステップを並列処理にすることで速度を高めることができます。あるいは、出現頻度の高い値(例えば、ある値の平均値など)をあらかじめ計算しておく、または計算した都度キャッシュしておくなどにより、シリアル処理の計算ステップ数を減らすこともできるでしょう。

テーブルの分散

 並列クエリでは、並列処理に適したアプリケーション(処理)を見極めるとともに、効果が高まるようにテーブルを分散させることが肝要です。「第1回:DBは習うより慣れよ!(http://www.thinkit.co.jp/article/97/1/)」で触れたとおり、それぞれのノードが均等な負荷で、みなの力を余すところなく使い切ることが理想です。そのためには、検索対象となるテーブルを、意図的に分散させる必要があります。

 それでは次ページにて、テーブル分割の具体例を紹介しましょう。

人気記事トップ10

人気記事ランキングをもっと見る

企画広告も役立つ情報バッチリ! Sponsored

ClickHouse Cloudが実現した広告運用SaaS「ATOM」のデータ基盤革新、パフォーマンスを向上しながら、運用負荷とコストを削減 11月11日 6:20 AIで開発が加速する時代、品質保証はどう変わる? Tricentisが示すAIエージェント活用の実像 11月9日 6:45 悪用までの猶予が「1分」に迫るフロンティアAI時代に開発と本番を貫く脆弱性管理が必要 10月29日 8:30 欧州CRA対応とSBOM運用。AI生成コードのOSS混入問題の対策とは ――スニペット単位で検出する「FossID」「Insignary Clarity」によるSBOM運用 9月16日 6:40 PostgreSQLからTiDBへ、稼働中SaaSで進める段階的DB移行の実践と再設計への展望 9月7日 6:30 機能安全開発におけるGoogleTestの活用を支援!「Parasoft C/C++test CT」で実現する効率化&AI連携 4月14日 6:30 【CNDW2025】Grafanaが明かす「オブザーバビリティの哲学」ー最小限の労力で実用的なインサイトを得るには 1月23日 6:30 【CNDW2025】プロダクト急増に備える基盤刷新 ーウェルスナビがECSからEKSへの移行で得た知見とは 1月15日 6:30 【CNDW2025】250環境を5人で運用、構築時間は30分に ーKINTOテクノロジーズが語るインフラ基盤組織の作り方 2025年12月18日 6:30 新たな自動化で熱視線! AIエージェントの「推論能力」を支える2つのコンポーネントとは? 2025年11月28日 6:30