第2回:縦切りで不要カラムの呼び出しを解決! (1/2)

Sybase IQ
Sybase IQで学ぶデータウェアハウス

第2回:縦切りで不要カラムの呼び出しを解決!

著者:サイベース   2007/7/10
1   2  次のページ
データ構造の違いをSybase IQで学ぶ

   今回は、Sybase IQに用いられている技術をもとに、データウェアハウスと一般的なRDBMSのデータ構造の違いをみていきます。まずはSybase IQの特徴を紹介し、それぞれの技術について深く掘り下げていきましょう。

Sybase IQの特徴

   Sybase IQの最も大きな特徴は、垂直パーティションと呼ばれるデータ構造にあります。垂直パーティショニングは、テーブルデータの保持方式とそこに対するアクセス方法を指しています。ここでは、生データがSybase IQデータベースに格納されるまでの3つのプロセスを追いながら説明していきます。

垂直パーティショニングと一般的なRDBMSの違い
図1:垂直パーティショニングと一般的なRDBMSの違い
(画像をクリックすると別ウィンドウに拡大図を表示します)


カラムパーティション(カラムワイズアクセス)

   最初のプロセスは、カラムパーティションという、ロー単位に管理されたデータ(Oracle、SQL ServerなどのテーブルデータやCSV形式のテキストファイルなど)を、いわゆる「縦切り」にしてカラム単位にまとめるプロセスです。カラムパーティションされたデータのアクセスをカラムワイズアクセスと呼んでいます。


インデックス化(ビットワイズインデックス)

   次にカラムパーティションされた各カラムの固まりは、Sybase IQ固有のインデックスに変換されます。インデックスは用途別に9種類用意されており、データは最低1つ以上のインデックスに置き換えられます。つまり、Sybase IQにおいてはすべてのデータがインデックスだけで構成されることになります。このインデックス技術はサイベースの特許技術から構成されており、ビットワイズインデックスとも呼ばれています。


データ圧縮

   インデックス化されたデータは、最後にすべて圧縮されてハードディスクへと書き込まれます。圧縮は読み書きの単位、一般的なRDBMSでいうところのページ(またはブロック)に対して行われます。

   それでは、それぞれについてより詳しくみていきましょう。

1   2  次のページ

技術ホワイトペーパ「情報分析用高速クエリエンジンSybase IQ」

本連載はサイベースが提供している技術ホワイトペーパ「情報分析用高速クエリエンジンSybase IQ」の転載となります。Sybase IQのより詳細な内容については以下のページを参照してください。

http://www.sybase.jp/products/informationmanagement/sybaseIQ_moreInfo.html

サイベース株式会社
著者プロフィール
サイベース株式会社
1984年、カリフォルニア州バークレーで設立。情報の管理能力と、卓越したレベルでデータの信頼性とセキュリティを提供し、データセンターからアクションポイントまで、情報の管理と可動化のみに焦点を合わせた最大のグローバルエンタープライズソフトウェア企業として活動。サイベース株式会社は、米国 サイベース社 の日本法人として1991年に設立。


INDEX
第2回:縦切りで不要カラムの呼び出しを解決!
データ構造の違いをSybase IQで学ぶ
 カラムパーティション(カラムワイズアクセス)
Sybase IQで学ぶデータウェアハウス
第1回汎用RDBMSとデータウェアハウスの違い
第2回縦切りで不要カラムの呼び出しを解決!
第3回インデックスが9種類もある理由とは?
第4回ロード/検索性能比較!

人気記事トップ10

人気記事ランキングをもっと見る

企画広告も役立つ情報バッチリ! Sponsored

サーバやOSの保守期限、VMware環境の見直しといった節目に考える、Oracle AI Databaseの次期基盤。オンプレ継続・AWS・OCIそれぞれの特性と留意点を整理するWebセミナー 11月19日 16:00 AIエージェントの“見えないリスク”に備えてアイデンティティを「関係」で統制する 11月17日 6:25 AI生成コードをどう安全に使うか――決定論的検証とAutoFixで築く品質保証ワークフロー 11月16日 6:30 デジタル主権時代、データとモデルの持ち方は企業が主体的に定める 11月13日 6:25 ClickHouse Cloudが実現した広告運用SaaS「ATOM」のデータ基盤革新、パフォーマンスを向上しながら、運用負荷とコストを削減 11月11日 6:20 AIで開発が加速する時代、品質保証はどう変わる? Tricentisが示すAIエージェント活用の実像 11月9日 6:45 悪用までの猶予が「1分」に迫るフロンティアAI時代に開発と本番を貫く脆弱性管理が必要 10月29日 8:30 欧州CRA対応とSBOM運用。AI生成コードのOSS混入問題の対策とは ――スニペット単位で検出する「FossID」「Insignary Clarity」によるSBOM運用 9月16日 6:40 PostgreSQLからTiDBへ、稼働中SaaSで進める段階的DB移行の実践と再設計への展望 9月7日 6:30 機能安全開発におけるGoogleTestの活用を支援!「Parasoft C/C++test CT」で実現する効率化&AI連携 4月14日 6:30