次の方法で共有

フルテキスト インデックスのパフォーマンスの向上

  • [アーティクル]

フルテキスト インデックス作成とフルテキスト クエリのパフォーマンスは、メモリ、ディスク速度、CPU 速度、コンピューターのアーキテクチャなどのハードウェア リソースの影響を受けます。

このトピックの内容

  • パフォーマンスの問題の一般的な原因

  • フルテキスト インデックスのパフォーマンスのチューニング

  • 完全作成のパフォーマンスに関するトラブルシューティング

  • フィルター処理によるインデックス作成のパフォーマンス低下のトラブルシューティング

パフォーマンスの問題の一般的な原因

フルテキスト インデックス作成のパフォーマンス低下の主な原因となるのは、ハードウェア リソースの制限です。

  • フィルター デーモン ホスト プロセス (fdhost.exe) または SQL Server プロセス (sqlservr.exe) の CPU 使用率が 100% に近くなっている場合は、CPU がボトルネックになっています。

  • ディスク待ちのキューの長さが平均でディスク ヘッド数の 2 倍を超えている場合は、ディスクがボトルネックになっています。 この場合の主な回避策は、作成するフルテキスト カタログを SQL Server のデータベース ファイルやログから切り離し、 ログ、データベース ファイル、およびフルテキスト カタログを別々のディスクに配置することです。 その他、高速なディスクを購入したり RAID を使用することも、インデックス作成のパフォーマンス向上に役立ちます。

  • 物理メモリが不足している場合 (3 GB 以下) は、メモリがボトルネックになっている可能性があります。 物理メモリ上の制限は、すべてのシステムで発生する可能性があります。32 ビット システムでは、仮想メモリの不足が原因でフルテキスト インデックス作成に時間がかかることがあります。

    注意注

    SQL Server 2008 以降の Full-Text Engine は sqlservr.exe の一部となったため、AWE メモリを使用できます。

システムにハードウェアのボトルネックがない場合、フルテキスト検索のインデックス作成パフォーマンスは、主に以下の条件に左右されます。

  • SQL Server によるフルテキスト バッチの作成にかかる時間

  • フィルター デーモンがバッチを処理する速度

注意注

増分、手動、および自動の変更追跡による作成は、完全作成とは違って、ハードウェア リソースを最大限に活用して処理を高速化するようには作られていません。 このため、これらのチューニングのヒントでは、フルテキスト インデックス作成のパフォーマンスを強化できない場合があります。

作成が完了すると、最終的なマージ プロセスが起動され、インデックス フラグメントが 1 つのマスター フルテキスト インデックスにマージされます。 これにより、多数のインデックス フラグメントではなく、1 つのマスター インデックスのみをクエリすれば済むため、クエリのパフォーマンスが向上し、関連順位付けにもより的確なスコア (評価) 統計を適用できます。 マスターのマージ処理では、インデックス フラグメントをマージする際に大量のデータを読み書きする必要があるため、大量の I/O が発生しますが、クエリの着信がブロックされることはありません。

重要な注意事項重要

マスター マージで大量のデータを処理すると、実行時間が長いトランザクションが発生し、チェックポイント時のログの切り捨てが遅れる場合があります。 この場合、完全復旧モデルでは、トランザクション ログが非常に大きくなることがあります。 完全復旧モデルを使用するデータベースで大きなフルテキスト インデックスを再編成する前に、実行時間が長いトランザクションのための十分な領域をトランザクション ログに割り当てることをお勧めします。 詳細については、「トランザクション ログ ファイルのサイズの管理」を参照してください。

[先頭に戻る]

フルテキスト インデックスのパフォーマンスのチューニング

フルテキスト インデックスのパフォーマンスを最大化するには、次に示すベスト プラクティスを実装します。

  • すべてのプロセッサまたはコアを最大限に使用するには、sp_configure 'max full-text crawl ranges' をシステム上の CPU の数に設定します。 この構成オプションの詳細については、「max full-text crawl range サーバー構成オプション」を参照してください。

  • ベース テーブルにクラスター化インデックスがあることを確認します。 クラスター化インデックスの最初の列には整数データ型を使用します。 GUID は使用しないようにしてください。 クラスター化インデックスで複数の範囲の作成を使用すると、作成速度を最大限に高めることができます。 フルテキスト キーとして機能する列は整数データ型にすることをお勧めします。

  • UPDATE STATISTICS ステートメントを使用してベース テーブルの統計を更新します。 さらに重要な点は、クラスター化インデックスの統計や完全作成のフルテキスト キーを更新することです。 これにより、複数の範囲の作成によってテーブルに適切なパーティションが生成されるようになります。

  • 増分作成のパフォーマンスを強化するには、timestamp 列のセカンダリ インデックスを作成します。

  • 大型のマルチ CPU コンピューター上で完全作成を実行する前に、fdhost.exe プロセスおよびオペレーティング システムが使用するメモリを十分に確保するために、max server memory 値を設定してバッファー プールのサイズを一時的に制限することをお勧めします。 詳細については、このトピックの「フィルター デーモン ホスト プロセス (fdhost.exe) のメモリ要件の推定」を参照してください。

[先頭に戻る]

完全作成のパフォーマンスに関するトラブルシューティング

パフォーマンスの問題を診断するには、フルテキスト クロール ログを調べます。 クロール ログの詳細については、「フルテキスト インデックスの作成」を参照してください。

完全作成のパフォーマンスが不十分な場合は、次の順序でトラブルシューティングを行うことをお勧めします。

物理メモリの使用量

フルテキスト作成時は、fdhost.exe または sqlservr.exe がメモリ不足またはメモリ枯渇の状態で実行される可能性があります。 フルテキスト クロールのログを確認した結果、fdhost.exe が頻繁に再起動されているか、エラー コード 8007008 が返されていることが判明した場合は、これらのプロセスのいずれかでメモリ不足が生じています。 特に大型のマルチ CPU コンピューター上で fdhost.exe がダンプを生成している場合、メモリが不足してきている可能性があります。

注意注

フルテキスト クロールで使用されるメモリ バッファーに関する情報を取得する方法については、「sys.dm_fts_memory_buffers (Transact-SQL)」を参照してください。

次のような原因が考えられます。

  • 完全作成時に使用可能な物理メモリの量がゼロの場合、システム上の物理メモリのほとんどを SQL Server バッファー プールが消費している可能性があります。 

    sqlservr.exe プロセスは、構成されている最大サーバー メモリ量に達するまで、バッファー プールで使用できるすべてのメモリを獲得しようとします。 max server memory の割り当てが大きすぎる場合は、fdhost.exe プロセスのメモリ不足や共有メモリの割り当ての失敗が発生することがあります。

    注意注

    マルチ CPU コンピューター上でのフルテキスト作成時、fdhost.exe または sqlservr.exe との間でバッファー プール メモリの競合が発生する場合があります。 その結果、共有メモリが不足すると、バッチの再試行、メモリ スラッシング、および fdhost.exe プロセスによるダンプが発生します。

    SQL Server バッファー プールの max server memory 値を適切に設定することにより、この問題を解決できます。 詳細については、このトピックの「フィルター デーモン ホスト プロセス (fdhost.exe) のメモリ要件の推定」を参照してください。フルテキスト インデックスの作成に使用されるバッチのサイズを小さくすると有効な場合があります。

  • ページングの問題

    拡張が制限された小さなページ ファイルが使用されているシステムにおいてページ ファイルのサイズが不足した場合、fdhost.exe または sqlservr.exe でメモリ不足が発生します。

    クロール ログにメモリ関連の障害が見当たらない場合、過剰なページングが原因でパフォーマンスが低下していることが考えられます。

[先頭に戻る]

フィルター デーモン ホスト プロセス (fdhost.exe) のメモリ要件の推定

fdhost.exe プロセスが作成のために必要とするメモリ量は、主に、プロセスが使用するフルテキスト クロール範囲の数、受信共有メモリ (ISM) のサイズ、および ISM インスタンスの最大数に依存します。

フィルター デーモン ホストによって使用されるメモリ量 (バイト単位) は、次の式を使用して概算できます。

number_of_crawl_ranges * ism_size * max_outstanding_isms * 2

この式の変数の既定値は次のとおりです。

変数

既定値

number_of_crawl_ranges

CPU の数

ism_size

1 MB (x86 コンピューターの場合)

合計物理メモリにより、4 MB、8 MB、または 16 MB (x64 コンピューターの場合)

max_outstanding_isms

25 (x86 コンピューターの場合)

5 (x64 コンピューターの場合)

fdhost.exe のメモリ要件の推定方法に関するガイドラインを、以下の表に示します。 この表の数式では次の値を使用します。

  • F: fdhost.exe に必要なメモリの推定値 (MB 単位)

  • T: システムで使用できる合計物理メモリ (MB 単位)

  • M: max server memory の最適な設定

重要な注意事項重要

数式に関する基本情報については、下記の 1、2、および 3 を参照してください。

プラットフォーム

fdhost.exe のメモリ要件の推定 (MB 単位)—F1

max server memory の計算式—M2

x86

F = Number of crawl ranges * 50

M = minimum(T, 2000) – F – 500

x64

F = Number of crawl ranges * 10 * 8

M = T – F – 500

1 複数の完全作成を実行中の場合は、それぞれの fdhost.exe のメモリ要件を、F1、F2 などのように個別に計算してください。 その後、M を T – sigma**(Fi)** で計算してください。

2 500 MB は、システムの他のプロセスに必要なメモリの推定値です。 システムで追加の作業を実行している場合、適宜この値を大きくします。

3 ism_size は 8 MB と見なされます (x64 プラットフォームの場合)。

例 : fdhost.exe のメモリ要件の推定

この例は、8 GM の RAM と 4 つのデュアル コア プロセッサを搭載した AMD64 コンピューターを対象としています。 最初の計算では、fdhost.exe に必要なメモリ (F) を推定します。 クロール範囲の数は 8 です。

F = 8*10*8=640

次の計算では、最適な max server memory 値 (M) を算出します。 このシステムで使用可能な合計物理メモリ (T) は 8192 です。

M = 8192-640-500=7052

例 : max server memory の設定

この例では、sp_configure ステートメントおよび RECONFIGURE Transact-SQL ステートメントを使用して、前の例で計算した M の値 7052 を max server memory として設定します。

USE master;
GO
EXEC sp_configure 'max server memory', 7052;
GO
RECONFIGURE;
GO

max server memory 構成オプションを設定するには

[先頭に戻る]

CPU 消費率の低下を招く要因

平均 CPU 消費率が約 30% 未満になると、完全作成のパフォーマンスが低下すると考えられます。 ここでは、CPU 消費率に影響するいくつかの要因について説明します。

  • 長いページ待機

    ページ待機時間が長いかどうかを調べるには、次の Transact-SQL ステートメントを実行します。

    Execute SELECT TOP 10 * FROM sys.dm_os_wait_stats ORDER BY wait_time_ms DESC;

    次の表で、主な待機の種類について説明します。

    待機の種類

    説明

    解決方法

    PAGEIO_LATCH_SH (_EX または _UP)

    IO がボトルネックとなっている可能性があります。この場合は通常、平均のディスク キューも長くなります。

    別のディスクの別のファイル グループにフルテキスト インデックスを移動すると、IO のボトルネックを軽減できる場合があります。

    PAGELATCH_EX (または _UP)

    複数のスレッドが同じデータベース ファイルへの書き込みを試行し、多数の競合が発生している可能性があります。

    フルテキスト インデックスが格納されているファイル グループにファイルを追加すると、このような競合を軽減できる場合があります。

    詳細については、「sys.dm_os_wait_stats (Transact-SQL)」を参照してください。

  • 非効率的なベース テーブル スキャン

    完全作成では、バッチを生成するためにベース テーブルをスキャンします。 次のようなシナリオでは、このテーブル スキャンの効率が下がる可能性があります。

    • フルテキスト インデックスが作成される行外の列がベース テーブルに高い比率で含まれている場合、バッチ生成のためのベース テーブル スキャンがボトルネックとなることがあります。 その場合、varchar(max) または nvarchar(max) を使用して、比較的小さなデータを行内に移動すると解決することがあります。

    • ベース テーブルが過度に断片化されていると、スキャンの効率が下がります。 行外データの計算とインデックスの断片化の詳細については、「sys.dm_db_partition_stats (Transact-SQL)」および「sys.dm_db_index_physical_stats (Transact-SQL)」を参照してください。

      断片化を解消するには、クラスター化インデックスを再構成または再構築します。 詳細については、「インデックスの再編成と再構築」を参照してください。

[先頭に戻る]

フィルター処理によるインデックス作成のパフォーマンス低下のトラブルシューティング

Full-Text Engine では、フルテキスト インデックスを作成するときに、マルチスレッド フィルターとシングル スレッド フィルターの 2 種類のフィルターを使用します。 フィルター処理するドキュメントに応じて、マルチスレッド フィルターを使用する場合 (Microsoft Word 文書など) と、 シングル スレッド フィルターを使用する場合 (Adobe Acrobat Portable Document Format (PDF) ドキュメントなど) があります。

セキュリティ上の理由から、フィルターはフィルター デーモン ホスト プロセスによって読み込まれます。 サーバー インスタンスでは、マルチスレッド フィルターに対してはすべてマルチスレッド プロセスが使用され、シングル スレッド フィルターに対してはすべてシングル スレッド プロセスが使用されます。マルチスレッド フィルターを使用するドキュメントにシングル スレッド フィルターを使用するドキュメントが埋め込まれていると、Full-Text Engine は埋め込まれたドキュメントに対してシングル スレッド プロセスを開始します。 たとえば、PDF ドキュメントが埋め込まれた Word 文書の場合、Full-Text Engine は、Word コンテンツに対してはマルチスレッド プロセスを使用し、PDF の内容に対してはシングル スレッド プロセスを開始します。 ただし、このような環境では、シングル スレッド フィルターが適切に機能しない場合があり、フィルター処理が不安定になることがあります。 このような埋め込みが通例であるような特定の状況では、不安定になった結果、フィルター処理がクラッシュすることもあります。 クラッシュが発生すると、エラーが発生したドキュメント (たとえば、PDF の内容が埋め込まれた Word 文書) がシングル スレッド フィルター処理に再ルーティングされます。 再ルーティングが頻繁に起こると、フルテキスト インデックス作成処理のパフォーマンスが低下します。

この問題を回避するには、コンテナー ドキュメント (この場合は Word) に対するフィルターとして、シングル スレッド フィルターを設定します。 フィルターのレジストリ値を変更して、特定のフィルターをシングル スレッド フィルターとして設定できます。 シングル スレッド フィルターとして設定するには、フィルターの ThreadingModel レジストリ値を Apartment Threaded に設定する必要があります。 シングル スレッド アパートメントの詳細については、ホワイト ペーパー「COM スレッド モデルの概要と使用方法」を参照してください。

[先頭に戻る]

関連項目

タスク

フルテキスト インデックスの作成のトラブルシューティング

参照

sys.dm_fts_memory_buffers (Transact-SQL)

sys.dm_fts_memory_pools (Transact-SQL)

概念

サーバー メモリに関するサーバー構成オプション

max full-text crawl range サーバー構成オプション

フルテキスト インデックスの作成

フルテキスト インデックスの作成と管理