ArcGIS Data Reviewerによる大規模データセット評価のための新しいツール

Jaspar_Saadi-Klein

重要: このブログで紹介しているツールは現在も開発およびテストが進行中です。これらは作業途中のものであり、ツールをご利用いただく中でのフィードバック、機能強化、問題報告を歓迎します。<\/P>

これらのツールが作成された理由<\/H3>データセット内のすべてのフィーチャを評価して品質の基準を確立することは一般的な慣行であり、特に新しいデータセットがプロジェクトに適しているかどうか、またはプロバイダーのデータ納品物が契約上の品質要件を満たしているかどうかを判断するために行われます。Create Evaluation Grids と Evaluate Rules by Grid ツールは、数百万のフィーチャを含む非常に大規模なデータセットの品質評価に伴う課題に対応するために開発されました。このようなシナリオでは、範囲ベースのアプローチが評価をより管理しやすいサブセットに分割することで、この種の厳密で大規模なフィーチャ品質評価を支援します。<\/P>これらのツールの機能<\/H3><\/span><\/P>これらのツールは属性ルール評価をより小さく管理しやすい範囲に分割します。これは ArcGIS Pro の表示範囲でルールを評価することを選択することと概念的に似ています。内部的には、範囲が Evaluate Rules ジオプロセシング ツールに渡され、その範囲内のフィーチャのみが評価されます。データセット全体を一度に評価する代わりに、これらのツールはデータセットを複数の小さな範囲に分割し、それぞれ個別に評価します。これにより、大規模なデータセットでも段階的に処理でき、全データセットにわたってすべてのルールが評価されることが保証されます。<\/P>評価グリッドの作成方法<\/H3>Create Evaluation Grids ツールは評価時に使用される範囲（エクステント）を生成します。<\/P>これらの範囲を作成するために、このツールはCreate Cartographic Partitions<\/A>ジオプロセシング ツールを活用します。このツールはフィーチャの密度と分布に基づいて出力ポリゴンを作成し、評価作業負荷をより管理しやすいエリアに分割します。<\/P>

Maximum Features Per Grid パラメーターは、特定の評価範囲内に含めることができるフィーチャ数の上限を設定します。入力として1つ以上のフィーチャクラスを指定でき、選択されたすべてのフィーチャクラス合計でフィーチャ数が計算され、その境界が決定されます。その結果、フィーチャ密度が高いエリアでは小さいグリッドポリゴンが生成され、密度が低いエリアでは大きいグリッドポリゴンが生成されます。<\/P>

ツール完了時には、生成されたパーティションに Evaluation Required フィールドと範囲情報フィールドが追加され、シンボロジーが適用され、結果レイヤーがアクティブマップに追加されます。<\/P>

<\/span><\/P>生成されたグリッドレイヤーは Evaluate Rules By Grid ツールへの入力となります。<\/P>

評価方法<\/H3>Evaluate Rules By Grid ツールは生成された評価グリッドを使用して属性ルールを1つずつグリッドポリゴン単位で評価します。<\/P>各グリッドポリゴンについて、ツールはその範囲を抽出し、それをEvaluate Rules<\/A>ジオプロセシング ツールまたはEvaluate REST API<\/A>へ渡します。その範囲内のすべてのフィーチャクラスと属性ルールについて評価が行われ、その後次のグリッドポリゴンへ進みます。この処理はすべてのグリッドポリゴンが処理されるまで続きます。<\/P>

ツール実行中には各ポリゴングリッド評価後にジオプロセシングメッセージが追加され、そのグリッドが処理されたかスキップされたかが示されます。これにより長時間実行される評価中でも進捗状況を追跡しやすくなります。<\/P>

<\/span><\/P>

Evaluation Required フィールドについて理解する<\/H3>Evaluation Required フィールドはグリッド処理進捗状況を追跡するためだけに存在します。<\/P>グリッドポリゴンが正常に評価された後、このフィールドはそのグリッドがもはや処理不要であることを示すよう更新されます。これによりタイムアウトや予期せぬ問題によって実行が中断された場合でも、中断したところから評価を再開できます。<\/P>Skip Already Evaluated Grids パラメーター有効時にツールを再実行すると、既に処理済みのグリッドポリゴンはスキップされ、残りのグリッドから評価が再開されます。<\/P>重要なのは Evaluation Required フィールドは検証対象となるフィーチャかどうかを示すものではないという点です。<\/P>検証対象かどうかの情報は各フィーチャクラスごとの Validation Status フィールドで別途管理されています。Validation Status はフィーチャ修正時や検証属性ルール追加・変更時に更新されます。Evaluation Required フィールドは Evaluate Rules By Grid ワークフローで特定グリッドポリゴンがまだ処理必要かどうかのみ追跡しています。<\/P>ツール使用方法<\/H3>まず Create Evaluation Grids ツールを実行して Evaluate Rules By Grid ツールで使用するグリッドを作成します。その手順は以下の通りです:<\/P>ArcGIS Pro で検証属性ルールを含むすべてのフィーチャレイヤーをマップへ追加する<\/LI>GridEvaluation.pyt ツールボックスをプロジェクトへ追加する<\/LI>Create Evaluation Grids をクリックする<\/LI>Input Features に検証属性ルールを含むフィーチャレイヤーを選択する<\/LI>Maximum Features Per Grid パラメーターを設定する<\/LI>出力場所を設定する出力先としてファイルジオデータベース、モバイルジオデータベース、またはエンタープライズジオデータベースが指定可能です。<\/LI>出力座標系は WGS 1984 になるため、もし出力先としてフィーチャデータセット内の場合、そのデータセットも WGS 1984 である必要があります。<\/LI><\/OL><\/LI>ツール実行する<\/LI> 次に Evaluate Rules By Grid ツールを実行しますツールを開き Evaluation Grid に Create Evaluation Grids 実行時のグリッド出力レイヤーを選択する Skip Already Evaluated Grids をチェックしたままにする Workspace to Evaluate に属性ルール評価対象となるファイルジオデータベース、モバイルジオデータベースまたはフィーチャサービスを選択するワークスペースとしてフィーチャサービスURL選択時には追加パラメーター表示Portal URL, Portal Username, Portal Password をエンタープライズユーザー用として入力 評価実行バージョン指定この項目はポータル情報入力後、自動的に利用可能なバージョンドロップダウン一覧で埋められます（少々時間かかります） Evaluation Type を設定 ツール実行実行中にはメッセージ表示からどのグリッドポリゴンが評価済みでどれがスキップされたか確認可能 注意事項

1. 可能な場合はこれらツールなしで直接評価することが推奨されます。もしフィーチャサービスのタイムアウト時間延長やデータベースチューニングが可能ならば、多数回小分けよりも一回でまとめて実行した方が高速です。このツール群は他手段尽きた後、大量数百万レコード規模大規模データセット評価時のみ使用してください。
2. 同じグリッド再利用可能であり、「Skip Already Evaluated Grids」を外すか「Evaluation Required」フィールド手動で No (0) に戻せば Create Evaluation Grids ツール再実行不要です。