nav[aria-label="Primary Navigation"] { padding: 0; & ul { list-style: none; width: 100%; display: flex; flex-direction: row; justify-content: start; align-items: start; gap: 30px; padding: 0; & li { margin: 0; } & ul li { list-style: none; } } }

O que é Egdbhealth?

DannyKrouk_ps

Nota: Esta postagem no blog é a primeira de uma série de três postagens planejadas sobre egdbhealth. A segunda da série abordará como usar a ferramenta para avaliar a saúde de um Enterprise Geodatabase. A terceira da série abordará o uso do egdbhealth em um contexto de design de sistema.

Introdução

Egdbhealth é uma ferramenta para relatar várias características dos Enterprise Geodatabases (eGDBes). Ela fornece informações descritivas sobre o conteúdo do eGDB e fornece informações avaliativas sobre o eGDB. A informação avaliativa é o propósito principal da ferramenta; revelar problemas/desafios existentes ou latentes com o eGDB. A ferramenta funciona com eGDBes suportados por Oracle, PostgreSQL e SQL Server.

Instalação e Execução

Embora não seja uma extensão do ArcGIS Monitor, o egdbhealth está disponível para download na ArcGIS Monitor Gallery: https://arcgismonitor.maps.arcgis.com/home/item.html?id=f343f6b2bbcf434386f6dde1e468e7ab.

Instalação e Pré-Requisitos

Para instalar, basta baixar o arquivo .zip e extrair os arquivos para um diretório de sua escolha.

Existem alguns pré-requisitos para executar o egdbhealth. Essas considerações são discutidas na documentação no arquivo .zip (egdbhealth_README.docx). Mas, em alto nível, os pré-requisitos são:

Você precisa de um cliente de banco de dados para o tipo de banco de dados (Oracle, PostgreSQL ou SQL Server) ao qual você está se conectando (http://desktop.arcgis.com/en/arcmap/latest/manage-data/databases/database-clients.htm).
Se você estiver usando "Operating System Authentication" com SQL Server, e seu eGDB for propriedade do "dbo" (em vez de "sde"), você precisa executar o egdbhealth como um usuário Windows que seja dbo. Em outras palavras, você deve conectar-se como o "Geodatabase Administrator" (http://desktop.arcgis.com/en/arcmap/latest/manage-data/gdbs-in-sql-server/geodatabase-administrator-sqlserver.htm). Você deve conectar-se como o Geodatabase Administrator com Oracle ou PostgreSQL, mas isso geralmente significa conectar-se como o usuário chamado "sde".
Se você estiver conectando ao Oracle ou PostgreSQL, deve ter habilitado a biblioteca de tipos ST_Geometry (http://desktop.arcgis.com/en/arcmap/latest/manage-data/databases/add-the-st-geometry-type-to-an-oracle-database.htm ou http://desktop.arcgis.com/en/arcmap/latest/manage-data/databases/add-the-st-geometry-type-to-a-postgresql-database.htm).

Execução

Clicar duas vezes em egdbhealth.exe abrirá uma janela de comando e um formulário do Windows.

Siga as instruções no formulário para preencher as informações de conexão para seu banco de dados. Dicas fornecem sugestões sobre a natureza das informações necessárias. Mas, em princípio, as informações são as mesmas que você forneceria ao ArcGIS para conectar-se ao banco de dados como o "Geodatabase Administrator".

Interface Gráfica do Usuário

O botão "Testar" tentará confirmar que você pode se conectar, com os privilégios necessários, ao eGDB. Se o teste for bem-sucedido, o botão "Testar" se tornará um botão "Executar". Clicar nele fechará o formulário e começará a executar a ferramenta na janela de comando.

Quando a ferramenta terminar, ela abrirá o subdiretório "output", que conterá cinco arquivos de saída:

Um arquivo HTML contendo metadados sobre o eGDB consultado e o alvo RDBMS e como a conexão é feita.
Um arquivo Excel "Contexto" que contém informações descritivas sobre o eGDB e o alvo RDBMS.
Um arquivo Excel "Expert" que contém informações avaliativas, classificadas como "Crítico", "Aviso" e "Informação".
Um arquivo png que representa a árvore de versões.
Um arquivo png que representa a árvore de estados.

Apresentando a Saída

Um exemplo dos arquivos de saída é mostrado abaixo:

Arquivos de saída

Os arquivos terão o "Nome Amigável do GDB" que você especificou no formulário (neste exemplo, "SQL_GIS").

O Arquivo Excel Expert

O arquivo Excel Expert é o principal artefato informativo. Ele fornece as informações avaliativas sobre o sistema alvo do eGDB. Por exemplo, se o eGDB não foi compactado recentemente, haverá uma avaliação que reporta isso como uma preocupação.

O arquivo tem uma planilha resumo que fornece uma visão geral das avaliações. As avaliações são categorizadas por tópico geral (primeira coluna, "Categoria") e classificadas (colunas Crítico, Aviso e Informativo) para que você possa priorizar sua revisão das informações.

A coluna Descrição explica brevemente o propósito da avaliação. Onde há um marcador vermelho na célula Descrição, há uma dica flutuante que fornece ainda mais informações sobre o que está sendo avaliado.

Planilha Visão Geral do arquivo Excel Expert

Algumas descobertas não têm registros para reportar. Por exemplo, se não houver problema com um determinado tipo de Consistência do Geodatabase, não haverá registros. No entanto, muitas descobertas terão algum número de registros de várias classificações. Nesses casos, o Nome (segunda coluna) terá um hiperlink para a planilha na pasta de trabalho que contém os registros detalhados da descoberta.

O Arquivo Excel Context

O arquivo Excel Context é semelhante em estrutura mas não possui as colunas de classificação expert (Crítico-Aviso-Informativo). As informações são mais descritivas e menos avaliativas. Por exemplo, neste arquivo, você pode encontrar uma listagem de todos os Domínios do Geodatabase e as ObjectClasses às quais eles estão relacionados. Essa informação não é nem boa nem ruim (ou seja, não avaliativa). Mas pode ser útil saber.

Planilha Visão Geral do arquivo Excel Context

Registros destacados em verde possuem instruções SQL que você pode executar para obter informações adicionais, conforme apropriado. Normalmente, essas instruções SQL são muito custosas para serem executadas em todo o conteúdo do eGDB.

Mas, alguém familiarizado com o eGDB e os problemas que ele possui pode ter ideias sobre quais consultas seriam úteis para executar, mesmo assim. Por exemplo, a planilha "SqlGeomTypeSizeSql" tem uma consulta SQL para cada FeatureClass no eGDB. Se você executar uma dessas consultas, ela informará os tamanhos das geometrias em um FeatureClass. Esta é uma operação suficientemente cara para que não seja apropriado executá-la em todos os FeatureClasses por padrão. Mas, se houver um FeatureClass que tenha um problema de desempenho, pode ser útil para você executar a consulta para esse FeatureClass para examinar os tamanhos de suas geometrias.<\/P>

<\/P>

Os PNGes<\/H3>Os arquivos PNG (um diagrama de árvore de versões e um diagrama de árvore de estados) geralmente são de interesse se seu eGDB tiver dados que foram registrados como versionados.<\/P> <\/P>O gráfico da árvore de versões ilustra a hierarquia da árvore de versões. A codificação por cores (vermelho-amarelo-verde) indica o grau relativo de "obsolescência", ou há quanto tempo a versão foi editada ou reconciliada.<\/P> <\/P><\/P> <\/P>O esquema da árvore de estados ilustra a profundidade e estrutura da árvore de estados (que é a estrutura detalhada na qual a árvore de versões se baseia). A versão Default é mostrada em vermelho e o "Estado Zero" é mostrado em verde. Quanto mais separados esses nós estiverem, mais caro é para o banco de dados retornar informações sobre a versão Default (a versão mais comumente usada na maioria dos sistemas).<\/P> <\/P><\/P> <\/P>O HTML<\/H3>O HTML fornece algumas informações gerais sobre o eGDB, RDBMS e máquina que são o alvo da avaliação. Pode ser apenas de interesse passageiro em muitos casos.<\/P> <\/P><\/P> <\/P>Resumo<\/H2>Este artigo descreveu o propósito do egdbhealth, como executá-lo e quais são suas saídas. Como as saídas da ferramenta contêm bastante informação técnica, outros artigos abordarão como usar as saídas para (a) entender e melhorar a saúde do eGDB (b) projetar sistemas GIS.<\/SPAN><\/P> <\/P>Espero que você ache isso útil, não hesite em postar suas perguntas aqui: https:\/\/community.esri.com\/thread\/231451-arcgis-architecture-series-tools-of-an-architect<\/SPAN><\/A><\/SPAN><\/P> <\/SPAN><\/P>Nota:<\/EM><\/STRONG> Os conteúdos apresentados acima são recomendações que normalmente melhorarão o desempenho em muitos cenários. No entanto, em alguns casos, essas recomendações podem não produzir melhores resultados de desempenho, caso em que testes adicionais de desempenho e modificações na configuração do sistema podem ser necessários.<\/EM><\/SPAN><\/P>

Encontre mais publicações marcadas com

Comentários

DannyKrouk_ps

There are no plans to update this tool for Oracle RDS on AWS. The ST_Geometry library dependencies relate not to the ST_Geometry type itself but to the fact that the library contains functions necessary to carry-out some of the queries. That said, you should be able to run the tool and let the queries with the dependency fail.

The queries themselves are all in clear text in the executable's directory structure, having file names that clearly express their purposes and how they map to the output results. So, you have all the SQL statements necessary/possible to do the equivalent of egdbhealth as much as Oracle RDS on AWS will accommodate.

AH2

Will this tool be updated to work with Oracle RDS at AWS? We can't use as we can't add the ST Geometry library to an RDS

DannyKrouk_ps

@AngusvonPrott Thanks for the question. It is true that the executable itself has not been updated recently. However, the queries have been updated many times since then. When the tool runs, it downloads the latest queries. The tool does not update itself automatically from the Internet, only the queries.

AngusvonPrott

@DannyKrouk First off, thank you so much for this tool; it definitely saves us a lot of time. I have a question about the currency. Has there been a release since August 2020? I see in the ReadMe that this is the last release. I do also see that there is an updated queries function when connected to the internet. Does the tool update its version in a similar way?

Cheers,

Angus

DannyKrouk_ps

@GregKlafki1 Nice work!

Not having an sde_log_compress simply means that there has never been a compress operation run. It could be that you don't need one. The other data in the output would help you determine that.

The modules provide helpful information. I don't know if RDS is compatible with them. But, if so, they are recommended.

The sde_geometry_columns does not exist could be a release-specific issue. I wouldn't be able to know without having access to all of the outputs. Feel free to share them with me (dkrouk@esri.com) if you would like my commentary.

GregKlafki1

@DannyKrouk

Was able to run it via the UI, got some errors, not as many as I expected.

aurora-postgresql 15.6

The geodatabase is a read only copy that gets refreshed nightly

Just ran it without enabling the additional modules and got the expected errors. As well as not running as superuser - will get those changes made and see if it comes back error free.

On excel expert 19 errors on 108 queries and most are due to conifg for the tool

9 permission - login is not superuser
4 related to modules not loaded
3 for relation: sde_geometry_columns does not exist
2 for versioning - sde_log_compress does not exist

DannyKrouk_ps

Very good question. It would definitely not work for Oracle without ST_Geometry. With PostgreSQL, it might work (some queries would error). The UI would not allow it. But, you could try the command-line.

GregKlafki1

for PostgreSQL database the pre-requisites state:

If you are connecting to Oracle or PostgreSQL, you must have enabled the ST_Geometry type library

However, we are using AWS RDS PostgreSQL and cannot install ST_Geometry type library

From Geodatabases in PostgreSQL used with ArcGIS on AWS—ArcGIS Enterprise in the cloud | Documentation for ArcGIS Enterprise

Geodatabases created in Amazon Relational Database Service (RDS) for PostgreSQL store spatial data using the PostGIS geometry storage type.

Does this mean Egdbhealth will not work against AWS RDS PostgreSQL databases?

JulianoSantosFinck

Thank you, @DannyKrouk!

Here are the full Krouk's Series:
(1) What is Egdbhealth?,
(2) Using Egdbhealth to Evaluate a Geodatabase,
(3) Using Egdbhealth in System Design

DannyKrouk_ps

Thanks to @SGTomlins for working with me outside of this thread. We successfully found the flaw in my query logic and resolved it. The repaired query is in the online repo that egdbhealth checks on start-up. So, the new query will be downloaded and run on everyone's systems the next time they run egdbhealth. 🙂

AndresCastillo

related information:

https://community.esri.com/t5/implementing-arcgis-blog/using-egdbhealth-to-evaluate-a-geodatabase/ba-p/886488

https://mediaspace.esri.com/media/t/1_jrlj9mdw

SGTomlins

@DannyKrouk I will send you an email.. 🙂

DannyKrouk_ps

@SGTomlins Could we please continue this conversation by email at dkrouk@esri.com? I think you and I would benefit from an opportunity to coordinate our thinking and communication in details that I do not think are relevant to this forum. Perhaps we need to graduate to a screen share to truly understand what is going on, I don't know. But, this forum-post method, from my perspective, has no more gas in the tank for our purposes.

SGTomlins

@DannyKrouk I am not certain about what you mean by my "default definition of recent". I ran the egdb the morning after the normal scheduled backups. It returned the day 7/16/24 for the top of the DESC ORDER BY, when I ran your snippet of SQL it reported 7/17/24.

I ran this today:

SELECT
bs.database_name,
bs.backup_start_date,
bs.backup_finish_date,
bs.

expiration_date,
CASE bs.type
WHEN 'D' THEN 'Database'
WHEN 'L' THEN 'Log'
WHEN 'I' THEN 'Differential'
WHEN 'F' THEN 'File or Filegroup'
WHEN 'G' THEN 'Differential File'
WHEN 'P' THEN 'Partial'
WHEN 'Q' THEN 'Differential Partial'
ELSE 'Unknown'
END AS backup_type,
bmf.physical_device_name
FROM
msdb.dbo.backupset bs
INNER JOIN
msdb.dbo.backupmediafamily bmf
ON bs.media_set_id = bmf.media_set_id
WHERE
bs.backup_start_date > DATEADD(day, -30, GETDATE()) -- Last 30 days
ORDER BY
bs.backup_start_date DESC;

It returns this:

Most recent as of 7/24/24.

Maybe I am looking at this incorrectly. Is the "gap" in dates that is reported actually showing backups that are "out of date" and toss your "Warning"?

-Steve

DannyKrouk_ps

@SGTomlins Thanks. The query is seeing your backups. That's good.

From appearances, the default definition of "recent" for the egdbhealth query is out of alignment with your default definition of recent. It sees your back-ups. They are all from a week or more ago. If you run this tool right after you run take your backup, the results should be different.

Do you see another interpretation of this data?

SGTomlins

Here ya go @DannyKrouk ... Ran it this morning.

-Steve

DannyKrouk_ps

@SGTomlins If you would, please run the SQL statement against your system in SSMS and show me a screen capture of the result in an email (dkrouk@esri.com). Thank you. 🙂

SGTomlins

@DannyKrouk : I find in both tables the most current backup sets (today) listed.

[name]

FROM [msdb].[dbo].[backupset]

and

[physical_device_name]

FROM

[msdb].[dbo].[backupmediafamily]

______________________________

Yes, I do see the backups listed in the SQL tables. Accompanied by files in their corresponding locations.

The message on the db_Backup tab is the "Warning" in your provided SQL for this backup set

This [name] and [physical device name] both show up in their respective tables. The backups are scheduled SQL Maintenance plans.

This is our SQL Server ver.

Thanks for your response. Hope this helps if there is some logic that needs tinkering or otherwise...

-Steve

DannyKrouk_ps

@SGTomlins Thanks for the kind words and the feedback.

This is the query that supports the backup findings:

declare @min_backups int = 1

declare @max_minutes_since_backup int = 10080 -- one week

declare @backups int

select @backups = count(*) from msdb.dbo.backupset s where s.database_name = DB_NAME()

if (@backups < @min_backups )

select cast(@backups as nvarchar(8)) as backups, 'Critical: Fewer than ' + cast(@min_backups as nvarchar(8)) + ' backups exist' as comment

else

SELECT top 10

DATEDIFF(mi, s.backup_start_date, getdate()) minutes_since_backup,

s.database_name,

m.physical_device_name,

CAST(CAST(s.backup_size / 1000000 AS INT) AS VARCHAR(14)) + ' ' + 'MB' AS bkSize,

CAST(DATEDIFF(second, s.backup_start_date,

s.backup_finish_date) AS VARCHAR(4)) + ' ' + 'Seconds' TimeTaken,

s.backup_start_date,

CASE s.[type]

WHEN 'D' THEN 'Full'

WHEN 'I' THEN 'Differential'

WHEN 'L' THEN 'Transaction Log'

END AS BackupType,

s.server_name,

s.recovery_model,

'Warning: No recent backups. Review back-up procedures relative to requirements. Age (in days): ' + cast( (DATEDIFF(mi, s.backup_start_date, getdate()) / 1440) as nvarchar(8)) as comment

FROM msdb.dbo.backupset s

INNER JOIN msdb.dbo.backupmediafamily m ON s.media_set_id = m.media_set_id

WHERE

s.database_name = DB_NAME()

and

DATEDIFF(mi, s.backup_start_date, getdate()) > @max_minutes_since_backup

ORDER BY DATEDIFF(mi, s.backup_start_date, getdate()) ASC

It strikes me that there are a few possibilities that explain your outcome:

1. There is filter logic in my query which has a different idea than you about what "recent" is.
2. There is a flaw in the query logic relative to how (some more recent version of?) SQL Server records its back-up activity.
3. There is some kind of SQL Server back-up happening that would not normally be recorded in the system tables queried ... for some reason (really a variant of #2)

As you may be able to tell from the query text, what we are examining are tables like msdb.dbo.backupset and msdb.dbo.backupmediafamily. Do the back-ups that you see in your error log also appear in these tables?

SGTomlins

@DannyKrouk - I keep finding more fun tools that you guys put out there. Makes it possible to have all the answers I need to better manage the Enterprise. I love this stuff. 🙂

I reviewed the output expert xlsw file. I discovered the reporting of my backups with a warning of "No recent backups" (db_Backups). I reviewed my SQL Server logs and find the backups are working as expected and as recent as last night.

The report of the (inst_ErrorsInCurrentLog) does show successful recent backup information.

Just an FYI to consider. Not a biggie to me. I was nudged to review my settings and tasks. Always good to periodically check stuff..

All the best,

-Steve

DannyKrouk_ps

I believe the download link issues have been resolved.

DannyKrouk_ps

I'm sorry about the problem. I suffer the same problem myself. I'll contact the owner of the ArcGIS Monitor account and ask them to look into it. - Danny

Sjavvaji

Hello, I am attempting to download the egdbhealth from the below-mentioned link, but I was unable to do so even after using multiple logins. I am attaching the error below; can anyone assist me in resolving this issue?

link: https://arcgismonitor.maps.arcgis.com/home/item.html?id=f343f6b2bbcf434386f6dde1e468e7ab.

DannyKrouk_ps

The link is fixed now. 🙂

DannyKrouk_ps

Yes, sorry about that. I don't know what is going on. This link should work: https://arcgismonitor.maps.arcgis.com/home/item.html?id=f343f6b2bbcf434386f6dde1e468e7ab. Now, I have to figure out how to edit this crazy blog when the system does not recognize my original account. Sigh ...

Anonymous User

@DannyKrouk The download link no longer works.

Participe da Conversa

Membros conectados podem postar, seguir atualizações e mais. Novo aqui? Registre uma conta gratuita.

Links Rápidos

Community Help
Find useful guides, FAQs, and documents to help you navigate and make the most of Esri Community.