nav[aria-label="Primary Navigation"] { padding: 0; & ul { list-style: none; width: 100%; display: flex; flex-direction: row; justify-content: start; align-items: start; gap: 30px; padding: 0; & li { margin: 0; } & ul li { list-style: none; } } }

Wat is Egdbhealth?

DannyKrouk_ps

Opmerking: Deze blogpost is de eerste in een serie van drie geplande berichten over egdbhealth. Het tweede deel in de serie zal behandelen hoe je de tool kunt gebruiken om de gezondheid van een Enterprise Geodatabase te evalueren. Het derde deel in de serie zal het gebruik van egdbhealth in een systeemontwerpcontext behandelen.

Introductie

Egdbhealth is een tool voor het rapporteren over verschillende kenmerken van Enterprise Geodatabases (eGDBes). Het biedt beschrijvende informatie over de inhoud van de eGDB en het levert evaluatieve informatie over de eGDB. De evaluatieve informatie is het primaire doel van de tool; om bestaande of latente problemen / uitdagingen met de eGDB aan het licht te brengen. De tool werkt met eGDBes die worden ondersteund door Oracle, PostgreSQL en SQL Server.

Installatie en Uitvoering

Hoewel het geen extensie is voor ArcGIS Monitor, is egdbhealth beschikbaar voor download vanuit de ArcGIS Monitor Gallery: https://arcgismonitor.maps.arcgis.com/home/item.html?id=f343f6b2bbcf434386f6dde1e468e7ab.

Installatie en Vereisten

Om te installeren, download eenvoudig het .zip archief en pak de bestanden uit naar een map naar keuze.

Er zijn enkele vereisten voor het uitvoeren van egdbhealth. Die overwegingen worden besproken in de documentatie in het .zip archief (egdbhealth_README.docx). Maar op hoofdlijnen zijn de vereisten:

Je hebt een databaseclient nodig voor het type database (Oracle, PostgreSQL of SQL Server) waarmee je verbinding maakt (http://desktop.arcgis.com/en/arcmap/latest/manage-data/databases/database-clients.htm).
Als je "Operating System Authentication" gebruikt met SQL Server, en je eGDB is eigendom van "dbo" (in plaats van "sde"), moet je egdbhealth uitvoeren als een Windows-gebruiker die dbo is. Met andere woorden, je moet verbinden als de "Geodatabase Administrator" (http://desktop.arcgis.com/en/arcmap/latest/manage-data/gdbs-in-sql-server/geodatabase-administrator-sqlserver.htm). Je moet als Geodatabase Administrator verbinden met Oracle of PostgreSQL, maar dat betekent meestal verbinden als de gebruiker genaamd "sde".
Als je verbinding maakt met Oracle of PostgreSQL, moet je de ST_Geometry typebibliotheek hebben ingeschakeld (http://desktop.arcgis.com/en/arcmap/latest/manage-data/databases/add-the-st-geometry-type-to-an-oracle-database.htm of http://desktop.arcgis.com/en/arcmap/latest/manage-data/databases/add-the-st-geometry-type-to-a-postgresql-database.htm).

Uitvoering

Door te dubbelklikken op egdbhealth.exe wordt een opdrachtvenster en een Windows-formulier geopend.

Volg de aanwijzingen op het formulier om de verbindingsinformatie voor je database in te vullen. Tooltips geven hints over de aard van de benodigde informatie. Maar in principe is de informatie hetzelfde als wat je zou opgeven aan ArcGIS om verbinding te maken met de database als de "Geodatabase Administrator."

Graphical User Interface

De knop "Test" zal proberen te bevestigen dat je kunt verbinden, met de vereiste privileges, met de eGDB. Als de test succesvol is, wordt de knop "Test" een knop "Run." Door daarop te klikken wordt het formulier gesloten en begint het uitvoeren van de tool in het opdrachtvenster.

Wanneer de tool klaar is, opent deze de subdirectory "output" die vijf uitvoerbestanden bevat:

Een HTML-bestand met metadata over de bevraagde eGDB en RDBMS-doel en hoe de verbinding tot stand wordt gebracht.
Een "Context" Excel-bestand dat beschrijvende informatie bevat over het eGDB en RDBMS-doel.
Een "Expert" Excel-bestand dat evaluatieve informatie bevat, geclassificeerd als "Critical", "Warning", en "Information."
Een png-bestand dat de versieboom afbeeldt.
Een png-bestand dat de statusboom afbeeldt.

Introductie van de Output

Een voorbeeld van de uitvoerbestanden wordt hieronder getoond:

Output files

De bestanden zullen de "GDB Friendly Name" dragen die je hebt opgegeven in het formulier (in dit voorbeeld, "SQL_GIS").

Het Expert Excel-bestand

Het Expert Excel-bestand is het belangrijkste informatie-artifact. Het biedt evaluatieve informatie over het doel-eGDB-systeem. Bijvoorbeeld, als het eGDB recent niet is gecomprimeerd, zal er een evaluatie zijn die dit als een zorg meldt.

Het bestand heeft een samenvattingsblad dat een overzicht geeft van de evaluaties. De evaluaties zijn gecategoriseerd per algemeen onderwerp (eerste kolom, "Category") en geclassificeerd (Critical, Warning en Informational kolommen) zodat je je beoordeling van de informatie kunt prioriteren.

De kolom Beschrijving legt kort uit wat het doel is van de evaluatie. Waar er een rood markering staat in de Beschrijving-cel, is er een hover-tip die nog meer informatie geeft over wat geëvalueerd wordt.

Expert Excel file Overview sheet

Sommige bevindingen hebben geen records om te rapporteren. Bijvoorbeeld, als er geen probleem is met een bepaald soort Geodatabase Consistency, zullen er geen records zijn. Echter, veel bevindingen zullen wel een aantal records hebben met verschillende classificaties. In die gevallen heeft de Naam (tweede kolom) een hyperlink naar het blad in het werkboek dat gedetailleerde bevindingen bevat.

Het Context Excel-bestand

Het Context Excel-bestand lijkt qua structuur maar mist de expert (Critical-Warning-Informational) classificatiekolommen. De informatie is meer beschrijvend en minder evaluatief. Bijvoorbeeld, in dit bestand kun je een lijst vinden van alle Geodatabase Domains en ObjectClasses waaraan ze gerelateerd zijn. Die informatie is noch goed noch slecht (dus niet evaluatief). Maar het kan nuttig zijn om te weten.

Context Excel file Overview sheet

Records die groen gemarkeerd zijn bevatten SQL-instructies die je kunt uitvoeren voor aanvullende informatie, indien passend. Meestal zijn deze SQL-instructies te kostbaar om uit te voeren op alle inhoud in het eGDB.
Maar iemand die bekend is met de eGDB en de problemen die het heeft, kan toch ideeën hebben over welke queries nuttig zouden zijn om uit te voeren. Bijvoorbeeld, het 1SqlGeomTypeSizeSql7 blad bevat een SQL-query voor elke FeatureClass in de eGDB. Als je een van deze queries uitvoert, rapporteert het de groottes van de geometrieën in een FeatureClass. Dit is een dure operatie die niet geschikt zou zijn om standaard op alle FeatureClasses uit te voeren. Maar als er een FeatureClass is die een prestatieprobleem heeft, kan het nuttig zijn om de query voor die FeatureClass uit te voeren om de groottes van zijn geometrieën te onderzoeken.<\/P>

<\/P>

De PNGes<\/H3>De PNG-bestanden (een versieboomdiagram en een staatboomdiagram) zijn meestal interessant als je eGDB gegevens bevat die als versioned geregistreerd zijn.<\/P> <\/P>De versieboomgrafiek illustreert de hiebrarchie van de versieboom. Kleuren (rood-geel-groen) geven de relatieve mate van 1veroudering7 aan, of hoe lang het geleden is sinds de versie is bewerkt of verzoend.<\/P> <\/P><\/P> <\/P>Het staatboomschema illustreert de diepte en structuur van de staatboom (de gedetailleerde structuur waarop de versieboom steunt). De Default-versie wordt in rood weergegeven en 1State Zero7 wordt in groen weergegeven. Hoe verder deze knooppunten uit elkaar liggen, hoe duurder het is voor de database om informatie over de Default-versie terug te geven (de meest gebruikte versie in de meeste systemen).<\/P> <\/P><\/P> <\/P>De HTML<\/H3>De HTML geeft wat algemene informatie over de eGDB, RDBMS en machine die het doelwit is van de evaluatie. Het kan in veel gevallen slechts van voorbijgaande interesse zijn.<\/P> <\/P><\/P> <\/P>Samenvatting<\/H2>Dit artikel heeft het doel van egdbhealth beschreven, hoe je het kunt uitvoeren en wat de outputs zijn. Omdat de outputs van het hulpmiddel behoorlijk wat technische informatie bevatten, zullen andere artikelen behandelen hoe je de outputs kunt gebruiken voor (a) het begrijpen en verbeteren van eGDB-gezondheid (b) het ontwerpen van GIS-systemen.<\/SPAN><\/P> <\/P>Ik hoop dat je dit nuttig vindt, aarzel niet om je vragen hier te plaatsen: https:\/\/community.esri.com\/thread\/231451-arcgis-architecture-series-tools-of-an-architect<\/SPAN><\/A><\/SPAN><\/P> <\/SPAN><\/P>Opmerking:<\/EM><\/STRONG> De hierboven gepresenteerde inhoud zijn aanbevelingen die doorgaans de prestaties voor veel scenario's zullen verbeteren. In sommige gevallen kunnen deze aanbevelingen echter geen betere prestatie opleveren, in welk geval aanvullende prestatietests en systeemconfiguratie-aanpassingen nodig kunnen zijn.<\/EM><\/SPAN><\/P>

Vind meer berichten getagd met

Reacties

DannyKrouk_ps

There are no plans to update this tool for Oracle RDS on AWS. The ST_Geometry library dependencies relate not to the ST_Geometry type itself but to the fact that the library contains functions necessary to carry-out some of the queries. That said, you should be able to run the tool and let the queries with the dependency fail.

The queries themselves are all in clear text in the executable's directory structure, having file names that clearly express their purposes and how they map to the output results. So, you have all the SQL statements necessary/possible to do the equivalent of egdbhealth as much as Oracle RDS on AWS will accommodate.

AH2

Will this tool be updated to work with Oracle RDS at AWS? We can't use as we can't add the ST Geometry library to an RDS

DannyKrouk_ps

@AngusvonPrott Thanks for the question. It is true that the executable itself has not been updated recently. However, the queries have been updated many times since then. When the tool runs, it downloads the latest queries. The tool does not update itself automatically from the Internet, only the queries.

AngusvonPrott

@DannyKrouk First off, thank you so much for this tool; it definitely saves us a lot of time. I have a question about the currency. Has there been a release since August 2020? I see in the ReadMe that this is the last release. I do also see that there is an updated queries function when connected to the internet. Does the tool update its version in a similar way?

Cheers,

Angus

DannyKrouk_ps

@GregKlafki1 Nice work!

Not having an sde_log_compress simply means that there has never been a compress operation run. It could be that you don't need one. The other data in the output would help you determine that.

The modules provide helpful information. I don't know if RDS is compatible with them. But, if so, they are recommended.

The sde_geometry_columns does not exist could be a release-specific issue. I wouldn't be able to know without having access to all of the outputs. Feel free to share them with me (dkrouk@esri.com) if you would like my commentary.

GregKlafki1

@DannyKrouk

Was able to run it via the UI, got some errors, not as many as I expected.

aurora-postgresql 15.6

The geodatabase is a read only copy that gets refreshed nightly

Just ran it without enabling the additional modules and got the expected errors. As well as not running as superuser - will get those changes made and see if it comes back error free.

On excel expert 19 errors on 108 queries and most are due to conifg for the tool

9 permission - login is not superuser
4 related to modules not loaded
3 for relation: sde_geometry_columns does not exist
2 for versioning - sde_log_compress does not exist

DannyKrouk_ps

Very good question. It would definitely not work for Oracle without ST_Geometry. With PostgreSQL, it might work (some queries would error). The UI would not allow it. But, you could try the command-line.

GregKlafki1

for PostgreSQL database the pre-requisites state:

If you are connecting to Oracle or PostgreSQL, you must have enabled the ST_Geometry type library

However, we are using AWS RDS PostgreSQL and cannot install ST_Geometry type library

From Geodatabases in PostgreSQL used with ArcGIS on AWS—ArcGIS Enterprise in the cloud | Documentation for ArcGIS Enterprise

Geodatabases created in Amazon Relational Database Service (RDS) for PostgreSQL store spatial data using the PostGIS geometry storage type.

Does this mean Egdbhealth will not work against AWS RDS PostgreSQL databases?

JulianoSantosFinck

Thank you, @DannyKrouk!

Here are the full Krouk's Series:
(1) What is Egdbhealth?,
(2) Using Egdbhealth to Evaluate a Geodatabase,
(3) Using Egdbhealth in System Design

DannyKrouk_ps

Thanks to @SGTomlins for working with me outside of this thread. We successfully found the flaw in my query logic and resolved it. The repaired query is in the online repo that egdbhealth checks on start-up. So, the new query will be downloaded and run on everyone's systems the next time they run egdbhealth. 🙂

AndresCastillo

related information:

https://community.esri.com/t5/implementing-arcgis-blog/using-egdbhealth-to-evaluate-a-geodatabase/ba-p/886488

https://mediaspace.esri.com/media/t/1_jrlj9mdw

SGTomlins

@DannyKrouk I will send you an email.. 🙂

DannyKrouk_ps

@SGTomlins Could we please continue this conversation by email at dkrouk@esri.com? I think you and I would benefit from an opportunity to coordinate our thinking and communication in details that I do not think are relevant to this forum. Perhaps we need to graduate to a screen share to truly understand what is going on, I don't know. But, this forum-post method, from my perspective, has no more gas in the tank for our purposes.

SGTomlins

@DannyKrouk I am not certain about what you mean by my "default definition of recent". I ran the egdb the morning after the normal scheduled backups. It returned the day 7/16/24 for the top of the DESC ORDER BY, when I ran your snippet of SQL it reported 7/17/24.

I ran this today:

SELECT
bs.database_name,
bs.backup_start_date,
bs.backup_finish_date,
bs.

expiration_date,
CASE bs.type
WHEN 'D' THEN 'Database'
WHEN 'L' THEN 'Log'
WHEN 'I' THEN 'Differential'
WHEN 'F' THEN 'File or Filegroup'
WHEN 'G' THEN 'Differential File'
WHEN 'P' THEN 'Partial'
WHEN 'Q' THEN 'Differential Partial'
ELSE 'Unknown'
END AS backup_type,
bmf.physical_device_name
FROM
msdb.dbo.backupset bs
INNER JOIN
msdb.dbo.backupmediafamily bmf
ON bs.media_set_id = bmf.media_set_id
WHERE
bs.backup_start_date > DATEADD(day, -30, GETDATE()) -- Last 30 days
ORDER BY
bs.backup_start_date DESC;

It returns this:

Most recent as of 7/24/24.

Maybe I am looking at this incorrectly. Is the "gap" in dates that is reported actually showing backups that are "out of date" and toss your "Warning"?

-Steve

DannyKrouk_ps

@SGTomlins Thanks. The query is seeing your backups. That's good.

From appearances, the default definition of "recent" for the egdbhealth query is out of alignment with your default definition of recent. It sees your back-ups. They are all from a week or more ago. If you run this tool right after you run take your backup, the results should be different.

Do you see another interpretation of this data?

SGTomlins

Here ya go @DannyKrouk ... Ran it this morning.

-Steve

DannyKrouk_ps

@SGTomlins If you would, please run the SQL statement against your system in SSMS and show me a screen capture of the result in an email (dkrouk@esri.com). Thank you. 🙂

SGTomlins

@DannyKrouk : I find in both tables the most current backup sets (today) listed.

[name]

FROM [msdb].[dbo].[backupset]

and

[physical_device_name]

FROM

[msdb].[dbo].[backupmediafamily]

______________________________

Yes, I do see the backups listed in the SQL tables. Accompanied by files in their corresponding locations.

The message on the db_Backup tab is the "Warning" in your provided SQL for this backup set

This [name] and [physical device name] both show up in their respective tables. The backups are scheduled SQL Maintenance plans.

This is our SQL Server ver.

Thanks for your response. Hope this helps if there is some logic that needs tinkering or otherwise...

-Steve

DannyKrouk_ps

@SGTomlins Thanks for the kind words and the feedback.

This is the query that supports the backup findings:

declare @min_backups int = 1

declare @max_minutes_since_backup int = 10080 -- one week

declare @backups int

select @backups = count(*) from msdb.dbo.backupset s where s.database_name = DB_NAME()

if (@backups < @min_backups )

select cast(@backups as nvarchar(8)) as backups, 'Critical: Fewer than ' + cast(@min_backups as nvarchar(8)) + ' backups exist' as comment

else

SELECT top 10

DATEDIFF(mi, s.backup_start_date, getdate()) minutes_since_backup,

s.database_name,

m.physical_device_name,

CAST(CAST(s.backup_size / 1000000 AS INT) AS VARCHAR(14)) + ' ' + 'MB' AS bkSize,

CAST(DATEDIFF(second, s.backup_start_date,

s.backup_finish_date) AS VARCHAR(4)) + ' ' + 'Seconds' TimeTaken,

s.backup_start_date,

CASE s.[type]

WHEN 'D' THEN 'Full'

WHEN 'I' THEN 'Differential'

WHEN 'L' THEN 'Transaction Log'

END AS BackupType,

s.server_name,

s.recovery_model,

'Warning: No recent backups. Review back-up procedures relative to requirements. Age (in days): ' + cast( (DATEDIFF(mi, s.backup_start_date, getdate()) / 1440) as nvarchar(8)) as comment

FROM msdb.dbo.backupset s

INNER JOIN msdb.dbo.backupmediafamily m ON s.media_set_id = m.media_set_id

WHERE

s.database_name = DB_NAME()

and

DATEDIFF(mi, s.backup_start_date, getdate()) > @max_minutes_since_backup

ORDER BY DATEDIFF(mi, s.backup_start_date, getdate()) ASC

It strikes me that there are a few possibilities that explain your outcome:

1. There is filter logic in my query which has a different idea than you about what "recent" is.
2. There is a flaw in the query logic relative to how (some more recent version of?) SQL Server records its back-up activity.
3. There is some kind of SQL Server back-up happening that would not normally be recorded in the system tables queried ... for some reason (really a variant of #2)

As you may be able to tell from the query text, what we are examining are tables like msdb.dbo.backupset and msdb.dbo.backupmediafamily. Do the back-ups that you see in your error log also appear in these tables?

SGTomlins

@DannyKrouk - I keep finding more fun tools that you guys put out there. Makes it possible to have all the answers I need to better manage the Enterprise. I love this stuff. 🙂

I reviewed the output expert xlsw file. I discovered the reporting of my backups with a warning of "No recent backups" (db_Backups). I reviewed my SQL Server logs and find the backups are working as expected and as recent as last night.

The report of the (inst_ErrorsInCurrentLog) does show successful recent backup information.

Just an FYI to consider. Not a biggie to me. I was nudged to review my settings and tasks. Always good to periodically check stuff..

All the best,

-Steve

DannyKrouk_ps

I believe the download link issues have been resolved.

DannyKrouk_ps

I'm sorry about the problem. I suffer the same problem myself. I'll contact the owner of the ArcGIS Monitor account and ask them to look into it. - Danny

Sjavvaji

Hello, I am attempting to download the egdbhealth from the below-mentioned link, but I was unable to do so even after using multiple logins. I am attaching the error below; can anyone assist me in resolving this issue?

link: https://arcgismonitor.maps.arcgis.com/home/item.html?id=f343f6b2bbcf434386f6dde1e468e7ab.

DannyKrouk_ps

The link is fixed now. 🙂

DannyKrouk_ps

Yes, sorry about that. I don't know what is going on. This link should work: https://arcgismonitor.maps.arcgis.com/home/item.html?id=f343f6b2bbcf434386f6dde1e468e7ab. Now, I have to figure out how to edit this crazy blog when the system does not recognize my original account. Sigh ...

Anonymous User

@DannyKrouk The download link no longer works.

Doe mee aan het gesprek

Aangemelde leden kunnen berichten plaatsen, updates volgen en meer. Nieuw hier? Registreer een gratis account.

Snelle links

Community Help
Find useful guides, FAQs, and documents to help you navigate and make the most of Esri Community.