-
A interface DuckDB com ArcGIS Pro
A interface DuckDB Você está usando a interface do usuário DuckDB? Pode ser exatamente a ferramenta fácil de exploração de dados que você estava procurando. Desde a versão 3.5, duckdb tem sido incluído na distribuição padrão do Python para ArcGIS Pro. DuckDB é um poderoso mecanismo de banco de dados analítico que lê de uma…
-
Captura de Dados de Alteração Usando um Notebook do ArcGIS Online
Em um blog anterior explorei o desempenho da captura de dados de alteração sem código versus troca de visualização da fonte em um teste de velocidade quando o objetivo é manter uma camada de feição hospedada - e declarei um empate! Agora tenho um novo participante do mundo das soluções codificadas - usando um notebook…
-
Um Estudo sobre a Velocidade dos Dados na Distribuição de Dados Vetoriais Cloud Native
Ao escrever, fui encarregado de apresentar uma sessão de demonstração teatral na Conferência de Usuários Esri 2026 intitulada Distribuição de Dados Georelacionais Cloud-Native. Se você vai para a UC 2026, pode adicioná-la à sua agenda. Se não puder comparecer, o roteiro da peça está abaixo, porém para incentivar a…
-
Esri Developer & Technology Summit 2026 - Explorando Ferramentas e Padrões para Migração de Dados
Na semana em que escrevo, é a semana da conferência para o Esri Developer & Technology Summit 2026 e acabei de voltar de apresentar minha sessão técnica Explorando Ferramentas e Padrões para Migração de Dados.<\/P> Gosto de fazer muitas demonstrações nas apresentações de eventos, isso me permite gerar conteúdo que posso…
-
Geração de Dados em Escala
Spoiler (Realce para ler)Aviso: A ferramenta no download do blog tem um problema conhecido, no ArcGIS Pro 3.6 quando executada na thread principal a saída não é retornada corretamente - a tabela de consulta para categorias alternativas de lugares está ausente - então use a thread de geoprocessamento, que é o comportamento…
-
Um Encore de Overture! Aborda Mapeamento de Endereços e Geocodificação (Alpha)
Construindo sobre o trabalho anterior usando um notebook ArcGIS Pro para ETL dos dados do Overture Maps Foundation no ArcGIS, este post analisa o tema Addresses do Overture Map Foundation, tanto como uma camada pronta para mapa quanto como um localizador de geocodificação com capacidade de subendereço. No momento da…
-
Subscribing To Overture Data With One Click Refresh
In this post I'm revisiting the ingest of Overture Maps Foundation data via ArcGIS Pro notebook, for a few reasons: * To show a subscription pattern for the latest data in an area of interest * To show the value of unnesting complex columns in parquet files * To show geocoding locator creation in addition to geodatabase…
-
Cloud native GeoParquet ingest with ArcGIS Pro 3.5+ just got easier
With the release of ArcGIS Pro 3.5, the stars align a little more when it comes to the use of GeoParquet. You can now work with local GeoParquet files for your mapping and analysis needs, but it is also much easier to ingest big GeoParquet data from an S3-API-compliant object store! This post is about how simple it is to…
-
Compartilhar Dados Nativos da Nuvem Versionados com Viagem no Tempo Opcional
Sempre é satisfatório compartilhar novas formas poderosas de resolver problemas, especialmente quando a solução esteve "escondida à vista de todos" por um tempo. Desta vez, estou mostrando como a combinação de ArcGIS Enterprise branch versioning e cloud native data sharing oferece não apenas acesso rápido aos dados, para…
-
Adotando ArcGIS Data Pipelines
Dezenas de milhares <\/STRONG>de camadas de feição hospedadas são criadas diariamente no ArcGIS Online.<\/P> Abaixo está uma que eu fiz - pontos de endereços de ruas na cidade de Los Angeles, obtidos do site de dados abertos da cidade<\/A>.<\/P>Eu não criei a camada com ArcGIS Data Pipelines<\/STRONG>, você pode perceber…
-
ETL Pattern: Working With Unsupported Database Platforms
Connecting to (geo)relational data is fundamental to working in ArcGIS, and many popular database platforms are supported as workspaces. However, there are also many unsupported database platforms out there. How can you use them? Well, this connectivity gap is so common across information technology a standardized way to…
-
Padrão ETL: Trabalhando com Arquivos Bem Conhecidos na Cloud
Há algum tempo, os dados baseados em arquivos estão migrando para a web e todos nós estamos acostumados a baixar manualmente o que precisamos e seguir a partir daí em nosso software de desktop como o ArcGIS Pro.<\/P> Este blog é sobre automatizar<\/STRONG> essa experiência, substituindo as etapas de download e…
-
Padrão ETL: Trabalhando com Arquivos Locais Bem Conhecidos
No extremo simples do continuum dos Padrões ETL está o formato mais comum de todos - CSV, ou valores separados por vírgula, e seu primo próximo, a planilha Excel. Grandes volumes de dados circulam nesses formatos - facilmente compartilhados, legíveis por humanos - o que não gostar no ArcGIS? Bem, estas coisas! * Não há um…
-
SQL powered ETL
SQL powered ETL. How hard can it be, you know COPY in PostgreSQL and how to stage data in cloud warehouses, right? How about downloading 51 million road segments from a cloud object store into your Pro project? Road segments in the USA Or the same data for France? Parisian transport segments from Overture via SQLIn the…
-
Python Exception <ImportError>: Can't connect to HTTPS URL because the SSL module is not available
Hi All, This is the first time attempting to automate an FME flow on a server. I didn't want to create the flow on my laptop and then have to move it and the web connection to the server - so i just opened FME workbench on the Server, while logged in as the ArcGIS Server account - and built it. (This is on a server with…
-
ETL de Arquivos Locais Conhecidos
Em uma <\/SPAN>publicação anterior<\/A> enumerei os tipos comuns de fontes de dados que você encontrará ao importar dados para o ArcGIS. Este documento discute um desses padrões de dados - tipos comuns de arquivos disponíveis no seu computador ou por simples download manual<\/STRONG>.<\/SPAN><\/P>O cenário específico…
-
ETL from an API that requires pagination
In an earlier post I enumerated common data source types that you will encounter when bringing data into ArcGIS. This document discusses one of these data patterns - calling an API that requires pagination to retrieve a complete dataset. Pagination is a technique used by data publishers to manage load on their servers.…
-
Opções de Padrão ETL
Documentos "folha de cola" de uma página são sempre populares, por exemplo, no contexto do ArcGIS, um favorito perene sempre foi a matriz de funcionalidades para o ArcGIS Enterprise.<\/P> Ao considerar suas opções de ETL inbound, existem critérios de decisão em alto nível, este documento (disponível como PDF no download da…
-
Mais Do Duck Pond - Usando DuckDB no ArcGIS Pro
Em uma postagem anterior eu comecei a usar DuckDB em um notebook hospedado no ArcGIS Online. Essa postagem destacou a leitura de arquivos GeoParquet em um object store para manter um serviço de feição. Esse é um fluxo de trabalho poderoso, mas é muito mais provável que seu trabalho diário envolva manipular formatos de…
-
Go Cloud Native! Overture GeoParquet, From Object Store To Feature Layer Via Online Notebook
Spoiler (Highlight to read)Updated 7/25/2024 to support Overture release 2024-07-22.0 Breaking changes include place category "main" renamed to "primary" and update_time removed from the base schema. Refer to the notebook in the download for code changes. This blog may not be maintained.Updated 7/25/2024 to support…
-
Use an ArcGIS Pro notebook to mirror external data to feature services
One of the hidden gems in ArcGIS Pro is an ability to reach out to external geographic data sources using simple scripted workflows, which you can optionally automate. Here is today's subject matter, an OGC API Features layer mirrored to a hosted feature layer in ArcGIS Online, and the notebook that does the job:…
-
Continuous Integration With Internet Data Sources
This post shows how to use an ArcGIS Online hosted v 10.0 notebook as a data pump between any data sources on the internet, my specific example being the Snowflake cloud warehouse and a hosted feature service in ArcGIS Online. The systems of record you integrate are only limited by your imagination. When scheduled as a…
