Coleta de DCAT por data.gouv.fr¶
Após ofechamento do geo.data.gouv.fr, um servidor DCAT compatível com o modelo de coletor DCAT do data.gouv.fr foi desenvolvido graças ao financiamento tripartite do departamento de Loiret, Calvados e da cidade de Bayonne.
Pré-requisitos¶
Para que seus dados sejam carregados no data.gouv.fr, eles devem atender a vários critérios:
- ter uma licença aberta e indicar que não há limitações no sentido INSPIRE (consulte manage CGUs);
- estar em um catálogo compartilhado pelo servidor DCAT e pelo OpenCatalog;
- conter pelo menos um link de download operacional. Os links de download reconhecidos são :
- link para um serviço WFS capaz de fornecer os dados no formato GeoJSON em WGS84 (4326): consulte assign a WFS service ;
- link para arquivos de dados vetoriais (GeoJSON, Zipped Shapefile e Geopackage), raster (ECW, JPEG2000 e GeoTIFF) ou tabulares (csv, xls e xlsx): consulte atribuir um link de download.
Observação
No modo local, o URL do DCAT deve ser disponibilizado publicamente.
Lista de campos preenchidos¶
| Campos data.gouv.fr | Campos Isogeo |
|---|---|
| Título | Título |
| Acrônimo | Não preenchido |
| Descrição | Mistura de vários campos |
| Palavras-chave | Palavras-chave e temas |
| Licença | Condições |
| Cobertura espacial | Não recuperado pela colheitadeira |
| Cobertura de tempo | Período de validade |
| Frequência de atualização | Frequência de atualização |
| Identificador remoto | Identificador exclusivo da Isogeo |
| URI | Não preenchido (inserido por data.gouv) |
Descrição¶
A descrição é formatada da seguinte forma:
Descrição : Resumo
Contexto de coleta: contexto de coleta de dados (se houver)
Método de coleta: Método de coleta de dados (se disponível)
Atributos: matriz que contém o nome do campo, o alias (ou comentário básico) e o tipo.
Para obter mais informações, consulte os metadados no catálogo do Isogeo (link OpenCatalog).
Frequência de atualização¶
A frequência de atualização é inserida da seguinte forma:
| Isogeo | dados.gouv |
|---|---|
| A cada hora | A cada hora |
| A cada 6 horas | Quatro vezes ao dia |
| A cada 12 horas | Duas vezes ao dia |
| Todos os dias | Diariamente |
| A cada 3 dias | Duas vezes por semana |
| Toda semana | Semanal |
| A cada duas semanas | A cada quinze dias |
| Todo mês | Mensal |
| A cada 2 meses | Bimestral |
| A cada 3 meses | Trimestral |
| A cada 4 meses | Três vezes por ano |
| A cada 6 meses | Semestralmente |
| Todo ano | Anual |
| A cada 2 anos | Bienal |
| A cada 3 anos | Trienal |
| A cada 5 anos | Quinquenal |
| Outra frequência | Desconhecido |
Download de dados¶
Vários tipos de links podem ser carregados no arquivo data.gouv como recursos para download.
- link para um arquivo carregado no Isogeo (hospedado);
- link para arquivos de dados vetoriais (GeoJSON, Zipped Shapefile e Geopackage), raster (ECW, JPEG2000 e GeoTIFF) ou tabulares (csv, xls e xlsx) como um link de dados com a ação de download;
- link para um serviço WFS :
- o número de entidades deve ser menor que o limite do servidor de mapas ( parâmetro MaxRecordCount=1000 por padrão para o ArcGIS Server, parâmetro de número máximo de objetos para o Geoserver, etc.);
- o sistema de coordenadas 4326 deve estar disponível em ;
- o formato de exportação Geojson.
Geração e monitoramento de conjuntos de dados válidos¶
- Para gerar um novo link de coleta, acesse
Administration (Administração),Shares (Ações) eNew (Novo); - Em seguida, escolha o aplicativo DCAT, um catálogo e um Nome para o compartilhamento;
- Clique em
Create; - Um link é gerado automaticamente, e é esse que precisa ser referenciado em
data.gouv.fr.
Ao adicionar /debug-page à url, você pode visualizar os conjuntos de dados válidos (em verde) que serão realmente retornados pelo harvester e os conjuntos de dados inválidos (em vermelho) que não serão retornados.
Para fins de informação, as folhas de serviço e as folhas de dados que não tiverem um link para download que atenda aos requisitos acima serão consideradas inválidas.
Conta e organização em data.gouv.fr¶
-
Criar uma conta em data.gouv.fr
Para criar uma conta ou fazer login: https://www.data.gouv.fr/login. É recomendável criar uma conta diretamente sem a interface de uma rede social.
-
Criar / participar de uma organização em data.gouv.fr
Para fazer isso, você precisa passar pela administração do seu perfil: https://www.data.gouv.fr/fr/admin/organization/new/. Se ele já existir, faça uma solicitação para ingressar nele.
Referência e coleta do fluxo DCAT¶
-
Adicionar um novo harvester
Depois que o fluxo DCAT tiver sido criado no Isogeo, adicione um novo harvester na interface de administração do data.gouv.fr
-
Selecione sua organização
-
Preencha os campos obrigatórios e clique em Next (Avançar)
-
Você verá uma mensagem informando que o harvester precisa ser validado pela equipe de administração. Clique em "See in administration" (Ver na administração)
-
Clique em "Edit" (Editar) e depois em "Edit" (Editar)
-
Teste a colheita clicando em "Preview" e verifique o número de conjuntos de dados validados.
Se um dado parecer não estar disponível, verifique novamente os pré-requisitos e entre em contato com a equipe do data.gouv.fr.
-
Verificar a colheita
Depois que a colheitadeira tiver sido validada, você poderá visualizar as várias operações de colheita realizadas, que são lançadas diariamente. 