Ir para o conteúdo

a4a:Convenções/Dados: mudanças entre as edições

sem sumário de edição
Sem resumo de edição
Sem resumo de edição
Linha 3: Linha 3:
Os dados dos projetos foram organizados conforme a visão do fluxo de dados mais geral:
Os dados dos projetos foram organizados conforme a visão do fluxo de dados mais geral:
   
   
[[Arquivo:Fig.u2.en.png|centro|480px|semmoldura]]
[[Arquivo:Fig.u2.en.png|centro|580px|semmoldura]]
 
Em termos de processo e valor agregado, podemos descrever os dados da seguinte forma:
 
* '''Preservados''' (''bronze''): os dados e licenças do projeto Digital‑Guard são rigorozamente controlados e preservados tal como os originais recebidos dos doadores. São os “dados brutos”, sem padronização e nos mais diversos formatos (CSV, Shapefile, Geojason etc.). Eles são preservados por 20 anos, e durante esse tempo podem ser baixados, tal como os recebemos.
 
* '''Filtrados''' (''prata''): por terem origem diversa, os dados Preservados precisam ser filtrados e padronizados. O Projeto AddressForAll faz um recorte com foco nos endereços. A estrutura do recorte é padronizada e publicado em formato GeoJSON, através de PostgreSQL em repositórios git.<br/> Todo o processo de filtragem e publicação é aberto e reprodutível, qualquer um pode auditorá‑lo. Os resultados não sofrem validação, e um mesmo endereço pode ser descrito e repetido por diferentes fontes, tais como a prefeitura, a empresa de água e a empresa de logística.
 
* '''Consolidados''' (''ouro''): a consolidação consiste em agregar estatisticamente as informações das diversas fontes sobre um mesmo endereço e suas vizinhanças, e aplicar algoritmos de validação. No processo os endereços reconhecidos como duplicados são reduzidos a um só endereço, e os endereços inválidos descartados. <br/>  Obtemos tanto o score de confiabilidade dos dados originais como a posição mais provável do ponto de endereço. Nomes de rua recebem padronização terminológica e a numeração predial pode ser otimizada através de médias, reposicionamentos ou interpolação. Esta base é a utilizada para nossas APIs de busca e geocodificação (em construção)..


Responsabilidades:
Responsabilidades:
2 583

edições