danielfireman / contratospublicos Goto Github PK

Pontos importantes

• Já temos a chave
• Atualizar o registro com latitude e longitude e placeID (bom fazer caching pois geocoding pode ser demorado)

Foi útil no último hackfest e não parece ser tão complicado de adicionar a API.

• Podemos ter um rate limit geral e simples para começar:
  • https://github.com/golang/go/wiki/RateLimiting
• Podemos ir por cliente:
  • https://github.com/throttled/throttled (parece bem bom)
  • https://github.com/tsenart/tb/blob/master/http/server.go
• Página com recomendações gerais:
  • https://stablelib.com/blog/securing-golang-web-apps/

http://www.tce.pe.gov.br/internet/index.php/dados-abertos/bases-de-dados-completas

http://sistemas.tce.pe.gov.br/DadosAbertos/Exemplo!listar

Vamos começar com pessoa jurídica. Além de tornar a base menor, vai simplificar integração com outros sistemas.

• No mínimo qual o objetivo da API e que dados fornece

Hoje enviamos as RPCs e fazemos validações muito simples. Vale a pena validar melhor

Aproveitar enquanto o código está pequeno, melhor refatorar, documentar e testar e adicionar alguns testes. Isso pode nos ajudar a ter contribuição, se for o caso.

Vamos pegar o nome do receitaws e economizar ainda mais espaço no BD. Esse espaço pode ser útil quando a gente quiser organizar coligações e ter as informações ano-a-ano.

Pode ser via README mesmo, mas a idéia é fazer um resumo da visão do SW e das tecnologias escolhidas.

Idéia principal:

Mostrar um mapa/resumo dos gastos que o governo estadual+municipa tem com um certo fornecedor

Sobre as grandes áreas de funcionalidade em termos de SW, acho que podemos focar em 3 pilares:

1. Uma API consolidada, que outros sistemas e projetos de análise de dados possam usar para pegar informações sobre o relacionamento do estado com uma empresa
2. Uma página que você pode buscar por CNPJ e ver o relacionamento daquela empresa com os governos estaduas (talvez por nome também)
3. Uma página estável (permalink) que pode ser compartilhado para apresentar informações de uma determinada empresa (relações da empresa com os governos estaduais e municipais)

Sobre as tecnologias utilizadas

BE: golang
FE: HTML+CSS (bootstrap)+JS
CI: travisCI
Cloud hosting: Heroku
DB: MongoDB
Monitoring: New Relic
User analytics: google analytics

Bom ter uma descrição do projeto, do time e etc.

Heroku nos da um pouco de redis

• Heroku redis (25MB, 20conn): https://elements.heroku.com/addons/heroku-redis
• Redis cloud (30MB, 30conn): https://elements.heroku.com/addons/rediscloud
• Redistogo (5MB, 10conn): https://elements.heroku.com/addons/redistogo

Exemplo: https://godoc.org/github.com/eawsy/aws-lambda-go/service/lambda/runtime

Também podemos ter um badge "https://img.shields.io/badge/api-godoc-7986cb.svg?style=flat-square"

HOje é uma página em branco com o string not found.

Ao que tudo indica, dá para olhar mais coisa por aí.

Temos que descobrir onde encontramos os dados sobre as coligações num determinado ano.

Pode ser útil não apenas do ponto de vista de entendeer o código (que ainda está pequeno), mas posso reusar em aulas.

Assim o valor total e o numero total de contratos não ficam tão fora de contexto (misturado com as demais informações do fornecedor)

• Add on gratuito no heroku
• https://newrelic.com/golang

Acho que vai ser importante para ver como as coisas vão durante a hackaton

• Será que faz sentido? A priori parece que sim

Agora que temos a página principal e a landing page, acho que vai ser bacana

https://developers.facebook.com/docs/sharing/webmasters

Isso vai permitir demonstrar melhor o que está nos dados, mesmo para quem não entende de computação.

Podemos começar com HTML puro e simples. Depois podemos ir evoluindo essa página, adicionando visualizações mais interessantes.

Olhar o retorno e usar backoff exponencial.

Como estamos acessando dados deles, é bacana colocar um logo ou link em algum lugar.

Duas possíveis soluções:

• Configurar o tableSort plugin
• Retirar o separador de milhar (acho que pode dar certo)

O logo e o título da página não aparecem. Talvez mudar o template de uma vez para boostrap vai resolver isso.

Vai tornar manutenção muito mais fácil.