Giter VIP home page Giter VIP logo

datasets-cmsp's Introduction

datasets-cmsp

Issue tracker público para os conjuntos de dados da Câmara Municipal de São Paulo

Objetivo

O objetivo deste projeto é oferecer uma forma aberta e colaborativa de reunir e organizar questões (bugs, dúvidas, sugestões) relacionadas aos conjuntos de dados publicados pela Câmara Municipal de São Paulo.

Com isso, espera-se melhorar a qualidade dos dados, reduzir as dificuldades de processamento deles e, assim, aumentar a utilização desses dados como ferramenta de controle público, além de fomentar novos tipos de usos.

As questões levantadas aqui não precisam se limitar aos dados abertos publicados pela Câmara e podem incluir os dados extraídos por meio de scrapers de páginas HTML, documentos PDF e até mesmo vídeos.

Este não é um projeto oficial da Câmara e é mantido de forma voluntária.

Como contribuir

Você pode contribuir com este projeto de várias formas:

  • Abra uma issue sempre que encontrar problemas com os dados publicados pela Câmara Municipal.

  • Caso conheça um workaround para um problema reportado mas ainda não resolvido, compartilhe-o nos comentários.

  • Envie suas dúvidas sobre o processamento e uso dos dados.

  • Responda as dúvidas enviadas por outras pessoas.

  • Sugira mudanças na forma como os dados atuais são publicados ou no formato das informações.

  • Peça a publicação de novos conjuntos de dados.

  • Torne-se um colaborador do projeto e ajude a gerenciar as issues abertas, fazendo encaminhamento delas para a CMSP e acompanhando o andamento.

  • Ajude a melhorar este texto. Basta fazer um pull request.

Algumas dicas:

  • Antes de abrir uma issue, verifique se ela já foi reportada por alguém.

  • Inclua na issue a URL do arquivo de dados ou página a que se refere e, se necessário, coloque em um Gist o trecho específico referente ao problema ou dúvida.

  • No caso de acessos a APIs, sempre que possível, envie o request HTTP completo que usou e a resposta que obteve.

É especialmente bem-vinda a participação e contribuições de funcionários da Câmara.

Inspiração

Este projeto foi inspirado pelas idéias descritas em http://okfnlabs.org/blog/2012/07/10/dataissues.html e http://okfnlabs.org/blog/2013/11/06/tracking-data-issues.html.

Domínio público

Este trabalho é dedicado ao domínio público e os autores renunciam aos direitos autorais, direitos conexos e afins do trabalho, em todo o mundo, na medida permitida por lei, nos termos da CC0 1.0 Universal (CC0 1.0) Dedicação ao Domínio Público.

Você pode copiar, modificar, distribuir e executar o trabalho, mesmo para fins comerciais, tudo sem pedir autorização.

Ao fazer contribuições a este projeto, incluindo o envio de pull requests, abertura de issues e comentários, você aceita em liberá-las dentro destas mesmas condições.

datasets-cmsp's People

Contributors

antoniograeff avatar

Stargazers

 avatar  avatar

Watchers

 avatar

datasets-cmsp's Issues

Arquivos sem link no índice de processos digitalizados

Algumas páginas do acervo de processos digitalizados não possuem link na página índice e só podem ser acessados digitando manualmente o endereço web.

Identifiquei as seguintes páginas sem link no índice:

http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/IND-2017.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/MOC-2014.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/MOC-2015.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/MOC-2016.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/PDL-1966.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/PLO-2016.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/PLO-2017.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/RDS-1991.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/RDS-1992.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/RDS-1993.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/RDS-1994.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/RDS-1998.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/REC-1955.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/REC-1982.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/REC-1991.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/REC-1994.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/REC-1995.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/REC-1996.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/REC-1997.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/REC-1998.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/REC-2015.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/REC-2016.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/RPP-1990.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/RPP-2016.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/RPP-2017.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/RPS-2013.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/RPS-2015.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/RPS-2016.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/RSC-2015.html
http://www.camara.sp.gov.br/wp-content/uploads/projetos_digitalizados/RSC-2016.html

O esperado seria haver link tanto na página do índice geral quanto na página de índice do tipo de matéria (como, por exemplo, a de Recursos).

Títulos errados em vídeos na Galeria de Vídeos (87ª, 88ª e 89ª Sessões Extraordinárias, 01/12/2017)

Os títulos de dois vídeos disponíveis na Galeria de Vídeos identificam as imagens como sendo das 87ª, 88ª e 89ª Sessões Extraordinárias (01/12/2017):

87ª, 88ª e 89ª Sessões Extraordinárias da 17ª Legislatura - Parte 1
http://www.nucleomedia.com.br/get_webcast.asp?id=38077

87ª, 88ª e 89ª Sessões Extraordinárias da 17ª Legislatura - Parte 2
http://www.nucleomedia.com.br/get_webcast.asp?id=38079

Porém, as imagens, são das 84ª, 85ª e 86ª Sessões Extraordinárias (30/11/2017). A data das sessões está corretamente identificada no vinheta do vídeo e a primeira das sessões é anunciada pelo presidente no minuto 55:10 da gravação da "parte 1".

As 87ª, 88ª e 89ª Sessões Extraordinárias (01/12/2017) se encontram publicadas em outra URL:

http://www.nucleomedia.com.br/get_webcast.asp?id=38052

Página de registro escrito de audiências públicas com erro nas audiências de julho de 2015

Na página de registro escrito de audiências públicas, ao clicar em "16ª Legislatura", "3ª Sessão Legislativa - 2015" e depois em "Julho", a listagem aparece "quebrada", com os nomes das comissões onde deveria haver os dias das audiências:

screen shot 2018-03-04 at 18 31 40

Por conta do problema, não é possível acessar os registros das audiências desse mês.

Testado nas versões mais recentes do Google Chrome e Safari no macOS 10.13.

Erro HTTP 500 ao acessar endpoint ProjetosReunioesDeComissao do SPLegis

Ao acessar o endpoint ProjetosReunioesDeComissao da API do SPLegis, recebo uma resposta de erro com status HTTP 500 em algumas combinações de "ano" e "tipo". Exemplos:

http://splegisws.camara.sp.gov.br/ws/ws2.asmx/ProjetosReunioesDeComissao?ano=1995&tipo=PL
http://splegisws.camara.sp.gov.br/ws/ws2.asmx/ProjetosReunioesDeComissao?ano=2011&tipo=PL

O mesmo acontece no endpoint JSON:

http://splegisws.camara.sp.gov.br/ws/ws2.asmx/ProjetosReunioesDeComissaoJSON?ano=1995&tipo=PL
http://splegisws.camara.sp.gov.br/ws/ws2.asmx/ProjetosReunioesDeComissaoJSON?ano=2011&tipo=PL

O erro acontece nos acessos SOAP 1.1, SOAP 1.2, HTTP GET e HTTP POST.

API do SPLegis não retorna informações sobre os vereadores de acordo com descrito na documentação

A página com a descrição da API do SPLegis (http://splegisws.camara.sp.gov.br/ws/ws2.asmx) afirma que o método "Vereadores" retorna:

a lista de todos os Vereadores da CMSP, com informações referentes a mandatos, cargos em Comissões ou na Mesa e a partidos

Porém, o acesso ao método por meio da URL (http://splegisws.camara.sp.gov.br/ws/ws2.asmx/Vereadores) só retorna as informações de "chave" e "nome", sem as informações referentes a mandatos, cargos em comissões, mesa diretora e partidos.

<?xml version="1.0" encoding="UTF-8"?>
<Promoventes xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:xsd="http://www.w3.org/2001/XMLSchema" xmlns="http://www.camara.sp.gov.br/">
	<Promovente>
		<Chave>183</Chave>
		<Nome>ABEL FERREIRA CASTILHO</Nome>
	</Promovente>
	<Promovente>
		<Chave>1297</Chave>
		<Nome>ABOU ANNI</Nome>
	</Promovente>
	<Promovente>
		<Chave>20</Chave>
		<Nome>ABRAAO RIBEIRO</Nome>
	</Promovente>

O comportamento esperado seria retornar as informações de acordo com a documentação.

Registro no PDL 40/2012 na API do SPLegis mostra informação incorreta de norma

O registro do PDL 40/2012 na API do SPLegis mostra incorretamente que o projeto foi convertido no Decreto Legislativo nº 39, de 2012.

Excerto de http://splegisws.camara.sp.gov.br/ws/ws2.asmx/ProjetosPorAno?ano=2012:

<Projeto>
	<Chave>296826</Chave>
	<Tipo>PDL</Tipo>
	<Numero>40</Numero>
	<Ano>2012</Ano>
	<Data>2012-05-09T00:00:00</Data>
	<Ementa>CONCEDE SALVA DE PRATA AO INCOR - INSTITUTO DO CORAÇÃO DA FACULDADE DE MEDICINA DA UNIVERSIDADE DE SÃO PAULO.</Ementa>
	<TipoNorma>DECRETO</TipoNorma>
	<NumeroNorma>39</NumeroNorma>
	<AnoNorma>2012</AnoNorma>
	<DataNorma>2012-06-14T00:00:00</DataNorma>
</Projeto>

Verificando o Diário Oficial da Cidade de São Paulo, 16/06/2012, p. 137, constata-se que esse PDL foi na realidade convertido no Decreto Legislativo nº 38, de 2012.

O mesmo erro se observa na página do SPLegis em http://splegisconsulta.camara.sp.gov.br/Pesquisa/DetailsDetalhado?COD_MTRA_LEGL=2&ANO_PCSS_CMSP=2012&COD_PCSS_CMSP=40

Valor de "VotacaoID" repetido em votações diferentes em sessão de 05/12/2012

O arquivo XML das votações da 357ª Sessão Extraordinária (05/12/2012), na página de Votação em Plenário, possui atributos "VotacaoID" com os mesmos valores em dois registros "Votacao" distintos:

https://splegispdarmazenamento.blob.core.windows.net/containersip/VOTACOES_05_12_2012_Extraordin%C3%A1ria_357.xml

<Votacao VotacaoID="1229" TipoVotacao="Nominal" Materia="Suspensão dos trabalhos por 2hs" Ementa="" Resultado="" Presentes="45" Sim="0" Nao="39" Abstencao="1" Branco="0" NotasRodape="">
<Votacao VotacaoID="1229" TipoVotacao="Nominal" Materia="inversão do item 03 constando como item seguinte -..." Ementa="" Resultado="" Presentes="45" Sim="0" Nao="39" Abstencao="1" Branco="0" NotasRodape="">

Apesar de não haver documentação ou DTD do formato específico, por analogia ao comportamento dos atributos "ID" no XML, o esperado seria que os valores fossem únicos no documento ou, ainda melhor, no dataset completo.

Registro no PDL 82/2015 na API do SPLegis mostra informação incorreta de norma

O registro do PDL 82/2015 na API do SPLegis mostra incorretamente que o projeto foi convertido no Decreto Legislativo nº 91, de 2015.

Excerto de http://splegisws.camara.sp.gov.br/ws/ws2.asmx/ProjetosPorAno?ano=2015:

<Projeto>
	<Chave>314030</Chave>
	<Tipo>PDL</Tipo>
	<Numero>82</Numero>
	<Ano>2015</Ano>
	<Data>2015-11-10T00:00:00</Data>
	<Ementa>DISPÕE SOBRE A OUTORGA DA LÁUREA SALVA DE PRATA AO INSTITUTO DO CÂNCER ARNALDO VIEIRA DE CARVALHO E DÁ OUTRAS PROVIDÊNCIAS.</Ementa>
	<TipoNorma>DECRETO</TipoNorma>
	<NumeroNorma>91</NumeroNorma>
	<AnoNorma>2015</AnoNorma>
	<DataNorma>2015-12-21T00:00:00</DataNorma>
</Projeto>

Verificando o Diário Oficial da Cidade de São Paulo, 06/01/2016, p. 71, constata-se que esse PDL foi na realidade convertido no Decreto Legislativo nº 92, de 2015.

O mesmo erro se observa na página do SPLegis em http://splegisconsulta.camara.sp.gov.br/Pesquisa/DetailsDetalhado?COD_MTRA_LEGL=2&ANO_PCSS_CMSP=2015&COD_PCSS_CMSP=82

Registro no PDL 25/1991 na API do SPLegis mostra informação incorreta de norma

O registro do PDL 25/1991 na API do SPLegis mostra incorretamente que o projeto foi convertido no Decreto Legislativo nº 51, de 1993.

Excerto de http://splegisws.camara.sp.gov.br/ws/ws2.asmx/ProjetosPorAno?ano=1991:

<Projeto>
	<Chave>447</Chave>
	<Tipo>PDL</Tipo>
	<Numero>25</Numero>
	<Ano>1991</Ano>
	<Data>1991-08-28T00:00:00</Data>
	<Ementa>Dispõe sobre a outorga de Medalha Anchieta e Diploma de Gratidão da Cidade de São Paulo, a Ayrton Senna da Silva. ******** ENTREGUE EM 03/10/2007 ********</Ementa>
	<TipoNorma>DECRETO</TipoNorma>
	<NumeroNorma>51</NumeroNorma>
	<AnoNorma>1993</AnoNorma>
	<DataNorma>1993-01-07T00:00:00</DataNorma>
</Projeto>

Verificando o Diário Oficial do Município de São Paulo, 07/01/1993, p. 39, constata-se que esse PDL foi na realidade convertido no Decreto Legislativo nº 51, de 1992.

O mesmo erro se observa na página do SPLegis em http://splegisconsulta.camara.sp.gov.br/Pesquisa/DetailsDetalhado?COD_MTRA_LEGL=2&ANO_PCSS_CMSP=1991&COD_PCSS_CMSP=25

Links quebrados para arquivos XML de votação das sessões de 09/12/2015

Valor de "Sequencia" não muda nas respostas do endpoint ProjetosComissoesDesignadas do SPLegis

O valor do elemento "Sequencia" nas respostas do endpoint ProjetosComissoesDesignadas da API do SPLegis aparece como "0" para todos os registros de "Encaminhamento".

http://splegisws.camara.sp.gov.br/ws/ws2.asmx/ProjetosComissoesDesignadas?ano=2017&tipo=PL&numero=240

O esperado seria aparecer como "1", "2", "3", "4", etc.

O mesmo acontece no endpoint JSON:

http://splegisws.camara.sp.gov.br/ws/ws2.asmx/ProjetosComissoesDesignadasJSON?ano=2017&tipo=PL&numero=240

O erro acontece nos acessos SOAP 1.1, SOAP 1.2, HTTP GET e HTTP POST.

<?xml version="1.0" encoding="utf-8"?>
<Projetos xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:xsd="http://www.w3.org/2001/XMLSchema" xmlns="http://www.camara.sp.gov.br/">
  <Projeto>
    <Tipo>PL</Tipo>
    <Numero>240</Numero>
    <Ano>2017</Ano>
    <Encaminhamentos>
      <Encaminhamento>
        <Sequencia>0</Sequencia>
        <Data>2017-04-18T00:00:00</Data>
        <Comissoes>
          <Comissao>
            <Ordem>1</Ordem>
            <Nome>CCJ</Nome>
          </Comissao>
          <Comissao>
            <Ordem>2</Ordem>
            <Nome>ADM</Nome>
          </Comissao>
          <Comissao>
            <Ordem>3</Ordem>
            <Nome>FIN</Nome>
          </Comissao>
        </Comissoes>
      </Encaminhamento>
      <Encaminhamento>
        <Sequencia>0</Sequencia>
        <Data>2017-05-04T00:00:00</Data>
        <Comissoes>
          <Comissao>
            <Ordem>1</Ordem>
            <Nome>CCJ</Nome>
          </Comissao>
        </Comissoes>
      </Encaminhamento>
      <Encaminhamento>
        <Sequencia>0</Sequencia>
        <Data>2017-05-09T00:00:00</Data>
        <Comissoes>
          <Comissao>
            <Ordem>1</Ordem>
            <Nome>CCJ</Nome>
          </Comissao>
          <Comissao>
            <Ordem>2</Ordem>
            <Nome>ADM</Nome>
          </Comissao>
          <Comissao>
            <Ordem>3</Ordem>
            <Nome>FIN</Nome>
          </Comissao>
        </Comissoes>
      </Encaminhamento>
      <Encaminhamento>
        <Sequencia>0</Sequencia>
        <Data>2017-05-17T00:00:00</Data>
        <Comissoes>
          <Comissao>
            <Ordem>1</Ordem>
            <Nome>CCJ</Nome>
          </Comissao>
        </Comissoes>
      </Encaminhamento>
    </Encaminhamentos>
  </Projeto>
</Projetos>

Registro no PDL 95/1992 na API do SPLegis mostra informação incorreta de norma

O registro do PDL 95/1992 na API do SPLegis mostra incorretamente que o projeto foi convertido no Decreto Legislativo nº 52, de 1993.

Excerto de http://splegisws.camara.sp.gov.br/ws/ws2.asmx/ProjetosPorAno?ano=1992:

<Projeto>
	<Chave>4310</Chave>
	<Tipo>PDL</Tipo>
	<Numero>95</Numero>
	<Ano>1992</Ano>
	<Data>1992-12-16T00:00:00</Data>
	<Ementa>dispoe sobre outorga de titulo de cidadão paulistano ao senhor ahmad nazih aref abdul latif, e da outras providencias. *** ENTREGUE EM 22/08/2007 ***</Ementa>
	<TipoNorma>DECRETO</TipoNorma>
	<NumeroNorma>52</NumeroNorma>
	<AnoNorma>1993</AnoNorma>
	<DataNorma>1993-01-07T00:00:00</DataNorma>
</Projeto>

Verificando o Diário Oficial do Município de São Paulo, 07/01/1993, p. 39, constata-se que esse PDL foi na realidade convertido no Decreto Legislativo nº 52, de 1992.

O mesmo erro se observa na página do SPLegis em http://splegisconsulta.camara.sp.gov.br/Pesquisa/DetailsDetalhado?COD_MTRA_LEGL=2&ANO_PCSS_CMSP=1992&COD_PCSS_CMSP=95

Recommend Projects

  • React photo React

    A declarative, efficient, and flexible JavaScript library for building user interfaces.

  • Vue.js photo Vue.js

    🖖 Vue.js is a progressive, incrementally-adoptable JavaScript framework for building UI on the web.

  • Typescript photo Typescript

    TypeScript is a superset of JavaScript that compiles to clean JavaScript output.

  • TensorFlow photo TensorFlow

    An Open Source Machine Learning Framework for Everyone

  • Django photo Django

    The Web framework for perfectionists with deadlines.

  • D3 photo D3

    Bring data to life with SVG, Canvas and HTML. 📊📈🎉

Recommend Topics

  • javascript

    JavaScript (JS) is a lightweight interpreted programming language with first-class functions.

  • web

    Some thing interesting about web. New door for the world.

  • server

    A server is a program made to process requests and deliver data to clients.

  • Machine learning

    Machine learning is a way of modeling and interpreting data that allows a piece of software to respond intelligently.

  • Game

    Some thing interesting about game, make everyone happy.

Recommend Org

  • Facebook photo Facebook

    We are working to build community through open source technology. NB: members must have two-factor auth.

  • Microsoft photo Microsoft

    Open source projects and samples from Microsoft.

  • Google photo Google

    Google ❤️ Open Source for everyone.

  • D3 photo D3

    Data-Driven Documents codes.