SlideShare uma empresa Scribd logo
1 de 55
Baixar para ler offline
Brasil.IO: DadosBrasil.IO: Dados
Abertos paraAbertos para
Mais DemocraciaMais Democracia
Álvaro JustenÁlvaro Justen
Canal Glaucia LemosCanal Glaucia Lemos
01 de abril de 201901 de abril de 2019
$ whoami$ whoami
TuricasTuricas, prazer! =), prazer! =)
Sigam-me os bons:Sigam-me os bons:
{{ ,,
,,
,,
,,
}}
//turicasturicas
twittertwitter
githubgithub
youtubeyoutube
slideshareslideshare
instagraminstagram
turicas@brasil.ioturicas@brasil.io
pythonic.cafepythonic.cafe
youtube.com/c/PythonicCafeyoutube.com/c/PythonicCafe
Brasil.IOBrasil.IO
O Brasil em dados libertos
Trabalhos feitos com DadosTrabalhos feitos com Dados
AbertosAbertos
(em conjunto com Juan Torres)
correio24horas.com.br
Acesse a matéria
(em conjunto com Adriano Belisário)
apublica.org
Acesse a matéria
(em conjunto com Adriano Belisário)
theintercept.com/brasil
Acesse a matéria
Acesse a matéria
(em conjunto com Natália Mazotte)
generonumero.media
Veja a Edição "Mulheres na Política"
Veja a Edição "Mulheres na Política II"
Veja a Edição "Espaço Público"
Rua: substantivo (ainda)Rua: substantivo (ainda)
masculinomasculino
youtu.be/7yQ8U2tFFq4
Aplicações ÚteisAplicações Úteis
eleicoes.poder360.com.br
Inovação CívicaInovação Cívica
Exemplo: Operação Serenata de AmorExemplo: Operação Serenata de Amor
serenata.ai
R$ 155 em um restaurante que custa R$ 70/kg, deputado?
Rosie, a robôRosie, a robô
R$ 191 em um restaurante cujos pratos não custam R$ 40,
deputado?
Rosie, a robô (2)Rosie, a robô (2)
twitter.com/tOa_D/status/1058495655184871425
--
Controle SocialControle Social
“ De acordo com o governo brasileiro, o
controle social é a participação da
sociedade civil nos processos de
planejamento, acompanhamento,
monitoramento e avaliação das ações
da gestão pública e na execução das
políticas e programas públicos. ”
Wikipedia
--
“ [A CGU] acredita que a transparência é
o melhor antídoto contra corrupção,
dado que ela é mais um mecanismo
indutor de que os gestores públicos ajam
com responsabilidade.
Uma gestão pública transparente
permite à sociedade, com informações,
colaborar no controle das ações de seus
governantes, com intuito de checar se os
recursos públicos estão sendo usados
como deveriam. ”
CGU.gov.br
-- (definição de )
Dados AbertosDados Abertos
“ Dados abertos são dados que podem
ser livremente usados, reutilizados e
redistribuídos por qualquer pessoa -
sujeitos, no máximo, à exigência de
atribuição da fonte e
compartilhamento pelas mesmas
regras. ”
OpenData Handbook Open Definition
Mais detalhes:
Lei de Acesso à Informação: 12.527/2011
kit.dados.gov.br
escoladedados.org
--
creativecommons.org
“ Copyright laws are turning kids into
criminals. Totally failed war. ”
Lawrence Lessig
Data PipelineData Pipeline
schoolofdata.org/methodology
Nem sempre o dado está disponívelNem sempre o dado está disponível
twitter.com/turicas/status/1094069287206248450
Às vezes apagam os dados...Às vezes apagam os dados...
twitter.com/turicas/status/1112491956314259457
Nem sempre o dado é abertoNem sempre o dado é aberto
twitter.com/turicas/status/1091767340134514690
Nem sempre o dado é grátis (???)Nem sempre o dado é grátis (???)
twitter.com/turicas/status/1019272233095745537
Mas quando está...Mas quando está...
A Qualidade dos Dados é Ruim!A Qualidade dos Dados é Ruim!
5stardata.info
Maior parte do tempo dos projetos deMaior parte do tempo dos projetos de
análise de dados:análise de dados:
Maior parte do tempo dos projetos deMaior parte do tempo dos projetos de
análise de dados:análise de dados:
(em GIFs)(em GIFs)
Acessibilidade: ProblemasAcessibilidade: Problemas
Formato (qualidade técnica)
Exemplo: Boletim de balneabilidade em PDF (INEMA/BA)
Dispersão
Exemplo: Filiações partidárias em 945 ZIPs com CSVs (TSE)
Quantidade de dados
Exemplo: 18 milhões de sócios (RFB)
Domínio da área
Exemplo: o que é unidade eleitoral? (TSE)
--
“ Democracia é um regime político em
que todos os cidadãos elegíveis
participam igualmente — diretamente
ou através de representantes eleitos —
na proposta, no desenvolvimento e na
criação de leis, [...]
Ela abrange as condições sociais,
econômicas e culturais que permitem o
exercício livre e igual da
autodeterminação política. ”
Wikipedia
Libertando DadosLibertando Dados
Libertação de Dados: Exemplo (1)Libertação de Dados: Exemplo (1)
Dados do Conselho Nacional de Justiça (centenas de planilhas)Dados do Conselho Nacional de Justiça (centenas de planilhas)
twitter.com/turicas/status/943176715672711168
Libertação de Dados: Exemplo (2)Libertação de Dados: Exemplo (2)
Dados da Receita Federal (formato proprietário)Dados da Receita Federal (formato proprietário)
twitter.com/turicas/status/959120200976224262
Libertação de Dados: Exemplo (3)Libertação de Dados: Exemplo (3)
Dados do PROUNI (site sai do ar)Dados do PROUNI (site sai do ar)
twitter.com/turicas/status/960678777096425472
Libertação de Dados: Exemplo (4)Libertação de Dados: Exemplo (4)
Site não governamentalSite não governamental
twitter.com/turicas/status/1109148357451304960
Libertação de Dados: Exemplo (5)Libertação de Dados: Exemplo (5)
Captura de dados manualCaptura de dados manual
turicas.info/feiras-organicas-curitiba
Acessse a planilha
Como?Como?
, ,
,
Python
scrapy urllib requests
rows
lxml BeautifulSoup
sqlite3
PythonPython
Fácil de aprender
Ecossistema incrível
Comunidade inclusive
MUITO código e material disponível
Alta produtividade
python.org
Python: Linguagem de ProgramaçãoPython: Linguagem de Programação
Acesse a matéria
xkcd.com/353
rows convert arquivo.pdf arquivo.csvrows convert arquivo.pdf arquivo.csv
Código ao vivoCódigo ao vivo
IPython + rows.import_from_csv
rows convert (HTML para CSV, Olimpíadas)
rows query (SQL em PDF, Balneabilidade Bahia)
rows csv2sqlite (Salários magistrados)
rows pgimport (Bens declarados)
Software livreSoftware livre
Código compartilhado, feito de forma colaborativaCódigo compartilhado, feito de forma colaborativa
github/turicas/rows
Brasil.IOBrasil.IO
O Brasil em dados libertos
DemonstraçãoDemonstração
Dataset salarios-magistrados
Dataset eleicoes-brasil
Dossiê Odebrecht
Acessbilidade: 4/4Acessbilidade: 4/4
[x] Formato
[x] Dispersão
[x] Quantidade de dados
[x] Domínio da área
--
“ Restringir acesso a dados públicos é
elitizar a democracia. ”
Manifesto Brasil.IO
Brasil.IOBrasil.IO
Como Colaborar?Como Colaborar?
Postando no blog:
Lançado HOJE!
Código da plataforma:
Scripts: melhorando os atuais e criando novos
Sugerindo novos datasets:
Compartilhando ideias:
Doando:
blog.brasil.io
github.com/turicas/brasil.io/issues
brasil.io/datasets/sugira
chat.brasil.io
apoia.se/brasilio
Próximo em Curitiba: final de abril.
Convite: Cerveja com DadosConvite: Cerveja com Dados
meetup.com/Cerveja-com-Dados
23 a 28 de outubro de 2019
Ribeirão Preto/SP
2019.pythonbrasil.org.br
??
{{ ,,
,,
,,
,,
}}
//turicasturicas
twittertwitter
githubgithub
youtubeyoutube
slideshareslideshare
instagraminstagram
turicas@brasil.ioturicas@brasil.io

Mais conteúdo relacionado

Semelhante a Dados abertos para mais democracia

Uma visão sobre a transparência, dados abertos e acesso a informação nas Inst...
Uma visão sobre a transparência, dados abertos e acesso a informação nas Inst...Uma visão sobre a transparência, dados abertos e acesso a informação nas Inst...
Uma visão sobre a transparência, dados abertos e acesso a informação nas Inst...Thiago Avila, Msc
 
Governos Abertos, Acesso à Informação e novos recursos para o relacionamento ...
Governos Abertos, Acesso à Informação e novos recursos para o relacionamento ...Governos Abertos, Acesso à Informação e novos recursos para o relacionamento ...
Governos Abertos, Acesso à Informação e novos recursos para o relacionamento ...Thiago Avila, Msc
 
Dados Abertos no Governo
Dados Abertos no GovernoDados Abertos no Governo
Dados Abertos no GovernoColaborativismo
 
Dados Abertos - Transparência e Inovação Governo Sociedade
Dados Abertos - Transparência e Inovação Governo SociedadeDados Abertos - Transparência e Inovação Governo Sociedade
Dados Abertos - Transparência e Inovação Governo SociedadeThiago Avila, Msc
 
Revolução dos Dados Abertos - IV Simpósio de Gestão TI do Gov de PE
Revolução dos Dados Abertos - IV Simpósio de Gestão TI do Gov de PERevolução dos Dados Abertos - IV Simpósio de Gestão TI do Gov de PE
Revolução dos Dados Abertos - IV Simpósio de Gestão TI do Gov de PEnitaibezerra
 
Big Data Analytics em Governo
Big Data Analytics em GovernoBig Data Analytics em Governo
Big Data Analytics em GovernoSérgio Dias
 
Transparência, Dados abertos e Acesso à Informação
Transparência, Dados abertos e Acesso à InformaçãoTransparência, Dados abertos e Acesso à Informação
Transparência, Dados abertos e Acesso à InformaçãoThiago Avila, Msc
 
Brasil.IO COVID-19: Dados por Municípios. Quais os Desafios?
Brasil.IO COVID-19: Dados por Municípios. Quais os Desafios?Brasil.IO COVID-19: Dados por Municípios. Quais os Desafios?
Brasil.IO COVID-19: Dados por Municípios. Quais os Desafios?GDGFoz
 
Ciência de Dados em Governo
Ciência de Dados em GovernoCiência de Dados em Governo
Ciência de Dados em GovernoSérgio Dias
 
Discussões sobre Governo Aberto e suas Potencialidades
Discussões sobre Governo Aberto e suas PotencialidadesDiscussões sobre Governo Aberto e suas Potencialidades
Discussões sobre Governo Aberto e suas PotencialidadesThiago Avila, Msc
 
Extraindo dados públicos na marra com Python
Extraindo dados públicos na marra com PythonExtraindo dados públicos na marra com Python
Extraindo dados públicos na marra com PythonPedro Valente
 
#1 Cerveja com Dados - Natal
#1 Cerveja com Dados - Natal#1 Cerveja com Dados - Natal
#1 Cerveja com Dados - NatalFrederico Pranto
 
Análise Forense Computacional
Análise Forense ComputacionalAnálise Forense Computacional
Análise Forense ComputacionalThiago Finardi
 
ASOCEU Portugal - Lesson 1 - How Public Authority publishes data
ASOCEU Portugal - Lesson 1 - How Public Authority publishes dataASOCEU Portugal - Lesson 1 - How Public Authority publishes data
ASOCEU Portugal - Lesson 1 - How Public Authority publishes dataA Scuola di OpenCoesione
 
Sobre os ombos de gigantes
Sobre os ombos de gigantesSobre os ombos de gigantes
Sobre os ombos de gigantesÁlvaro Justen
 
manual de atuacao em crimes ciberneticos-mpf
manual de atuacao em crimes ciberneticos-mpfmanual de atuacao em crimes ciberneticos-mpf
manual de atuacao em crimes ciberneticos-mpfBelonir Barth
 

Semelhante a Dados abertos para mais democracia (20)

Uma visão sobre a transparência, dados abertos e acesso a informação nas Inst...
Uma visão sobre a transparência, dados abertos e acesso a informação nas Inst...Uma visão sobre a transparência, dados abertos e acesso a informação nas Inst...
Uma visão sobre a transparência, dados abertos e acesso a informação nas Inst...
 
Governos Abertos, Acesso à Informação e novos recursos para o relacionamento ...
Governos Abertos, Acesso à Informação e novos recursos para o relacionamento ...Governos Abertos, Acesso à Informação e novos recursos para o relacionamento ...
Governos Abertos, Acesso à Informação e novos recursos para o relacionamento ...
 
Dados Abertos no Governo
Dados Abertos no GovernoDados Abertos no Governo
Dados Abertos no Governo
 
Dados Abertos - Transparência e Inovação Governo Sociedade
Dados Abertos - Transparência e Inovação Governo SociedadeDados Abertos - Transparência e Inovação Governo Sociedade
Dados Abertos - Transparência e Inovação Governo Sociedade
 
Revolução dos Dados Abertos - IV Simpósio de Gestão TI do Gov de PE
Revolução dos Dados Abertos - IV Simpósio de Gestão TI do Gov de PERevolução dos Dados Abertos - IV Simpósio de Gestão TI do Gov de PE
Revolução dos Dados Abertos - IV Simpósio de Gestão TI do Gov de PE
 
Big Data Analytics em Governo
Big Data Analytics em GovernoBig Data Analytics em Governo
Big Data Analytics em Governo
 
Transparência, Dados abertos e Acesso à Informação
Transparência, Dados abertos e Acesso à InformaçãoTransparência, Dados abertos e Acesso à Informação
Transparência, Dados abertos e Acesso à Informação
 
Brasil.IO COVID-19: Dados por Municípios. Quais os Desafios?
Brasil.IO COVID-19: Dados por Municípios. Quais os Desafios?Brasil.IO COVID-19: Dados por Municípios. Quais os Desafios?
Brasil.IO COVID-19: Dados por Municípios. Quais os Desafios?
 
Ciência de Dados em Governo
Ciência de Dados em GovernoCiência de Dados em Governo
Ciência de Dados em Governo
 
Discussões sobre Governo Aberto e suas Potencialidades
Discussões sobre Governo Aberto e suas PotencialidadesDiscussões sobre Governo Aberto e suas Potencialidades
Discussões sobre Governo Aberto e suas Potencialidades
 
Open datasets
Open datasetsOpen datasets
Open datasets
 
Extraindo dados públicos na marra com Python
Extraindo dados públicos na marra com PythonExtraindo dados públicos na marra com Python
Extraindo dados públicos na marra com Python
 
aula_met_tec02.pptx
aula_met_tec02.pptxaula_met_tec02.pptx
aula_met_tec02.pptx
 
#1 Cerveja com Dados - Natal
#1 Cerveja com Dados - Natal#1 Cerveja com Dados - Natal
#1 Cerveja com Dados - Natal
 
Virada Geek
Virada GeekVirada Geek
Virada Geek
 
Análise Forense Computacional
Análise Forense ComputacionalAnálise Forense Computacional
Análise Forense Computacional
 
ASOCEU Portugal - Lesson 1 - How Public Authority publishes data
ASOCEU Portugal - Lesson 1 - How Public Authority publishes dataASOCEU Portugal - Lesson 1 - How Public Authority publishes data
ASOCEU Portugal - Lesson 1 - How Public Authority publishes data
 
Sobre os ombos de gigantes
Sobre os ombos de gigantesSobre os ombos de gigantes
Sobre os ombos de gigantes
 
Apresentacao okbr geral (nov 2015)
Apresentacao okbr geral (nov 2015)Apresentacao okbr geral (nov 2015)
Apresentacao okbr geral (nov 2015)
 
manual de atuacao em crimes ciberneticos-mpf
manual de atuacao em crimes ciberneticos-mpfmanual de atuacao em crimes ciberneticos-mpf
manual de atuacao em crimes ciberneticos-mpf
 

Mais de Álvaro Justen

A era da pós-verdade - minhas reflexões e crenças
A era da pós-verdade - minhas reflexões e crençasA era da pós-verdade - minhas reflexões e crenças
A era da pós-verdade - minhas reflexões e crençasÁlvaro Justen
 
Realmente precisamos de big data?
Realmente precisamos de big data?Realmente precisamos de big data?
Realmente precisamos de big data?Álvaro Justen
 
Ciência de Dados na Linha de Comando
Ciência de Dados na Linha de ComandoCiência de Dados na Linha de Comando
Ciência de Dados na Linha de ComandoÁlvaro Justen
 
#opendata #fail: Causos da Transparência Brasileira
#opendata #fail: Causos da Transparência Brasileira#opendata #fail: Causos da Transparência Brasileira
#opendata #fail: Causos da Transparência BrasileiraÁlvaro Justen
 
Introdução a programação com Python (para jornalistas)
Introdução a programação com Python (para jornalistas)Introdução a programação com Python (para jornalistas)
Introdução a programação com Python (para jornalistas)Álvaro Justen
 
Libertando dados públicos com ferramentas livres
Libertando dados públicos com ferramentas livresLibertando dados públicos com ferramentas livres
Libertando dados públicos com ferramentas livresÁlvaro Justen
 
Introdução a Programação com Python
Introdução a Programação com PythonIntrodução a Programação com Python
Introdução a Programação com PythonÁlvaro Justen
 
Software Livre versus Open Source
Software Livre versus Open SourceSoftware Livre versus Open Source
Software Livre versus Open SourceÁlvaro Justen
 
Datos Tabulares: La Manera Pythónica
Datos Tabulares: La Manera PythónicaDatos Tabulares: La Manera Pythónica
Datos Tabulares: La Manera PythónicaÁlvaro Justen
 
[FISL17] Liberando dados com um comando, por Álvaro Justen
[FISL17] Liberando dados com um comando, por Álvaro Justen[FISL17] Liberando dados com um comando, por Álvaro Justen
[FISL17] Liberando dados com um comando, por Álvaro JustenÁlvaro Justen
 
Arduino (para fazedores)
Arduino (para fazedores)Arduino (para fazedores)
Arduino (para fazedores)Álvaro Justen
 
Dados tabulares: A Maneira Pythônica
Dados tabulares: A Maneira PythônicaDados tabulares: A Maneira Pythônica
Dados tabulares: A Maneira PythônicaÁlvaro Justen
 
[PyBr11] Lendo dados tabulares: versão pythônica
[PyBr11] Lendo dados tabulares: versão pythônica[PyBr11] Lendo dados tabulares: versão pythônica
[PyBr11] Lendo dados tabulares: versão pythônicaÁlvaro Justen
 
Arduino: Robótica e Automação com Software e Hardware Livres
Arduino: Robótica e Automação com Software e Hardware LivresArduino: Robótica e Automação com Software e Hardware Livres
Arduino: Robótica e Automação com Software e Hardware LivresÁlvaro Justen
 
Capturando dados com Python - UAI Python
Capturando dados com Python - UAI PythonCapturando dados com Python - UAI Python
Capturando dados com Python - UAI PythonÁlvaro Justen
 
Introdução ao Arduino: ArduinoDay Rio 2015
Introdução ao Arduino: ArduinoDay Rio 2015Introdução ao Arduino: ArduinoDay Rio 2015
Introdução ao Arduino: ArduinoDay Rio 2015Álvaro Justen
 
Dados Abertos e Meio Ambiente
Dados Abertos e Meio AmbienteDados Abertos e Meio Ambiente
Dados Abertos e Meio AmbienteÁlvaro Justen
 
import brasil: Dados Abertos de Forma Fácil
import brasil: Dados Abertos de Forma Fácilimport brasil: Dados Abertos de Forma Fácil
import brasil: Dados Abertos de Forma FácilÁlvaro Justen
 
Arduino + Python: produtividade ao extremo
Arduino + Python: produtividade ao extremoArduino + Python: produtividade ao extremo
Arduino + Python: produtividade ao extremoÁlvaro Justen
 

Mais de Álvaro Justen (20)

A era da pós-verdade - minhas reflexões e crenças
A era da pós-verdade - minhas reflexões e crençasA era da pós-verdade - minhas reflexões e crenças
A era da pós-verdade - minhas reflexões e crenças
 
Realmente precisamos de big data?
Realmente precisamos de big data?Realmente precisamos de big data?
Realmente precisamos de big data?
 
Ciência de Dados na Linha de Comando
Ciência de Dados na Linha de ComandoCiência de Dados na Linha de Comando
Ciência de Dados na Linha de Comando
 
#opendata #fail: Causos da Transparência Brasileira
#opendata #fail: Causos da Transparência Brasileira#opendata #fail: Causos da Transparência Brasileira
#opendata #fail: Causos da Transparência Brasileira
 
Python no Jornalismo
Python no JornalismoPython no Jornalismo
Python no Jornalismo
 
Introdução a programação com Python (para jornalistas)
Introdução a programação com Python (para jornalistas)Introdução a programação com Python (para jornalistas)
Introdução a programação com Python (para jornalistas)
 
Libertando dados públicos com ferramentas livres
Libertando dados públicos com ferramentas livresLibertando dados públicos com ferramentas livres
Libertando dados públicos com ferramentas livres
 
Introdução a Programação com Python
Introdução a Programação com PythonIntrodução a Programação com Python
Introdução a Programação com Python
 
Software Livre versus Open Source
Software Livre versus Open SourceSoftware Livre versus Open Source
Software Livre versus Open Source
 
Datos Tabulares: La Manera Pythónica
Datos Tabulares: La Manera PythónicaDatos Tabulares: La Manera Pythónica
Datos Tabulares: La Manera Pythónica
 
[FISL17] Liberando dados com um comando, por Álvaro Justen
[FISL17] Liberando dados com um comando, por Álvaro Justen[FISL17] Liberando dados com um comando, por Álvaro Justen
[FISL17] Liberando dados com um comando, por Álvaro Justen
 
Arduino (para fazedores)
Arduino (para fazedores)Arduino (para fazedores)
Arduino (para fazedores)
 
Dados tabulares: A Maneira Pythônica
Dados tabulares: A Maneira PythônicaDados tabulares: A Maneira Pythônica
Dados tabulares: A Maneira Pythônica
 
[PyBr11] Lendo dados tabulares: versão pythônica
[PyBr11] Lendo dados tabulares: versão pythônica[PyBr11] Lendo dados tabulares: versão pythônica
[PyBr11] Lendo dados tabulares: versão pythônica
 
Arduino: Robótica e Automação com Software e Hardware Livres
Arduino: Robótica e Automação com Software e Hardware LivresArduino: Robótica e Automação com Software e Hardware Livres
Arduino: Robótica e Automação com Software e Hardware Livres
 
Capturando dados com Python - UAI Python
Capturando dados com Python - UAI PythonCapturando dados com Python - UAI Python
Capturando dados com Python - UAI Python
 
Introdução ao Arduino: ArduinoDay Rio 2015
Introdução ao Arduino: ArduinoDay Rio 2015Introdução ao Arduino: ArduinoDay Rio 2015
Introdução ao Arduino: ArduinoDay Rio 2015
 
Dados Abertos e Meio Ambiente
Dados Abertos e Meio AmbienteDados Abertos e Meio Ambiente
Dados Abertos e Meio Ambiente
 
import brasil: Dados Abertos de Forma Fácil
import brasil: Dados Abertos de Forma Fácilimport brasil: Dados Abertos de Forma Fácil
import brasil: Dados Abertos de Forma Fácil
 
Arduino + Python: produtividade ao extremo
Arduino + Python: produtividade ao extremoArduino + Python: produtividade ao extremo
Arduino + Python: produtividade ao extremo
 

Dados abertos para mais democracia