Slides da palestra ministrada por Álvaro Justen durante o 17º Fórum Internacional de Software Livre, em 15 de julho de 2016, Porto Alegre/RS. Vídeo: https://www.youtube.com/watch?v=WY-A2hYg0rI Slides originais: http://turicas.info/slides/rows/fisl17 Links: - https://twitter.com/turicas - https://github.com/turicas

1. Liberando Dados Com Um
Comando
Turicas aka Álvaro Justen
17° Fórum Internacional de Software Livre
(meu 10º FISL! o/)
15 de julho de 2016 - Porto Alegre/RS

2. bit.ly/turicas- sl17

3. Turicas, prazer! =)
Sigam-me os bons:
{ ,
,
,
,
}
/turicas
twitter
github
youtube
slideshare
instagram
alvaro@CursoDeArduino.com.br
turicas.info

4. Nômade Digital

5. cursodearduino.com.br

6. pythonic.cafe

7. generonumero.media

8. escoladedados.org

10. Software Livre

11. Python

12. Arduino

14. pythonquito.tk

15. E vocês?Quem trabalhacom conversão de dados, scraping, datascience,
...?
Quem conhece/usaPython?

17. A Jornada

19. Dados Presos

20. Dado aberto, porém não
acessível

21. O Que Eu Já Fiz

22. O Que Eu Quero

23. O Que Tenho Que Fazer

24. Obtendo...

25. Veri cando...

26. Limpando...

27. E Se Fosse CSV?

28. JSON

29. XLS, XLSX

30. rows to the rescue!
pip install rows # Python Package Index
apt-get install rows # Debian
dnf install rows # Fedora
github.com/turicas/rows

33. rows
BibliotecaPython
Command-Line Interface
Plugins:
CSV
JSON
HTML (+ XPath)
TXT
XLS
XLSX
SQLite
ODS
Parquet
(+ outros em desenvolvimento)

34. csv com Python + rows
importrows
table1=rows.import_from_csv('tesouro-direto.csv')
forrowintable1:
printrow

35. Row(timestamp=datetime.datetime(2015,11,6,17,43),
titulo=u'TesouroIPCA+comJurosSemestrais2017(NTNB)',
vencimento=datetime.date(2017,5,15),
taxa_compra=Decimal('0.0702'),
taxa_venda=Decimal('0.063'),
preco_compra=0.0,
preco_venda=2792.97)
#namedtuple#FTWo/

36. xls com Python + rows
importrows
table2=rows.import_from_xls('tesouro-direto.xls')
forrowintable2:
printrow

37. html com Python + rows
importrows
table3=rows.import_from_html('tesouro-direto.html')
forrowintable3:
printrow

38. import rows

39. rows: Funcionalidades
Interface única(não importao formato)
Escrever é tão fácilquanto ler (pythonic way)
Vários plugins
CLI
Conversão automática de dados
Eujá z os testes
Test-driven development
Semantic versioning

40. Command-Line Interface
print: mostraatabelaem formato texto
convert: converte entre os formatos suportados
sum: agregatabelas
join: cruzadados
query: SQL!

41. Live coding (CLI)

42. Alguns Casos de Uso
CLI:
Download, conversão e limpeza
Análises preliminares
Biblioteca:
Conversão e limpeza(exemplo: Interlegis)
Conversão e análise (exemplos: sci , sl_talks)

43. Qual o pior melhor formato?

45. specs (beta)row

46. Colaboradores

47. github.com/turicas/rows

48. # kdik

49. latinoware.org
19 a21 de outubro
Foz do Iguaçu/PR

50. pythonsudeste.org
2 e 3 de setembro
Belo Horizonte/MG

51. pythonbrasil.org.br
13 a18 de outubro
Florianópolis/SC

52. Curso de Python Online e
Gratuito!
pythonic.cafe

53. Curso de Arduino em PoA!
cursodearduino.com.br/porto-alegre
19 a22 de julho de 2016,
CUPOM DE DESCONTO: FISL17
TransLAB

54. ?

55. Obrigado! (:
Turicas aka Álvaro Justen
{ ,
,
,
,
}
/turicas
twitter
github
youtube
slideshare
instagram
alvaro@CursoDeArduino.com.br
turicas.info
bit.ly/turicas- sl17