Slides da lightning talk que ministrei na PythonBrasil[11] sobre a biblioteca rows, que facilita a leitura, escrita e manipulação de dados tabulares com Python, não importa o formato em que esse dado esteja (CSV, JSON, TXT, HTML, XLS, XLSX, SQLite etc.). Palestra apresentada no dia 10 de novembro de 2015. Contatos: - GitHub: https://github.com/turicas/rows - Twitter: https://twitter.com/turicas

1. Lendo dados tabulares:
Versão Pythônica
Turicas aka Álvaro Justen
XI PythonBrasil
10 de novembro de 2015, São José dos Campos/SP

2. Turicas, prazer! =)
{ , , ,
}/turicas
twitter.com github.com youtube.com
slideshare.net
alvarojusten@gmail.com
turicas.info

3. #offtopic

4. Patrocinadores são
importantes, mas retirar voz da
comunidade
para
dar voz a quem já tem voz
no momento mais democrático
do evento
não é legal! =/

5. #temqueverissoaí
Bora discutir no bar depois! =)

6. CSV

7. #comofaz? #csvimportcsv
reader=csv.DictReader(open('tesouro-direto.csv'))
#TODO:identificardialetodoCSV
forrowinreader:
printrow #valoressãostrings.STRINGS!
#TODO:fazerconversordedatetime
#TODO:fazerconversordedate
#TODO:fazerconversordedecimal
#TODO:fazerconversordepercent

9. HTML

10. HTML

11. "A vida não é a porra do teu Toddynho
gelado, não!"

12. #comofaz?
#htmlpipinstalllxml
importlxml.etree
filename='tesouro-direto.html'
html=open(filename).read()
tree=lxml.etree.fromstring(html)
table=tree.xpath('//table')[0]
#...chatochatochato...
#tentativa
#erro
#erro
#erro

13. ...

14. XLS

15. #comofaz? #xls
pipinstallxlrd
importxlrd
filename='tesouro-direto.xls'
book=xlrd.open_workbook(filename,formatting_info=True)
sheet=book.sheet_by_index(0)
NUMERO_DE_COLUNAS=7#WTF?
header=[sheet.cell(0,col).valueforcolinrange(NUMERO_DE_COLUNAS
NUMERO_DE_LINHAS=19#WTF?
data=[[sheet.cell(row,col).valueforcolinrange(NUMERO_DE_COLUNAS
forrowinrange(1,NUMERO_DE_LINHAS+1)]
forrow_dataindata:
row=dict(zip(header,row_data))
printrow
#TODO:fazerconversordedatetime
#TODO:fazerconversordedate
#TODO:fazerconversordedecimal
#TODO:fazerconversordepercent

16. Resultado...{u'preco_compra':0.0,u'timestamp':42314.73819444444,u'vencimento'

17. ...,u'timestamp':42314.73819444444,...

18. ProblemasAPIs diferentes
Entender o formato (mas eu só quero os dados...)
Aprender ausar abiblioteca
Converter os dados (achaque abibliotecavaiconverter?)
(isso é só praler...)
Testar os conversores (e o tempo?)

19. rows to the
rescuepip install rows
apt-get install rows
dnf install rows
github.com/turicas/rows

20. #comofaz? #csv #dojeitocerto
importrows
table1=rows.import_from_csv('tesouro-direto.csv')
forrowintable1:
printrow

21. #comofaz? #xls #dojeitocerto
importrows
table2=rows.import_from_xls('tesouro-direto.xls')
forrowintable2:
printrow

22. #comofaz? #html
#dojeitocerto
importrows
table3=rows.import_from_html('tesouro-direto.html')
forrowintable3:
printrow

23. assertlist(table1)==list(table2)==list(table3)

24. printtable1[0]
Row(timestamp=datetime.datetime(2015,11,6,17,43),
titulo=u'TesouroIPCA+comJurosSemestrais2017(NTNB)',
vencimento=datetime.date(2017,5,15),
taxa_compra=Decimal('0.0702'),
taxa_venda=Decimal('0.063'),
preco_compra=0.0,
preco_venda=2792.97)
#namedtuple#FTWo/

26. Funcionalidades
API única(o formato não importa)
Leiturae escrita
CSV, HTML, XLS, XLSX, JSON, TXT, SQLite...
Conversão automática de dados
Tem umacommand-line interface!o/
Eujá fiz os testes

27. #meajudaPython 3
Outros plugins (PDF, OFX, ODS, DBF...)
Decisões de arquitetura
Sprintnaquarta?o/

28. Obrigado! (:
Turicas aka Álvaro Justen
{ , , ,
}/turicas
twitter.com github.com youtube.com
slideshare.net
alvarojusten@gmail.com
turicas.info