Baixado 10 vezes
![APIs
requests
pip install requests
>>> r = requests.get('https://api.github.com/user', auth=('user',
'pass'))
>>> r.status_code
200
>>> r.headers['content-type']
'application/json; charset=utf8'
>>> r.text
u'{"type":"User"...'](https://image.slidesharecdn.com/shutupandgivemethedata-150516165557-lva1-app6892/85/Shut-up-and-give-me-the-data-9-320.jpg)
Carregado porAna Paula Gomes
Shut up and give me the data
Ana Paula Gomes, mestranda em ciência da computação, discute a utilização de APIs e crawlers em projetos de tecnologia. O documento aborda como acessar dados através de APIs, com exemplos de APIs do GitHub, Marvel e Twitter, além de estratégias e bibliotecas para crawling. A apresentação também menciona a importância da oferta de aplicativos em troca de dados dos usuários.
![APIs: o que são? onde vivem? do que se alimentam? [PyNE2016]](https://cdn.slidesharecdn.com/ss_thumbnails/apis-oquesaoondevivemdoquesealimentam-pyne20161-160610143946-thumbnail.jpg?width=640&height=640&fit=bounds)
Shut up and give me the data
- 1. shut up andgive me the data!
- 2. quem tá falando?! AnaPaula Gomes Baiana, mestranda em Ciência da Computação, apaixonada por tecnologia, boas conversas e viagens (não necessariamente nessa ordem). Organizadora do GDG e WTM Belo Horizonte
- 3.
- 4.
- 5.
- 6.
- 7. APIs uma interface paraacessar dados
- 8. APIs e o pythonnisso? • requests
- 9. APIs requests pip install requests >>>r = requests.get('https://api.github.com/user', auth=('user', 'pass')) >>> r.status_code 200 >>> r.headers['content-type'] 'application/json; charset=utf8' >>> r.text u'{"type":"User"...'
- 10. APIs Marvel API • ofereceinformações sobre seu universo: quadrinhos, personagens, autores • REST e JSON
- 11. APIs demonstração com requestsacessando a API da marvel
- 12. APIs Twitter API passos: • cadastrar-seno Twitter (com número de telefone) • criar uma aplicação • solicitar token JSON
- 13. APIs Twitter API modalidades: • StreamingAPI • REST API (search)
- 14. APIs demonstração de usoda API do Twitter
- 15. Crawler tudo o quevocê pode ver, você pode pegar
- 16. Crawler programas que analisampáginas web em busca de dados relevantes
- 17. Crawler estratégias: • busca emLargura • snowball
- 18. Crawler Busca em Largura •busca todos os nós até terminar a árvore de dados • exemplo: coleta todos os links de uma página e explora estes links até todo o site ter sido coletado
- 19. Crawler Snowball • inicia comum conjunto de sementes (seeds) e coleta até um determinado critério de parada • critérios de parada: tempo de execução, componente conectado, fim das sementes
- 20. Crawler algumas bibliotecas: • pyquery,scrapy, beautiful soap
- 21. Crawler pyquery pip install pyquery >>>frompyquery import PyQuery as pq >>>doc = pq('<html><body><p>Hello World</p></body></html>') >>>print doc('p').text() 'Hello World'
- 22. Crawler demonstração do pyquerycrawleando o foursquare
- 23. Apps você dá algoque os usuários querem em troca dos dados
- 24. Apps e dados criaçãode aplicativos em plataformas já consolidas em troca das informações dos usuários
- 25.
- 26.
- 27.
- 28.
- 29. só mais umacoisa!
- 30. códigos ou ideias { “email”:“apgomes88@gmail.com”, “twitter”: “anapaulagomess” “github”: “anapaulagomes/shutupandgivemethedata” }
- 31.
- 32.