Este documento discute a automação de machine learning, desde o conjunto de dados até a produção. Ele apresenta desafios em projetos de ML, como a dificuldade de levar protótipos de notebooks para a produção. A solução proposta é o Marvin, uma plataforma de inteligência artificial open source que simplifica o processo de exploração, construção, teste e implantação de projetos de ML de forma reproduzível. O documento também apresenta a arquitetura do Marvin AutoML para automação no machine learning.

1. Automação de
Machine Learning
Do dataset à
produção!

2. Contatos
• rafa.reis.novello@gmail.com
• linkedin.com/in/rafaelnovello
• rafanovello.blogspot.com
• github.com/rafaelnovello
• slideshare.net/RafaelNovello
• github.com/marvin-ai

3. Contatos
Willian Leite CTO @ CBYK
CBYK.com.br
● linkedin.com/in/wleite
● github.com/wleite
● twitter.com/willianleite

4. Desafios em projetos de Machine Learning
A maioria dos cientistas de
dados (tipo A) não tem os skills
de engenharia de software
necessários para construir
soluções para produção.
Bons profissionais do tipo B são
unicórnios!

5. Desafios em projetos de Machine Learning
O código é prototipado
localmente em um Notebook
(algo como uma IDE interativa)
em qualquer linguagem.
Os modelos são gerados com
datasets de teste e não são
escaláveis para a produção.

6. Desafios em projetos de Machine Learning
Como simplificar o processo de
exploração, construção, teste e
implantação de projetos de machine
learning de forma reproduzível?

7. Artificial Intelligence Platform
github.com/marvin-ai

8. Marvin???
● Início na B2W Digital em 2016 para atender problemas internos
● Lançado como código aberto em 09/2017 com a licença Apache 2
● Artigo publicado na conferência Papis.io (Boston) em 09/2017*
● Quatro versões lançadas desde 09/2017
● Meetup criado em 01/2018
● Primeira versão do projeto de AutoML em 05/2018
● Aceito pela Apache S. F. para incubação em 08/2018**
● Comunidade está crescendo...
* http://proceedings.mlr.press/v82/miguel18a.html
** http://incubator.apache.org/projects/marvin.html

9. AutoML
Automação em Machine
Learning
Hands On!

10. AutoML???
“AutoML é a automação da automatização de automação” [1]
[1] - https://www.kdnuggets.com/2017/01/current-state-automated-machine-learning.html

11. AutoML???
Métodos
● Algoritmos Genéticos
● Otimização Bayesiana
● Aprendizado por reforço
● Outros..
Escopo
● Modelo e hyperparametros
● Pré-processamentos

12. AutoML e Marvin
Propósitos
● Base line para o cientista de dados
● MVP ou Piloto para pequenas equipes
● Prova de conceito para o negócio
Em breve
● Projeto de pesquisa com a UFSCar
● Interface gráfica

13. AutoML
Automação em Machine
Learning
Arquitetura

14. AutoML UI
[draw inspired on] - https://evincedev.com/blog/mean-stack-architecture/
Client
Angular.io 6
Request/Display
results for end user
Node Server
Hapi v17
Handle client request
and server the first
level APIs
Mongoose
Library to resolve
MongoDB connection
and queries
Mongo
DB
Marvin AutoML
API
Marvin API to handle
automl requests

15. Artificial Intelligence Platform
Fork no Github.com/marvin-ai
e contribua!
Estamos contratando! Entre em
contato com
recrutamento.bitsp@b2wdigital.com

16. OBRIGADO!