SlideShare uma empresa Scribd logo
1 de 24
"Uma breve introdução ao
Big Data e Inteligência
Artificial"
Leonardo de Souza Marques
Curso de Especialização em Inteligência Artificial Aplicada (UFPR),
Graduado em Análise e Desenvolvimento de Sistemas (UFPR),
Cientista e Engenheiro de Dados, Especialista em Sistemas
Cognitivos.
Trabalho com visão computacional, principalmente com identificação
e classificação de objetos, aumento de resolução de imagens de
vídeo, RGBD. Também com NLP, text to speech, speech to text e
resumo (inglês/português). Projeção e classificação de dados
temporais, científicos, financeiros, biológicos entre outros.
Linkedin
Alessandro de Oliveira Binhara
É Engenheiro de Software com 24 anos de experiência na indústria de
TI com foco em ambiente open source como Hadoop e Projeto Mono.
Amplo conhecimento em Bigdata ao longo de +12 anos trabalhando
em Apache Hadoop e Hadoop EcoSystem para infraestrutura de
processamento e armazenamento de Bigdata. Instalou e colocou em
produção no Buscapé um dos primeiro cluster em Hadoop.
Atualmente é engenheiro de dados sênior da RDStation, datalake
hadoop da RDStation virou case internacional na Oracle Cloud em
2022.
Linkedin
Por que???
BigData ???
Cloud
Computing??
Por que??? BigData ??? CloudComputing??
● Em 2001 :
○ Centenas de Milhares de dólares para sequenciar Um Gene
● Atualmente: menos de 6 mil dólares por Gene
● Atualmente o sequenciamento gera cerca de 50 petabytes de dados.
● 1 semana para decodificar 1 Gene
● Atualmente:
○ Se Faz o sequenciamento de 100 Gene por dia
O que é BigData ???
2023 - 120
zettabytes
2013 - 9 zettabytes
Curiosidades sobre ZetaBytes
O volume de
dados criados
mundialmente
em 2023 é de
120
zettabytes
Diariamente: 328,77 milhões TB que é equivalente: 0,33 ZB/dia
Considerando que uma Bíblia tem
cerca de 5 megabytes em formato
digital, teríamos aproximadamente
65,7 bilhões de Bíblias sendo
escritas todos os dia!
O que é Um Cientista de Dados ?
O cientista de dados é um especialista em análise de informações. A
característica mais importante desse profissional, portanto, é a
capacidade analítica. Por isso, quem tem uma sólida formação em
matemática e lógica, como engenheiros, economistas, estatísticos e
matemáticos, é forte candidato a se sair bem na carreira.
Salários nos EUA (2023):
● Cientista de Dados:
● Média: $127K
● Faixa: $79K - $207K
● Engenheiro de Dados:
● Média: $117K
● Faixa: $76K - $184K
Porque ?? Quando ???
Não confunda os conceitos
● CloudComputing – computação em nuvem
● BigData – Armazenamento e Processamento de Grandes Volumes de Dados
● BI Businnes Inteligence – Apresentar a informações de forma clara, sendo a fonte de
inteligência para os negócios
● Cientista de Dados – é a pessoa capaz de orquestrar todos esses conceitos
apresentando o valor que a empresa quer das informações.
● Engenheiro de Dados - é a pessoa que trabalha com a infra estrutuar de hardware e
software para suportar toda a manipulação de dados
Mercado em 2024
● Volume de Mercado:
○ $84 bilhões
● Mercado de big data analytics:
○ $349,56 bilhões
● Crescimento do Mercado:
○ 9%
O que é Inteligência Artificial ?
Refere-se à capacidade de sistemas computacionais de realizar
tarefas o que geralmente exigem inteligência humana.
Inclui
● Reconhecimento de padrões
● Aprendizado
● Planejamento
● Tomada de decisões.
Como nasceu a
inteligência artificial ???
● Fundação Filosófica:
○ Autômatos e máquinas pensantes desde a Antiguidade.
● Base Matemática:
○ Lógica booleana e teorias de computabilidade (Gödel, Church, Turing).
● Alan Turing:
○ Introduz máquina universal e propõe Teste de Turing em 1950.
● Advento dos Computadores:
○ Plataforma para testar ideias de IA pós-Segunda Guerra.
● Conferência de Dartmouth (1956):
○ Nascimento oficial da IA;
○ Termo "inteligência artificial" cunhado por John McCarthy.
● Investimento e Pesquisa:
○ Otimismo inicial e estabelecimento da IA como campo acadêmico. Teste de Turing
Marcos históricos
Inteligência Artificial ?
● 1950: Teste de Turing proposto por Alan Turing.
● 1956: Termo "inteligência artificial" cunhado na Conferência de Dartmouth por John McCarthy .
● 1960s: Primeiros programas conversacionais (ELIZA) e robôs (Shakey) primeiro robot move guiado por IA.
● 1980s:
a. Ascensão dos sistemas especialistas; retropropagação revigora redes neurais.
b. Avanços nos sistemas baseados em regras que são capazes de realizar tarefas específicas em níveis comparáveis
ou, em alguns casos, superiores aos humanos.
c. A introdução do algoritmo de retropropagação revigora o campo das redes neurais.
● 1997: Deep Blue da IBM derrota campeão mundial de xadrez.
● 2000:
a. Sistemas de Recomendação: Grandes empresas, como Amazon e Netflix, começam a usar IA para recomendar
produtos ou filmes.
b. Robótica e Automação: Robôs como o Roomba da iRobot começam a fazer parte da vida cotidiana.
● 2010s: Avanços em deep learning; AlphaGo vence no Go; introdução de BERT .
● 2020s: Modelos linguísticos avançados como GPT da OpenAI.
O que é um Neurônio Artificial ?
Definição
Representação matemática de um neurônio biológico.
Entradas
Dados recebidos pelo neurônio (como dendrites).
Pesos
Valores ajustáveis que determinam a importância da entrada.
Função de Agregação
Soma ponderada das entradas
Função de Ativação
Transforma a soma em uma saída
Saída
Resultado final (como axônio em neurônios biológicos).
Funcionamento Básico:
1) Cada valor de entrada é multiplicado pelo seu peso.
2) Os produtos resultantes são somados.
3) O valor somado é passado pela função de ativação para
produzir a saída final.
McCulloch & Pitts (1943): Primeiro modelo matemático de neurônio.
O que é uma Rede Neural ?
É um modelo computacional inspirado na forma como as redes neurais
biológicas funcionam no cérebro humano.
Funcionamento Básico:
1)Os dados são introduzidos na camada de entrada.
2)São processados sequencialmente através das camadas.
3)A transformação ocorre por meio da soma ponderada das
entradas, seguida pela função de ativação.
4)A camada de saída fornece o resultado final.
Pode ser uma classificação, uma regressão ou qualquer outro tipo
Como é o treinamento
de uma rede neural ?
Inicialização
Comece com pesos aleatórios pequenos.
Feedforward
Propague entradas pela rede até a saída.
Cálculo da Perda
Determine a diferença entre saída prevista e real.
Backpropagation
Calcule contribuição de cada peso para o erro.
Atualização de Pesos
Ajuste pesos usando algoritmos como descenso de gradiente.
Iteração
Repita processo para muitas entradas e épocas.
Validação/Teste
Avalia desempenho em dados não usados no treinamento.
Demonstração
Treinamento para reconhecimento de caracteres.
Muito utilizado em radares fotográficos para
reconhecimento de placas
O que é Machine Learning
Aprendizado de Máquina
É o processo que
permitir que
computadores
realizem tarefas
sem programação
explícita através do
aprendizado a partir de
exemplos de dados.
E o que é o GPTChat ?
E o que é o GPTChat ?
(processo de treinamento)
IA Sistemas de Recomendação
Vitrines inteligentes para lojas online, Aumento em 60% o
volume de faturamento.
75% do que é visto é indicado pelo sistemas de
recomendação.
Ela seleciona filmes, cria conteúdo e tomar decisões
multimilionárias com a IA.
Case: IA na na Netflix
75% do que é visto é indicado pelo sistemas de recomendação.
Exemplos de métricas
● Quando você pausa, retrocede ou avança rapidamente
● A data e horas , onde (CEP)
● Quando você pausa e sai (e se voltar)
● As avaliações dadas (cerca de 4 milhões por dia)
● Pesquisas (cerca de 3 milhões por dia)
A Netflix também analisa os dados dos filmes. Eles tiram várias “capturas de tela” para observar as características “no momento”. A
Netflix confirmou que sabe quando os créditos começam a rolar; mas há muito mais do que apenas isso. Alguns imaginaram que essas
características podem ser o volume, as cores e o cenário que ajudam a Netflix a descobrir do que os usuários gostam.
Ela seleciona filmes, cria conteúdo e tomar decisões multimilionárias com a IA.
Qual grande
questão ?
A IA chegou!
Mas será que as
empresas estão
preparadas ???
Qual a sua opinião ?
Obrigado - Perguntas ???
Prompts usados nessa palestra
Escolha do título da palestra
https://chat.openai.com/share/0b077281-a254-4c57-ad8c-8cbb40ce4266
Promtps usado para ajudar na montagem dos slides
https://chat.openai.com/share/09fb445c-a1e9-4e09-9943-ee7069a2422a

Mais conteúdo relacionado

Semelhante a Uma breve introdução ao Big Data e Inteligência Artificial.pptx

Data Developer - Engenharia de Dados em um time de Data Science - Uai python2015
Data Developer - Engenharia de Dados em um time de Data Science - Uai python2015Data Developer - Engenharia de Dados em um time de Data Science - Uai python2015
Data Developer - Engenharia de Dados em um time de Data Science - Uai python2015Bruno Rocha
 
C.E.S.A.R - Prototipación Electronica en Diseño
C.E.S.A.R - Prototipación Electronica en DiseñoC.E.S.A.R - Prototipación Electronica en Diseño
C.E.S.A.R - Prototipación Electronica en DiseñoTiago Barros
 
Big Data e Data Science - Tecnologia e Mercado
Big Data e Data Science - Tecnologia e MercadoBig Data e Data Science - Tecnologia e Mercado
Big Data e Data Science - Tecnologia e MercadoHélio Silva
 
Roda de Conversa - Inteligência Artificial & Internet das Coisas
Roda de Conversa - Inteligência Artificial & Internet das CoisasRoda de Conversa - Inteligência Artificial & Internet das Coisas
Roda de Conversa - Inteligência Artificial & Internet das CoisasFelipe Mota
 
Data Scientist: Onde vive? Como se reproduz? De que se alimenta?
Data Scientist: Onde vive? Como se reproduz? De que se alimenta?Data Scientist: Onde vive? Como se reproduz? De que se alimenta?
Data Scientist: Onde vive? Como se reproduz? De que se alimenta?Ludimila Gonçalves
 
Machine learning java ce conference 2012 - fortaleza ce
Machine learning java ce conference 2012 - fortaleza ceMachine learning java ce conference 2012 - fortaleza ce
Machine learning java ce conference 2012 - fortaleza ceLuca Bastos
 
Inteligência Artificial e suas aplicações - A experiência do TECPAR
Inteligência Artificial e suas aplicações  - A experiência do TECPARInteligência Artificial e suas aplicações  - A experiência do TECPAR
Inteligência Artificial e suas aplicações - A experiência do TECPARBruno Campagnolo
 
Introduction to Data Science in IoT Projects.
Introduction to Data Science in IoT Projects.Introduction to Data Science in IoT Projects.
Introduction to Data Science in IoT Projects.Roberto Williams Batista
 
BIGDATA: Da teoria à Pratica
BIGDATA: Da teoria à PraticaBIGDATA: Da teoria à Pratica
BIGDATA: Da teoria à PraticaDaniel Checchia
 
Plataforma de BigData da Globo.com (Sistema de Recomendação) @ Rio BigData Me...
Plataforma de BigData da Globo.com (Sistema de Recomendação) @ Rio BigData Me...Plataforma de BigData da Globo.com (Sistema de Recomendação) @ Rio BigData Me...
Plataforma de BigData da Globo.com (Sistema de Recomendação) @ Rio BigData Me...Ciro Cavani
 
Algoritmos, Inteligência Artificial e Políticas Públicas
Algoritmos, Inteligência Artificial e Políticas PúblicasAlgoritmos, Inteligência Artificial e Políticas Públicas
Algoritmos, Inteligência Artificial e Políticas PúblicasNathalia Sautchuk Patricio
 
Inteligência Artificial e suas aplicações - A experiência do TECPAR
Inteligência Artificial e suas aplicações - A experiência do TECPARInteligência Artificial e suas aplicações - A experiência do TECPAR
Inteligência Artificial e suas aplicações - A experiência do TECPARBruno Campagnolo
 
Capítulo 1 Inteligência Artificial RUSSELL
Capítulo 1 Inteligência Artificial RUSSELLCapítulo 1 Inteligência Artificial RUSSELL
Capítulo 1 Inteligência Artificial RUSSELLWellington Oliveira
 
Palestra: Cientista de Dados – Dominando o Big Data com Software Livre
Palestra: Cientista de Dados – Dominando o Big Data com Software LivrePalestra: Cientista de Dados – Dominando o Big Data com Software Livre
Palestra: Cientista de Dados – Dominando o Big Data com Software LivreAmbiente Livre
 
Processamento e Análise de Dados em Tempo Real com Python, Kafka e ElasticSearch
Processamento e Análise de Dados em Tempo Real com Python, Kafka e ElasticSearchProcessamento e Análise de Dados em Tempo Real com Python, Kafka e ElasticSearch
Processamento e Análise de Dados em Tempo Real com Python, Kafka e ElasticSearchCicero Joasyo Mateus de Moura
 

Semelhante a Uma breve introdução ao Big Data e Inteligência Artificial.pptx (20)

Data Science For Dummies From a Dummy
Data Science For Dummies From a DummyData Science For Dummies From a Dummy
Data Science For Dummies From a Dummy
 
Data Developer - Engenharia de Dados em um time de Data Science - Uai python2015
Data Developer - Engenharia de Dados em um time de Data Science - Uai python2015Data Developer - Engenharia de Dados em um time de Data Science - Uai python2015
Data Developer - Engenharia de Dados em um time de Data Science - Uai python2015
 
4
44
4
 
C.E.S.A.R - Prototipación Electronica en Diseño
C.E.S.A.R - Prototipación Electronica en DiseñoC.E.S.A.R - Prototipación Electronica en Diseño
C.E.S.A.R - Prototipación Electronica en Diseño
 
Big Data e Data Science - Tecnologia e Mercado
Big Data e Data Science - Tecnologia e MercadoBig Data e Data Science - Tecnologia e Mercado
Big Data e Data Science - Tecnologia e Mercado
 
Roda de Conversa - Inteligência Artificial & Internet das Coisas
Roda de Conversa - Inteligência Artificial & Internet das CoisasRoda de Conversa - Inteligência Artificial & Internet das Coisas
Roda de Conversa - Inteligência Artificial & Internet das Coisas
 
Big data e data science
Big data e data scienceBig data e data science
Big data e data science
 
Data Scientist: Onde vive? Como se reproduz? De que se alimenta?
Data Scientist: Onde vive? Como se reproduz? De que se alimenta?Data Scientist: Onde vive? Como se reproduz? De que se alimenta?
Data Scientist: Onde vive? Como se reproduz? De que se alimenta?
 
Machine learning java ce conference 2012 - fortaleza ce
Machine learning java ce conference 2012 - fortaleza ceMachine learning java ce conference 2012 - fortaleza ce
Machine learning java ce conference 2012 - fortaleza ce
 
Inteligência Artificial e suas aplicações - A experiência do TECPAR
Inteligência Artificial e suas aplicações  - A experiência do TECPARInteligência Artificial e suas aplicações  - A experiência do TECPAR
Inteligência Artificial e suas aplicações - A experiência do TECPAR
 
Introduction to Data Science in IoT Projects.
Introduction to Data Science in IoT Projects.Introduction to Data Science in IoT Projects.
Introduction to Data Science in IoT Projects.
 
BIGDATA: Da teoria à Pratica
BIGDATA: Da teoria à PraticaBIGDATA: Da teoria à Pratica
BIGDATA: Da teoria à Pratica
 
Dismistificando deep learning
Dismistificando deep learningDismistificando deep learning
Dismistificando deep learning
 
Plataforma de BigData da Globo.com (Sistema de Recomendação) @ Rio BigData Me...
Plataforma de BigData da Globo.com (Sistema de Recomendação) @ Rio BigData Me...Plataforma de BigData da Globo.com (Sistema de Recomendação) @ Rio BigData Me...
Plataforma de BigData da Globo.com (Sistema de Recomendação) @ Rio BigData Me...
 
Algoritmos, Inteligência Artificial e Políticas Públicas
Algoritmos, Inteligência Artificial e Políticas PúblicasAlgoritmos, Inteligência Artificial e Políticas Públicas
Algoritmos, Inteligência Artificial e Políticas Públicas
 
Inteligência Artificial e suas aplicações - A experiência do TECPAR
Inteligência Artificial e suas aplicações - A experiência do TECPARInteligência Artificial e suas aplicações - A experiência do TECPAR
Inteligência Artificial e suas aplicações - A experiência do TECPAR
 
Capítulo 1 Inteligência Artificial RUSSELL
Capítulo 1 Inteligência Artificial RUSSELLCapítulo 1 Inteligência Artificial RUSSELL
Capítulo 1 Inteligência Artificial RUSSELL
 
Palestra: Cientista de Dados – Dominando o Big Data com Software Livre
Palestra: Cientista de Dados – Dominando o Big Data com Software LivrePalestra: Cientista de Dados – Dominando o Big Data com Software Livre
Palestra: Cientista de Dados – Dominando o Big Data com Software Livre
 
Processamento e Análise de Dados em Tempo Real com Python, Kafka e ElasticSearch
Processamento e Análise de Dados em Tempo Real com Python, Kafka e ElasticSearchProcessamento e Análise de Dados em Tempo Real com Python, Kafka e ElasticSearch
Processamento e Análise de Dados em Tempo Real com Python, Kafka e ElasticSearch
 
Treinamento hadoop - dia1
Treinamento hadoop - dia1Treinamento hadoop - dia1
Treinamento hadoop - dia1
 

Mais de Alessandro Binhara

BigData e internte das coisas aplicada a engenharia
BigData e internte das coisas aplicada a engenhariaBigData e internte das coisas aplicada a engenharia
BigData e internte das coisas aplicada a engenhariaAlessandro Binhara
 
Case RDStation: Construindo DataLakes com Apache Hadoop em cloud agnóstica
Case RDStation: Construindo DataLakes com Apache Hadoop em cloud agnósticaCase RDStation: Construindo DataLakes com Apache Hadoop em cloud agnóstica
Case RDStation: Construindo DataLakes com Apache Hadoop em cloud agnósticaAlessandro Binhara
 
Latinoware 2019 - DEsenvolvimento mobile em Nivel jedi
Latinoware 2019 - DEsenvolvimento mobile em Nivel jediLatinoware 2019 - DEsenvolvimento mobile em Nivel jedi
Latinoware 2019 - DEsenvolvimento mobile em Nivel jediAlessandro Binhara
 
2019 latinoware - O mundo novo da realidade virtual
2019 latinoware - O mundo novo da realidade virtual2019 latinoware - O mundo novo da realidade virtual
2019 latinoware - O mundo novo da realidade virtualAlessandro Binhara
 
Realidade Virtual e a Ciência de Dados -latinoware
Realidade Virtual e a Ciência de Dados -latinowareRealidade Virtual e a Ciência de Dados -latinoware
Realidade Virtual e a Ciência de Dados -latinowareAlessandro Binhara
 
Realidade Virtual e a Ciência de Dados
Realidade Virtual e a Ciência de DadosRealidade Virtual e a Ciência de Dados
Realidade Virtual e a Ciência de DadosAlessandro Binhara
 
A IMPORTÂNCIA DA PARTICIPAÇÃO NA GESTÃO DE PROJETOS TECNOLÓGICOS INOVADORES:...
A IMPORTÂNCIA DA PARTICIPAÇÃO NA  GESTÃO DE PROJETOS TECNOLÓGICOS INOVADORES:...A IMPORTÂNCIA DA PARTICIPAÇÃO NA  GESTÃO DE PROJETOS TECNOLÓGICOS INOVADORES:...
A IMPORTÂNCIA DA PARTICIPAÇÃO NA GESTÃO DE PROJETOS TECNOLÓGICOS INOVADORES:...Alessandro Binhara
 
BIG DATA & IoT: Tecnologias e  Aplicações
BIG DATA & IoT: Tecnologias e  AplicaçõesBIG DATA & IoT: Tecnologias e  Aplicações
BIG DATA & IoT: Tecnologias e  AplicaçõesAlessandro Binhara
 
Introduçãoo aws, escalando uma aplicação Web
Introduçãoo aws, escalando uma aplicação WebIntroduçãoo aws, escalando uma aplicação Web
Introduçãoo aws, escalando uma aplicação WebAlessandro Binhara
 
Desenvolvimento de Games para Mobile.
Desenvolvimento de Games para Mobile.Desenvolvimento de Games para Mobile.
Desenvolvimento de Games para Mobile.Alessandro Binhara
 
Curso C# em Mono - Orientação a Objeto Basico
Curso C# em Mono - Orientação a Objeto BasicoCurso C# em Mono - Orientação a Objeto Basico
Curso C# em Mono - Orientação a Objeto BasicoAlessandro Binhara
 
Apresentação Final a FINEP Projeto MonoBasic
Apresentação Final a FINEP Projeto MonoBasicApresentação Final a FINEP Projeto MonoBasic
Apresentação Final a FINEP Projeto MonoBasicAlessandro Binhara
 
App CrossMobile com C# para Android, Iphone e WindowsPhone
App CrossMobile com C# para Android, Iphone e WindowsPhoneApp CrossMobile com C# para Android, Iphone e WindowsPhone
App CrossMobile com C# para Android, Iphone e WindowsPhoneAlessandro Binhara
 
Xamarin Interop - hands on android -
Xamarin Interop - hands on android - Xamarin Interop - hands on android -
Xamarin Interop - hands on android - Alessandro Binhara
 

Mais de Alessandro Binhara (20)

BigData e internte das coisas aplicada a engenharia
BigData e internte das coisas aplicada a engenhariaBigData e internte das coisas aplicada a engenharia
BigData e internte das coisas aplicada a engenharia
 
Case RDStation: Construindo DataLakes com Apache Hadoop em cloud agnóstica
Case RDStation: Construindo DataLakes com Apache Hadoop em cloud agnósticaCase RDStation: Construindo DataLakes com Apache Hadoop em cloud agnóstica
Case RDStation: Construindo DataLakes com Apache Hadoop em cloud agnóstica
 
Latinoware 2019 - DEsenvolvimento mobile em Nivel jedi
Latinoware 2019 - DEsenvolvimento mobile em Nivel jediLatinoware 2019 - DEsenvolvimento mobile em Nivel jedi
Latinoware 2019 - DEsenvolvimento mobile em Nivel jedi
 
2019 latinoware - O mundo novo da realidade virtual
2019 latinoware - O mundo novo da realidade virtual2019 latinoware - O mundo novo da realidade virtual
2019 latinoware - O mundo novo da realidade virtual
 
Realidade Virtual e a Ciência de Dados -latinoware
Realidade Virtual e a Ciência de Dados -latinowareRealidade Virtual e a Ciência de Dados -latinoware
Realidade Virtual e a Ciência de Dados -latinoware
 
Realidade Virtual e a Ciência de Dados
Realidade Virtual e a Ciência de DadosRealidade Virtual e a Ciência de Dados
Realidade Virtual e a Ciência de Dados
 
A IMPORTÂNCIA DA PARTICIPAÇÃO NA GESTÃO DE PROJETOS TECNOLÓGICOS INOVADORES:...
A IMPORTÂNCIA DA PARTICIPAÇÃO NA  GESTÃO DE PROJETOS TECNOLÓGICOS INOVADORES:...A IMPORTÂNCIA DA PARTICIPAÇÃO NA  GESTÃO DE PROJETOS TECNOLÓGICOS INOVADORES:...
A IMPORTÂNCIA DA PARTICIPAÇÃO NA GESTÃO DE PROJETOS TECNOLÓGICOS INOVADORES:...
 
Curso de Férias - Robótica
Curso de Férias -  Robótica Curso de Férias -  Robótica
Curso de Férias - Robótica
 
BIG DATA & IoT: Tecnologias e  Aplicações
BIG DATA & IoT: Tecnologias e  AplicaçõesBIG DATA & IoT: Tecnologias e  Aplicações
BIG DATA & IoT: Tecnologias e  Aplicações
 
Introduçãoo aws, escalando uma aplicação Web
Introduçãoo aws, escalando uma aplicação WebIntroduçãoo aws, escalando uma aplicação Web
Introduçãoo aws, escalando uma aplicação Web
 
Xamarin plataform
Xamarin plataformXamarin plataform
Xamarin plataform
 
Desenvolvimento de Games para Mobile.
Desenvolvimento de Games para Mobile.Desenvolvimento de Games para Mobile.
Desenvolvimento de Games para Mobile.
 
Games imersivos
Games imersivosGames imersivos
Games imersivos
 
Abertura - interopmix2014
Abertura - interopmix2014Abertura - interopmix2014
Abertura - interopmix2014
 
Curso C# em Mono - Orientação a Objeto Basico
Curso C# em Mono - Orientação a Objeto BasicoCurso C# em Mono - Orientação a Objeto Basico
Curso C# em Mono - Orientação a Objeto Basico
 
Treinamento csharp mono
Treinamento csharp monoTreinamento csharp mono
Treinamento csharp mono
 
Int305 projeto mono-final
Int305 projeto mono-finalInt305 projeto mono-final
Int305 projeto mono-final
 
Apresentação Final a FINEP Projeto MonoBasic
Apresentação Final a FINEP Projeto MonoBasicApresentação Final a FINEP Projeto MonoBasic
Apresentação Final a FINEP Projeto MonoBasic
 
App CrossMobile com C# para Android, Iphone e WindowsPhone
App CrossMobile com C# para Android, Iphone e WindowsPhoneApp CrossMobile com C# para Android, Iphone e WindowsPhone
App CrossMobile com C# para Android, Iphone e WindowsPhone
 
Xamarin Interop - hands on android -
Xamarin Interop - hands on android - Xamarin Interop - hands on android -
Xamarin Interop - hands on android -
 

Uma breve introdução ao Big Data e Inteligência Artificial.pptx

  • 1. "Uma breve introdução ao Big Data e Inteligência Artificial"
  • 2. Leonardo de Souza Marques Curso de Especialização em Inteligência Artificial Aplicada (UFPR), Graduado em Análise e Desenvolvimento de Sistemas (UFPR), Cientista e Engenheiro de Dados, Especialista em Sistemas Cognitivos. Trabalho com visão computacional, principalmente com identificação e classificação de objetos, aumento de resolução de imagens de vídeo, RGBD. Também com NLP, text to speech, speech to text e resumo (inglês/português). Projeção e classificação de dados temporais, científicos, financeiros, biológicos entre outros. Linkedin
  • 3. Alessandro de Oliveira Binhara É Engenheiro de Software com 24 anos de experiência na indústria de TI com foco em ambiente open source como Hadoop e Projeto Mono. Amplo conhecimento em Bigdata ao longo de +12 anos trabalhando em Apache Hadoop e Hadoop EcoSystem para infraestrutura de processamento e armazenamento de Bigdata. Instalou e colocou em produção no Buscapé um dos primeiro cluster em Hadoop. Atualmente é engenheiro de dados sênior da RDStation, datalake hadoop da RDStation virou case internacional na Oracle Cloud em 2022. Linkedin
  • 5. Por que??? BigData ??? CloudComputing?? ● Em 2001 : ○ Centenas de Milhares de dólares para sequenciar Um Gene ● Atualmente: menos de 6 mil dólares por Gene ● Atualmente o sequenciamento gera cerca de 50 petabytes de dados. ● 1 semana para decodificar 1 Gene ● Atualmente: ○ Se Faz o sequenciamento de 100 Gene por dia
  • 6. O que é BigData ??? 2023 - 120 zettabytes 2013 - 9 zettabytes
  • 7. Curiosidades sobre ZetaBytes O volume de dados criados mundialmente em 2023 é de 120 zettabytes Diariamente: 328,77 milhões TB que é equivalente: 0,33 ZB/dia Considerando que uma Bíblia tem cerca de 5 megabytes em formato digital, teríamos aproximadamente 65,7 bilhões de Bíblias sendo escritas todos os dia!
  • 8. O que é Um Cientista de Dados ? O cientista de dados é um especialista em análise de informações. A característica mais importante desse profissional, portanto, é a capacidade analítica. Por isso, quem tem uma sólida formação em matemática e lógica, como engenheiros, economistas, estatísticos e matemáticos, é forte candidato a se sair bem na carreira. Salários nos EUA (2023): ● Cientista de Dados: ● Média: $127K ● Faixa: $79K - $207K ● Engenheiro de Dados: ● Média: $117K ● Faixa: $76K - $184K
  • 10. Não confunda os conceitos ● CloudComputing – computação em nuvem ● BigData – Armazenamento e Processamento de Grandes Volumes de Dados ● BI Businnes Inteligence – Apresentar a informações de forma clara, sendo a fonte de inteligência para os negócios ● Cientista de Dados – é a pessoa capaz de orquestrar todos esses conceitos apresentando o valor que a empresa quer das informações. ● Engenheiro de Dados - é a pessoa que trabalha com a infra estrutuar de hardware e software para suportar toda a manipulação de dados
  • 11. Mercado em 2024 ● Volume de Mercado: ○ $84 bilhões ● Mercado de big data analytics: ○ $349,56 bilhões ● Crescimento do Mercado: ○ 9%
  • 12. O que é Inteligência Artificial ? Refere-se à capacidade de sistemas computacionais de realizar tarefas o que geralmente exigem inteligência humana. Inclui ● Reconhecimento de padrões ● Aprendizado ● Planejamento ● Tomada de decisões.
  • 13. Como nasceu a inteligência artificial ??? ● Fundação Filosófica: ○ Autômatos e máquinas pensantes desde a Antiguidade. ● Base Matemática: ○ Lógica booleana e teorias de computabilidade (Gödel, Church, Turing). ● Alan Turing: ○ Introduz máquina universal e propõe Teste de Turing em 1950. ● Advento dos Computadores: ○ Plataforma para testar ideias de IA pós-Segunda Guerra. ● Conferência de Dartmouth (1956): ○ Nascimento oficial da IA; ○ Termo "inteligência artificial" cunhado por John McCarthy. ● Investimento e Pesquisa: ○ Otimismo inicial e estabelecimento da IA como campo acadêmico. Teste de Turing
  • 14. Marcos históricos Inteligência Artificial ? ● 1950: Teste de Turing proposto por Alan Turing. ● 1956: Termo "inteligência artificial" cunhado na Conferência de Dartmouth por John McCarthy . ● 1960s: Primeiros programas conversacionais (ELIZA) e robôs (Shakey) primeiro robot move guiado por IA. ● 1980s: a. Ascensão dos sistemas especialistas; retropropagação revigora redes neurais. b. Avanços nos sistemas baseados em regras que são capazes de realizar tarefas específicas em níveis comparáveis ou, em alguns casos, superiores aos humanos. c. A introdução do algoritmo de retropropagação revigora o campo das redes neurais. ● 1997: Deep Blue da IBM derrota campeão mundial de xadrez. ● 2000: a. Sistemas de Recomendação: Grandes empresas, como Amazon e Netflix, começam a usar IA para recomendar produtos ou filmes. b. Robótica e Automação: Robôs como o Roomba da iRobot começam a fazer parte da vida cotidiana. ● 2010s: Avanços em deep learning; AlphaGo vence no Go; introdução de BERT . ● 2020s: Modelos linguísticos avançados como GPT da OpenAI.
  • 15. O que é um Neurônio Artificial ? Definição Representação matemática de um neurônio biológico. Entradas Dados recebidos pelo neurônio (como dendrites). Pesos Valores ajustáveis que determinam a importância da entrada. Função de Agregação Soma ponderada das entradas Função de Ativação Transforma a soma em uma saída Saída Resultado final (como axônio em neurônios biológicos). Funcionamento Básico: 1) Cada valor de entrada é multiplicado pelo seu peso. 2) Os produtos resultantes são somados. 3) O valor somado é passado pela função de ativação para produzir a saída final. McCulloch & Pitts (1943): Primeiro modelo matemático de neurônio.
  • 16. O que é uma Rede Neural ? É um modelo computacional inspirado na forma como as redes neurais biológicas funcionam no cérebro humano. Funcionamento Básico: 1)Os dados são introduzidos na camada de entrada. 2)São processados sequencialmente através das camadas. 3)A transformação ocorre por meio da soma ponderada das entradas, seguida pela função de ativação. 4)A camada de saída fornece o resultado final. Pode ser uma classificação, uma regressão ou qualquer outro tipo
  • 17. Como é o treinamento de uma rede neural ? Inicialização Comece com pesos aleatórios pequenos. Feedforward Propague entradas pela rede até a saída. Cálculo da Perda Determine a diferença entre saída prevista e real. Backpropagation Calcule contribuição de cada peso para o erro. Atualização de Pesos Ajuste pesos usando algoritmos como descenso de gradiente. Iteração Repita processo para muitas entradas e épocas. Validação/Teste Avalia desempenho em dados não usados no treinamento. Demonstração Treinamento para reconhecimento de caracteres. Muito utilizado em radares fotográficos para reconhecimento de placas
  • 18. O que é Machine Learning Aprendizado de Máquina É o processo que permitir que computadores realizem tarefas sem programação explícita através do aprendizado a partir de exemplos de dados.
  • 19. E o que é o GPTChat ?
  • 20. E o que é o GPTChat ? (processo de treinamento)
  • 21. IA Sistemas de Recomendação Vitrines inteligentes para lojas online, Aumento em 60% o volume de faturamento. 75% do que é visto é indicado pelo sistemas de recomendação. Ela seleciona filmes, cria conteúdo e tomar decisões multimilionárias com a IA.
  • 22. Case: IA na na Netflix 75% do que é visto é indicado pelo sistemas de recomendação. Exemplos de métricas ● Quando você pausa, retrocede ou avança rapidamente ● A data e horas , onde (CEP) ● Quando você pausa e sai (e se voltar) ● As avaliações dadas (cerca de 4 milhões por dia) ● Pesquisas (cerca de 3 milhões por dia) A Netflix também analisa os dados dos filmes. Eles tiram várias “capturas de tela” para observar as características “no momento”. A Netflix confirmou que sabe quando os créditos começam a rolar; mas há muito mais do que apenas isso. Alguns imaginaram que essas características podem ser o volume, as cores e o cenário que ajudam a Netflix a descobrir do que os usuários gostam. Ela seleciona filmes, cria conteúdo e tomar decisões multimilionárias com a IA.
  • 23. Qual grande questão ? A IA chegou! Mas será que as empresas estão preparadas ??? Qual a sua opinião ?
  • 24. Obrigado - Perguntas ??? Prompts usados nessa palestra Escolha do título da palestra https://chat.openai.com/share/0b077281-a254-4c57-ad8c-8cbb40ce4266 Promtps usado para ajudar na montagem dos slides https://chat.openai.com/share/09fb445c-a1e9-4e09-9943-ee7069a2422a

Notas do Editor

  1. 65 Big Data Statistics For 2024 (Facts, Trends & More) (demandsage.com)
  2. 65 Big Data Statistics For 2024 (Facts, Trends & More) (demandsage.com)
  3. Aprendizado de Máquina: Subcampo da IA onde máquinas aprendem a partir de dados. Reconhecimento de Padrões: IA identifica e utiliza padrões em dados. Processamento de Linguagem Natural: Compreensão e geração de linguagem humana por máquinas. Algumas Aplicações na Engenharia Análise de Estruturas Otimização de Projetos Gestão de Tráfego Automação de Equipamentos Análise de Impacto Ambiental Simulações
  4. A história da inteligência artificial (IA) abrange várias décadas e é marcada por avanços teóricos, desafios e reviravoltas tecnológicas. Aqui está uma visão cronológica dos momentos mais significativos: 1950s: Teste de Turing (1950): Alan Turing propõe um critério de "inteligência" para máquinas, conhecido como o Teste de Turing. Início dos Trabalhos (1956): John McCarthy cunha o termo "inteligência artificial" e organiza a Conferência de Dartmouth, marcando o início da pesquisa de IA como disciplina acadêmica. 1960s: Eliza (1964-1966): Joseph Weizenbaum cria ELIZA, um dos primeiros programas de computador que tenta simular uma conversa humana. Shakey (fim dos anos 1960): O primeiro robô móvel controlado por IA desenvolvido no Stanford Research Institute. 1970s: Marvin Minsky & Seymour Papert: Publicam "Perceptrons", que destaca as limitações das redes neurais da época, levando a uma redução no financiamento e interesse neste campo. 1980s: Sistemas Especialistas: Avanços nos sistemas baseados em regras que são capazes de realizar tarefas específicas em níveis comparáveis ou, em alguns casos, superiores aos humanos. Backpropagation (1986): A introdução do algoritmo de retropropagação revigora o campo das redes neurais. 1990s: Máquina de xadrez Deep Blue (1997): A IBM's Deep Blue derrota o campeão mundial de xadrez Garry Kasparov, um marco para a IA. 2000s: Sistemas de Recomendação: Grandes empresas, como Amazon e Netflix, começam a usar IA para recomendar produtos ou filmes. Robótica e Automação: Robôs como o Roomba da iRobot começam a fazer parte da vida cotidiana. 2010s: Deep Learning: Redes neurais profundas levam a avanços significativos em tarefas como reconhecimento de imagem e processamento de linguagem natural. AlphaGo (2016): O programa AlphaGo da DeepMind derrota o campeão mundial de Go, um jogo considerado muito mais complexo que o xadrez em termos de possibilidades. BERT (2018): Google introduz a arquitetura BERT, estabelecendo novos padrões no processamento de linguagem natural. 2020s: Modelos GPT: OpenAI lança modelos de linguagem GPT que mostram capacidades impressionantes em gerar texto coerente e útil. Estes são apenas alguns dos muitos marcos na história da IA. O campo tem sido caracterizado por avanços e desafios constantes, e sua trajetória mostra como a colaboração entre disciplinas – da matemática à neurociência – pode levar a inovações revolucionárias.
  5. Treinamento jogo dino do google https://www.youtube.com/watch?v=NZlIYr1slAk Componentes Neurônios organizados em camadas Operação Processa dados via soma ponderada e função de ativação. Ajuste Conexões com pesos ajustáveis durante treinamento. Variações Desde simples perceptrons até redes profundas
  6. https://www.youtube.com/watch?v=nF5XDp5d_FA Treinar uma rede neural envolve ajustar os pesos das conexões na rede de forma que ela possa realizar uma tarefa específica, como classificar imagens ou prever valores. O processo geralmente se baseia em um conjunto de dados de treinamento e utiliza algoritmos de otimização para minimizar um erro ou perda. Aqui está uma explicação simplificada do processo: Inicialização: Comece com um modelo de rede neural, que consiste em várias camadas de neurônios interconectados. Inicialize os pesos da rede, geralmente com valores pequenos e aleatórios. Feedforward: Para uma entrada específica do conjunto de treinamento, propague-a através da rede. Cada neurônio processa a entrada, e a passa adiante até a camada de saída. Cálculo da Perda: Use uma função de perda (ou função de custo) para calcular a diferença entre a saída prevista pela rede e a saída real (ou desejada). Por exemplo, a "entropia cruzada" é frequentemente usada em tarefas de classificação. Backpropagation (Retropropagação): Este é o coração do treinamento. Utiliza-se o gradiente do erro em relação a cada peso para atualizar os pesos da rede. Basicamente, ele calcula o quanto cada peso contribuiu para o erro usando a regra da cadeia do cálculo diferencial. Os pesos são então ajustados na direção que minimiza o erro. Atualização de Pesos: Com os gradientes calculados, os pesos são atualizados usando um algoritmo de otimização. O mais comum é o "descenso de gradiente" (e suas variantes, como o descenso de gradiente estocástico ou o Adam). Iteração: Repita os passos de feedforward, cálculo de perda, backpropagation e atualização de pesos para muitos exemplos no conjunto de treinamento, geralmente várias vezes (épocas). Validação e Teste: Periodicamente, a rede é testada em um conjunto de validação (diferente do conjunto de treinamento) para monitorar o desempenho e prevenir overfitting (sobreajuste). Após o treinamento, a rede é testada em um conjunto de testes para avaliar seu desempenho geral. O objetivo final do treinamento é ter uma rede que generalize bem para dados não vistos anteriormente, ou seja, que tenha um bom desempenho não apenas no conjunto de treinamento, mas também em novos dados.
  7. Tipos: Supervisionado: Treino com dados etiquetados. Não Supervisionado: Identifica padrões sem etiquetas. Por Reforço: Aprende via recompensas/punições. Aplicações: Reconhecimento de imagem, processamento de linguagem natural, sistemas de recomendação, previsões. Importância: Depende da qualidade e quantidade dos dados. Ferramentas: TensorFlow, PyTorch, Scikit-learn.
  8. O ChatGPT é uma tecnologia de conversação desenvolvida pela OpenAI, e é baseada em deeplearning, técnicas de supervisão humana, modelo GPT-3.5 e GPT-4.0 como fonte primária de LLM (large language model), e rankeamento. Utiliza filtros e pós-treinamento para rankear respostas Usa pós-fitros e treinamento baseado em rank para escolher respostas Hoje possui redirecionamentos pra outras tecnologias para resolver questoes matemáticas e de imagem.
  9. https://openai.com/blog/chatgpt
  10. https://chat.openai.com/share/c8457602-c8ad-4d37-89ae-fec088fd1bec
  11. QRCode https://blog.kissmetrics.com/how-netflix-uses-analytics/ Sistema de Recomendação: Since 75% of viewer activity is based on these suggestions, https://twitter.com/netflix/status/365577591563882496
  12. https://forms.gle/MMmoqtySScsisodv7 Iniciativa de Grupo de Estudo em Big Data e Ciência de Dados Ola pessoal estou criamdo um grupo de estudo focado em tecnologias emergentes no campo do Big Data e Ciência de Dados. O campo da tecnologia da informação está em constante evolução e expansão, apresentando oportunidades para os profissionais do setor. Com a ascensão e a prevalência do Big Data, surge uma necessidade de nos mantermos atualizados com as mais recentes tecnologias e práticas do setor. A criação deste grupo de estudo visa atender a essa necessidade. Os principais objetivos deste grupo de estudo serão: 1. Aprimoramento das habilidades técnicas: Este grupo irá auxiliar seus membros a aprimorar suas habilidades e conhecimentos em tecnologias de Big Data e Ciência de Dados, desde conceitos fundamentais até técnicas avançadas. 2. Realizar compartivos em diversos ambiente de cloud e tecnologias relacioandos ao interesse do grupo. 3. Compartilhamento de conhecimento: O grupo proporcionará uma plataforma para discussão e compartilhamento de ideias, incentivando o aprendizado colaborativo e o crescimento profissional de todos os membros. 4. Promoção e organização de eventos de bigdata e ciencia de dados: tenho interesse em lançar o evento DataSciencSummit que ja realizei 2 edições 2018 e 2019 em parceria com o Tecpar 2. Acompanhamento das tendências atuais: O grupo se esforçará para manter seus membros atualizados com as últimas tendências e desenvolvimentos no campo do Big Data e Ciência de Dados. 4. Projetos práticos: Vamos realizar projetos em conjunto empresas e fornecedores para obter uma experiência prática das tecnologias e técnicas aprendidas. Realizando provas de conceitos nas empresas participantes e discutindo os resultados dentro do grupo. Atualmente eu estou testando o DataBricks com Azure aqui na RD. Os benefícios de se juntar a este grupo de estudos incluem: 1. Desenvolvimento de habilidades: Os membros do grupo terão a oportunidade de aprimorar suas habilidades técnicas, tornando-se mais qualificados e competitivos no mercado de trabalho. 2. Networking: Esta será uma grande oportunidade para se conectar e colaborar com profissionais e entusiastas semelhantes no campo. 3. Aprendizado contínuo: A aprendizagem colaborativa incentiva a exploração e a compreensão de novos conceitos, proporcionando um ambiente de aprendizagem contínua. Já tenho uma lista de pessoas interessadas em participar que ja podemos iniciar uma agenda de atividades informais para começar a gerar nosso networking. Você tem interesse em participar desso novo grupo na SUCESU - PR ?