O documento discute o conceito de Big Data, definindo-o como o foco em grandes volumes de dados e velocidades de processamento. Explora os 5 V's do Big Data (Velocidade, Volume, Variedade, Veracidade e Valor) e apresenta exemplos de como empresas usam Big Data para identificar padrões e tomar decisões mais rápidas. Finalmente, discute tecnologias como Hadoop usadas para armazenar e processar grandes volumes de dados distribuídos.
Apresentação sobre Indústria 4.0 demonstrando as tecnologias mais utilizadas, os conceitos, as aplicações, exemplos de utilização, abrangência no dia a dia e perfil do profissional desejado pelas indústrias.
Apresentação sobre Indústria 4.0 demonstrando as tecnologias mais utilizadas, os conceitos, as aplicações, exemplos de utilização, abrangência no dia a dia e perfil do profissional desejado pelas indústrias.
Internet das Coisas - Conectando você e tudo ao seu redorAndré Curvello
Palestra sobre Internet das Coisas que ministrei no ICMC da USP de São Carlos no dia 23/09, como parte da disciplina de Seminários dos cursos de graduação em Sistemas de Informação, sendo também a palestra aberta ao público em geral.
Aula introdutória de sistemas de informação. Licença CC: Atribuição e CompartilhaIgual: Você deve dar o crédito apropriado, prover um link para a licença e indicar se mudanças foram feitas. Você deve fazê-lo em qualquer circunstância razoável, mas de maneira alguma que sugira ao licenciante a apoiar você ou o seu uso.
CompartilhaIgual — Se você remixar, transformar, ou criar a partir do material, tem de distribuir as suas contribuições sob a mesma licença que o original.
http://creativecommons.org/licenses/by-sa/3.0/br/
Palestra sobre o conceito de Indústria 4.0 no ENAV - XIII Encontro Nacional dos Estudantes de Engenharia Naval, trazendo suas tecnologias, dificuldades e realidade do Brasil perante o contexto naval e mundial.
Conheca a Internet das Coisas e como ela pode estar presente no dia a dia. ideias e projetos.
Demo utilizando Java e Arduino para monitorar a temperatura ambiente
Trabalho sobre Big Data apresentado na disciplina Tópicos Especiais de TI no curso de Sistemas de Informação do IFAL. Fala sobre algumas definições que auxiliaram no surgimento do que hoje chamamos de Big Data, além de falar sobre a ferramenta SPLUNK
Internet das Coisas - Conectando você e tudo ao seu redorAndré Curvello
Palestra sobre Internet das Coisas que ministrei no ICMC da USP de São Carlos no dia 23/09, como parte da disciplina de Seminários dos cursos de graduação em Sistemas de Informação, sendo também a palestra aberta ao público em geral.
Aula introdutória de sistemas de informação. Licença CC: Atribuição e CompartilhaIgual: Você deve dar o crédito apropriado, prover um link para a licença e indicar se mudanças foram feitas. Você deve fazê-lo em qualquer circunstância razoável, mas de maneira alguma que sugira ao licenciante a apoiar você ou o seu uso.
CompartilhaIgual — Se você remixar, transformar, ou criar a partir do material, tem de distribuir as suas contribuições sob a mesma licença que o original.
http://creativecommons.org/licenses/by-sa/3.0/br/
Palestra sobre o conceito de Indústria 4.0 no ENAV - XIII Encontro Nacional dos Estudantes de Engenharia Naval, trazendo suas tecnologias, dificuldades e realidade do Brasil perante o contexto naval e mundial.
Conheca a Internet das Coisas e como ela pode estar presente no dia a dia. ideias e projetos.
Demo utilizando Java e Arduino para monitorar a temperatura ambiente
Trabalho sobre Big Data apresentado na disciplina Tópicos Especiais de TI no curso de Sistemas de Informação do IFAL. Fala sobre algumas definições que auxiliaram no surgimento do que hoje chamamos de Big Data, além de falar sobre a ferramenta SPLUNK
Mini-Curso: Introdução à Big Data e Data Science - Aula 2 - Onde usamos Big D...Diego Nogare
Este é um mini-curso gratuito de introdução à estas duas grandes áreas em evidência na atualidade. O instrutor é o MVP em Data Platform Diego Nogare.
Este mini-curso será realizado ONLINE de segunda à quarta-feira, sempre das 21h30 às 22h00. Serão realizadas 12 aulas de 30 minutos diárias, durante 4 semanas.
Aula 2 - Onde usamos Big Data
This presentation, by big data guru Bernard Marr, outlines in simple terms what Big Data is and how it is used today. It covers the 5 V's of Big Data as well as a number of high value use cases.
Os objetivos deste minicurso de Social BPM são: compreender a dimensão da colaboração nos processos de negócio; entender a tecnologia existente atualmente no mercado voltada ao apoio à colaboração na gestão de processos, conceituada como Social BPM; discutir como as tecnologias colaborativas se encaixam no ciclo de BPM; conhecer abordagens para o projeto e implementação da colaboração em processos de negócio; e avaliar as oportunidades desta tecnologia para o aumento do desempenho organizacional e para o diálogo com o ambiente externo.
Compreender a dimensão da colaboração nos processos de negócio; entender a tecnologia existente atualmente no mercado voltada ao apoio à colaboração na gestão de processos, conceituada como Social BPM; avaliar as oportunidades desta tecnologia para o aumento do desempenho organizacional e para o diálogo com o ambiente externo; conhecer abordagens para o projeto e implementação da colaboração em processos de negócio
Pesquisa: 50% dos brasileiros não veem exagero na Operação Lava JatoIdeia Inteligência
Nova pesquisa do Ideia Inteligência sobre a opinião dos brasileiros acerca do governo de Dilma, da inocência de Lula na Operação Lava Jato e também da participação no protesto pelo impeachment, que aconteceu no dia 13 de março.
Palestra sobre conceitos Big data no evento IDETI em SP. Aborda o que é Big data, debate alguns beneficios e desafios. Debate também o papel do CDO- Chief Data Officer.
Artigo sobre Big Data, Conceito, o Que é
Nesse artigo descrevemos um pouco sobre esse novo termo de Negócios que está em alta no mundo de negócios
BIG DATA
Visitem nossa pagina
http://www.cetax.com.br
Palestra: Cientista de Dados – Dominando o Big Data com Software LivreAmbiente Livre
Serão apresentados os conceitos gerais sobre Big Data, as características as atividades do profissional de Big Data ( Cientista de Dados ), como tornar-se um cientista de dados, as principais ferramentas de mercado, e como este profissional pode usar o potencial das ferramentas de software livre e software aberto para dominar esta área de atuação.
Apresentação da aula ministrada por Fabiana Andrade Pereira sobre o tema Big Data, apresentada na Aula Aberta especial FESPSP - "Novas Tecnologias e o profissional da Informação", que ocorreu em 05 de dezembro de 2018, na FESPSP.
Fabiana Andrade Pereira é graduada em Biblioteconomia e Ciência da Informação e pós-graduada em Gestão da Comunicação em Mídias Digitais. Trabalha no Centro de Documentação e Informação da FAPESP, atuando no Projeto Biblioteca Virtual da FAPESP (BV FAPESP).
breve abordagem sobre a importância do bigdata, grandes armazens de dados.
apresentado nas 2ª jornadas tecnologicas do CINFOTEC, em alusão ao seu 5º aniversário.
A palestra apresenta o conceito de data lakes e big data, e como estas arquiteturas são formadas para o armazenamento e consumo de grande volumes de dados, sua relação com as arquiteturas distribuídas como é o caso do ecosistema Hadoop e como o a suíte Pentaho pode ajudar na gestão e extração de informações para tomada de decisão com recursos de big data analitycs.
Aula Magna Sobre BI & BigData na UNIA, Luanda - Angolaalexculpado
Breve abordagem sobre o que é, o presente e o futuro do BI (Business Intelligence) o que nos remete a uma breve abordagem sobre o que vem a ser o BIGDATA e suas aplicações na sociedade. Mostrando algumas limitações exixtentes na BI tradicional. Tratou-se de uma aula magna com estudantes da UNIA- Univesidade Independente de Angola.
Palestra apresentada no 16 Fórum Internacional de Software Livre - FISL16 - em 08/07/2015 sobre MongoDB e dúvidas mais comuns. Uma rápida introdução ao NoSQL e principalmente MongoDB
Palestra apresentada no 16 Fórum Internacional de Software Livre - FISL16 sobre GeoDjango, mapeamento livre, OpenStreetMaps, Openlayers, GIS e GEO. Uma rápida introdução a essas tecnologias.
Com a necessidade de analisar muita informação em tempo real em conjunto com a grande complexidade das aplicações, é muito comum utilizar mais de um tipo de persistência para obter o resultado esperado. Existe uma grande variedade de tipos de persistência, seja relacional (SQL) ou Não Relacional (NoSQL). Compreender os principais recursos de cada um e implementar uma arquitetura com múltiplos tipos diferentes de persistência pode trazer inúmeros benefícios e escala para aplicações. Essa palestra foi apresentada no dia 10 de Maio de 2014 no 15 Fórum Inernacional de Software Livre em Porto Alegre
1. Big Data
A nova ciência dos dados
Christiano Anderson
anderson@propus.com.br
2. Quem sou?
● Desenvolvedor e arquiteto de dados, trabalha com
grandes volumes de acesso e informação desde o
início da internet comercial no Brasil;
● Participou da criação do primeiro e-mail gratuito
do Brasil: Zipmail;
● Contribui com diversos projetos de Software Livre;
● Palestra sobre arquitetura de dados nos principais
eventos de tecnologia;
3. Big Data?
Big data se trata de um conceito onde o foco é
grande armazenamento de dados e maior
velocidades.
4. Os 5 V's
1. Velocidade
2. Volume
3. Variedade
4. Veracidade
5. Valor
5. Velocidade
Em muitos casos, as respostas precisam ser
rápidas, praticamente em tempo real para o
tratamento de um volume massivo de dados;
Para um sistema anti-fraude, 2 minutos pode
ser muito tempo.
6. Volume
Empresas podem facilmente produzir GB e
mais GB de informações por dia.
O Twitter pode facilmente produzir diariamente
alguns TB de informações pertinentes para
análise de sentimento;
7. Variedade
São informações de diversas fontes, como
imagens, tuites e outros resultados de redes
sociais, textos, etc. Os dados não seguem uma
modelagem padrão;
8. Veracidade
A maioria dos gestores não confiam 100% nas
informações que recebem para tomada de
Decisões;
Ao organizar as informações e usar filtros
apropriados, é possível aumentar a
confiabilidade dos dados;
9. Valor
Depois que os dados são tratados e filtrados,
podem representar um valor inestimável para
empresa, seja para tomada de decisões ou
definições de novos produtos;
10. Como funciona?
Big data é capaz de capturar, armazenar e
processar um massivo volume de informações
que podem ser espalhados em diversos
hardware de commodity;
Uma vez capturado, os dados podem ser
processados através de dezenas de ferramentas;
11. Exemplos de uso
● Decodificar o genoma humano demorava cerca de 10 anos;
atualmente, pode ser processado em uma fração desse tempo
com big data;
● Walmart processa milhões de transações de clientes por dia, com
big data, consegue identificar padrões de fraudes quase que
imediatamente;
● FICO (inclui sistema de deteção de fraudes em cartão de crédito)
consegue processar mais de 2 bilhões de transações por dia;
16. E nos dias atuais?
Quantos bytes produzimos em toda nossa vida?
17. Nos últimos anos, produzimos mais dados que
toda história da humanidade
18.
19. Já imaginou que a maioria dos dispositivos
eletrônicos já possuem um endereço de IP?
Quando você opera esse dispositivo, alguma
informação é gerada.
Isso vai ficar gravado em algum lugar.
O mundo possui aproximadamente 7 bilhões de
pessoas.
20. Estamos gerando informação o
tempo todo
● Utilizando avião
● Pagando contas
online
● Comprando pela
internet
● Acessando redes
sociais
● Assistindo TV (sim,
SmartTV)
● Consultando um
médico
● Realizando ligações
telefônicas
● Até quando
morremos
21. Arquitetura
● Inúmeros sistemas legados;
● Falta de padronização dos dados;
● Cada produto tem um objetivo e guarda os
dados no seu formato;
● Dificuldade de um produto “conversar” com
outro;
22. Arquitetura
● Quando existe a necessidade de buscar
informações de diversas fontes, geralmente o
trabalho é manual;
● Alguém centraliza as informações de diferentes
ferramentas fazendo um “copy & paste”;
● Trabalho é lento, pode ter falha humana;
23. Arquitetura
● Soluções de Big Data podem automatizar esse
trabalho...
● … Não apenas automatizar, mas colocar
inteligência...
● … Identificar novos padrões...
● … Aumentar a precisão das informações …
● … Fazer o gestor enxergar novas
possibilidades.
24.
25. Algumas tecnologias de Big Data
● Hadoop
● Pig
● Hive
● Hbase
● Storm
● Solr
● Ambari
● Zookeeper, etc...
26.
27. O cientista de dados precisa entender como as
informações estão armazenadas e escolher as
melhores ferramentas para atingir o objetivo final
28. Hadoop
● Um framework que fornece uma maneira
simples e escalável para processos distribuídos
em diversos servidores;
● Hadoop é open source e inclui diversas
ferramentas, como sistema de arquivos
distribuído e Map/Reduce.
29. Big data Analytics
Informações em diversos formatos: Como
as informações não precisam seguir uma
modelagem, nenhuma informação é perdida;
Escalável: Hadoop já provou ser muito
escalável, Facebook e Yahoo! são dois
cases de sucesso;
Novas descobertas: Pela flexibilidade em
cruzar informações, é simples conseguir
novos insights, algo complicado quando está
preso a uma modelagem;
30. Escalabilidade
A maioria das aplicações apresentam
dificuldade para escalar ou exigem
configurações complexas. O Hadoop escala
facilmente, usando hardware comum, sem
nenhuma necessidade de configurações
complexas.
31. Alta Disponibilidade
O fato de ter sistema de arquivos distribuído,
(HDFS) onde os dados não estão restritos em
apenas um servidor, já faz o sistema com alta
disponibilidade.
32. Empresas que investiram em
Hadoop
● 1. Yahoo! - grande investidora de Hadoop;
● 2. Facebook - Utiliza para cruzar informações da rede
social
● 3. Twitter - Utiliza para cruzar informações da rede
social;
● 4. Adobe - Utiliza em seus sistemas de publicação
online;
● 5. e-Bay - Utiliza para identificar tendências de
compras;
33. Quem adota Big Data?
● Empresas de saúde
● Portais de serviço
● Redes Sociais
● Empresas financeiras
● Mineradoras
● Empresas de Segurança Pública