SlideShare uma empresa Scribd logo
1 de 40
Baixar para ler offline
한승호 차맑음 성홍기 한태희
목차

 1. Cloud deveolpe

 2. Twitter Data Mining

 3. Twitter Weather Engine

 4. BigData Hadoop

 5. Schedule
Cloud deveolpe
Web Server, Cloud9 IDE
Server tweak

               Performance


                 Security


                Usability
http://ami.hansh.kr
Team information

     Web IDE

  Prototype TEST

  Keynote Share

Database Web DBMS
Twitter Data Mining
Twitter API Mash up
데이터 분석




   데이터   의미 해석
대량의 데이터에서 특정한 주제를 찾는다.
대량의 데이터에서 특정한 주제를 찾는다.
  Twitter 에서 날씨 정보를 찾는다.
대량의 데이터에서 특정한 주제를 찾는다.
  Twitter 에서 날씨 정보를 찾는다.
 날씨 정보에서 지역 정보를 찾는다.
대량의 데이터에서 특정한 주제를 찾는다.
  Twitter 에서 날씨 정보를 찾는다.
 날씨 정보에서 지역 정보를 찾는다.

  지역에 따른 날씨 정보
대량의 데이터에서 특정한 주제를 찾는다.
           날씨정보가
 Twitter 에서 날씨 정보를 찾는다.
          엔터테인먼트
 날씨 정보에서 지역 정보를 찾는다.
        데이터 분석
  지역에 따른 날씨 정보
대량의 데이터에서 특정한 주제를 찾는다.
  Twitter 에서 날씨 정보를 찾는다.
 날씨 정보에서 지역 정보를 찾는다.

  지역에 따른 날씨 정보
대량의 데이터에서 특정한 주제를 찾는다.
   Twitter에서 싸이를 찾는다.
     싸이의 이슈를 찾는다.
 싸이의 이슈에서 스캔들을 찾는다.

 특정 연예인의 스캔들 예측
해석
대량의 데이터에서 특정한 주제를 찾는다.
      입력        입력
   Twitter에서 싸이를 찾는다.
     싸이의 이슈를 찾는다.
      해석        해석
 싸이의 이슈에서 스캔들을 찾는다.
        입력

 특정 연예인의 스캔들 예측
해석

대량의 데이터에서 특정한 주제를 찾는다.
           입력                  입력


      해석                            해석


   Twitter에서 싸이를 찾는다.
     해석                              입력


     싸이의 이슈를 찾는다.
     입력                              해석


 싸이의 이슈에서 스캔들을 찾는다.
          해석                    입력

                입력        해석


 특정 연예인의 스캔들 예측
해석
               입력        입력

대량의 데이터에서 특정한 주제를 찾는다.
          해석                  해석




   Twitter에서 싸이를 찾는다.
     입력                            입력



     해석                            해석


     싸이의 이슈를 찾는다.
     입력                            입력



 싸이의 이슈에서 스캔들을 찾는다.
          해석                  해석

               입력        입력



 특정 연예인의 스캔들 예측
                    해석
Twitter Weather Engine
Engine diagram
http://www.youtube.com/watch?v=41YMQFlfmS8&feature
해석
                       입력                  입력


                  해석                            해석



                 해석                              입력



                 입력                              해석


                      해석                    입력


Realtime Tweet              입력        해석
해석
                      입력                  입력


                 해석                            해석



                해석                              입력



                입력                              해석


                     해석                    입력

SNS, YouTube,              입력        해석

Web content….
Search API
                                       해석
                             입력                  입력



             Query      해석                            해석


                ‘단어’
                       해석                              입력
              ‘해시태그’
                ‘언어’
             ‘인물&기관’   입력                              해석

                ‘장소’
                            해석                    입력

                                  입력        해석
지역명, 날씨관련 단어

              ‘단어’
            ‘해시태그’
              ‘언어’
           ‘인물&기관’
              ‘장소’
                         트윗
                        토큰화         =
                                C# .NET
SNS, WEB   Search API    WINDOWS SERVER
DA ABASE
   T
( MySQL )   LINUX SERVER
예전 서비스 설계
                                    MOBILE

                                    GOOGLE ANDROID
                                    APPLE IOS
                                    MS WINPHONE
           Database I/O   Display
             Module       Module
DATABASE

                                    PC
           Data-mining              MS WINDOWS
             Module                 APPLE MAC
                                    LINUX
예전 서비스 설계의 문제점
                                        MOBILE

                                        GOOGLE ANDROID

                                 !
                                        APPLE IOS
                          !
   !
                                        MS WINPHONE
           Database I/O       Display
             Module           Module
DATABASE

                                        PC
           Data-mining                  MS WINDOWS
             Module                     APPLE MAC
                                        LINUX
현재 서비스 설계
                                   PC
                                   MS WINDOWS
                                   APPLE MAC
         OpenAPI
                        Display    LINUX
         Connect
                        Module
         Module


                                   MOBILE
       Data-mining                 GOOGLE ANDROID
         Module                    APPLE IOS
                        DATABASE   MS WINPHONE




     SERVER1         SERVER2
서비스의 방향



     Mashup!
     BigData?
BigData Hadoop
BigData Ecosystem
Hadoop?   빅데이터의 가장 현실적인 대안




대용량 데이터를 처리하는
분산 응용 프로그램을 개발하고 실행시
키기 위한 오픈 소스 프레임워크

대용량 데이터를 저렴하면서도 빠르게 분석
할 수 있게 도와준다.

기존에 슈퍼컴퓨터로 며칠씩 돌려야 했던
데이터를 하둡을 이용하면 x86 서버로도 실
시간 분석이 가능해질 정도다.


                             하둡의 창시자 더그 커팅 (Doug Cutting)



                                 출처: http://www.bloter.net/archives/122834
Hadoop?   하둡의 장점

접근(Accessible)
윈도우PC 같은 범용 컴퓨터들로
구성된 큰 규모의 클러스터나
아마존의 EC2와 같은 클라우드
컴퓨팅 서비스에서 실행된다.

견고성(Robust)
범용 컴퓨터에서 실행되도록 개발
되어 하드웨어의 빈번한 고장을 가
정하고 설계되었다.


확장가능성(Scalable)
대용량 데이터를 처리하는 데 있어서 클러스터에 단순히 컴퓨터(nodes)를 추가함으
로써 선형적으로 확장할 수 있다.

간단성(Simple)
효과적인 병렬 코드를 빠르게 작성할 수 있다.

                               출처: http://programmingpearls.tistory.com/2
Hadoop?   하둡을 좋아하는 기업들


       Amazon
    Facebook
     Yahoo
    NHN
      Oracle
     Microsoft
      IBM
        HP

                         http://wiki.apache.org/hadoop/PoweredBy
Hadoop 적용?
                                   PC
                                   MS WINDOWS
                                   APPLE MAC
           OpenAPI
                        Display    LINUX
           Connect
                        Module
           Module


                                   MOBILE
          Data-mining              GOOGLE ANDROID
            Module                 APPLE IOS
                        DATABASE   MS WINPHONE


 프로토타입 조건…멀티 코어가 탑재된 한 쌍의 서버, 24GB 이상의 RAM,
2TB 용량의 하드디스크 드라이브 수십 개 + 보안 + 능력 + 시간…
서비스의 방향


  장비와 능력, 시간을 고려해서…


       Mashup!
            BigData… NOSQL…
감사합니다

Mais conteúdo relacionado

Semelhante a 전공연구실 계획9

링크브릭스 2019
링크브릭스 2019링크브릭스 2019
링크브릭스 2019Sangkyu Kim
 
Amazon AI 및 IoT를 통한 비즈니스 혁신 - AWS Summit Seoul 2017
Amazon AI 및 IoT를 통한 비즈니스 혁신 - AWS Summit Seoul 2017Amazon AI 및 IoT를 통한 비즈니스 혁신 - AWS Summit Seoul 2017
Amazon AI 및 IoT를 통한 비즈니스 혁신 - AWS Summit Seoul 2017Amazon Web Services Korea
 
웹 소프트웨어 시대의 새로운 롤(role) 모델, 자바스크립트
웹 소프트웨어 시대의 새로운 롤(role) 모델, 자바스크립트웹 소프트웨어 시대의 새로운 롤(role) 모델, 자바스크립트
웹 소프트웨어 시대의 새로운 롤(role) 모델, 자바스크립트Rhio Kim
 
재업로드주소: https://www.slideshare.net/hnki0104/gsshop-103837144
재업로드주소: https://www.slideshare.net/hnki0104/gsshop-103837144재업로드주소: https://www.slideshare.net/hnki0104/gsshop-103837144
재업로드주소: https://www.slideshare.net/hnki0104/gsshop-103837144Darion Kim
 
LINKBRICKS BIG DATA NALYTICS
LINKBRICKS BIG DATA NALYTICSLINKBRICKS BIG DATA NALYTICS
LINKBRICKS BIG DATA NALYTICSBenedict Ji
 
AWS Amplify를 이용한 웹과 모바일 간의 쉬운 데이터 동기화 및 AI 서비스를 활용한 모바일 개발 - 정창호, AWS 솔루션즈 아키...
AWS Amplify를 이용한 웹과 모바일 간의 쉬운 데이터 동기화 및 AI 서비스를 활용한 모바일 개발 - 정창호, AWS 솔루션즈 아키...AWS Amplify를 이용한 웹과 모바일 간의 쉬운 데이터 동기화 및 AI 서비스를 활용한 모바일 개발 - 정창호, AWS 솔루션즈 아키...
AWS Amplify를 이용한 웹과 모바일 간의 쉬운 데이터 동기화 및 AI 서비스를 활용한 모바일 개발 - 정창호, AWS 솔루션즈 아키...Amazon Web Services Korea
 
2013 빅데이터 및 API 기술 현황과 전망- 윤석찬
2013 빅데이터 및 API 기술 현황과 전망- 윤석찬2013 빅데이터 및 API 기술 현황과 전망- 윤석찬
2013 빅데이터 및 API 기술 현황과 전망- 윤석찬Channy Yun
 
Kasa 유연한 컨텐츠 개발을 위한 온라인 게임 아키텍처
Kasa 유연한 컨텐츠 개발을 위한 온라인 게임 아키텍처Kasa 유연한 컨텐츠 개발을 위한 온라인 게임 아키텍처
Kasa 유연한 컨텐츠 개발을 위한 온라인 게임 아키텍처kgun86
 
[H3 2012] 하이브리드앱 제작 사례 공유 - 푸딩얼굴인식 3.0
[H3 2012] 하이브리드앱 제작 사례 공유 - 푸딩얼굴인식 3.0[H3 2012] 하이브리드앱 제작 사례 공유 - 푸딩얼굴인식 3.0
[H3 2012] 하이브리드앱 제작 사례 공유 - 푸딩얼굴인식 3.0KTH, 케이티하이텔
 
좋은 개발자 되기
좋은 개발자 되기좋은 개발자 되기
좋은 개발자 되기Sunghyouk Bae
 
Pag 빅데이터-한국에도필요한가
Pag 빅데이터-한국에도필요한가Pag 빅데이터-한국에도필요한가
Pag 빅데이터-한국에도필요한가Wooseung Kim
 
How to make Successful Open APIs for Startups (2012)
How to make Successful Open APIs for Startups (2012)How to make Successful Open APIs for Startups (2012)
How to make Successful Open APIs for Startups (2012)Channy Yun
 
마이크로서비스 아키텍처와 DevOps 기술 - Amazon 사례를 중심으로 (윤석찬)
마이크로서비스 아키텍처와 DevOps 기술 - Amazon 사례를 중심으로 (윤석찬)마이크로서비스 아키텍처와 DevOps 기술 - Amazon 사례를 중심으로 (윤석찬)
마이크로서비스 아키텍처와 DevOps 기술 - Amazon 사례를 중심으로 (윤석찬)Amazon Web Services Korea
 
Daum’s Business Analytics Use-cases based on Bigdata technology (2012)
Daum’s Business Analytics Use-cases based on Bigdata technology (2012)Daum’s Business Analytics Use-cases based on Bigdata technology (2012)
Daum’s Business Analytics Use-cases based on Bigdata technology (2012)Channy Yun
 
Daum내부 Hadoop 활용 사례 | Devon 2012
Daum내부 Hadoop 활용 사례 | Devon 2012Daum내부 Hadoop 활용 사례 | Devon 2012
Daum내부 Hadoop 활용 사례 | Devon 2012Daum DNA
 
GTCx 2016 C.SIDE Korea
GTCx 2016 C.SIDE KoreaGTCx 2016 C.SIDE Korea
GTCx 2016 C.SIDE KoreaKyungho Kim
 
CoreDot TechSeminar 2018 - Session1 Park Jihun
CoreDot TechSeminar 2018 - Session1 Park JihunCoreDot TechSeminar 2018 - Session1 Park Jihun
CoreDot TechSeminar 2018 - Session1 Park JihunCore.Today
 
[금융사를 위한 AWS Generative AI Day 2023] 4_AWS Generative AI 서비스의 활용 방ᄇ...
[금융사를 위한 AWS Generative AI Day 2023] 4_AWS Generative AI 서비스의 활용 방ᄇ...[금융사를 위한 AWS Generative AI Day 2023] 4_AWS Generative AI 서비스의 활용 방ᄇ...
[금융사를 위한 AWS Generative AI Day 2023] 4_AWS Generative AI 서비스의 활용 방ᄇ...AWS Korea 금융산업팀
 
이벤트: 마이크로서비스 도입, 이렇게 한다
이벤트: 마이크로서비스 도입, 이렇게 한다이벤트: 마이크로서비스 도입, 이렇게 한다
이벤트: 마이크로서비스 도입, 이렇게 한다Jay Park
 

Semelhante a 전공연구실 계획9 (20)

링크브릭스 2019
링크브릭스 2019링크브릭스 2019
링크브릭스 2019
 
Amazon AI 및 IoT를 통한 비즈니스 혁신 - AWS Summit Seoul 2017
Amazon AI 및 IoT를 통한 비즈니스 혁신 - AWS Summit Seoul 2017Amazon AI 및 IoT를 통한 비즈니스 혁신 - AWS Summit Seoul 2017
Amazon AI 및 IoT를 통한 비즈니스 혁신 - AWS Summit Seoul 2017
 
웹 소프트웨어 시대의 새로운 롤(role) 모델, 자바스크립트
웹 소프트웨어 시대의 새로운 롤(role) 모델, 자바스크립트웹 소프트웨어 시대의 새로운 롤(role) 모델, 자바스크립트
웹 소프트웨어 시대의 새로운 롤(role) 모델, 자바스크립트
 
Cloud computing
Cloud computingCloud computing
Cloud computing
 
재업로드주소: https://www.slideshare.net/hnki0104/gsshop-103837144
재업로드주소: https://www.slideshare.net/hnki0104/gsshop-103837144재업로드주소: https://www.slideshare.net/hnki0104/gsshop-103837144
재업로드주소: https://www.slideshare.net/hnki0104/gsshop-103837144
 
LINKBRICKS BIG DATA NALYTICS
LINKBRICKS BIG DATA NALYTICSLINKBRICKS BIG DATA NALYTICS
LINKBRICKS BIG DATA NALYTICS
 
AWS Amplify를 이용한 웹과 모바일 간의 쉬운 데이터 동기화 및 AI 서비스를 활용한 모바일 개발 - 정창호, AWS 솔루션즈 아키...
AWS Amplify를 이용한 웹과 모바일 간의 쉬운 데이터 동기화 및 AI 서비스를 활용한 모바일 개발 - 정창호, AWS 솔루션즈 아키...AWS Amplify를 이용한 웹과 모바일 간의 쉬운 데이터 동기화 및 AI 서비스를 활용한 모바일 개발 - 정창호, AWS 솔루션즈 아키...
AWS Amplify를 이용한 웹과 모바일 간의 쉬운 데이터 동기화 및 AI 서비스를 활용한 모바일 개발 - 정창호, AWS 솔루션즈 아키...
 
2013 빅데이터 및 API 기술 현황과 전망- 윤석찬
2013 빅데이터 및 API 기술 현황과 전망- 윤석찬2013 빅데이터 및 API 기술 현황과 전망- 윤석찬
2013 빅데이터 및 API 기술 현황과 전망- 윤석찬
 
Kasa 유연한 컨텐츠 개발을 위한 온라인 게임 아키텍처
Kasa 유연한 컨텐츠 개발을 위한 온라인 게임 아키텍처Kasa 유연한 컨텐츠 개발을 위한 온라인 게임 아키텍처
Kasa 유연한 컨텐츠 개발을 위한 온라인 게임 아키텍처
 
[H3 2012] 하이브리드앱 제작 사례 공유 - 푸딩얼굴인식 3.0
[H3 2012] 하이브리드앱 제작 사례 공유 - 푸딩얼굴인식 3.0[H3 2012] 하이브리드앱 제작 사례 공유 - 푸딩얼굴인식 3.0
[H3 2012] 하이브리드앱 제작 사례 공유 - 푸딩얼굴인식 3.0
 
좋은 개발자 되기
좋은 개발자 되기좋은 개발자 되기
좋은 개발자 되기
 
Pag 빅데이터-한국에도필요한가
Pag 빅데이터-한국에도필요한가Pag 빅데이터-한국에도필요한가
Pag 빅데이터-한국에도필요한가
 
How to make Successful Open APIs for Startups (2012)
How to make Successful Open APIs for Startups (2012)How to make Successful Open APIs for Startups (2012)
How to make Successful Open APIs for Startups (2012)
 
마이크로서비스 아키텍처와 DevOps 기술 - Amazon 사례를 중심으로 (윤석찬)
마이크로서비스 아키텍처와 DevOps 기술 - Amazon 사례를 중심으로 (윤석찬)마이크로서비스 아키텍처와 DevOps 기술 - Amazon 사례를 중심으로 (윤석찬)
마이크로서비스 아키텍처와 DevOps 기술 - Amazon 사례를 중심으로 (윤석찬)
 
Daum’s Business Analytics Use-cases based on Bigdata technology (2012)
Daum’s Business Analytics Use-cases based on Bigdata technology (2012)Daum’s Business Analytics Use-cases based on Bigdata technology (2012)
Daum’s Business Analytics Use-cases based on Bigdata technology (2012)
 
Daum내부 Hadoop 활용 사례 | Devon 2012
Daum내부 Hadoop 활용 사례 | Devon 2012Daum내부 Hadoop 활용 사례 | Devon 2012
Daum내부 Hadoop 활용 사례 | Devon 2012
 
GTCx 2016 C.SIDE Korea
GTCx 2016 C.SIDE KoreaGTCx 2016 C.SIDE Korea
GTCx 2016 C.SIDE Korea
 
CoreDot TechSeminar 2018 - Session1 Park Jihun
CoreDot TechSeminar 2018 - Session1 Park JihunCoreDot TechSeminar 2018 - Session1 Park Jihun
CoreDot TechSeminar 2018 - Session1 Park Jihun
 
[금융사를 위한 AWS Generative AI Day 2023] 4_AWS Generative AI 서비스의 활용 방ᄇ...
[금융사를 위한 AWS Generative AI Day 2023] 4_AWS Generative AI 서비스의 활용 방ᄇ...[금융사를 위한 AWS Generative AI Day 2023] 4_AWS Generative AI 서비스의 활용 방ᄇ...
[금융사를 위한 AWS Generative AI Day 2023] 4_AWS Generative AI 서비스의 활용 방ᄇ...
 
이벤트: 마이크로서비스 도입, 이렇게 한다
이벤트: 마이크로서비스 도입, 이렇게 한다이벤트: 마이크로서비스 도입, 이렇게 한다
이벤트: 마이크로서비스 도입, 이렇게 한다
 

Mais de Seungho Han

REST API SDK Generator - 한승호@에멘탈
REST API SDK Generator - 한승호@에멘탈REST API SDK Generator - 한승호@에멘탈
REST API SDK Generator - 한승호@에멘탈Seungho Han
 
Monorepo with Lerna - 한승호@에멘탈
Monorepo with Lerna - 한승호@에멘탈Monorepo with Lerna - 한승호@에멘탈
Monorepo with Lerna - 한승호@에멘탈Seungho Han
 
Typescript 개발 문화 - 한승호@에멘탈
Typescript 개발 문화 - 한승호@에멘탈Typescript 개발 문화 - 한승호@에멘탈
Typescript 개발 문화 - 한승호@에멘탈Seungho Han
 
AWS X-Ray를 활용한 서비스 건강검진- 한승호@에멘탈
AWS X-Ray를 활용한 서비스 건강검진- 한승호@에멘탈AWS X-Ray를 활용한 서비스 건강검진- 한승호@에멘탈
AWS X-Ray를 활용한 서비스 건강검진- 한승호@에멘탈Seungho Han
 
전공연구실 계획4
전공연구실 계획4전공연구실 계획4
전공연구실 계획4Seungho Han
 
전공연구실 계획3
전공연구실 계획3전공연구실 계획3
전공연구실 계획3Seungho Han
 
[Web tutoring]CMS를 통한 웹사이트 제작
[Web tutoring]CMS를 통한 웹사이트 제작[Web tutoring]CMS를 통한 웹사이트 제작
[Web tutoring]CMS를 통한 웹사이트 제작Seungho Han
 

Mais de Seungho Han (9)

REST API SDK Generator - 한승호@에멘탈
REST API SDK Generator - 한승호@에멘탈REST API SDK Generator - 한승호@에멘탈
REST API SDK Generator - 한승호@에멘탈
 
Monorepo with Lerna - 한승호@에멘탈
Monorepo with Lerna - 한승호@에멘탈Monorepo with Lerna - 한승호@에멘탈
Monorepo with Lerna - 한승호@에멘탈
 
Typescript 개발 문화 - 한승호@에멘탈
Typescript 개발 문화 - 한승호@에멘탈Typescript 개발 문화 - 한승호@에멘탈
Typescript 개발 문화 - 한승호@에멘탈
 
AWS X-Ray를 활용한 서비스 건강검진- 한승호@에멘탈
AWS X-Ray를 활용한 서비스 건강검진- 한승호@에멘탈AWS X-Ray를 활용한 서비스 건강검진- 한승호@에멘탈
AWS X-Ray를 활용한 서비스 건강검진- 한승호@에멘탈
 
전공연구실 계획4
전공연구실 계획4전공연구실 계획4
전공연구실 계획4
 
전공연구실 계획3
전공연구실 계획3전공연구실 계획3
전공연구실 계획3
 
[Web tutoring]CMS를 통한 웹사이트 제작
[Web tutoring]CMS를 통한 웹사이트 제작[Web tutoring]CMS를 통한 웹사이트 제작
[Web tutoring]CMS를 통한 웹사이트 제작
 
webstudy jquery
webstudy jquerywebstudy jquery
webstudy jquery
 
웹개발도구
웹개발도구웹개발도구
웹개발도구
 

전공연구실 계획9

  • 2. 목차 1. Cloud deveolpe 2. Twitter Data Mining 3. Twitter Weather Engine 4. BigData Hadoop 5. Schedule
  • 4. Server tweak Performance Security Usability
  • 6.
  • 7.
  • 8.
  • 9. Team information Web IDE Prototype TEST Keynote Share Database Web DBMS
  • 11. 데이터 분석 데이터 의미 해석
  • 12. 대량의 데이터에서 특정한 주제를 찾는다.
  • 13. 대량의 데이터에서 특정한 주제를 찾는다. Twitter 에서 날씨 정보를 찾는다.
  • 14. 대량의 데이터에서 특정한 주제를 찾는다. Twitter 에서 날씨 정보를 찾는다. 날씨 정보에서 지역 정보를 찾는다.
  • 15. 대량의 데이터에서 특정한 주제를 찾는다. Twitter 에서 날씨 정보를 찾는다. 날씨 정보에서 지역 정보를 찾는다. 지역에 따른 날씨 정보
  • 16. 대량의 데이터에서 특정한 주제를 찾는다. 날씨정보가 Twitter 에서 날씨 정보를 찾는다. 엔터테인먼트 날씨 정보에서 지역 정보를 찾는다. 데이터 분석 지역에 따른 날씨 정보
  • 17. 대량의 데이터에서 특정한 주제를 찾는다. Twitter 에서 날씨 정보를 찾는다. 날씨 정보에서 지역 정보를 찾는다. 지역에 따른 날씨 정보
  • 18. 대량의 데이터에서 특정한 주제를 찾는다. Twitter에서 싸이를 찾는다. 싸이의 이슈를 찾는다. 싸이의 이슈에서 스캔들을 찾는다. 특정 연예인의 스캔들 예측
  • 19. 해석 대량의 데이터에서 특정한 주제를 찾는다. 입력 입력 Twitter에서 싸이를 찾는다. 싸이의 이슈를 찾는다. 해석 해석 싸이의 이슈에서 스캔들을 찾는다. 입력 특정 연예인의 스캔들 예측
  • 20. 해석 대량의 데이터에서 특정한 주제를 찾는다. 입력 입력 해석 해석 Twitter에서 싸이를 찾는다. 해석 입력 싸이의 이슈를 찾는다. 입력 해석 싸이의 이슈에서 스캔들을 찾는다. 해석 입력 입력 해석 특정 연예인의 스캔들 예측
  • 21. 해석 입력 입력 대량의 데이터에서 특정한 주제를 찾는다. 해석 해석 Twitter에서 싸이를 찾는다. 입력 입력 해석 해석 싸이의 이슈를 찾는다. 입력 입력 싸이의 이슈에서 스캔들을 찾는다. 해석 해석 입력 입력 특정 연예인의 스캔들 예측 해석
  • 24. 해석 입력 입력 해석 해석 해석 입력 입력 해석 해석 입력 Realtime Tweet 입력 해석
  • 25. 해석 입력 입력 해석 해석 해석 입력 입력 해석 해석 입력 SNS, YouTube, 입력 해석 Web content….
  • 26. Search API 해석 입력 입력 Query 해석 해석 ‘단어’ 해석 입력 ‘해시태그’ ‘언어’ ‘인물&기관’ 입력 해석 ‘장소’ 해석 입력 입력 해석
  • 27. 지역명, 날씨관련 단어 ‘단어’ ‘해시태그’ ‘언어’ ‘인물&기관’ ‘장소’ 트윗 토큰화 = C# .NET SNS, WEB Search API WINDOWS SERVER
  • 28. DA ABASE T ( MySQL ) LINUX SERVER
  • 29. 예전 서비스 설계 MOBILE GOOGLE ANDROID APPLE IOS MS WINPHONE Database I/O Display Module Module DATABASE PC Data-mining MS WINDOWS Module APPLE MAC LINUX
  • 30. 예전 서비스 설계의 문제점 MOBILE GOOGLE ANDROID ! APPLE IOS ! ! MS WINPHONE Database I/O Display Module Module DATABASE PC Data-mining MS WINDOWS Module APPLE MAC LINUX
  • 31. 현재 서비스 설계 PC MS WINDOWS APPLE MAC OpenAPI Display LINUX Connect Module Module MOBILE Data-mining GOOGLE ANDROID Module APPLE IOS DATABASE MS WINPHONE SERVER1 SERVER2
  • 32. 서비스의 방향 Mashup! BigData?
  • 34. Hadoop? 빅데이터의 가장 현실적인 대안 대용량 데이터를 처리하는 분산 응용 프로그램을 개발하고 실행시 키기 위한 오픈 소스 프레임워크 대용량 데이터를 저렴하면서도 빠르게 분석 할 수 있게 도와준다. 기존에 슈퍼컴퓨터로 며칠씩 돌려야 했던 데이터를 하둡을 이용하면 x86 서버로도 실 시간 분석이 가능해질 정도다. 하둡의 창시자 더그 커팅 (Doug Cutting) 출처: http://www.bloter.net/archives/122834
  • 35. Hadoop? 하둡의 장점 접근(Accessible) 윈도우PC 같은 범용 컴퓨터들로 구성된 큰 규모의 클러스터나 아마존의 EC2와 같은 클라우드 컴퓨팅 서비스에서 실행된다. 견고성(Robust) 범용 컴퓨터에서 실행되도록 개발 되어 하드웨어의 빈번한 고장을 가 정하고 설계되었다. 확장가능성(Scalable) 대용량 데이터를 처리하는 데 있어서 클러스터에 단순히 컴퓨터(nodes)를 추가함으 로써 선형적으로 확장할 수 있다. 간단성(Simple) 효과적인 병렬 코드를 빠르게 작성할 수 있다. 출처: http://programmingpearls.tistory.com/2
  • 36. Hadoop? 하둡을 좋아하는 기업들 Amazon Facebook Yahoo NHN Oracle Microsoft IBM HP http://wiki.apache.org/hadoop/PoweredBy
  • 37.
  • 38. Hadoop 적용? PC MS WINDOWS APPLE MAC OpenAPI Display LINUX Connect Module Module MOBILE Data-mining GOOGLE ANDROID Module APPLE IOS DATABASE MS WINPHONE 프로토타입 조건…멀티 코어가 탑재된 한 쌍의 서버, 24GB 이상의 RAM, 2TB 용량의 하드디스크 드라이브 수십 개 + 보안 + 능력 + 시간…
  • 39. 서비스의 방향 장비와 능력, 시간을 고려해서… Mashup! BigData… NOSQL…