SlideShare uma empresa Scribd logo
1 de 12

Sissejuhatus andmekaevesse hariduses
Mart Laanpere
Mis on andmekaeve?

 Prognooside ja mustrite automatiseeritud
   väljasõelumine suurtest andmekogudest
 Populaarsuse põhjused: suuremad
   andmehulgad, digitaalsed jalajäljed, kiiremad
   arvutid, analüütika, open linked data, soovitus-
   süsteemid
 Kust tulevad andmed: logifailid, andmebaasi-
   tarkvara, sotsiaalmeedia, nuhkvara…
 Andmed > Informatsioon > Teadmus > Tarkus
Näiteid

 http://www.educationaldatamining.org/JEDM

 Koostöömustrite kaevandamine tuutori
   nõustamisvestlustest
 Algaja internetikasutaja toevajaduse analüüs

 Tõenäosuslik mudel relevantsete ja
   mitterelevantsete lausete eristamiseks
   matemaatikaülesannetes
Mille poolest AK erineb statistikast?
    Statistikud koguvad üldjuhul sihipäraselt oma
      andmestiku, andmekaevajad kasutavad
      arvutisüsteemides tekkivat andmesegadust
    Osa andmekaeve tehnikatest põhineb
      statistikal
    Andmekaeve võimaldab proaktiivset
      tegutsemist
    Andmekaeve on pigem tulevikku-, statistika
      tagasivaatav
Andmekaeve protsess




            Allikas: Wikipeedia
Peamised andmekaeve tehnikad

 Klassikalised tehnikad:
   Statistika:
     keskmised, hajuvus, histogramm, regressi
     oon
   Lähimad naabrid
   Klasteranalüüs: hierarhiline, k-means

 Uue põlvkonna tehnikad:
   Otsustuspuud
   Tehisnärvivõrgud
   Reeglite tuletamine
Harjutus: histogramm

 Koosta histogramm AKU õpiku ptk. 3.6 põhjal

 Box.com/AKU12
Harjutus: Google Analytics

 Demo: Dippleri analüütika

 Loo endale GA konto ja lisa see oma blogile
Demo: lineaarne regressioon

 Weka: http://www.cs.waikato.ac.nz/~ml/weka/

 Lineaarne regressioon Weka abil
Harjutus: Twitteri analüüs

 http://www.technologyreview.com/view/421201/h
   ow-to-use-twitter-for-personal-data-mining/

 Viige selle näite eeskujul läbi Wordle analüüs oma
   Twitteri (vms) andmevoo baasil
Demo: otsustuspuu

 http://www.stylusandslate.com/decision_trees/
Kirjandus

 Innar Liiv (2002) Andmekaevandamine. AA

 Kurt Thearling (2010) Data Mining Techniques

 Educational Data Mining Society:
   http://www.educationaldatamining.org

 Knowledge Discovery Nuggets:
   http://www.kdnuggets.com

Mais conteúdo relacionado

Mais de Mart Laanpere

Digital Turn intro 2017
Digital Turn intro 2017Digital Turn intro 2017
Digital Turn intro 2017Mart Laanpere
 
Haridustehnoloogia akadeemiline suund
Haridustehnoloogia akadeemiline suundHaridustehnoloogia akadeemiline suund
Haridustehnoloogia akadeemiline suundMart Laanpere
 
Education system in Estonia: PISA and Digital Turn
Education system in Estonia: PISA and Digital TurnEducation system in Estonia: PISA and Digital Turn
Education system in Estonia: PISA and Digital TurnMart Laanpere
 
Scenario-Based Validation of the Online Tool for Assessing Teachers’ Digital ...
Scenario-Based Validation of the Online Tool for Assessing Teachers’ Digital ...Scenario-Based Validation of the Online Tool for Assessing Teachers’ Digital ...
Scenario-Based Validation of the Online Tool for Assessing Teachers’ Digital ...Mart Laanpere
 
Evidence-Centered Approach to Online Assessment of Students’ Digital Competence
Evidence-Centered Approach to Online Assessment of Students’ Digital CompetenceEvidence-Centered Approach to Online Assessment of Students’ Digital Competence
Evidence-Centered Approach to Online Assessment of Students’ Digital CompetenceMart Laanpere
 
Digipädevuste tasemetöös
Digipädevuste tasemetöösDigipädevuste tasemetöös
Digipädevuste tasemetöösMart Laanpere
 
Digital Mirror: Measuring the digital innovation maturity in Estonian schools
Digital Mirror: Measuring the digital innovation maturity in Estonian schoolsDigital Mirror: Measuring the digital innovation maturity in Estonian schools
Digital Mirror: Measuring the digital innovation maturity in Estonian schoolsMart Laanpere
 
Best Practice Benchmarking course by Euneos
Best Practice Benchmarking course by EuneosBest Practice Benchmarking course by Euneos
Best Practice Benchmarking course by EuneosMart Laanpere
 
Samsung Digi Pass - e-portfoolio
Samsung Digi Pass - e-portfoolioSamsung Digi Pass - e-portfoolio
Samsung Digi Pass - e-portfoolioMart Laanpere
 
Samsung Digi Pass õpimärgid
Samsung Digi Pass õpimärgidSamsung Digi Pass õpimärgid
Samsung Digi Pass õpimärgidMart Laanpere
 
Ettevõtlusõppe lõimimine läbiva teemaga Tehnoloogia ja innovatsioon
Ettevõtlusõppe lõimimine läbiva teemaga Tehnoloogia ja innovatsioonEttevõtlusõppe lõimimine läbiva teemaga Tehnoloogia ja innovatsioon
Ettevõtlusõppe lõimimine läbiva teemaga Tehnoloogia ja innovatsioonMart Laanpere
 
TSP-STEM introductory lecture
TSP-STEM introductory lectureTSP-STEM introductory lecture
TSP-STEM introductory lectureMart Laanpere
 
Analysing the Use of Distributed Digital Learning Resources
Analysing the Use of Distributed Digital Learning  ResourcesAnalysing the Use of Distributed Digital Learning  Resources
Analysing the Use of Distributed Digital Learning ResourcesMart Laanpere
 
Creative Classroom õpistsenaariumid
Creative Classroom õpistsenaariumidCreative Classroom õpistsenaariumid
Creative Classroom õpistsenaariumidMart Laanpere
 
Digipöörde töötuba HTG õpetajatele
Digipöörde töötuba HTG õpetajateleDigipöörde töötuba HTG õpetajatele
Digipöörde töötuba HTG õpetajateleMart Laanpere
 
Digipoore: Ideest teostuseni
Digipoore: Ideest teostuseniDigipoore: Ideest teostuseni
Digipoore: Ideest teostuseniMart Laanpere
 
Centre for Educational Technology
Centre for Educational TechnologyCentre for Educational Technology
Centre for Educational TechnologyMart Laanpere
 
Digimina tutvustus: õpetajate digipädevuste hindamisvahend
Digimina tutvustus: õpetajate digipädevuste hindamisvahendDigimina tutvustus: õpetajate digipädevuste hindamisvahend
Digimina tutvustus: õpetajate digipädevuste hindamisvahendMart Laanpere
 
E-õpik polegi õpik?
E-õpik polegi õpik?E-õpik polegi õpik?
E-õpik polegi õpik?Mart Laanpere
 

Mais de Mart Laanpere (20)

Digital Turn intro 2017
Digital Turn intro 2017Digital Turn intro 2017
Digital Turn intro 2017
 
Haridustehnoloogia akadeemiline suund
Haridustehnoloogia akadeemiline suundHaridustehnoloogia akadeemiline suund
Haridustehnoloogia akadeemiline suund
 
Education system in Estonia: PISA and Digital Turn
Education system in Estonia: PISA and Digital TurnEducation system in Estonia: PISA and Digital Turn
Education system in Estonia: PISA and Digital Turn
 
Scenario-Based Validation of the Online Tool for Assessing Teachers’ Digital ...
Scenario-Based Validation of the Online Tool for Assessing Teachers’ Digital ...Scenario-Based Validation of the Online Tool for Assessing Teachers’ Digital ...
Scenario-Based Validation of the Online Tool for Assessing Teachers’ Digital ...
 
Evidence-Centered Approach to Online Assessment of Students’ Digital Competence
Evidence-Centered Approach to Online Assessment of Students’ Digital CompetenceEvidence-Centered Approach to Online Assessment of Students’ Digital Competence
Evidence-Centered Approach to Online Assessment of Students’ Digital Competence
 
Digipädevuste tasemetöös
Digipädevuste tasemetöösDigipädevuste tasemetöös
Digipädevuste tasemetöös
 
Digital Mirror: Measuring the digital innovation maturity in Estonian schools
Digital Mirror: Measuring the digital innovation maturity in Estonian schoolsDigital Mirror: Measuring the digital innovation maturity in Estonian schools
Digital Mirror: Measuring the digital innovation maturity in Estonian schools
 
Best Practice Benchmarking course by Euneos
Best Practice Benchmarking course by EuneosBest Practice Benchmarking course by Euneos
Best Practice Benchmarking course by Euneos
 
Samsung Digi Pass - e-portfoolio
Samsung Digi Pass - e-portfoolioSamsung Digi Pass - e-portfoolio
Samsung Digi Pass - e-portfoolio
 
Samsung Digi Pass õpimärgid
Samsung Digi Pass õpimärgidSamsung Digi Pass õpimärgid
Samsung Digi Pass õpimärgid
 
Ettevõtlusõppe lõimimine läbiva teemaga Tehnoloogia ja innovatsioon
Ettevõtlusõppe lõimimine läbiva teemaga Tehnoloogia ja innovatsioonEttevõtlusõppe lõimimine läbiva teemaga Tehnoloogia ja innovatsioon
Ettevõtlusõppe lõimimine läbiva teemaga Tehnoloogia ja innovatsioon
 
EstCORE tutvustus
EstCORE tutvustusEstCORE tutvustus
EstCORE tutvustus
 
TSP-STEM introductory lecture
TSP-STEM introductory lectureTSP-STEM introductory lecture
TSP-STEM introductory lecture
 
Analysing the Use of Distributed Digital Learning Resources
Analysing the Use of Distributed Digital Learning  ResourcesAnalysing the Use of Distributed Digital Learning  Resources
Analysing the Use of Distributed Digital Learning Resources
 
Creative Classroom õpistsenaariumid
Creative Classroom õpistsenaariumidCreative Classroom õpistsenaariumid
Creative Classroom õpistsenaariumid
 
Digipöörde töötuba HTG õpetajatele
Digipöörde töötuba HTG õpetajateleDigipöörde töötuba HTG õpetajatele
Digipöörde töötuba HTG õpetajatele
 
Digipoore: Ideest teostuseni
Digipoore: Ideest teostuseniDigipoore: Ideest teostuseni
Digipoore: Ideest teostuseni
 
Centre for Educational Technology
Centre for Educational TechnologyCentre for Educational Technology
Centre for Educational Technology
 
Digimina tutvustus: õpetajate digipädevuste hindamisvahend
Digimina tutvustus: õpetajate digipädevuste hindamisvahendDigimina tutvustus: õpetajate digipädevuste hindamisvahend
Digimina tutvustus: õpetajate digipädevuste hindamisvahend
 
E-õpik polegi õpik?
E-õpik polegi õpik?E-õpik polegi õpik?
E-õpik polegi õpik?
 

Último

Maaturism_Raili Mengel_Märgis Matkajasõbralik_Hiker-friendly_strateegiapaev_0...
Maaturism_Raili Mengel_Märgis Matkajasõbralik_Hiker-friendly_strateegiapaev_0...Maaturism_Raili Mengel_Märgis Matkajasõbralik_Hiker-friendly_strateegiapaev_0...
Maaturism_Raili Mengel_Märgis Matkajasõbralik_Hiker-friendly_strateegiapaev_0...Eesti Loodusturism
 
Maaturism ja ELTÜ_ELin Priks_välisturgude võimekus_Intereg_projekt_090424.pdf
Maaturism ja ELTÜ_ELin Priks_välisturgude võimekus_Intereg_projekt_090424.pdfMaaturism ja ELTÜ_ELin Priks_välisturgude võimekus_Intereg_projekt_090424.pdf
Maaturism ja ELTÜ_ELin Priks_välisturgude võimekus_Intereg_projekt_090424.pdfEesti Loodusturism
 
Annika Klemets_Loodusturismi väljavaated rohehoiu perspektiivist_strateegiapa...
Annika Klemets_Loodusturismi väljavaated rohehoiu perspektiivist_strateegiapa...Annika Klemets_Loodusturismi väljavaated rohehoiu perspektiivist_strateegiapa...
Annika Klemets_Loodusturismi väljavaated rohehoiu perspektiivist_strateegiapa...Eesti Loodusturism
 
LeaderLiit_Triin Kallas_strateegiapäev 09.04.pdf
LeaderLiit_Triin Kallas_strateegiapäev 09.04.pdfLeaderLiit_Triin Kallas_strateegiapäev 09.04.pdf
LeaderLiit_Triin Kallas_strateegiapäev 09.04.pdfEesti Loodusturism
 
KKA_Kaja Lotman_Loodusturism ja ettevõtlus kaitsealadel_strateegiapaev_090424...
KKA_Kaja Lotman_Loodusturism ja ettevõtlus kaitsealadel_strateegiapaev_090424...KKA_Kaja Lotman_Loodusturism ja ettevõtlus kaitsealadel_strateegiapaev_090424...
KKA_Kaja Lotman_Loodusturism ja ettevõtlus kaitsealadel_strateegiapaev_090424...Eesti Loodusturism
 
Maaturism_Raili Mengel_Loodusturismi ettevõtjate võimalused Eesti Maaturismi ...
Maaturism_Raili Mengel_Loodusturismi ettevõtjate võimalused Eesti Maaturismi ...Maaturism_Raili Mengel_Loodusturismi ettevõtjate võimalused Eesti Maaturismi ...
Maaturism_Raili Mengel_Loodusturismi ettevõtjate võimalused Eesti Maaturismi ...Eesti Loodusturism
 
VisitEstonia_Lily Allas_VisitEstonia loodusturismi tegevused_strateegiapaev_0...
VisitEstonia_Lily Allas_VisitEstonia loodusturismi tegevused_strateegiapaev_0...VisitEstonia_Lily Allas_VisitEstonia loodusturismi tegevused_strateegiapaev_0...
VisitEstonia_Lily Allas_VisitEstonia loodusturismi tegevused_strateegiapaev_0...Eesti Loodusturism
 
2024-04-09 Visit Estonia esitlus_Piret Koodi_Loodusturismi strateegiapäev_väl...
2024-04-09 Visit Estonia esitlus_Piret Koodi_Loodusturismi strateegiapäev_väl...2024-04-09 Visit Estonia esitlus_Piret Koodi_Loodusturismi strateegiapäev_väl...
2024-04-09 Visit Estonia esitlus_Piret Koodi_Loodusturismi strateegiapäev_väl...Eesti Loodusturism
 
EMÜ_Marika Kose_loodust hoidev loodusturism_strateegiapaev_090424.pdf
EMÜ_Marika Kose_loodust hoidev loodusturism_strateegiapaev_090424.pdfEMÜ_Marika Kose_loodust hoidev loodusturism_strateegiapaev_090424.pdf
EMÜ_Marika Kose_loodust hoidev loodusturism_strateegiapaev_090424.pdfEesti Loodusturism
 
RMK_Marge Rammo_Külastuskorraldus_strateegiapäev_0904.pdf
RMK_Marge Rammo_Külastuskorraldus_strateegiapäev_0904.pdfRMK_Marge Rammo_Külastuskorraldus_strateegiapäev_0904.pdf
RMK_Marge Rammo_Külastuskorraldus_strateegiapäev_0904.pdfEesti Loodusturism
 
EMÜ_Tarmo Pilving_strateegiapaev_090424.pptx
EMÜ_Tarmo Pilving_strateegiapaev_090424.pptxEMÜ_Tarmo Pilving_strateegiapaev_090424.pptx
EMÜ_Tarmo Pilving_strateegiapaev_090424.pptxEesti Loodusturism
 

Último (11)

Maaturism_Raili Mengel_Märgis Matkajasõbralik_Hiker-friendly_strateegiapaev_0...
Maaturism_Raili Mengel_Märgis Matkajasõbralik_Hiker-friendly_strateegiapaev_0...Maaturism_Raili Mengel_Märgis Matkajasõbralik_Hiker-friendly_strateegiapaev_0...
Maaturism_Raili Mengel_Märgis Matkajasõbralik_Hiker-friendly_strateegiapaev_0...
 
Maaturism ja ELTÜ_ELin Priks_välisturgude võimekus_Intereg_projekt_090424.pdf
Maaturism ja ELTÜ_ELin Priks_välisturgude võimekus_Intereg_projekt_090424.pdfMaaturism ja ELTÜ_ELin Priks_välisturgude võimekus_Intereg_projekt_090424.pdf
Maaturism ja ELTÜ_ELin Priks_välisturgude võimekus_Intereg_projekt_090424.pdf
 
Annika Klemets_Loodusturismi väljavaated rohehoiu perspektiivist_strateegiapa...
Annika Klemets_Loodusturismi väljavaated rohehoiu perspektiivist_strateegiapa...Annika Klemets_Loodusturismi väljavaated rohehoiu perspektiivist_strateegiapa...
Annika Klemets_Loodusturismi väljavaated rohehoiu perspektiivist_strateegiapa...
 
LeaderLiit_Triin Kallas_strateegiapäev 09.04.pdf
LeaderLiit_Triin Kallas_strateegiapäev 09.04.pdfLeaderLiit_Triin Kallas_strateegiapäev 09.04.pdf
LeaderLiit_Triin Kallas_strateegiapäev 09.04.pdf
 
KKA_Kaja Lotman_Loodusturism ja ettevõtlus kaitsealadel_strateegiapaev_090424...
KKA_Kaja Lotman_Loodusturism ja ettevõtlus kaitsealadel_strateegiapaev_090424...KKA_Kaja Lotman_Loodusturism ja ettevõtlus kaitsealadel_strateegiapaev_090424...
KKA_Kaja Lotman_Loodusturism ja ettevõtlus kaitsealadel_strateegiapaev_090424...
 
Maaturism_Raili Mengel_Loodusturismi ettevõtjate võimalused Eesti Maaturismi ...
Maaturism_Raili Mengel_Loodusturismi ettevõtjate võimalused Eesti Maaturismi ...Maaturism_Raili Mengel_Loodusturismi ettevõtjate võimalused Eesti Maaturismi ...
Maaturism_Raili Mengel_Loodusturismi ettevõtjate võimalused Eesti Maaturismi ...
 
VisitEstonia_Lily Allas_VisitEstonia loodusturismi tegevused_strateegiapaev_0...
VisitEstonia_Lily Allas_VisitEstonia loodusturismi tegevused_strateegiapaev_0...VisitEstonia_Lily Allas_VisitEstonia loodusturismi tegevused_strateegiapaev_0...
VisitEstonia_Lily Allas_VisitEstonia loodusturismi tegevused_strateegiapaev_0...
 
2024-04-09 Visit Estonia esitlus_Piret Koodi_Loodusturismi strateegiapäev_väl...
2024-04-09 Visit Estonia esitlus_Piret Koodi_Loodusturismi strateegiapäev_väl...2024-04-09 Visit Estonia esitlus_Piret Koodi_Loodusturismi strateegiapäev_väl...
2024-04-09 Visit Estonia esitlus_Piret Koodi_Loodusturismi strateegiapäev_väl...
 
EMÜ_Marika Kose_loodust hoidev loodusturism_strateegiapaev_090424.pdf
EMÜ_Marika Kose_loodust hoidev loodusturism_strateegiapaev_090424.pdfEMÜ_Marika Kose_loodust hoidev loodusturism_strateegiapaev_090424.pdf
EMÜ_Marika Kose_loodust hoidev loodusturism_strateegiapaev_090424.pdf
 
RMK_Marge Rammo_Külastuskorraldus_strateegiapäev_0904.pdf
RMK_Marge Rammo_Külastuskorraldus_strateegiapäev_0904.pdfRMK_Marge Rammo_Külastuskorraldus_strateegiapäev_0904.pdf
RMK_Marge Rammo_Külastuskorraldus_strateegiapäev_0904.pdf
 
EMÜ_Tarmo Pilving_strateegiapaev_090424.pptx
EMÜ_Tarmo Pilving_strateegiapaev_090424.pptxEMÜ_Tarmo Pilving_strateegiapaev_090424.pptx
EMÜ_Tarmo Pilving_strateegiapaev_090424.pptx
 

Sissejuhatus andmekaevesse hariduses

  • 2. Mis on andmekaeve?  Prognooside ja mustrite automatiseeritud väljasõelumine suurtest andmekogudest  Populaarsuse põhjused: suuremad andmehulgad, digitaalsed jalajäljed, kiiremad arvutid, analüütika, open linked data, soovitus- süsteemid  Kust tulevad andmed: logifailid, andmebaasi- tarkvara, sotsiaalmeedia, nuhkvara…  Andmed > Informatsioon > Teadmus > Tarkus
  • 3. Näiteid  http://www.educationaldatamining.org/JEDM  Koostöömustrite kaevandamine tuutori nõustamisvestlustest  Algaja internetikasutaja toevajaduse analüüs  Tõenäosuslik mudel relevantsete ja mitterelevantsete lausete eristamiseks matemaatikaülesannetes
  • 4. Mille poolest AK erineb statistikast?  Statistikud koguvad üldjuhul sihipäraselt oma andmestiku, andmekaevajad kasutavad arvutisüsteemides tekkivat andmesegadust  Osa andmekaeve tehnikatest põhineb statistikal  Andmekaeve võimaldab proaktiivset tegutsemist  Andmekaeve on pigem tulevikku-, statistika tagasivaatav
  • 5. Andmekaeve protsess Allikas: Wikipeedia
  • 6. Peamised andmekaeve tehnikad  Klassikalised tehnikad:  Statistika: keskmised, hajuvus, histogramm, regressi oon  Lähimad naabrid  Klasteranalüüs: hierarhiline, k-means  Uue põlvkonna tehnikad:  Otsustuspuud  Tehisnärvivõrgud  Reeglite tuletamine
  • 7. Harjutus: histogramm  Koosta histogramm AKU õpiku ptk. 3.6 põhjal  Box.com/AKU12
  • 8. Harjutus: Google Analytics  Demo: Dippleri analüütika  Loo endale GA konto ja lisa see oma blogile
  • 9. Demo: lineaarne regressioon  Weka: http://www.cs.waikato.ac.nz/~ml/weka/  Lineaarne regressioon Weka abil
  • 10. Harjutus: Twitteri analüüs  http://www.technologyreview.com/view/421201/h ow-to-use-twitter-for-personal-data-mining/  Viige selle näite eeskujul läbi Wordle analüüs oma Twitteri (vms) andmevoo baasil
  • 12. Kirjandus  Innar Liiv (2002) Andmekaevandamine. AA  Kurt Thearling (2010) Data Mining Techniques  Educational Data Mining Society: http://www.educationaldatamining.org  Knowledge Discovery Nuggets: http://www.kdnuggets.com