1. Открытые базы знаний и
семантические вики
Катков Юрий, WikiVote!
1

2. Содержание
• Linked Open Data и Semantic Web
• Стандарты LOD
• Основные базы знаний и примеры использования
• Dbpedia
• Мастер-класс по Dbpedia
2

3. Semantic web и Linked Data
Основные стандарты
3

4. Linked Open Data и Semantic Web
• Открытые базы знаний являются частью направления Semantic
Web
• Ядром Semantic Web являются стандарты
• Объект стандартизации – способ представления и обмена
данными
• Linked Data использует только часть стандартов Semantic Web
4

5. 5
Слоеный пирог SW

6. 6
Слоеный пирог SW

7. URI
URL – частный
случай URI
Uniform Resource Identifier
основное правило: не существует двух объектов с
одинаковыми URI
7

8. 8
Слоеный пирог SW

9. RDF позволяет представлять данные
в виде троек, формируя граф данных
( subject , predicate , object )
9

10. RDF позволяет представлять данные
в виде троек, формируя граф данных
( subject , predicate , object )
URI
URI
URI или литерал
10

11. Леонардо да Винчи родился в
городе Винчи 15 апреля 1452 года
Леонардо место_рождения Винчи
Леонардо дата_рождения 15.04.1452
<http://ex.org/Leo> <http://ex.org/birthDate> "1452-04-15"^^xsd:date
<http://ex.org/Leo> <http://ex.org/birthPlace> <http://ex.org/Vinci>
11

12. RDF позволяет представлять данные
в виде троек, формируя граф данных
( subject , predicate , object )
вершина
ребро
вершина
12

13. 13

14. 14

15. 15

16. 16

17. RDF имеет несколько способов записи
17

18. Turtle
N3
N-triples
RDF имеет несколько способов записи
18

19. @prefix xsd:
<http://www.w3.org/2001/XMLSchema#> .
@prefix ex: <http://ex.org/> .
ex:Leo ex:birthDate "1452-04-15"^^xsd:date .
ex:Leo ex:birthPlace ex:Vinci .
19

20. Turtle
N3
N-triples
RDF имеет несколько способов записи
XML
JSON
20

21. <?xml version="1.0"?>
<rdf:RDF
xmlns:xsd="http://www.w3.org/2001/XMLSchema#"
xmlns:ex="http://ex.org/"
xmlns:rdf="http://www.w3.org/1999/02/22-rdf-syntaxns#">
<rdf:Description rdf:about="http://ex.org/Leo">
<ex:birthDate rdf:datatype =
"http://www.w3.org/2001/XMLSchema#date">1452-04-15
</ex:birthDate>
<ex:birthPlace rdf:resource="http://ex.org/Vinci" />
</rdf:Description>
</rdf:RDF>
21

22. 22
Слоеный пирог SW

23. RDFS и OWL
Стандарты для создания структурированных словарей
23

24. RDFS и OWL
Стандарты для создания структурированных словарей
24

25. RDFS и OWL
Стандарты для создания структурированных словарей
25

26. RDFS и OWL
Стандарты для создания
26

27. RDFS и OWL
Стандарты для создания
27

28. глоссариев
RDFS и OWL
Стандарты для создания
28

29. тезаурусов
глоссариев
RDFS и OWL
Стандарты для создания
29

30. тезаурусов
глоссариев
RDFS и OWL
Стандарты для создания
тематических карт
30

31. тезаурусов
глоссариев
RDFS и OWL
Стандарты для создания
тематических карт
31

32. тезаурусов
глоссариев
семантических сетей
RDFS и OWL
Стандарты для создания
тематических карт
32

33. тезаурусов
глоссариев
семантических сетей
RDFS и OWL
Стандарты для создания
тематических карт
33

34. тезаурусов
глоссариев
семантических сетей
RDFS и OWL
Стандарты для создания
TBox
тематических карт
34

35. тезаурусов
глоссариев
семантических сетей
RDFS и OWL
Стандарты для создания
онтологий
TBox
тематических карт
35

36. тезаурусы
глоссарии
семантические сети
ЗАЧЕМ НУЖНЫ
онтологии
TBox
тематические карты
36

37. Онтологии нужны для
37

38. стандартизации
терминологии
«
Предложение: связь национальность
Будем всегда называть термином
http://dbpedia.org/property/nationality
»
Онтологии нужны для
38

39. стандартизации
терминологии
«
«
Предложение: связь национальность
Будем всегда называть термином
http://dbpedia.org/property/nationality
Давайте, если говорим о Леонардо да
Винчи, будем всегда пользоваться его
идентификатором в Dbpedia
»
»
Онтологии нужны для
Любой, кто имеет свойство
национальность, является
человеком, а его национальность
является страной. А страна – это
частный случай населенного места
«
»
автоматического
обогащения данных
39

40. 40

41. 41

42. 42

43. 43

44. 44

45. 45

46. 46
Слоеный пирог SW

47. SPARQL
Запросы к RDF-данным
47

48. SPARQL
SPARQL Protocol
and
RDF Query Language
48

49. Выполняем на dbpedia.org/sparql
PREFIX rdf:
<http://www.w3.org/1999/02/22-rdf-syntax-ns#>
PREFIX dbpedia-owl:
<http://dbpedia.org/ontology/>
SELECT * WHERE
{
?a rdf:type dbpedia-owl:Company .
}
LIMIT 100
OFFSET 300
49

50. 50

51. Запрос:
?a rdf:type dbpedia-owl:Company
51

52. Запрос:
?a rdf:type dbpedia-owl:Company
52

53. Открытые базы знаний
Обзор состава данных Linked data
Применение в реальных приложениях
53

54. 54

55. 55

56. 56

57. 57

58. 58

59. 59

60. 60

61. 61

62. данные
Откуда берутся дети?
62

63. данные
Откуда берутся дети?
63

64. данные
Откуда берутся дети?
64

65. данные
Откуда берутся дети?
SIOC
exporters
65

66. 66

67. Для чего нужны данные
67

68. Открытые гос. данные
68

69. Для чего нужны данные
69

70. Рекомендационные
системы
70

71. Для чего нужны данные
71

72. 72

73. Для чего нужны данные
73

74. Pubmed
SNOMED-CT
74

75. Для чего нужны данные
75

76. CKAN
Как искать данные
Q&A
Mailing lists
76

77. 77

78. Как знакомиться
с данными
VoiD
Linksailor
Semantic Sitemap
78

79. http://freebase.com/
79

80. http://mappings.dbpedia.org/server/statistics/ru/
80

81. Пробные SPARQL-запросы
SELECT DISTINCT ?p
WHERE
{
?s ?p ?o .
}
LIMIT 1000
81

82. Пробные SPARQL-запросы
SELECT ?p
(COUNT ?p as ?countPredicate)
WHERE {
?s ?p ?o
}
GROUP BY ?p
ORDER BY DESC (?countPredicate)
LIMIT 100
16.03.2012
Прагматическое введение в Linked Data
82

83. Повсеместно используемые термины
rdf:type
owl:Class
skos:Concept
a
rdfs:subClassOf
owl:sameAs
rdfs:label
rdfs:Class
83

84. Очень частые термины
foaf:name
skos:related
dc:subject
rdfs:range
rdfs:domain
84

92. http://dbpedia.org/sparql

93. SELECT * WHERE
{
?a <http://www.w3.org/1999/02/22-rdf-syntax-ns#type> <http://dbpedia.org/ontology/Company> .
}
LIMIT 100
93

94. PREFIX rdf: <http://www.w3.org/1999/02/22-rdf-syntax-ns#>
PREFIX dbpedia-owl: <http://dbpedia.org/ontology/>
SELECT * WHERE
{
?a rdf:type dbpedia-owl:Company .
}
LIMIT 100
94

95. SELECT * WHERE
{
?a rdf:type dbpedia-owl:Company .
}
LIMIT 100
95

96. SELECT * WHERE
{
?a rdf:type
dbpedia-owl:Company .
?a dbpprop:companyName ?corporation .
}
LIMIT 100
96

97. SELECT * WHERE
{
;
?a rdf:type
dbpedia-owl:Company
dbpprop:companyName ?corporation .
}
LIMIT 100
97

98. SELECT * WHERE
{
?companyURL rdf:type
dbpedia-owl:Company ;
dbpprop:companyName ?corporation
dbpedia-owl:foundedBy ?founderURL
}
LIMIT 100
;
.
98

99. SELECT * WHERE
{
?companyURL rdf:type
dbpedia-owl:Company;
dbpprop:companyName ?corporation
;
dbpedia-owl:foundedBy ?founderURL
.
?founderURL rdf:type
dbpedia-owl:Artist .
}
LIMIT 100
99

100. SELECT * WHERE
{
?companyURL rdf:type
dbpedia-owl:Company ;
dbpprop:companyName ?corporation
;
dbpedia-owl:foundedBy ?founderURL
.
{ ?founderURL rdf:type dbpedia-owl:Artist. }
UNION
{ ?founderURL rdf:type dbpedia-owl:Actor. }
UNION
{ ?founderURL rdf:type dbpedia-owl:MartialArtist. }
UNION
{ ?founderURL dbpedia-owl:occupation dbpedia:Martial_arts.}
}
LIMIT 100
100

101. SELECT * WHERE
{
?companyURL rdf:type
dbpedia-owl:Company ;
dbpprop:companyName ?corporation
;
dbpedia-owl:foundedBy ?founderURL
.
?founderURL rdf:type
dbpedia-owl:Artist
;
rdf:type
dbpedia-owl:Actor
;
rdf:type
dbpedia-owl:MartialArtist ;
dbpedia-owl:occupation dbpedia:Martial_arts .
}
LIMIT 100
101

102. SELECT * WHERE
{
?companyURL rdf:type
dbpedia-owl:Company ;
dbpprop:companyName ?corporation
;
dbpedia-owl:foundedBy ?founderURL
.
?founderURL dbpedia-owl:birthDate ?founderBirth
.
FILTER (?founderBirth > "1940-03-10"^^xsd:date )
.
{ ?founderURL rdf:type dbpedia-owl:Artist. }
UNION
{ ?founderURL rdf:type dbpedia-owl:Actor. }
UNION
{ ?founderURL rdf:type dbpedia-owl:MartialArtist. }
UNION
{ ?founderURL dbpedia-owl:occupation dbpedia:Martial_arts.}
}
LIMIT 100
102