O documento descreve a implementação de um sistema de busca avançada para resumos de currículos (CVs) no site Stack Overflow Careers. O sistema usa tags para indexar os CVs no Elasticsearch e permite buscas complexas através da linguagem CQL, melhorando significativamente a velocidade e relevância das buscas por candidatos.

1. EXTRAÇÃO DE INFORMAÇÃO NO
STACKOVERFLOW CAREERS
Roberta Arcoverde / @rla4
.Net Architects Days 2014

2. /WHOIS ROBERTA
recifense
cientista da computação, UFPE, 2008
mestre em informática, PUC-Rio, 2012
participante do DNA desde 2008
developer, Radix, 2010-2014
full-stack web developer, Stack Exchange, 2014
1a mulher palestrando no DNAD :O :O :O

3. começou em 2008
3MM usuários registrados
50MM visitantes únicos por mês
2000-3000 hits por segundo
top 50 sites mais acessados do mundo*
*segundo o Alexa. sei lá se é verdade. deve ser.

5. TUDO ISSO COM APENAS 9 SERVIDORES

6. 350k usuários registrados (~200k com um perfil/CV)
~3000 vagas ativas/dia

7. PRINCIPAL OBJETIVO
Ajudar empresas diferenciadas a encontrar profissionais
também diferenciados
(e vice-versa!)

8. ...MAS AINDA SÃO MUITOS USUÁRIOS!

9. TAG ENGINE FOR THE RESCUE!
Perguntas no StackOverflow são associadas a tags
Mesma ideia aplicada ao Careers, mas ao invés de perguntas e
respostas, taggeamos CVs!

10. NEM SÓ DE TAG VIVE O CANDIDATO
1. Como buscar por OSS? E por empregador?
2. Mike and also Michael?
3. Google and not Google?
4. Por que este candidato foi retornado na minha busca?

11. CV == DOCUMENTO

12. ELASTICSEARCH
Engine de análise, indexação e busca
Usa Lucene internamente
Restful API, document database (JSON)
Cluster de 3 servidores

14. "_source": {
"cvId": 195731,
"stackExchangeAnswersTags": [
"c#",
"javascript",
".net"
],
"likeTags": [
"c#",
"programming-languages",
"functional-programming",
"compiler",
"java",
"haskell",
"javascript",
"tdd",
"aspect-oriented",
"asp.net-mvc"
],
"projects": [],
"yearsOfExperienceTags": [
"aop",
"architecture",
"asp.net",
"asp.net-mvc",
"c#",
"html5",
"iis",
"javascript",
"jquery",
"knockout.js",
"msbuild",
"nunit",

15. HABEMUS DOCUMENTOS
term queries vs filters
contexto (snippets)
ranking
mike == michael, ruby on rails == ror
...mas nada de busca avançada

17. CQL
Buscas mais poderosas e flexíveis lembram do Google and not Google?
gmail search
google drive search
trello search

18. FINALMENTE, A 'ARQUITETURA'

19. CQL
Boolean queries
(c# or java) and not manager
Operadores específicos
education:(Stanford, MIT, Xavier's School for Gifted Yougsters)
Include/exclude
ex:students,remote

21. IMPLEMENTAÇÃO
(c# or java) and employer:microsoft

22. LEXER
char-buffering
(c# or java) and employer:microsoft
LPAREN Term OR RPAREN AND Operator
COLON Term

23. PARSER
top-down, descendente recursivo
LPAREN Term OR RPAREN AND Operator
COLON Term

24. CQL
(c# or java) and
employer:microsoft
TERM QUERY
"query":"((c# OR java)
AND
experienceName:microsoft)"
exclude:student
"must":["term": {
"isStudent": { "value":
"false" }} ]

25. FRESCURINHAS FINAIS
SYNTAX HIGHLIGHTING
AUTOCOMPLETE
1-WAY BINDING

27. RESULTADOS LEGAIS
BUSCA FICOU > 30% MAIS RÁPIDA
NÚMERO DE CANDIDATE SEARCH SUBSCRIPTIONS DOBROU (!)

28. OBRIGADA :)