sergiooramas,)mohamed)sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf ·...

52
Knolwedge Acquisi0on from Music Digital Libraries Sergio Oramas, Mohamed Sordo

Upload: others

Post on 24-Jun-2020

0 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Knolwedge  Acquisi0on  from  Music  Digital  Libraries    

 Sergio  Oramas,  Mohamed  Sordo  

Page 2: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  Musicological  Knowledge  is  hidden  between  the  lines  •  Machines  don’t  know  how  to  read  

Mo0va0on  

Page 3: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  Obtain  knowledge  automa0cally  •  Make  complex  ques0ons  •  Visualize  the  informa0on  •  Improve  naviga0on  •  Share  knowledge  

Why  Knowledge  Acquisi0on?  

4  

Page 4: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Musical  Libraries  

Page 5: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Musical  Libraries  

digital  recording,  scan  

Page 6: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Musical  Libraries  

digital  recording,  scan  

OCR,  manual  transcrip0on  

Page 7: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Musical  Libraries  

digital  recording,  scan  

OCR,  manual  transcrip0on  

Informa0on  Extrac0on,  seman0c  annota0on  

Page 8: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Musical  Libraries  

Current  DL  

digital  recording,  scan  

OCR,  manual  transcrip0on  

Informa0on  Extrac0on,  seman0c  annota0on  

Page 9: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Musical  Libraries  

Current  DL  

Web  search  

digital  recording,  scan  

OCR,  manual  transcrip0on  

Informa0on  Extrac0on,  seman0c  annota0on  

Page 10: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Musical  Libraries  

digital  recording,  scan  

OCR,  manual  transcrip0on  

Informa0on  Extrac0on,  seman0c  annota0on  

Current  DL  

Web  search  

Page 11: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  The  Seman&c  Web  aims  at  conver0ng  the  current  web,  dominated  by  unstructured  and  semi-­‐structured  documents  into  a  web  of  linked  data.  

•  Achievements  useful  for  Digital  Libraries  –  Common  framework  for  data  representa0on  and  interconnec0on  (RDF,  ontologies)  

–  Seman0c  technologies  to  annotate  texts  (En0ty  Linking)  –  Language  for  complex  queries  (SPARQL)  

Seman0c  Web  

Page 12: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Wikipedia  and  DBpedia  

13  

-­‐  Digital  Encyclopedia  -­‐  Unstructured  -­‐  Keyword  search  

-­‐  Knowledge  Base  -­‐  Structured  -­‐  Query  search  

Page 13: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

14  

Page 14: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

15  

Page 15: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  Dbpedia  example  queries  –  Composers  born  in  Vienna  in  XVIII  Century  –  American  jazz  musicians  that  have  wri\en  songs  recorded  by  RCA  Records  

•  Dbpedia  graph  applica0ons  –  En0ty  Relevance  –  En0ty  Similarity  –  En0ty  Recommenda0on  

DBpedia  

16  

Page 16: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Google  Knowledge  Graph  

17  

Page 17: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  Current  naviga0on  –  Indexes  –  Keyword-­‐based  search  

•  From  searchable  repositories  to  knowledge  environments  –  Complex  queries  –  Informa0on  visualiza0on  –  Recommenda0on  –  Data  Analy0cs  –  Q&A  

Music  Digital  Libraries  

Page 18: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Music  Digital  Libraries  

19  

Page 19: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Music  Digital  Libraries  

20  

Page 20: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  Encyclopedic  dic0onary  •  One  of  the  largest  reference  works  in  Western  music  •  Ar0st  biographies  crawled  from  the  Grove  Music  Online  

–  16,707  biographies  (1st  paragrahph)  –  From  pre-­‐medieval  to  contemporary  

Dataset:  The  New  Grove  

Page 21: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  What  are  the  most  relevant  music  schools?  •  What  are  the  ar0sts  most  similar  to  Schoenberg?  •  Which  are  the  most  represented  roles  in  the  Grove?  •  Is  there  a  migra0on  tendency  in  ar0sts?  To  which  ci0es?  •  What  is  the  best  city  to  die  for  a  musician?  

Dataset:  The  New  Grove  

22  

Page 22: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Dataset:  The  New  Grove  

23  

Page 23: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

 Anton  Webern  (b  Vienna,  3  Dec  1883;  d  Mi\ersill,15  Sept  1945).  Austrian  composer  and  conductor.  Webern,  who  was  probably  Schoenberg's  first  private  pupil,  and  Alban  Berg,  who  came  to  him  a  few  weeks  later  […]  Boulez  and  Stockhausen  and  other  integral  serialists  of  the  Darmstadt  School  […]  

Informa0on  Extrac0on  

24  

Page 24: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

 Anton  Webern  (b  Vienna,  3  Dec  1883;  d  Mi\ersill,15  Sept  1945).  Austrian  composer  and  conductor.  Webern,  who  was  probably  Schoenberg's  first  private  pupil,  and  Alban  Berg,  who  came  to  him  a  few  weeks  later  […]  Boulez  and  Stockhausen  and  other  integral  serialists  of  the  Darmstadt  School  […]  

Informa0on  Extrac0on  

25  

Page 25: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

 Anton  Webern  (b  Vienna,  3  Dec  1883;  d  Mi\ersill,15  Sept  1945).  Austrian  composer  and  conductor.  Webern,  who  was  probably  Schoenberg's  first  private  pupil,  and  Alban  Berg,  who  came  to  him  a  few  weeks  later  […]  Boulez  and  Stockhausen  and  other  integral  serialists  of  the  Darmstadt  School  […]  

Informa0on  Extrac0on  

26  

Page 26: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

 Anton  Webern  (b  Vienna,  3  Dec  1883;  d  Mi\ersill,15  Sept  1945).  Austrian  composer  and  conductor.  Webern,  who  was  probably  Schoenberg's  first  private  pupil,  and  Alban  Berg,  who  came  to  him  a  few  weeks  later  […]  Boulez  and  Stockhausen  and  other  integral  serialists  of  the  Darmstadt  School  […]  

Informa0on  Extrac0on  

27  

Page 27: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

 Anton  Webern  (b  Vienna,  3  Dec  1883;  d  Mi\ersill,15  Sept  1945).  Austrian  composer  and  conductor.  Webern,  who  was  probably  Schoenberg's  first  private  pupil,  and  Alban  Berg,  who  came  to  him  a  few  weeks  later  […]  Boulez  and  Stockhausen  and  other  integral  serialists  of  the  Darmstadt  School  […]  

Informa0on  Extrac0on:  En0ty  Linking  

28  

Domain  Knowledge  Base  

Page 28: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  Webern,  who  was  probably  Schoenberg's  first  private  pupil  

Informa0on  Extrac0on:  Rela0on  Extrac0on  

29  

Page 29: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  Webern,  who  was  probably  Schoenberg's  first  private  pupil  

Informa0on  Extrac0on:  Rela0on  Extrac0on  

30  

Webern   Schoenberg  pupil_of  

Page 30: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Methodology  

31  

Page 31: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Knowledge  Graph  

32  

Page 32: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  16,707  biographies  •  434  roles  •  Graph  

–  47,367  nodes  –  274,333  edges  

Knowledge  Graph:  Data  Analy0cs  

33  

Role   Amount  composer                   2618  teacher   1065  conductor                 968  pianist   704  organist                   676  singer       404  violinist                 285  …      musicologist           144  cri0c       133  

Page 33: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

34  

Birth  Year  

Death  Year  

Page 34: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

35  

Birth  Year  

Death  Year  

Page 35: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Knowledge  Graph:  Data  Analy0cs  

36  

Country   Births   Deaths   Difference  United  States   2317   2094   -­‐10%  Italy   1616   1279   -­‐21%  Germany   1270   1292   2%  France   991   1058   7%  United  Kingdom   882   877   -­‐1%  

City   Births   Deaths   Difference  London   322   507   57%  Paris   304   720   137%  New  York   266   501   88%  Vienna   177   292   65%  Rome   159   256   61%  

Page 36: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  City  –  Paris,  London,  Vienna,  Rome,  Venice,  Berlin,  Paris,  New  York  

•  Venue  –  Covent  Garden  Theatre,  King's  Theatre,  Drury  Lane,  Carnegie  Hall,  Théâtre  de  la  Monnaie,  Stad\heater,  Theatre  Royal,  …  

•  Educa0onal  Ins0tu0on  –  Paris  Conservatoire,  Moscow  Conservatory,  Juilliard  School,  St  Petersburg  Conservatory,  Bmus,  Prague  Conservatory,  Leipzig  Conservatory,  Vienna  Hochschule  für  Musik,  ...  

Knowledge  Graph:  En0ty  Relevance  

37  

Page 37: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  Biography  subject  –  Haydn,  Claude  Debussy,  Arnold  Schoenberg,  Robert  Stevenson,  Paul  Hindemith,  Giovanni  Pierluigi  da  Palestrina,  Gustav  Mahler,  Maurice  Ravel,  Jean-­‐Philippe  Rameau  

–  Mozart?,  Bach?,  Wagner?  •  Genre  

–  chamber  music,  cappella,  jazz,  folk  music,  avant  garde,  baroque  music,  electronic  music,  musical  theatre,  plainchant  

Knowledge  Graph:  En0ty  Relevance  

38  

Page 38: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  PageRank  algorithm  and  Maximal  Common  Subgraph    •  Arnold  Schoenberg:  Anton  Webern,  Paul  Hindemith,  Gustav  

Mahler,  Alban  Berg,  Claude  Debussy  •  Guido  Adler:  Heinrich  Jalowetz,  Eusebius  Mandyczewski,  

Robert  Fuchs,  Karl  Weigl,  Anton  Wranitzky  •  Manuel  de  Falla:  Ricardo  Viñes,  Juan  Vicente  Lecuna,  Enrique  

Granados,  Miguel  Llobet  Soles,  Luigi  Russolo  •  Miles  Davis:  Dizzy  Gillespie,  Herbie  Hancock,  Paul  Chambers,  

Tony  Williams,  Cannonball  Adderley  

Knowledge  Graph:  En0ty  Similarity  

39  

Page 39: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Rela0ons  Graph:  Informa0on  Visualiza0on  

40  

Page 40: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Rela0ons  Graph:  Informa0on  Visualiza0on  

41  

Page 41: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  Crea0on  and  cura0on  of  a  library  from  Web  content  •  FlaBase:  Flamenco  Knowledge  Base  

Mixing  Different  Data  Sources  

42  

Page 42: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  Data  Acquisi0on  –  APIs  –  Web  crawling  –  SPARQL  endpoints  

•  En0ty  Resolu0on  –  String  similarity  between  labels  –  Graph  similarity  (context  informa0on)  

Mixing  Different  Data  Sources  

43  

Page 43: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

FlaBase:  Flamenco  Knowledge  Base  

44  

Page 44: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  Data  gathered  –  1,174  Ar0sts  (text  biography)  –  76  Palos  (flamenco  genres)  –  2,913  Albums  –  14,078  Tracks  –  771  Andalusian  loca0ons  

•  Knowledge  Extracted  –  Place  of  birth  –  Date  of  birth  –  En0ty  men0ons  in  text  

FlaBase:  Flamenco  Knowledge  Base  

45  

Page 45: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  Number  of  ar0sts  by  year  of  birth  

FlaBase:  Data  Analy0cs  

46  

Page 46: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

FlaBase:  Data  Analy0cs  

47  

Page 47: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  Flamenco  expert  evalua0on  

FlaBase:  Ar0st  Relevance  

48  

Precision  Values  

Page 48: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  Music  Digital  Libraries  can  benefit  from  seman0c  approaches    •  Music  Digital  Libraries  are  s0ll  in  an  early  stage  of  

development  compared  to  the  Web  (Linked  Open  Data,  Google  Knowledge  Graph)  

•  Knowledge  acquisi0on  from  Digital  Libraries  can  help  musicologists  not  only  to  search  content,  but  also  to  discover  new  knowledge  

Conclusions  

49  

Page 49: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  This  work  was  partly  funded  by  the  COFLA2  research  project  (Proyectos  de  Excelencia  de  la  Junta  de  Andalucía,  FEDER  P12-­‐TIC-­‐1362).  

Aknowledgments  

50  

Page 50: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

•  Oramas  S.,  Sordo  M.,  Espinosa-­‐Anke  L.,  Serra  X.  (2015).  A  Seman,c-­‐based  approach  for  Ar,st  Similarity.  Interna0onal  Society  for  Music  Informa0on  Retrieval  Conference  ISMIR  2015.  In  Press.  

•  Oramas  S.,  Gomez  F.,  Gomez  E.,  Mora  J.  (2015).  FlaBase:  Towards  the  crea,on  of  a  Flamenco  Music  Knowledge  Base.  Interna0onal  Society  for  Music  Informa0on  Retrieval  Conference  ISMIR  2015.  In  Press.  

•  Sordo,  M.,  Oramas  S.,  &  Espinosa-­‐Anke  L.  (2015).  Extrac,ng  Rela,ons  from  Unstructured  Text  Sources  for  Music  Recommenda,on.  Interna0onal  Conference  on  Applica0ons  of  Natural  Language  to  Informa0on  Systems  NLDB  2015.  

•  Oramas  S.,  Sordo  M.,  Espinosa-­‐Anke  L.  (2015).  A  Rule-­‐based  Approach  to  Extrac,ng  Rela,ons  from  Music  Tidbits.  2nd  Workshop  on  Knowledge  Extrac0on  from  Text  at  WWW  2015.  

•  Oramas  S.,  Sordo  M.,  Serra  X.  (2014).  Automa,c  Crea,on  of  Knowledge  Graphs  from  Digital  Musical  Document  Libraries.  Conference  in  Interdisciplinary  Musicology  CIM  2014.  

Bibliography  

51  

Page 51: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)

Knolwedge  Acquisi0on  from  Music  Digital  Libraries    

 Sergio  Oramas,  Mohamed  Sordo  

 

 [email protected]  

@sergiooramas  

Thanks!  

Page 52: SergioOramas,)Mohamed)Sordo)mtg.upf.edu/system/files/publications/presentation_iaml_pub_0.pdf · •OramasS.,) Sordo)M.,)Espinosa Anke)L.,)SerraX.)(2015).) A&Seman,cbased& approach&for&Ar,stSimilarity.)Internaonal)Society)for)Music)Informaon)Retrieval)