Social bookmarking systems and their emergent information structures, known as folksonomies, are increasingly important data sources for Semantic Web applications. A key question for harvesting semantics from these systems is how to extend and adapt traditional notions of similarity to folksonomies, and which measures are best suited for applications such as navigation support, semantic search, and ontology learning. Here we build an evaluation framework to compare various general folksonomy-based similarity measures derived from established information-theoretic, statistical, and practical measures. Our framework deals generally and symmetrically with users, tags, and resources. For evaluation purposes we focus on similarity among tags and resources, considering different ways to aggregate annotations across users. After comparing how tag similarity measures predict user-created tag relations, we provide an external grounding by user-validated semantic proxies based on WordNet and the Open Directory. We also investigate the issue of scalability. We find that mutual information with distributional micro-aggregation across users yields the highest accuracy, but is not scalable; per-user projection with collaborative aggregation provides the best scalable approach via incremental computations. The results are consistent across resource and tag similarity.
Social bookmarking systems and their emergent information structures, known as folksonomies, are increasingly important data sources for Semantic Web applications. A key question for harvesting semantics from these systems is how to extend and adapt traditional notions of similarity to folksonomies, and which measures are best suited for applications such as navigation support, semantic search, and ontology learning. Here we build an evaluation framework to compare various general folksonomy-based similarity measures derived from established information-theoretic, statistical, and practical measures. Our framework deals generally and symmetrically with users, tags, and resources. For evaluation purposes we focus on similarity among tags and resources, considering different ways to aggregate annotations across users. After comparing how tag similarity measures predict user-created tag relations, we provide an external grounding by user-validated semantic proxies based on WordNet and the Open Directory. We also investigate the issue of scalability. We find that mutual information with distributional micro-aggregation across users yields the highest accuracy, but is not scalable; per-user projection with collaborative aggregation provides the best scalable approach via incremental computations. The results are consistent across resource and tag similarity.
L. Schmidt, and E. Simeonova. Usability Professionals 2008: Berichtsband des sechsten Workshops des German Chapters der Usability Professionals Association e.V. (Lübeck 2008), page 60–64. Stuttgart, Fraunhofer IRB Verlag, (2008)
L. Schmidt, and H. Luczak. Medizinisches Lexikon der beruflichen Belastungen und Gefährdungen: Definitionen - Vorkommen - Arbeitsschutz, Gentner, Stuttgart, (2008)
L. Schmidt, and D. Ley. Produkt- und Produktions-Ergonomie - Aufgabe für Entwickler und Planer: 54. Kongress der Gesellschaft für Arbeitswissenschaft (München 2008), page 445–448. Dortmund, GfA-Press, (2008)
L. Schmidt, and M. Domhardt. Biophysiologische Interfaces in der Mensch-Maschine-Interaktion: 1. Berliner Fachtagung (Berlin 2009), page 21–28. Düsseldorf, VDI-Verlag, (2009)
M. Domhardt, and L. Schmidt. Arbeit, Beschäftigungsfähigkeit und Produktivität im 21. Jahrhundert: 55. Kongress der Gesellschaft für Arbeitswissenschaft (Dortmund 2009), page 105–108. Dortmund, GfA-Press, (2009)
L. Schmidt. AmI und Arbeitswissenschaft - Chancen und Risiken neuer I&K-Technologien in der Arbeitsumgebung (Dortmund 2010), eingeladener Vortrag, page 79–88. Dortmund, BAuA, (2010)
L. Schmidt, J. Leimeister, and K. Behrenbruch. Reflexionen und Visionen der Mensch-Maschine-Interaktion - Aus der Vergangenheit lernen, Zukunft gestalten: 9. Berliner Werkstatt Mensch-Maschine-Systeme (Berlin 2011), page 186–187. Düsseldorf, VDI-Verlag, (2011)
S. Nägle, and L. Schmidt. Mensch, Technik, Organisation - Vernetzung im Produktentstehungs- und -herstellungsprozess: 57. Kongress der Gesellschaft für Arbeitswissenschaft (Chemnitz 2011), page 515–519. Dortmund, GfA-Press, (2011)
R. Kniewel, and L. Schmidt. Reflexionen und Visionen der Mensch-Maschine-Interaktion - Aus der Vergangenheit lernen, Zukunft gestalten: 9. Berliner Werkstatt Mensch-Maschine-Systeme (Berlin 2011), page 609–614. Düsseldorf, VDI-Verlag, (2011)
K. Behrenbruch, and L. Schmidt. Reflexionen und Visionen der Mensch-Maschine-Interaktion - Aus der Vergangenheit lernen, Zukunft gestalten: 9. Berliner Werkstatt Mensch-Maschine-Systeme (Berlin 2011), page 603–608. Düsseldorf, VDI-Verlag, (2011)
K. Behrenbruch, M. Atzmüller, R. Kniewel, S. Hoberg, G. Stumme, and L. Schmidt. Mensch, Technik, Organisation - Vernetzung im Produktentstehungs- und -herstellungsprozess: 57. Kongress der Gesellschaft für Arbeitswissenschaft (Chemnitz 2011), page 757–760. Dortmund, GfA-Press, (2011)
J. Malinka, O. Widy, and L. Schmidt. Gestaltung nachhaltiger Arbeitssysteme - Wege zur gesunden, effizienten und sicheren Arbeit: 58. Kongress der Gesellschaft für Arbeitswissenschaft (Kassel 2012), page 499–502. Dortmund, GfA-Press, (2012)
R. Kniewel, and L. Schmidt. Gestaltung nachhaltiger Arbeitssysteme - Wege zur gesunden, effizienten und sicheren Arbeit: 58. Kongress der Gesellschaft für Arbeitswissenschaft (Kassel 2012), page 149–152. Dortmund, GfA-Press, (2012)
R. Kniewel, and L. Schmidt. Gestaltung nachhaltiger Arbeitssysteme - Wege zur gesunden, effizienten und sicheren Arbeit: 58. Kongress der Gesellschaft für Arbeitswissenschaft (Kassel 2012), page 447–450. Dortmund, GfA-Press, (2012)
J. Hegenberg, A. Röllke, L. Cramar, and L. Schmidt. Gestaltung nachhaltiger Arbeitssysteme - Wege zur gesunden, effizienten und sicheren Arbeit: 58. Kongress der Gesellschaft für Arbeitswissenschaft (Kassel 2012), page 249–252. Dortmund, GfA-Press, (2012)
J. Hegenberg, L. Cramar, and L. Schmidt. Datenbrillen: Aktueller Stand von Forschung und Umsetzung sowie zukünftiger Entwicklungsrichtungen (Dortmund 2011), page 29–38. Dortmund, BAuA, (2012)
K. Geihs, J. Leimeister, A. Roßnagel, and L. Schmidt. 3rd Workshop on Enablers for Ubiquitous Computing and Smart Services: IEEE/IPSJ 12th International Symposium on Applications and the Internet (Izmir 2012), page 405–408. Los Alamitos, IEEE, (2012)
C. Evers, R. Kniewel, K. Geihs, and L. Schmidt. Ubiquitous Computing and Ambient Intelligence: 6th International Conference (Vitoria-Gasteiz 2012), page 200–207. Berlin, Springer, (2012)
M. Domhardt, and L. Schmidt. Gestaltung nachhaltiger Arbeitssysteme - Wege zur gesunden, effizienten und sicheren Arbeit: 58. Kongress der Gesellschaft für Arbeitswissenschaft (Kassel 2012), page 487–490. Dortmund, GfA-Press, (2012)
L. Cramar, J. Hegenberg, and L. Schmidt. Gestaltung nachhaltiger Arbeitssysteme - Wege zur gesunden, effizienten und sicheren Arbeit: 58. Kongress der Gesellschaft für Arbeitswissenschaft (Kassel 2012), page 269–272. Dortmund, GfA-Press, (2012)
K. Behrenbruch, S. Jandt, L. Schmidt, and A. Roßnagel. Gestaltung nachhaltiger Arbeitssysteme - Wege zur gesunden, effizienten und sicheren Arbeit: 58. Kongress der Gesellschaft für Arbeitswissenschaft (Kassel 2012), page 473–476. Dortmund, GfA-Press, (2012)
L. Schmidt, L. Cramar, J. Hegenberg, R. Braun, and R. Herrmann. Human Machine Interaction Design: Gezielt wahrnehmen, sicher erkennen, attraktiv gestalten (Stuttgart 2013), page 27–36. Stuttgart, Institut für Konstruktionstechnik und Technisches Design der Universität Stuttgart, (2013)
L. Schmidt, and K. Behrenbruch. Grundlagen und Anwendungen der Mensch-Maschine-Interaktion: 10. Berliner Werkstatt Mensch-Maschine-Systeme (Berlin 2013), page 102–107. Berlin, Universitätsverlag der TU Berlin, (2013)
M. Radziwill, R. Kniewel, and L. Schmidt. International Scientific Conference on Mobility and Transport: ITS for Connected Mobility (München 2013), page 1–10. München, Institut für Verkehrswesen der Technischen Universität München, (2013)
R. Kniewel, C. Evers, L. Schmidt, and K. Geihs. Electronic Communications of the EASST : Proceedings of the Combined Workshop on Self-organizing, Adaptive, and Context- Sensitive Distributed Systems and Self-organized Communication in Disaster Scenarios (Stuttgart 2013), (2013)
M. Domhardt, E. Tunca, I. Zoller, P. Lotz, and L. Schmidt. Grundlagen und Anwendungen der Mensch-Maschine-Interaktion: 10. Berliner Werkstatt Mensch-Maschine-Systeme (Berlin 2013), page 9–18. Berlin, Universitätsverlag der TU Berlin, (2013)
M. Domhardt, and L. Schmidt. Chancen durch Arbeits-, Produkt- und Systemgestaltung - Zukunftsfähigkeit für Produktions- und Dienstleistungsunternehmen: 59. Kongress der Gesellschaft für Arbeitswissenschaft (Krefeld 2013), page 665–668. Dortmund, GfA-Press, (2013)
M. Domhardt, and L. Schmidt. Chancen durch Arbeits-, Produkt- und Systemgestaltung - Zukunftsfähigkeit für Produktions- und Dienstleistungsunternehmen: 59. Kongress der Gesellschaft für Arbeitswissenschaft (Krefeld 2013), page 229–232. Dortmund, GfA-Press, (2013)
R. Braun, and L. Schmidt. Lebensqualität im Wandel von Demografie und Technik: 6. Deutscher AAL-Kongress (Berlin 2013), page 321–325. Berlin, VDE-Verlag, (2013)
R. Braun, J. Hegenberg, L. Cramar, and L. Schmidt. Chancen durch Arbeits-, Produkt- und Systemgestaltung - Zukunftsfähigkeit für Produktions- und Dienstleistungsunternehmen: 59. Kongress der Gesellschaft für Arbeitswissenschaft (Krefeld 2013), page 413–416. Dortmund, GfA-Press, (2013)
K. Behrenbruch, M. Söllner, J. Leimeister, and L. Schmidt. Human-Computer Interaction: 14th IFIP TC 13 International Conference (Kapstadt 2013), Part IV, page 306–313. Springer, Berlin, (2013)
K. Behrenbruch, and L. Schmidt. Grundlagen und Anwendungen der Mensch-Maschine-Interaktion: 10. Berliner Werkstatt Mensch-Maschine-Systeme (Berlin 2013), page 117–125. Berlin, Universitätsverlag der TU Berlin, (2013)
L. Ackermann, M. Heußner, and L. Schmidt. 11. E-Learning Fachtagung Informatik der Gesellschaft für Informatik e. V. (Bremen 2013), page 257–262. Bonn, Köllen, (2013)
D. Ziegner, R. Herrmann, J. Hegenberg, and L. Schmidt. Gestaltung der Arbeitswelt der Zukunft: 60. Kongress der Gesellschaft für Arbeitswissenschaft (München 2014), page 115–117. Dortmund, GfA-Press, (2014)
L. Schmidt, J. Hegenberg, B. Borys, and R. Kniewel. Useware 2014: Interaktionen mit großen Datenmengen und unscharfen Analyseergebnissen (Heilbronn 2014), page 11–31. Düsseldorf, VDI-Verlag, (2014)
M. Radziwill, and L. Schmidt. Gestaltung der Arbeitswelt der Zukunft: 60. Kongress der Gesellschaft für Arbeitswissenschaft (München 2014), page 91–93. Dortmund, GfA-Press, (2014)
B. Löffler, and L. Schmidt. Forum Arbeitsphysiologie: 18. Symposium Arbeitsmedizin und Arbeitswissenschaft für Nachwuchswissenschaftler (Magdeburg 2014), page 25. Otto-von-Guericke-Universität Magdeburg, (2014)
R. Kniewel, M. Radziwill, C. Evers, and L. Schmidt. Useware 2014: Interaktionen mit großen Datenmengen und unscharfen Analyseergebnissen (Heilbronn 2014), page 121–131. Düsseldorf, VDI-Verlag, (2014)
M. Heußner, L. Ackermann, and L. Schmidt. Wohnen - Pflege - Teilhabe: Besser leben durch Technik : 7. Deutscher AAL-Kongress (Berlin 2014), page 1-6 (a40). Berlin, VDE-Verlag, (2014)