Apprendimento collaborativo nei social media: costruzione

automatica di un servizio di Q&A

Relatore:Chiar.mo Prof. Filippo Lanubile

Correlatrice:Dott.ssa Nicole Novielli

Laureando:Fiorella Fabio

a.a. 2013/2014

Obiettivo• Sviluppare una piattaforma a supporto

dell’apprendimento collaborativo online– Analisi delle attività e delle interazioni online degli studenti

universitari – Analisi delle risorse open-source disponibili– Problema: adozione della piattaforma (Cold start)

2/17

Bisogni studenti e requisiti

Migrazione community e contenuti

Classificazione e importazione

automatica dei post

Open Platform

Implementazione piattaforma

I gruppi Facebook

• Spazi virtuali che ogni utente può creare, al fine di condividere

le informazioni che desidera con i membri.

– Gli studenti utilizzano i gruppi Facebook per collaborare durante il

percorso di studi

3/17

Community-based Question & Answering

Un utente espone un problema sotto forma di

domanda

la comunità degli utenti risolve il problema Si crea conoscenza

utile e riutilizzabile da altri utenti che in futuro avranno un problema simile

Modello molto efficace nella condivisione di conoscenza

Un esempio di grande successo è Stack Overflow 4/17

Analisi dell’interazione online

• Gruppi Facebook di studenti universitari - corsi di laurea in informatica (triennali e magistrali)- 4 università italiane:

Università degli studi di Bari

Sapienza -Università di Roma

Università degli studi di Milano

Università degli studi di Pisa

5/17

Struttura dei gruppi

Gruppo riferito ad un corso di laurea

Strutturazione dei gruppi6/17

Gruppo riferito ad un insegnamento

Teaching I

Teaching I

Teaching II

Teaching III

Analisi dell’interazioneGruppi Facebook Q&A

Caratteristiche ComuniTempi di risposta 11 min. 11 min.

Attività utenti 20% degli utenti produce l’80% dei contenuti

Pochi utenti producono la maggior parte dei contenuti

Tipo post Domande, gruppi studio, offerta informazioni, immagini Domande

L. Mamykina, B. Manoim, M. Mittal, G. Hripcsak, and B. Hartmann, “Design lessons from the fastest Q&A site in the west.”CHI 2011, pp. 2857-2866.

Differenze

Contenuti caricati utili, spam Solo utili (gamification e moderazione della community).

Ordinamento contenuti Esclusivamente cronologico Cronologico, score, attività

Upload file Frequente Non consentito

7/17

Ultima release: 7 Gennaio 2015

Tutte le funzionalità di un sito di Q&A. In più upload immagini e file

Integrabile ed espandibile.

Grande quantità di plug-in, sia a pagamento che non. Grande community

Progetto longevo8/17

Adozione della piattaforma• Risolvere il problema del cold start.• Affiancare i gruppi Facebook offrendo i vantaggi del

Q&A

Piattaforma di Q&A

Estrarre conoscenza da ogni gruppo d’Italia

Server della piattaforma

Classificazione e migrazione dei post

9/17

Amministratori o membri del gruppo

Definizione di una tassonomia per la classificazione

3 dimensioni di annotazione:

Obiettivo: Importare nella piattaforma solo i post Useful e Lasting10/17

Classificazione dei post

11/17

Dimensione Fleiss’ Kappa

Rilevanza 0.838

Persistenza 0.805

Direzione 0.805

3 annotatori

Dimensione Istanze FeatureAttributo di classe

Nome N. IstanzeRilevanza 1015 5523

Spam 14 %Useful 86 %

Persistenza 751 4410Lasting 64 %

Temporary 36 %

Direzione 459 3264Need_info 87 %Give_info 13 %

Accordo totale tra i 3 annotatori

1092 post

• Approccio supervisionato– SVM, come in (Harper et al., 2011)

– Weka

• Training set formato da:– Feature testuali (word count)– Feature che descrivono le

caratteristiche del postHarper, F.M., Moy, D., and Konstan, J.A. Facts or friends?: distinguishing informational and conversational questions in social Q&A sites. Proceedings of CHI 2009, ACM (2009), 759-768.

Classificazione – Risultati

Dimensione Rilevanza  Recall Precision F-Measure Class

  0.994 0.981 0.98 Spam

  0.957 0.987 0.972 Useful

Weighted Avg. 0.983 0.983 0.983  

  Recall Precision F-Measure Class

  0.804 0.831 0.817 Temporary

  0.909 0.892 0. 9 Lasting

Weighted Avg. 0.871 0.87 0. 87  

Dimensione Persistenza

Dimensione Direzione  Recall Precision F-Measure Class

  0.992 0.961 0.977 Need_info

  0.733 0.936 0.822 Give_info

Weighted Avg. 0.959 0.958 0.956  

12/17

10-fold validation

Universitree.com - MigrazionePost Richiesta/Offerta Informazioni

Commenti Risposte

Like VotiIdentità Facebook Identità fittizie

Gruppo Facebook Universitree.com

Universitree.com - MigrazioneContenuti suddivisi ricalcando la struttura

gerarchica dei corsi:

- Università

- Corso di laurea

- Insegnamento

Tag dimensione direzione informazione Tag insegnamento 14/17

Universitree.com• 478 domande, 2847 risposte prodotte da 833 utenti

• 100 tag.

15/17

Conclusioni

• Piattaforma per gli studenti universitari che unisce:− Question & Answering− Features a supporto delle attività degli studenti

universitari, evinte dall’analisi dei gruppi Facebook− Sistema automatico di classificazione dei post come

supporto alla migrazione dei contenuti

• Sviluppi futuri:− Supportare altri tipi di interazione non previsti dal Q&A

(gruppi studio, informazioni con utilità temporale ridotta)− Suggerimento di tag

16/17

Grazie per l’attenzione