Braslavsky 13.12.12
-
Upload
natalia-ostapuk -
Category
Documents
-
view
215 -
download
1
Transcript of Braslavsky 13.12.12
![Page 1: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/1.jpg)
У кого что болит? Вопросы и ответы
про медицину и здоровье
Павел Браславский NLP Seminar
СПб, 13.12.2012
![Page 2: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/2.jpg)
Community Question Answering
and many more… 3
![Page 3: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/3.jpg)
Почему CQA?
• Хороший запрос – не так просто • Контекст, субъективность • Социальный аспект • «Персональный ответ» • «Как?» vs. «Что?» (опыт) • Открытые данные (!)
4
![Page 4: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/4.jpg)
[email protected] categories
asker’s profile
question
answers
answerer’s profile
5
Август 2012: 73M пользователей 80M+ вопросов 400M+ ответов
![Page 5: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/5.jpg)
Service statistics
Average question length 22.5 words Average answer length 19.7 words 5.3 answers per answer in average
Category breakdown
reach inf. need description
6
![Page 6: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/6.jpg)
Questions
Informational
Facts
Object, object property, …
Recommendation
Method, location…
Opinion Favor Offer Social connection
Rhetorical
Question types
49.7 %
50.3 %
38.8% 34.1% 12.2% 0.4% 1.1% 13.4%
2,000 questions manually annotated
human experience
7
![Page 7: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/7.jpg)
Answer type Count % Yes/no 66 6.6 Single 241 23.9 Multiple 166 16.5 Descriptive 534 53.0
Answer type Facts (total 343)
% Recommendations (total 391)
%
Yes/no 44 12.8 1 0.3 Single 118 34.4 61 15.6 Multiple 40 11.7 88 22.5
Descriptive 141 41.1 241 61.6
Expected answer type
scheme by Oh et al.
two major classes
strength of the human-powered search
8
![Page 8: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/8.jpg)
9
![Page 9: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/9.jpg)
Health & Beauty
10
≈ 313 000 вопросов с ответами 1 апреля 2011 – 31 марта 2012
![Page 10: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/10.jpg)
Questions by sub-categories
Other topics about beauty and health
17%
Cosmetics, perfumery 8%
Physician responses... 1%
Sauna, Massage, Fitness 2%
Hair care 10%
Healthy lifestyle
9%
Deseases, drugs 30%
Children's Health 4%
Manicure, Pedicure
2%
Beauty shops and SPA 1%
Tan, Solarium 1%
Doctors, Clinics, Insurance 5%
Weight correction
10%
~128K вопросов
11
![Page 11: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/11.jpg)
Пользователи
• 133,163 unique users (asked and answered) • 74,760 (56.1%) public profiles
– 49.6% - age indicated – 44.2% - location indicated
(e.g. 3,004 users from Moscow region) – 50.0% ♀, 33.5% – ♂, 16.4% – ?
12
![Page 12: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/12.jpg)
Возможности/Задачи
• Мониторинг заболеваний и синдромов • Оценка качества медицинской информации
13
![Page 13: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/13.jpg)
Latent Dirichlet Allocation (LDA)
нервный стресс нерв попить успокоительный пустырник успокаивать система таблетка глицин
глаз зрение очки линза видеть капля окулист носить глазной комп
гормон железа эндокринолог гормональный организм щитовидка нарушение проблема щитовидный влиять
горло ангина полоскать сода раствор вода соль полоскание болеть теплый
128,000 вопросов 70 тем
14
![Page 14: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/14.jpg)
0
0,02
0,04
0,06
0,08
200
400
600
800
1000
1200
ARI rate vs. 'flu' topic
0
0,1
0,2
0,3
0,4
0,5
-2
-1
0
1
2
3
4
5
rain vs. 'runny nose' topic
15
![Page 15: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/15.jpg)
16
![Page 16: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/16.jpg)
Content Quality in UGC
Adopted from Chris Anderson “The long trail”, 2006 via Carlos Castillo
18
![Page 17: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/17.jpg)
Оценка качества
• МКБ-10 + лекарства (http://www.rlsnet.ru) • Болезнь в вопросе, лекарство хотя бы в
одном ответе (128K 10K) Синонимы нозологической группы:
• Ветряная оспа • Ветрянка новорожденного • Varicella Zoster • Оспа ветряная • Herpes Varicella zoster
Нечеткий поиск: Парацетамол пароцетамол, парацитамол Инъекция иньекция Цистит цестит (к сожалению, не гепатит гиппотит )
19
![Page 18: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/18.jpg)
20
![Page 19: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/19.jpg)
Болезнь-Лекарство
thrush angina herpes
flucostat* 155 iodine 130 aciclovir*** 307
candid** 92 chamomile 127 zovirax*** 138
clotrimazole** 89 nitrofural 111 wax 95
fluconazole* 89 lugol 93 fenistil 41
diflucan* 77 salvia 70 valtrex 34
21
![Page 20: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/20.jpg)
22
![Page 21: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/21.jpg)
23
![Page 22: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/22.jpg)
Возможные применения
• Сравнение сервисов / наборов данных • Рейтинг отвечающих
24
![Page 23: Braslavsky 13.12.12](https://reader033.fdocument.pub/reader033/viewer/2022052904/557fbabad8b42a36118b4b77/html5/thumbnails/23.jpg)
CQA: ближайшие задачи
• Полуавтоматическая оценка качества • Анализ поведения пользователей
• Новая тематика: бухгалтерия и право
25