h a c k - oleg.rocks · O_ml Алексей Адамович Максим Шевченко Олег...

9
O_ml Алексей Адамович Максим Шевченко Олег Морозенков h a c k Data science 9-11 декабря 2016 года Москва

Transcript of h a c k - oleg.rocks · O_ml Алексей Адамович Максим Шевченко Олег...

Page 1: h a c k - oleg.rocks · O_ml Алексей Адамович Максим Шевченко Олег Морозенков h a c k Data science 9-11 декабря 2016 года

O_ml

АлексейАдамович

МаксимШевченко

ОлегМорозенков

h a c k

Data science

9-11 декабря 2016 года

Москва

Page 2: h a c k - oleg.rocks · O_ml Алексей Адамович Максим Шевченко Олег Морозенков h a c k Data science 9-11 декабря 2016 года

Задача, над которой мы работалисоциальный проект МТС в сфере образования

2

Page 3: h a c k - oleg.rocks · O_ml Алексей Адамович Максим Шевченко Олег Морозенков h a c k Data science 9-11 декабря 2016 года

Задача, над которой мы работалисоциальный проект МТС в сфере образования

Группа проекта в вк:• Первый пост: 1 декабря 2015 года• Количество участников на 11.12.2016: 3530

Примечание:1.ПоданнымотчетовMail.ru Group 2016года

ежемесячная аудитория Вконтакте – 87 млн. Человек1

2

Page 4: h a c k - oleg.rocks · O_ml Алексей Адамович Максим Шевченко Олег Морозенков h a c k Data science 9-11 декабря 2016 года

Анализпостовсообщества

Анализпрофилейподписчиковсообщества

Расчетвероятности,чтоподписчикупонравитсяпостсообщества

Расчетвероятности, чтодрузьямподписчикаиликонкретномупользователюпонравитсяпостсообщества

Ссылканасообществовсоциальнойсети

Этапы решения кейса

3

Page 5: h a c k - oleg.rocks · O_ml Алексей Адамович Максим Шевченко Олег Морозенков h a c k Data science 9-11 декабря 2016 года

Анализ постов сообщества

Анализ подписчиков сообщества

Расчет вероятностей, что пост понравится

подписчикуПерспективы развития

Содержаниепоста

Удалениеанглийских

букв

Токенизациятекста

Удалениестоп-слов

Стемминг

Подсчетчастоты

вхожденияслова

LatentDirichletAllocation Топики

4

Page 6: h a c k - oleg.rocks · O_ml Алексей Адамович Максим Шевченко Олег Морозенков h a c k Data science 9-11 декабря 2016 года

Анализ постов сообщества

Анализ подписчиков сообщества

Расчет вероятностей, что пост понравится

подписчикуПерспективы развития

Выделениесоц-дем признаковиз«грязных»данных

Выявлениеинтересовподписчиковисходяизтематики

групп,вкоторыхонсостоит

5

Page 7: h a c k - oleg.rocks · O_ml Алексей Адамович Максим Шевченко Олег Морозенков h a c k Data science 9-11 декабря 2016 года

User_id Post_id Age … Sex User_topic1 … User_topic15 Post_topic1 … Post_topic15

TopicLength

action

Анализ постов сообщества

Анализ подписчиков сообщества

Расчет вероятностей, что пост понравится

подписчикуПерспективы развития

Таблица объект-признаки:Соц-дем признаки

Интересы (топики) пользователяТопики поста

6

Page 8: h a c k - oleg.rocks · O_ml Алексей Адамович Максим Шевченко Олег Морозенков h a c k Data science 9-11 декабря 2016 года

• Расчетвероятноститого,чтоконкретныйпостпонравитсядрузьямподписчиковсообщества

• Расчетвероятноститого,чтоконкретныйпостпонравитсяконкретномупользователюсоциальнойсети

Анализ постов сообщества

Анализ подписчиков сообщества

Расчет вероятностей, что пост понравится

подписчикуПерспективы развития

7

Page 9: h a c k - oleg.rocks · O_ml Алексей Адамович Максим Шевченко Олег Морозенков h a c k Data science 9-11 декабря 2016 года

O_ml crew

Олег Морозенковreo7sp

[email protected]

Максим Шевченкоmaks-sh

[email protected]

Алексей АдамовичAdamovichAleksey

[email protected]

8