Роботы и люди в
Twitter'е
Дмитрий Кузнецов
разработчик



Я.Субботник, Екатеринбург, 2 июля 2011 года
Зачем мы сегодня
здесь?



2
Дмитрий Кузнецов "Роботы и люди в Твиттере"
Информационный мусор




4
Twitter


Twitter растёт, и мы любим
      эксперименты!




5
Русский Twitter




6
Русский Twitter

Сегодня            2010 год

700 тыс +          300 тыс +
пользователей
                   200 тыс +
400 тыс + твитов
каждый день




7                  По данным Яндекс.Поиска по блогам
Русский Twitter

В России                 В Мире

700 тыс +                200 млн +
пользователей
                         155 млн +
400 тыс + твитов
каждый день
     5 % пользователей пишут 75% всех твитов



8                        По данным Яндекс.Поиска по блогам
                         и http://business.twitter.com
Twitter : контент




9
Twitter : контент
Кто о чём пишет
                4%
           4%        14%




                                 новости
                                 спам
                                 общение
     38%                         трёп
                                 прочее
                           40%




10                                         *PearAnalytics
Русский Twitter

русскоговорящие пользователи Twitter'а — почти
             замкнутая система




11
Twitter : контент

каждый третий твит содержит ссылку

http://clck.ru/5dzj


1. рассказать другим о чём-то интересном

2. самопродвижение и реклама


12
Twitter : кто пишет?




13
Twitter : роботы
Twitter : роботы
контент сгенерирован автоматически или
«редакцией»




15
Twitter : роботы
трансляции с сайта или блога




16
Twitter : роботы
ссылки — не всегда основное содержимое твитов




17
Twitter : роботы
                         спам




                   33%

                   46%
роботы



18
Twitter : роботы
Сколько?
- 10 % пользователей являются роботами

- 25 % всех твитов произведены на свет
роботами




19
Twitter : роботы

     Теперь роботы тоже умеют искать




20
Twitter : роботы
сегодня аккаунт есть не только у президентов




 21
Twitter : роботы
сегодня аккаунт есть не только у президентов




 22
Мы научились их
отличать!



23
Как?
Задача классификации — машинное обучение




24
Классификация
                факторы из
                содержимого твитов




25
Пример
каждый твит содержит ссылку, и пользователь
ни с кем не разговаривает




        много смайликов и ответов другим
        пользователям



   26
Пример
каждый твит содержит ссылку, и пользователь
ни с кем не разговаривает
        доля ссылок на пост


 стилистические факторы
         много смайликов и ответов другим
         пользователям
                              разговор с «людьми»



   27
Классификация
                факторы из социального
                графа




28
Итого

        извлечение факторов

                +

        суровая математика

           = классификация




29
Повторяйте это дома!




30
Повторяйте это дома!
Twitter API: http://dev.twitter.com/doc

RapidMiner: http://rapid-i.com

Weka: http://www.cs.waikato.ac.nz/ml/weka

SVM-Light: http://svmlight.joachims.org




31
Дмитрий Кузнецов
Разработчик

drsmith@yandex-team.ru

More Related Content

PDF
inFront: на передовой событий в мире фронтенда
PDF
Чатботы: окно возможностей для вашего бизнеса
PDF
Павел Доронин - Мессенджеры и чатботы - Muzis Hackathon
PDF
Ruspod (russian and russia online course)
PDF
kranonit S14E02 Серёжа Пономарёв: kranonit’у уже год. Полёт нормальный?
PDF
Чат-боты: предложи своему бренду то, что ещё никто и никогда не предлагал - M...
PDF
Александр Белоцерковский "Microsoft Bot Framework" - EdHack
PDF
Екатерина Войденко "Интранет и синхронизация"
inFront: на передовой событий в мире фронтенда
Чатботы: окно возможностей для вашего бизнеса
Павел Доронин - Мессенджеры и чатботы - Muzis Hackathon
Ruspod (russian and russia online course)
kranonit S14E02 Серёжа Пономарёв: kranonit’у уже год. Полёт нормальный?
Чат-боты: предложи своему бренду то, что ещё никто и никогда не предлагал - M...
Александр Белоцерковский "Microsoft Bot Framework" - EdHack
Екатерина Войденко "Интранет и синхронизация"

Viewers also liked (17)

PDF
Александр Ларьяновский "Виджеты для главной страницы Яндекса. Кто у кого "отн...
PDF
Антон Корзунов «Как разместить тысячи объектов на карте без увеличения нагруз...
PDF
Олег Мохов "О чём ещё говорят верстальщики"
PDF
Ольга Остренкова "Семантическая разметка"
PDF
Михаил Сенин "Передача дополнительной информации о сайте через Яндекс.Вебмастер"
PDF
Артем Кошелев "Качество кода автотестов"
PDF
Дмитрий Беляев "Подготовка данных для поиска Картинок и Видео"
PDF
Михаил Разуваев, Антон Попов "Яндекс.Метрика"
PDF
Марина Пикулева "Мобильный фокус: люди, трубки, сайты"
PDF
Михаил Сенин "Поиск для сайта"
PDF
Иван Бибилов "Спортивные проекты Яндекса. Взгляд изнутри"
PDF
Леонид Васильев "Python в инфраструктуре поиска"
PDF
Михаил Давыдов "Масштабируемые JavaScript-приложения"
PDF
Роман Комаров — «Механизм работы браузера»
PDF
Александр Титула-Бойченко "Приложения для соцсетей. Универсальные приложения ...
PDF
Егор Львовский — «Кеширование на клиенте и сервере»
PDF
Марат Абдуллин "Хроники серверного Жаваскрипта"
Александр Ларьяновский "Виджеты для главной страницы Яндекса. Кто у кого "отн...
Антон Корзунов «Как разместить тысячи объектов на карте без увеличения нагруз...
Олег Мохов "О чём ещё говорят верстальщики"
Ольга Остренкова "Семантическая разметка"
Михаил Сенин "Передача дополнительной информации о сайте через Яндекс.Вебмастер"
Артем Кошелев "Качество кода автотестов"
Дмитрий Беляев "Подготовка данных для поиска Картинок и Видео"
Михаил Разуваев, Антон Попов "Яндекс.Метрика"
Марина Пикулева "Мобильный фокус: люди, трубки, сайты"
Михаил Сенин "Поиск для сайта"
Иван Бибилов "Спортивные проекты Яндекса. Взгляд изнутри"
Леонид Васильев "Python в инфраструктуре поиска"
Михаил Давыдов "Масштабируемые JavaScript-приложения"
Роман Комаров — «Механизм работы браузера»
Александр Титула-Бойченко "Приложения для соцсетей. Универсальные приложения ...
Егор Львовский — «Кеширование на клиенте и сервере»
Марат Абдуллин "Хроники серверного Жаваскрипта"
Ad

Similar to Дмитрий Кузнецов "Роботы и люди в Твиттере" (20)

PDF
Твиттер: что это? +особенности развития в России
PPTX
микроблогинг(с корректировками)
PPT
"Твиттер для журналистов"
PDF
Nlo alexe twitter_ok2009
PDF
Антон Волнухин - Twitter в цифрах (i-Community 2010)
PDF
Как покорить Twitter
PDF
Антон Волнухин. Микроблоги и новое в социальных сетях: что в этом такого
PDF
Твиттер в России
PPTX
Микроблог
PDF
Twitter пособие для журналистов 2012
PPSX
Используем Twitter для продвижения сайта
PDF
курс тви админ. день 1
PDF
Антон Волнухин "Белорусская блогосфера"
PDF
SMM presentation
PPTX
Twisimfer 2.0
PPTX
ТОП-10 инструментов для твиттера
PPTX
PPTX
Твиттер - самая оперативная социальная сеть в мире
PDF
Виктория Димитрюха. «Twitter для бизнеса»
PPSX
Twitter
Твиттер: что это? +особенности развития в России
микроблогинг(с корректировками)
"Твиттер для журналистов"
Nlo alexe twitter_ok2009
Антон Волнухин - Twitter в цифрах (i-Community 2010)
Как покорить Twitter
Антон Волнухин. Микроблоги и новое в социальных сетях: что в этом такого
Твиттер в России
Микроблог
Twitter пособие для журналистов 2012
Используем Twitter для продвижения сайта
курс тви админ. день 1
Антон Волнухин "Белорусская блогосфера"
SMM presentation
Twisimfer 2.0
ТОП-10 инструментов для твиттера
Твиттер - самая оперативная социальная сеть в мире
Виктория Димитрюха. «Twitter для бизнеса»
Twitter
Ad

More from Yandex (20)

PDF
Предсказание оттока игроков из World of Tanks
PDF
Как принять/организовать работу по поисковой оптимизации сайта, Сергей Царик,...
PDF
Структурированные данные, Юлия Тихоход, лекция в Школе вебмастеров Яндекса
PDF
Представление сайта в поиске, Сергей Лысенко, лекция в Школе вебмастеров Яндекса
PDF
Плохие методы продвижения сайта, Екатерины Гладких, лекция в Школе вебмастеро...
PDF
Основные принципы ранжирования, Сергей Царик и Антон Роменский, лекция в Школ...
PDF
Основные принципы индексирования сайта, Александр Смирнов, лекция в Школе веб...
PDF
Мобильное приложение: как и зачем, Александр Лукин, лекция в Школе вебмастеро...
PDF
Сайты на мобильных устройствах, Олег Ножичкин, лекция в Школе вебмастеров Янд...
PDF
Качественная аналитика сайта, Юрий Батиевский, лекция в Школе вебмастеров Янд...
PDF
Что можно и что нужно измерять на сайте, Петр Аброськин, лекция в Школе вебма...
PDF
Как правильно поставить ТЗ на создание сайта, Алексей Бородкин, лекция в Школ...
PDF
Как защитить свой сайт, Пётр Волков, лекция в Школе вебмастеров
PDF
Как правильно составить структуру сайта, Дмитрий Сатин, лекция в Школе вебмас...
PDF
Технические особенности создания сайта, Дмитрий Васильева, лекция в Школе веб...
PDF
Конструкторы для отдельных элементов сайта, Елена Першина, лекция в Школе веб...
PDF
Контент для интернет-магазинов, Катерина Ерошина, лекция в Школе вебмастеров ...
PDF
Как написать хороший текст для сайта, Катерина Ерошина, лекция в Школе вебмас...
PDF
Usability и дизайн - как не помешать пользователю, Алексей Иванов, лекция в Ш...
PDF
Cайт. Зачем он и каким должен быть, Алексей Иванов, лекция в Школе вебмастеро...
Предсказание оттока игроков из World of Tanks
Как принять/организовать работу по поисковой оптимизации сайта, Сергей Царик,...
Структурированные данные, Юлия Тихоход, лекция в Школе вебмастеров Яндекса
Представление сайта в поиске, Сергей Лысенко, лекция в Школе вебмастеров Яндекса
Плохие методы продвижения сайта, Екатерины Гладких, лекция в Школе вебмастеро...
Основные принципы ранжирования, Сергей Царик и Антон Роменский, лекция в Школ...
Основные принципы индексирования сайта, Александр Смирнов, лекция в Школе веб...
Мобильное приложение: как и зачем, Александр Лукин, лекция в Школе вебмастеро...
Сайты на мобильных устройствах, Олег Ножичкин, лекция в Школе вебмастеров Янд...
Качественная аналитика сайта, Юрий Батиевский, лекция в Школе вебмастеров Янд...
Что можно и что нужно измерять на сайте, Петр Аброськин, лекция в Школе вебма...
Как правильно поставить ТЗ на создание сайта, Алексей Бородкин, лекция в Школ...
Как защитить свой сайт, Пётр Волков, лекция в Школе вебмастеров
Как правильно составить структуру сайта, Дмитрий Сатин, лекция в Школе вебмас...
Технические особенности создания сайта, Дмитрий Васильева, лекция в Школе веб...
Конструкторы для отдельных элементов сайта, Елена Першина, лекция в Школе веб...
Контент для интернет-магазинов, Катерина Ерошина, лекция в Школе вебмастеров ...
Как написать хороший текст для сайта, Катерина Ерошина, лекция в Школе вебмас...
Usability и дизайн - как не помешать пользователю, Алексей Иванов, лекция в Ш...
Cайт. Зачем он и каким должен быть, Алексей Иванов, лекция в Школе вебмастеро...

Дмитрий Кузнецов "Роботы и люди в Твиттере"