алексей воропаев

Машинное обучение.Что это?

“Машинное обучение - это новая популярная тема”

John Hennessy, President, Stanford

- Нету экспертов? - Сложно сформулировать знания? - Нужна адаптация во времени? - Подстраиваетесь под конкретный кейс?

Машинное обучение.А накой оно надо?

Это построение абстракций по множеству наблюдений

Машинное обучение.Определение

Черный ящик

“три”

11111110001100....

Черный ящик

“три”

11111110001100....

Черный ящик

“три”

“три”

11111110001100....

3

Черный ящик

Нейронная сеть.

Нейронная сеть.

Нейронная сеть.

Нейронная сеть.Распознование символов.

Входной слой

Нейронная сеть.Распознование символов.

Входной слой

Выходной слой

Нейронная сеть.Распознование символов.

P(1) = 0

P(2) = 0.2

P(3) = 0.9

Входной слой

Выходной слой

Я ставлю точку. А теперь – гулять!

Деревья принятия решений

Я ставлю точку. А теперь – гулять!

Анализаторпредложений

Деревья принятия решений

[0] пробел справа: yes[1] большая буква справа: yes[2] цифра справа и слева: no…

Я ставлю точку. А теперь – гулять!

Анализаторпредложений

Деревья принятия решений

[0] пробел справа: yes[1] большая буква справа: yes[2] цифра справа и слева: no…

Наивный байесовский классификатор

Наивный байесовский классификатор

Наивный байесовский классификатор

толстенькими 5.33898поскуливала 4.89884дырочках 4.69508зрелые 4.62396всовывал 4.56707жесткое 4.45139отсосав 4.40743раздвигал 4.37484юбкой 4.3215

лизала 4.2573кончала 4.17881чулках 4.16239щекотали 4.13878всунув 4.1025пахучую 4.06708задвигалась 4.0397блаженном 3.99227

?

Детектор порнографии

толстенькими 5.33898поскуливала 4.89884дырочках 4.69508зрелые 4.62396всовывал 4.56707жесткое 4.45139отсосав 4.40743раздвигал 4.37484юбкой 4.3215

лизала 4.2573кончала 4.17881чулках 4.16239щекотали 4.13878всунув 4.1025пахучую 4.06708задвигалась 4.0397блаженном 3.99227

?

Детектор порнографии

Фазиль Искандер «Рассказы о Чике»

толстенькими 5.33898поскуливала 4.89884дырочках 4.69508зрелые 4.62396всовывал 4.56707жесткое 4.45139отсосав 4.40743раздвигал 4.37484юбкой 4.3215

лизала 4.2573кончала 4.17881чулках 4.16239щекотали 4.13878всунув 4.1025пахучую 4.06708задвигалась 4.0397блаженном 3.99227

?

Детектор порнографии

Deep learning: - вероятность из байеса- переходов по порнозапросам- количество плохих тизеров- и т.п.

Фазиль Искандер «Рассказы о Чике»

КластеризацияK-means

КластеризацияK-means

КластеризацияK-means

КластеризацияK-means

КластеризацияSOM-карты. Они же карты Кохонена.

Исследование пользователей поиска

11

2

3

41. Нормальные люди

2. Любители порно

3. Одноклассники

4. SEO роботы

Было Стало

Поиск ошибок оценки документов

Поиск ассоциативных правил. Apriory

Поиск ассоциативных правил. Apriory

Поиск ассоциативных правил. Apriory

Поиск ассоциативных правил. Apriory

Поиск ассоциативных правил. Apriory

Поиск ассоциативных правил. Apriory

Софт для MLWEKA

Софт для MLБоевой слон

+ =

Домашнее задание

Алексей ВоропаевРуководитель группы ранжирования

Поиск@Mail.ruvoropaev@corp.mail.ru

Спасибо!