DataFuSion 1 в шаге от Успеха Армянское Радио Уберите Fu ion город из Матрицы Шок ИИ не поможет при отсутвии естественного
Зион (англ. Zion) - имитация единственного и последнего города на планете Земля. Город является отправной точкой для сопротивления против машин. В Зионе жили более 250 000 людей. Он находился глубоко под землёй, недалеко от ядра, обеспечивая жителям тепло, пригодное для жизни.
DataFuSion - в шаге от Успеха Армянское Радио Уберите Fu ᛋion город из Матрицы Шок: Искуственный интеллект не поможет при отсутвии естественного
Ежегодная конференция ВТБ по Data Fusion, оправдывая своё название, собрала самых разных людей с очень интересными идеями. Общепринятое значение термина Data Fusion – объединение нескольких источников данных и их обработка, в результате которой получается нечто более полезное, чем могли бы дать эти источники по отдельности. В этой статье – о том, что запомнилось больше всего и привлекло наибольшее внимание с точки зрения Data Science.
В вводной части Светлана Сикуляр, Gartner VP Analyst, рассказала о трендах в отрасли:
data-сайентистов дополняют инженеры, внедряя готовые модели и тестируя MVP (стала актуальной даже сама роль Model Validator из банковского бизнеса);
федеративное обучение оказалось широко востребовано, в частности, в фарме (например, при создании вакцины от людей Moderna).
Этой идеей пронизана вся концепция Data Fusion, что отлично видно на примерах, затронутых на круглом столе Data Fusion и работа с клиентами. От «скрещивания» данных мобильных операторов с гео-данными, как рассказали руководитель продуктов больших данных в госсекторе Константин Загуменов и TechLead проектов по исследованию больших данных Вадим Уваров из Tele2, до техник противодействия мошенникам у Почты России, которыми поделился Алексей Деревянкин.
Теперь к отдельным докладам, на которые хочется обратить особое внимание.
Ансамбли нейросетей
Нейросети тренируются так, чтобы показывать идеальный результат на обучающей выборке. Вследствие этого они и потом демонстрируют некоторую «самоуверенность». Другими словами, нейросети выдают чёткий результат даже тогда, когда ответ не так уж однозначен.
Чтобы решить эту проблему, применяется метод ансамблирования нейросетей: вместо результата одной единственной сетки берётся среднее по ансамблю (например, математическое ожидание по ансамблю независимо обученных сетей).
Графовая аналитика
Андрей Райгородский (МФТИ) рассказал про современные применения теории графов к анализу данных. «Чистые» математики давно знают и любят теорию графов (максимально упрощая – теорию о том, как точки можно соединять линиями. Никогда не говорите при них такое!). А в последние годы, к радости теоретиков, она получила самое непосредственное применение.
В докладе речь шла про Интернет как граф: сайты – это точки (вершины), а ссылки с одного сайта на другой – это линии (рёбра графа).
Изучая граф, можно сделать множество наблюдений. Например, что общая структура Интернета устойчива к случайному воздействию на разнообразные сайты, но уязвима при атаках на «хабы» – крупные сайты, связанные с множеством других.
Самое доступное из возможных объяснение графа Бакли-Остгуса.
Ещё один интереснейший факт: независимо от того, как разрастается Интернет – а делает он это с приличной скоростью – доля «хабов», имеющих d ссылок, обратно пропорциональна этому числу d в небольшой положительной степени.
Очень доступно Андрей Райгородский рассказал о модели Buckley-Osthus, которую можно использовать для исследования таких графов. Её суть сводится к тому, что некоторый новый сайт будет, скорее всего, связан с одним из наиболее популярных имеющихся сайтов. Слова «скорее всего» означают в данном случае, что вероятность будет пропорциональна количеству входящих ссылок.
ML и временные ряды
Евгений Бурнаев рассказал про перенос классических методов ML на прогнозирование временных рядов. Такая задача возникает, например, при анализе действий пользователей.
Fake News и постправда
В 2015 году термину «fake news» было посвящено около 100 научных публикаций. В 2020 году – более 24000. Причина здесь, конечно, не только в злободневности этой темы, но и в тех возможностях, которые в связи с этим открывают методы обработки естественного языка (NLP).
Итоги
Хотелось рассказать обо всём сразу, но (естественно) не получилось. Был целый блок, связанный с этическими и юридическими тонкостями и с тем, как с ними обходиться (с помощью препроцессинга и других методов).
Data Science уже вышла на тот уровень, когда обычными конференциями «обо всём сразу» ограничиваться нельзя: есть очевидный спрос на более нишевые, «отраслевые» мероприятия. И это как раз тот случай. Все заинтересованные могут посмотреть все выступления и доклады мероприятия собственными глазами:
На прошедшем мероприятии мы воочию засвидетельствовали, что шаги, которые наука раньше проходила за десятилетия, сегодня занимают годы, а то и месяцы. Что ж, это как минимум радует. В комментариях расскажите, довелось ли вам побывать на Data Fusion и хотели бы сделать это в будущем. Будем рады обратной связи.
1 view
8938
3314
4 months ago 01:54:53 5
Мастер-класс Филипа Милевчича «Как определить компанию, которая выживет в изменяющемся мире?»
4 months ago 00:14:49 21
DataFuSion 1 в шаге от Успеха Армянское Радио Уберите Fu ᛋion город из Матрицы Шок ИИ не поможет при отсутвии естественного
5 months ago 00:00:15 86
240624 Miyeon for Cell Fusion C
5 months ago 00:00:15 34
240419 Miyeon for Cell Fusion C
5 months ago 00:35:49 760
Межрегиональный фестиваль по BELLY DANCE «Oriental Magic» - 1 зал
5 months ago 00:07:17 1
The problems with Helion Energy - a response to Real Engineering
5 months ago 01:11:31 1
Street Racer (1995) (Sega MD)➤1 часть➤Гонщик нереальный!
6 months ago 01:59:47 2
Bes - Oldschool Techneurostepfunk Mix
6 months ago 00:00:17 1.4K
240327 Miyeon - Cell Fusion C
6 months ago 00:00:15 283
240319 Miyeon - Cell Fusion C @ CF
6 months ago 00:00:04 157
Cell Fusion C Miyeon muse.
6 months ago 00:00:04 2K
240318 Miyeon @ Cell Fusion C
6 months ago 00:09:06 1
Futuristic Armored Vehicle Capable of 200 Km/Hour - Cockerill i-X
6 months ago 00:56:56 1
Blades of Vengeance (1993) (Sega MD)➤4 часть➤Лес-чудес и Змей-Горыныч, ну и финальный аккорд
6 months ago 00:25:15 1
Hell Let Loose Gameplay (PC UHD) [4K60FPS]
6 months ago 00:54:49 1
Blades of Vengeance (1993) (Sega MD)➤3 часть➤И вновь босс-голова, рыцари и Ястреб
6 months ago 00:21:02 8
NFuse | Полный обзор | Новый релиз от Kiive Audio
6 months ago 00:21:02 17
NFuse | Полный обзор | Новый релиз от Kiive Audio (с переводом)
6 months ago 00:01:00 15
NFuse | Шинный процессор (новая версия от Kiive Audio)
7 months ago 01:03:02 1
Blades of Vengeance (1993) (Sega MD)➤2 часть➤Плюющая голова, арбалет и ящер с подсвечниками
7 months ago 01:06:29 1
Blades of Vengeance (1993) (Sega MD)➤1 часть➤Во что я вообще вписался!?