Что обсуждали на GOSIM в Париже: прозрачность ИИ, табличные модели и развитие vLLM
Конференция GOSIM (Global Open Source Innovation Meetup), посвящённая open‑source разработке, прошла 5–6 мая в парижском кампусе Station F. Здесь собираются разработчики инструментов открытого кода, на которых во многом держится современная экосистема ИИ. Как пишет Towards AI, заметная часть дискуссий была сосредоточена на практических вопросах: развитии открытых моделей, инфраструктуре инференса и роли сообщества разработчиков.
Одним из ключевых выступлений стала лекция лауреата Fields Medal Sir Timothy Gowers о применении LLM в математике. Он подчеркнул, что способность модели быстро находить решение задачи сама по себе ещё не означает полноценного научного результата, решающим остаётся прозрачное объяснение хода рассуждений. По его словам, студенты PhD уже сталкиваются с ситуациями, когда ИИ справляется с задачами за минуты, хотя раньше на них уходили месяцы. Исследовательская группа Gowers в Cambridge работает над тем, чтобы сделать процесс рассуждения ИИ понятным и обучаемым, а не просто быстрым.
С отдельным докладом выступил Gaël Varoquaux, Chief Science Officer в Probabl. Он напомнил, что LLM подходят далеко не для всех задач, а статистика и классическая data science по‑прежнему играют важную роль в развитии ИИ. В качестве примера он представил TabICL, open source foundation model для табличных данных. Probabl, команда, стоящая за scikit-learn, показывает, что экосистема открытой data science продолжает развиваться и при этом сохраняет свои базовые принципы.
На технических воркшопах подробно разбирали библиотеку vLLM. Daniele Trifiro, участник проекта и Principal Software Engineer в Red Hat, рассказал о механизме PagedAttention. Это подход к управлению памятью KV-cache, вдохновлённый OS paging и направленный на сокращение потерь памяти и ускорение inference. На сессии также показали поддержку Google TPU, AWS Neuron и Intel Gaudi помимо NVIDIA GPUs. Участники обсудили проверку результатов с помощью lm-evaluation-harness, а также роль сообщества разработчиков и лидербордов вроде OpenLLM.
Ключевые факты
Конференция GOSIM (Global Open Source Innovation Meetup) прошла в Париже 5–6 мая на площадке Station F и была посвящена инструментам open source AI.
Лауреат Филдсовской премии Sir Timothy Gowers рассказал о работе своей группы в Cambridge над тем, чтобы делать рассуждения AI прозрачными и обучаемыми, а не только получать быстрые ответы.
Chief Science Officer компании Probabl Gaël Varoquaux представил TabICL, open source foundation model для табличных данных.
На воркшопе по библиотеке vLLM Daniele Trifiro из Red Hat представил механизм PagedAttention для управления KV‑cache и рассказал о поддержке оборудования Google TPU, AWS Neuron и Intel Gaudi.