Новые проекты с искусственным интеллектом

тию в этой области прорывных технологий.

В 2016 году Фонд и его попечители поддержали создание независимой, но очень прорывной лаборатории, которая бы занималась управлением проектами искусственного интеллекта. Денис Кулешов заверяет, что ему и его лаборатории не стыдно за реализованные проекты — ни перед страной, ни перед подопечными, которым они помогают.

Денис Кулешов рассказывает, что более привычная для России схема зарождения стартапа и то, как осуществляется проектный менеджмент (project management), выглядит так: люди вращаются в одной среде, где стоят цели развития бизнеса, встречаются, начинают обсуждать свои задачи, договариваться о совместном проекте. В «Сенсор-Тех» все иначе — это социальная инициатива, но связанная с прорывными технологиями. Изначально идеей Фонда было создание компании, которая бы занималась благотворительностью и действовала в социальной сфере, но использовала передовые технологии.

О команде проекта

Рассказывая о команде «Сенсор-Тех», Денис говорит:

Я считаю, что наши ребята уникальные люди, потому что делать и придумывать каждый день что-то новое — история очень непростая. А еще сложнее добиваться результатов, ставить себе какую-то планку, через 3 года приезжать на выставку и показывать готовый продукт. Команду мы собирали с нуля, но главным критерием было то, что все ребята горели и хотели изменить мир людей, попробовать себя в совершенно новом амплуа и в новой сфере.

Рассказывая о работе компании, Денис говорит, что первый большой проект был связан с разработкой гаджетов для слепых и глухих. Конечно, запускать большую организацию сложно с нуля, поэтому сразу договорились, что национальная технологическая инициатива и фонд «Соединение», его партнеры, спонсоры помогут профинансировать большой грантовый проект. Денис говорит, что было сделано несколько гаджетов, которые сейчас уже свободно продаются и помогают слепым и глухим людям.

Гаджеты «Робин» и «Чарли»

Среди самых первых проектов, реализацией которых управляла лаборатория, было создание гаджетов «Робин» и «Чарли». Денис объясняет:

У «Робина» простая задача — он помогает людям ориентироваться в пространстве, то есть это такая умная видеокамера, которую слепой человек может брать с собой. Если он оказался в незнакомом месте, то он нажимает кнопку, далее магия искусственного интеллекта срабатывает, и уже через четверть секунды «Робин» говорит человеку в наушник «впереди автомобиль» или «впереди человек», а если он знает в лицо этого человека, то он скажет, кто впереди стоит. Плюс там есть несколько датчиков, которые помогают обходить препятствия и так далее.

Директор лаборатории «Сенсор-Тех» объясняет, что «Робин» помогает определить, что находится на расстоянии 5-10 метров. Например, у слепых людей возникают сложности с передвижением по тротуарам, где нередко паркуют машины. Человек может бояться, что ударит дорогой автомобиль и ему придется платить за это. «Робин» говорит, что через два метра машина, потом через один, и тут уж очевидно, что ее надо обходить. С автобусной остановкой точно так же — «Робин» будет говорить, когда подъезжает автобус. Инновация заключается еще и в том, что устройство может работать без интернета по всей территории России.

Еще один уникальный проект в сфере искусственного интеллекта — «Чарли». Денис Кулешов рассказывает:

Чарли» помогает общаться с глухими людьми. Я приведу пример из жизни. Например, глухой человек приходит в МФЦ, в банк или в службу социальной защиты. Обычно с ним общаются, переписываясь на бумаге. Это нормально, это не супертехнологично и очень долго, поэтому мы сделали такой гаджет. Он похож на умный микрофон. В нем несколько микрофонов — «Чарли» слышит речь и переводит на экран в виде субтитров. Пользователям это решение очень удобно, и наше устройство часто применяется в общественных организациях.

Имплант для возвращения зрения

Спикер рассказывает, что команда много работает со слепыми людьми и всегда ищет возможности упростить их жизнь или даже восстановить зрение. Так был создан имплант, который можно имплантировать в глаз или даже в мозг. Денис Кулешов объясняет, в чем разница:

Мы видим, на самом деле, мозгом, а глаз — это просто способ передачи информации. При некоторых заболеваниях сетчатки действительно можно поставить электронику на сетчатку и получится так, что те клетки, которые раньше отвечали за восприятие информации механически, которые уже не работают, будут замещены вот такой электронной штукой в глазу. Пользователь носит камеру в очках, а электроника стимулирует глаз, и информация передается в мозг. Но бывает очень много заболеваний, когда такой имплант не поставишь. Это не будет работать. И самая топовая в этом случае технология — это имплант, который ставится напрямую в мозг. Мы, по сути, соединяем камеру и мозг, а глаза и зрительный нерв в этой схеме уже вообще не нужны.

Спикер объясняет, что это сложная нейрохирургическая операция, и там есть определенные риски, но, тем не менее, это шанс обрести зрение.

Денис Кулешов рассказывает, что уже проводились эксперименты с использованием таких имплантов. Выглядит это так: берут добровольца, ставят ему электронику и через какое-то время эту электронику забирают. Но, как говорит Денис, медицинская система на данном этапе не предполагает назначения подобной операции врачом  — такого нет еще нигде в мире.

Мы одна их тех организаций, которая пытается сделать так, чтобы в России первой в мире появилась такая система и была общедоступна слепым пациентам», — заверяет директор лаборатории «Сенсор-Тех.

Разработка «Элвис»

Спикер демонстрирует нейроимплант и рассказывает:

Например, пациент не видит, ему нужна камера, которая будет снимать окружающую обстановку. Вот в такой обруч, который надевается на голову, у нас вмонтирована камера. Здесь еще один блок, потому что нужны аккумуляторы, ниже мощный компьютер — пользователь его носит на поясе.

Денис Кулешов объясняет, что для того, чтобы картинка с камер попадала в головной мозг, в мозг имплантируется специальная система. Крупные части — под кожу сзади головы, а матрица электродов — непосредственно в мозг таким образом, чтобы связаться с зоной коры головного мозга, отвечающей за зрение.

Система «Элвис» работает так: камеры снимают, компьютер обрабатывает, передает информацию на имплант, имплант ее еще раз обрабатывает, адаптирует для мозга, стимулирует те клетки, которые отвечают за зрение, и все это происходит много раз в секунду на протяжении всего времени.

Спикер говорит, что технология эта очень сложная, работы над ней велись примерно с 2019 года, но совсем недавно смогли поставить первую версию обезьяне. Михали объясняет, что этап клинических исследований на животных обязателен, тем более для таких сложных технологий. Разработчики рассчитывают, что скоро смогут перейти к людям и поставить незрячим добровольцам такую систему.

Далее спикер рассказывает, что электронное зрение будет необычным:

Представим себе, что мы рисуем мир черным фломастером в виде контуров — примерно о таком зрении идет речь. И наша задача сделать так, чтобы пользователь смог выжать максимум из этого зрения.

По словам Дениса Кулешова, у «Элвиса» большой потенциал. Используя эту систему, можно будет помочь большому числу людей. Но важно понимать, что это нейрохирургия. Могут быть противопоказания и существуют определенные риски. Спикер говорит, что уровень готовности проекта высокий и возможно, что первому добровольцу имплант поставят уже в 2024 году.

Обсуждение вопросов от аудитории

Рассказывая про искусственный интеллект и проекты «Сенсор-Тех», спикер говорит, что они никогда не использовали искусственный интеллект для галочки. Но, например, тот же «Робин» не может существовать без artificial разума. Это его суть. Также «Чарли» не сможет переводить текст без ИИ. А вот «Элвис» смог бы существовать без ИИ, но как раз благодаря искусственному интеллекту, по словам Дениса, удалось выжать максимум из этой технологии.

Также спикер отвечает на вопрос о других гаджетах для глухих и слепых людей. Денис Кулешов отмечает, что стоимость имплантов, которые вставляют в улитку для возвращения слуха, сегодня компенсирует государство. Таких операций становится все больше.

Также Денис Кулешов рассказывает о системе «See my world», в которой есть софт, компьютер и VR-шлем с камерой. Эта система помогает взять медицинские данные пациента после посещения офтальмолога и занести их в программу.

Мы ездили с проектом «See my world» по всей стране, устраивая социальные лекции. Этот шлем помогает понять, каким может быть нарушение зрения. Например, люди могут годами видеть через тонкую щель — это называется туннельное зрение. Переживая такой социальный опыт, люди развивают в себе эмпатию. Также эта система может помогать в обучении и моделировании офтальмологических операций.

Отвечая на вопрос о том, какую профессию стоит выбирать молодежи сегодня, спикер говорит: «Программирование надолго с нами. Конечно, современные технологии обязывают использовать самые крутые и современные материалы, поэтому все, что связано с материалами, с поиском и с химией частично, это все очень увлекательная история. Я инженер-айтишник, айтишники точно не пропадут. Профессий много, нейрофизиологи сейчас востребованы, потому что наука о мозге — это то, что многих увлекает.