Почему люди должны слиться с ИИ | Д. Скотт Феникс | TED

TED23 мая 202657 1781 76410 мин чтения29 августа, 03:38

Коротко

Спикер, основатель ранней AI-компании, продавший её Google,, говорит, что человечество стоит на пороге очередного «большого перехода» эволюции: слияния с ИИ по аналогии с тем, как 2 млрд лет назад крупная клетка поглотила бактерию и получила митохондрию. Он опросил лидеров индустрии, и почти все подняли руки на вопрос, есть ли больше 10% шанса, что ИИ убьёт большую часть человечества за 20 лет. Остановиться они не могут: любая пауза отдаёт рынок конкуренту. Без слияния ИИ превращается из инструмента в замену, и человечество повторяет судьбу всех конкурирующих интеллектов, которых Homo sapiens довёл до вымирания. Переход уже идёт незаметно, телефоны, нейроимплантаты Neuralink, Face ID, читающий микродвижения мышц. Условие выживания: части должны помнить, что они части. Иначе цивилизация сгорает, как опухоль убивает носителя.

Главный тезис

ИИ, это «кислородный кризис» нашей эпохи: либо человечество сливается с ним в новое целое (как клетка с митохондрией), либо проигрывает конкуренцию более умному виду. Условие успеха этого слияния, сохранить слитность людей между собой.

Ключевые идеи

  • 0:29, 2 млрд лет назад бактерии изобрели фотосинтез, кислород был ядом и вызвал первое массовое вымирание, но одна клетка поглотила другую и не переварила, так появилась митохондрия.
  • 1:40, биологи называют такие моменты major transitions (большими переходами): молекулы → клетки → тела → общества, и каждая ступень, результат слияния, а не конкуренции.
  • 2:31, спикер 15 лет строил ИИ, поднял четверть миллиарда долларов, продал бизнес Google и говорит изнутри индустрии.
  • 2:48, на закрытом мероприятии почти все лидеры ИИ-индустрии подняли руки на вопрос «>10% что ИИ убьёт большую часть человечества за 20 лет».
  • 3:25, каждый AI-фаундер ночью думает: «если я этого не построю, построит кто-то хуже», гонка-ловушка, где безопасность проигрывает скорости.
  • 3:31, ИИ, это кислородный кризис эпохи, он приходит независимо от готовности.
  • 3:54, настоящий вопрос не «что ИИ сделает с нами», а «что будет, если ИИ останется отдельным», тогда он не инструмент, а замена.
  • 4:29, Homo sapiens довёл до вымирания все конкурирующие интеллекты между собой и шимпанзе; ближайших родичей держим в резервациях.
  • 5:02, слияние уже идёт незаметно: телефонные номера, календарь, навигация ушли из головы в карман без сознательного решения.
  • 5:47, техника пододвигается всё ближе к мозгу: мейнфрейм → ПК → смартфон → часы → smart glasses → нейроимплант.
  • 6:05, Ноланд Арбо, первый получивший Neuralink, говорит, что это «как Сила», машина не ощущается машиной, ощущается им самим.
  • 6:23, Face ID репозиционируется в наушники и очки, чтобы считывать микродвижения мышц под кожей, невидимые глазу, система учится «слышать мысли».
  • 6:56, при 1000 связей имплант восстанавливает движение, при 10 000, речь, при миллионе уже добавляет то, чего никогда не было: язык за вечер, общий с другом memory.
  • 8:56, обязательное условие любого перехода: части должны помнить, что они части; клетка, забывшая о целом,, это рак, который убивает носителя и себя.
  • 9:39, цивилизация сама по себе слияние, хрупкое соглашение миллионов незнакомцев делить институты и будущее; по мере турбулентности от ИИ каждая часть будет соблазнена дефектнуть.

Почему это важно

Спикер говорит технологической элите и широкой публике прямо: текущая рамка дискуссии вокруг ИИ, «регулировать», «замедлить», «какие работы исчезнут», поверхностна. Она обходит структурный факт: компании и страны не могут остановиться по причинам теории игр. Единственный выживаемый сценарий, биологическое и когнитивное слияние с ИИ. Это работает на руку Neuralink, производителям умных очков и наушников, Apple с её репозиционированием Face ID, и идеологически легитимизирует BCI-индустрию в целом. Проигрывают сторонники «паузы» и регуляторных интервенций, спикер называет такие подходы downstream от более глубокого вопроса. Параллельно он поднимает социальный риск: внутренний раскол общества, потерявшие работу против сохранивших, способен разрушить цивилизационный «merger» раньше, чем человечество успеет слиться с ИИ.

Идеи

  • Кислород был ядовит для жизни, нынешняя «отравляющая» технология (ИИ) тоже создаёт давление отбора, а не просто новые возможности.
  • Митохондриальный эндосимбиоз произошёл в умирающем мире, крупные прорывы случаются в катастрофах, а не в стабильности.
  • Все «лестницы сложности» в биологии (молекула → клетка → тело → социум) прошли через слияние, а не через индивидуальную конкуренцию.
  • Лидеры ИИ-индустрии знают про экзистенциальный риск, но гонка-ловушка не даёт никому остановиться первым.
  • Регуляция бессильна, потому что любая страна, замедлившаяся ради безопасности, проигрывает не замедлившейся.
  • Аргумент «если не я, то кто-то хуже», структурный, а не моральный недостаток разработчиков.
  • Ни одно вытеснение памяти телефоном/календарём не было осознанным решением, слияние идёт через необратимый дрейф, а не через выбор.
  • Освобождение когнитивного ресурса (орфография, навигация) перенаправляется в более высокоуровневые задачи, не дефицит, а реаллокация.
  • Каждое новое устройство ближе к мозгу: расстояние от вычислений до мысли сокращается монотонно.
  • Face ID, троянский конь BCI: технология распознавания лица превращается в технологию чтения внутренних мышечных сигналов.
  • BCI-индустрия идёт по экспоненте каналов: 1 000 → 10 000 → 100 000 → 1 000 000 связей.
  • На миллионе каналов исчезает граница между восстановлением утраченного и аугментацией нового, язык за вечер, разделённое воспоминание.
  • Стандартная UI-метафора (курсор-папка-файл), это эквивалент «идти через дом, чтобы щёлкнуть выключатель»; 2 секунды решения растягиваются в минуту моторики.
  • Промежуток между «вопрос пришёл» и «ответ начал формироваться», это и есть человеческий когнитивный gap; ИИ закрывает его.
  • Память будет ощущаться как ответ ИИ, и наоборот, ответ ИИ как собственная память; различить источник станет невозможно.
  • Slippage будет идти через социальное давление, а не через личный выбор: «коллега уже подключился, ты держишься, потом сдаёшься, как со смартфоном».
  • Рак как метафора: успешен локально, фатален глобально, «опухоль растёт, но потом убивает носителя, который убивает её саму».
  • Цивилизация, это невидимое соглашение, а не институты; институты, следствие соглашения, а не причина.
  • Турбулентность от ИИ выявит максимальное искушение дефектировать, у каждой группы будет рациональный повод выйти из «merger» с остальными.
  • Потерявшие работу почувствуют себя брошенными; сохранившие, вправе отвернуться; обе позиции эрозируют общий контракт симметрично.
  • Метафора «descendants vs fossils»: природа сохраняет слияния, которые сработали, и оставляет остальное как окаменелости.
  • ИИ-апокалипсис, замены, слияния, всё это уже произошло в эволюции миллион раз; человеческий случай не нов, нов только субъект.
  • Шимпанзе в резервациях, это прообраз того, что более умный вид сделает с менее умным, даже если он «дружелюбен».
  • «Хорошая новость» в риторике спикера парадоксальна: слияние не нужно решать начать, нужно заметить, что оно уже идёт.
  • Технологии не нужно изобретать новые, нужно «больше того же», то есть масштабирование уже существующего.
  • Преимущества интеграции делают отказ конкурентно невыносимым, это не убеждение, а экономическое принуждение.

Инсайты

  • Сотрудничество побеждает конкуренцию в эволюционных скачках: рост сложности систем достигается не через борьбу за ресурсы, а через включение конкурента внутрь себя.
  • Гонка-ловушка делает индивидуальную мораль нерелевантной: когда отказ одного игрока означает выигрыш худшего, моральная агентность переносится с разработчика на структуру индустрии.
  • Технологический дрейф необратим без сознательного решения: переход от «я помню» к «мой телефон помнит» произошёл без точки выбора, и слияние с ИИ пойдёт по той же траектории.
  • Близость интерфейса к телу, монотонная функция: каждое поколение устройств уменьшает расстояние до мозга, и эта тенденция не имеет обратного градиента.
  • Восстановительная медицина, троянский конь аугментации: социальная легитимизация BCI идёт через паралич/слепоту, но точка перехода к улучшению здоровых людей встроена в саму экспоненту каналов.
  • Регуляторные интервенции работают на уровне следствий, а не причин: вопросы «какие работы исчезнут» и «как замедлить» downstream от вопроса «остаётся ли ИИ отдельным», и пока не решена основная развилка, регуляция бессильна.
  • Социальная фрагментация, главный риск перехода: технологический скачок убивает не сам по себе, а через разрушение цивилизационного «merger» под давлением неравномерных издержек.
  • Раковая метафора работает на всех масштабах: клетка, человек, государство, цивилизация, каждый уровень рушится, когда часть забывает целое; рост части без отсылки к целому всегда самоликвидируется.
  • Эволюция отбирает не правильность, а слитность: «descendants vs fossils», критерий не моральный и не технический, а структурный, устойчив только тот, у кого части удержались.
  • Граница «я/инструмент», не онтологическая, а инфраструктурная: на миллионе нейронных каналов вопрос «чья это мысль» теряет смысл, субъектность размывается по архитектуре, а не по биологии.

Цитаты

«AI is the oxygen crisis of our era, and it's coming whether we're ready or not», 3:31 ИИ, это кислородный кризис нашей эпохи, и он придёт, готовы мы или нет

«That's right. We're going to eat the AI», 2:08 Именно так. Мы съедим ИИ

«If one company pauses for safety, another one takes the market. If a country stops to regulate, another one races ahead», 3:11 Если одна компания тормозит ради безопасности, рынок забирает другая. Если одна страна останавливается для регуляции, другая мчится вперёд

«You lie there and you think, if I don't build this, someone worse will», 3:25 Ты лежишь и думаешь: если я этого не построю, построит кто-то хуже

«Without a merger, AI isn't a partner, it's a rival», 4:48 Без слияния ИИ, не партнёр, а соперник

«A merger isn't something we need to decide to start. It's something we need to notice that we are already in», 4:54 Слияние, не то, что нужно решить начать. Это то, что нужно заметить, мы уже в нём

«The machine doesn't feel like a machine. It feels like him», 6:12 Машина не ощущается как машина. Она ощущается как он сам

«At a million connections, you stop restoring what was lost, and you start adding what was never there», 6:56 На миллионе связей ты перестаёшь восстанавливать утраченное и начинаешь добавлять то, чего никогда не было

«The parts have to remember that they are parts», 8:56 Части должны помнить, что они, части

«A part forgets the whole, and the whole dies, which kills the part», 9:30 Часть забывает целое, целое умирает, а это убивает часть

«People who lose their livelihoods will feel abandoned. People who keep theirs will feel entitled to look away», 10:07 Потерявшие средства к жизни почувствуют себя брошенными. Сохранившие, вправе отвернуться

«For us to make it to a merger with AI, we have to stay merged with each other», 10:27 Чтобы дойти до слияния с ИИ, нам нужно остаться слитыми друг с другом

«The thing about the future is we all have to share the same one», 10:36 Особенность будущего в том, что у нас оно одно на всех

«The mergers that worked left descendants. The ones that failed left fossils», 11:42 Сработавшие слияния оставили потомков. Несработавшие, окаменелости

«I want my daughters to be descendants, and I want yours to be too», 11:35 Я хочу, чтобы мои дочери были потомками. И ваши тоже

Факты

  • 2 млрд лет назад произошёл эндосимбиоз, крупная клетка поглотила меньшую, та стала митохондрией, что часть учёных называет первым массовым вымиранием в истории Земли.
  • Спикер работал в ИИ 15 лет, основал одну из ранних AI-компаний, поднял четверть миллиарда долларов, продал бизнес Google.
  • На частном мероприятии с лидерами индустрии «почти все руки поднялись» на вопрос про >10% шанс гибели большей части человечества от ИИ за 20 лет.
  • Между Homo sapiens и Pan troglodytes (шимпанзе) все конкурирующие интеллекты вымерли; шимпанзе сегодня содержатся в резерватах «для защиты от нас».
  • Ноланд Арбо, первый человек, получивший имплант Neuralink; описывает использование «как использование Силы».
  • Парализованные пациенты сегодня печатают мыслями; нейроимпланты восстанавливают речь, зрение и слух.
  • Технология Face ID репозиционируется в наушники и очки для распознавания микродвижений мышц под кожей, невидимых глазу.
  • Современный мозговой имплант имеет около 1 000 связей; шкала развития: 1 000 → 10 000 → 100 000 → 1 000 000.
  • При 1 000 связей восстанавливается движение, при 10 000, речь, при 1 000 000, аугментация (язык за вечер, разделение воспоминаний).
  • У спикера две маленькие дочери, это его личная мотивация разбираться с темой.

Источники

  • Neuralink, нейроимплант, на примере Ноланда Арбо.
  • Noland Arbaugh, первый получатель Neuralink-импланта.
  • Apple Face ID, пример системы биометрии, репозиционируемой для считывания микромышечной активности.
  • Google, компания-покупатель бизнеса спикера.
  • Концепция major transitions in evolution, биологическая теория (Мейнард Смит, Сатмари, не названы прямо, но цитируется аппарат).

Итог

Слияние человека с ИИ, не выбор, а биологическая неизбежность по сценарию митохондриального эндосимбиоза. Единственное, что отделяет потомков от окаменелостей, способность частей удержать целое.

readmint Pro

То, что вы только что прочитали —это саммари readmint

Оформите доступ — и получайте такой же разбор по любому своему видео. Вставляете ссылку, через 2–3 минуты готов пересказ с главными тезисами и цитатами. Без воды и без перемотки.

  • Безлимит саммари — сколько угодно видео
  • Главные тезисы и цитаты без воды
  • Приоритет в очереди обработки
  • Без рекламы и сторонних блоков
Получить такое же саммари
Доступ откроется сразу после оплаты — вставите ссылку и начнёте.

Или 4 900 ₽/год — доступ откроется сразу после оплаты.

Ещё с канала «TED»

Все видео