Голос хокинга. История легенды: голос Хокинга

Профессор Хокинг и его команда техников

Стивен Хокинг уже более 50 лет борется с дегенеративной болезнью двигательных нейронов. К сожалению, скорость речи профессора снижается с годами, поэтому в 2011 году он обратился к сооснователю Intel Гордону Муру с вопросом, способна ли компания Intel помочь ему сделать апгрейд и поставить более эффективную систему.

Компания Intel выполнила заказ, а в январе 2015 года обещает выложить программу ACAT (Assistive Context Aware Toolkit) в свободный доступ. От дегенеративной болезни двигательных нейронов страдает более 3 млн человек во всём мире. Скоро они смогут воспользоваться open-source разработкой от Intel. Кроме того, исследователи могут доработать программу под управление прикосновением, морганием, движением бровей и другими способами.

Софт сделан на базе технологии SwiftKey и при помощи специалистов этой компании.

Разработка ACAT продолжалась три года, а SwiftKey подключилась к работе два года назад. Новый синтезатор Хокинга предсказывает вводимые слова, как это делает SwiftKey на мобильных устройствах. В результате, профессору для набора текста нужно вводить всего 20% символов.

Синтезатор Хокинга изначально был сделан в виде рычажка на кресле, с помощью которого он выбирал буквы на экране компьютера. Он использовал систему практически в неизменном виде в течение нескольких десятилетий, только несколько лет назад на очки Хокинга поставили инфракрасный сенсор, чтобы указывать буквы направлением взгляда.

С помощью ACAT профессор выбирает целые слова вместо букв. В результате, скорость ввода текста удвоилась, а время выполнения наиболее типичных задач выросло десятикратно (серфинг в интернете и т.д).

Программа ACAT разработана с учётом словарного корпуса, который профессор передал в распоряжение разработчиков. Если код программы будет открыт, то словарный корпус, наверное, можно будет настраивать индивидуально для каждого пользователя.

Компания Intel помогает Стивену Хокингу с выбором компьютерного оборудования с 1997 года, когда Гордон Мур заметил, что Стивен пользуется компьютером на процессоре AMD . С тех пор Intel делает бесплатный апгрейд компьютеров Хокинга каждые два года.

Профессор Хокинг прокомментировал установку нового синтезатора речи: «Медицина не смогла меня излечить, так что я полагаюсь на технологии, чтобы общаться и жить. Intel поддерживает меня почти 20 лет, позволяя мне делать то, что я люблю, каждый день. Разработка этой системы имеет потенциал для улучшения жизни людей по всему миру и является передовой системой для обеспечения человеческого общения и преодоления барьеров в коммуникации, которые раньше стояли на пути».

Врачи диагностировали дегенеративную болезнь двигательных нейронов у Стивена Хокинга, когда ему был 21 год. Специалисты считали, что он доживёт максимум до 25 лет. Сейчас профессору 72 года.

Стивен Хокинг впервые встретился с Гордоном Муром, соучредителем Intel, на конференции в 1997 году. Мур заметил, что компьютер Хокинга, с помощью которого он общался с другими людьми, работает на процессоре AMD, и спросил его, не хочет ли он вместо этого «настоящий компьютер» с процессором Intel. И с тех пор компания Intel предоставляет Хокингу персональные компьютеры и техническую поддержку, заменяя устаревшее оборудование каждые два года.

Хокинг потерял способность говорить в 1985 году, когда при поездке в ЦЕРН в Женеве он заразился пневмонией. В больнице его положили на искусственную вентиляцию легких. Его состояние было критическим. Врачи спросили тогдашнюю жену Хокинга, Джейн, должны ли они отключить его от аппарата искусственного жизнеобеспечения - та решительно отказалась. Хокинг был доставлен в больницу Адденбрука, в Кембридже, где врачи смогли остановить распространение инфекции. Чтобы помочь ученому дышать, они также выполнили трахеотомию, которая включала вырезание отверстия в его шее и помещение трубки в его трахею. В результате Хокинг необратимо потерял способность говорить.

Некоторое время Стивен общался с помощью орфографических карт, терпеливо указывая на буквы и формируя слова поднятием бровей. Мартин Кинг, физик, который работал с Хокингом над новой системой коммуникации, связался с калифорнийской компанией Words Plus, чья компьютерная программа Equalizer позволяет пользователю выбирать слова и команды на компьютере с помощью ручного кликера. Кинг поговорил с генеральным директором Words Plus Уолтером Вольтошем и спросил, может ли это программное обеспечение помочь профессору физики в Англии с боковым амиотрофическим склерозом (БАС). Вольтош создал раннюю версию Equalizer, чтобы помочь своей теще, которая также страдала от БАС и потеряла способность говорить и писать. «Я спросил, не Стивен Хокинг ли этот профессор, но он не мог назвать мне имя без разрешения», - говорит Вольтош. «Он позвонил мне на следующий день и подтвердил это. Я сказал, что помогу всем чем смогу».

Equalizer сначала работал на компьютере Apple II, связанном с синтезатором речи, созданным компанией Speech Plus. Затем эта система была адаптирована Дэвидом Мейсоном, инженером и мужем одной из медсестер Хокинга, и сделана переносной, что позволило установить ее на одном из кронштейнов инвалидной коляски. С помощью этой новой системы Хокинг смог общаться со скоростью 15 слов в минуту.

Тем не менее, нерв, который позволял ему двигать большим пальцем, продолжал деградировать. К 2008 году рука Хокинга стала слишком слабой, чтобы использовать кликер. В то время его ассистент разработал устройство, которым можно было управлять мышцей щеки. Будучи прикрепленным к его очкам, оно могло обнаруживать с помощью направленного вниз инфракрасного луча, когда Хокинг напрягал мышцу щеки. С тех пор Хокинг добился успеха в написании электронных писем и книг, серфинге в интернете и разговорах с использованием только одной мышцы. Тем не менее, его способность общаться продолжала снижаться. К 2011 году он мог «сказать» лишь пару слов в минуту, поэтому он отправил письмо Муру, сказав: «В наши дни мой речевой ввод стал очень, очень медленным. Может ли мне помочь Intel?»

Мур попросил Джастина Раттнера, технического директора Intel, изучить проблему. Раттнер собрал команду экспертов по взаимодействию человека с компьютером в Intel Labs, с которой и приехал в Кембридж на 70-ый день рождения Хокинга. «Я привел с собой группу специалистов из Intel Labs», - сказал Раттнер аудитории. «Мы будем внимательно изучать применение самых современных вычислительных технологий для улучшения скорости общения Стивена. Мы надеемся, что эта команда совершит прорыв и изобретет технику, которая позволит ему общаться на уровне, который у него был несколько лет назад».

Хокинг был слишком болен, чтобы присутствовать на его собственной вечеринке по случаю дня рождения, поэтому несколько недель спустя он встретился с экспертами Intel в своем кабинете на кафедре прикладной математики и теоретической физики в Кембриджском университете. В группу ученых и техников вошли Хорст Хассеккер, директор Experience Technology Lab, Лама Нахман, директор Anticipatory Computing Lab и руководитель проекта, и Пит Денман, интерактивный дизайнер. «Стивен всегда вдохновлял меня», - говорит Денман, который также использует инвалидное кресло. «После того, как я сломал себе шею и стал парализованным, моя мать подарила мне копию «Краткой истории времени», которая только что появилась в продаже. Она сказала мне, что люди в инвалидных колясках все еще могут делать удивительные вещи. Оглядываясь назад, я понимаю, насколько она была права».

После того, как команда Intel представилась, Хауссекер взял на себя инициативу, объяснив, почему они пришли и каковы были их планы. Хауссекер говорил уже около 20 минут, пока Хокинг внезапно не стал говорить. «Он приветствовал нас и сказал, что счастлив всех нас видеть», - говорит Денман. «Мы даже не поняли, что он печатал все это время. Ему потребовалось 20 минут, чтобы написать приветствие из 30 слов. Мы застыли в удивлении, это был острый момент. Тогда мы поняли, что проблема серьезнее, чем мы думали».

В то время компьютерным интерфейсом Хокинга была программа под названием EZ Keys, которая являлась обновлением предыдущих программных продуктов, также разработанная Words Plus. Она предоставляла ему клавиатуру на экране и базовый алгоритм прогнозирования слов. Курсор автоматически перемещался на клавиатуре по строкам или столбцам, и Стивен мог выбрать нужную букву, дергая щекой, чтобы остановить курсор. EZ Keys также позволяла Хокингу управлять мышью в Windows и различных приложениях на своем компьютере. Он занимался серфингом в Интернете с помощью Firefox и писал свои лекции с помощью Блокнота. У него также была веб-камера, которую он использовал в Skype.

Команду Intel потрясла архаичная система Хокинга, и было предложено внедрение абсолютно нового оборудования. «Джастин думал, что мы можем использовать такие технологии, как распознавание лица, отслеживание взгляда и нейроинтерфейсы», - говорит Нахман. «Сначала мы испробовали множество этих диких идей и других готовых технологий». Эти попытки, чаще всего, не удавались. Отслеживание взгляда не работало с глазами Хокинга из-за его опущенных век. Еще перед обращением в Intel Хокинг пытался использовать ЭЭГ-датчики, которые могли бы считывать его мозговые волны и, возможно, передавать команды на его компьютер. Так или иначе, они не смогли получить достаточно сильный сигнал от мозга. «Мы выводили различные буквы на экран, и он пытался выбрать правильную букву, просто используя свой мозг», - говорит Вуд. «Это отлично работало со мной, но когда это пробовал Стивен, ничего не получалось - мы не могли получить достаточно сильный сигнал, чтобы отделить его от шума».

«Чем больше мы наблюдали за ним и слушали его предложения, тем больше до нас доходило, что он не только хотел ускорить его общение с окружающими людьми, но и просил внедрить новые функции, которые позволили бы ему лучше взаимодействовать с его компьютером», - говорит Нахман. Вернувшись в лаборатории Intel после нескольких месяцев исследований, Денман подготовил 10-минутное видео для отправки Хокингу, показывая, какие новые прототипы пользовательского интерфейса они хотели реализовать и спрашивал его отзывов о них. «Мы придумали нововведения, которые, по нашему мнению, не будут радикально изменять его способ взаимодействия с системой, но все равно будут иметь большое влияние на скорость его речи», - говорит Денман. Нововведения включали такие дополнения, как «кнопка назад», которую Хокинг мог использовать не только для удаления символов, но и для перехода назад в пользовательском интерфейсе, а также алгоритмы предикативного ввода текста и подсказки по следующим словам.

Главное изменение, по мнению Денмана, было в самом прототипе, который должен был решить самую главную проблему, с которой Хокинг столкнулся: пропущенные и неправильные буквы. «Стивен часто попадал по неправильной букве, которая находилась рядом с нужной, и удалял ее», - говорит Денман. «Он снова попадал по неправильной букве, снова удалял и снова вводил не то, что хотел. Это делало ввод невыносимо медленным и расстраивало его». Эта конкретная проблема усугублялась перфекционизмом Хокинга. «Для него очень важно, чтобы его мысли были четко сформулированы, а пунктуация была абсолютно правильной», - говорит Нахман. «Он научился быть достаточно терпеливым, чтобы по-прежнему быть перфекционистом. Он не тот, кто хочет просто передать суть сообщения. Он тот, кто действительно хочет, чтобы его текст был совершенным».

Чтобы устранить проблему пропущенных букв, команда Intel добавила прототип, который интерпретировал бы намерения Хокинга, а не его фактический ввод, используя алгоритм, аналогичный таковому в обработке текста на мобильных телефонах. «Это сложное взаимодействие, в которое нужно поверить», - объясняет видео. «Когда iPhone впервые появился на рынке, люди жаловались на предикативный набор, но недоверие быстро сменилось восторгом. Проблема в том, что для того, чтобы привыкнуть, требуется немного времени, но вы должны не мешать системе выполнять свою работу, и тогда эта функция может увеличить вашу скорость написания текста и позволит вам сосредоточиться на его содержании».

В конце видео Денман задал вопрос: «Каков ваш уровень волнения или опасения?» В июне того же года Хокинг посетил Intel Labs, где Денман и его команда познакомили его с новой системой, первоначально называвшейся ASTER (ASSistive Text EditoR). «Ваше текущее программное обеспечение немного устарело», - сказал ему Денман. «Ну, то есть оно устарело очень сильно, но вы привыкли использовать его, поэтому мы изменили метод, с помощью которого работает ваше предсказание следующего слова, и теперь он может в значительно точнее подобрать правильное слово, даже если введенных букв в нем нет».

«Это большое улучшение по сравнению с предыдущей версией», - ответил Хокинг. «Мне это и вправду нравится».

Они реализовали новый пользовательский интерфейс на компьютере Хокинга. Денман думал, что они на правильном пути. К сентябрю они начали получать обратную связь: ученый не адаптировался к новой системе. Это было слишком сложно. Прототипы, такие как кнопка «назад» и исправление пропущенных букв, оказались запутанными, и нужно было их изменить. «Он один из самых умных людей в мире, но мы не должны забывать, что он не подвергался воздействию современных технологий», - говорит Денман. «У него никогда не было возможности использовать iPhone. Мы пытались научить самого известного и умного 72-летнего деда в мире изучить этот новый способ взаимодействия с технологиями».

Денман и остальная команда поняли, что нужно начать думать о проблеме по-другому. «Мы думали, что разрабатываем программное обеспечение в традиционном смысле, где вы забрасываете огромную сеть и пытаетесь поймать столько рыбы, сколько сможете», - говорит Денман. «Мы не понимали, насколько дизайн будет зависеть от Стивена. Мы должны были сконцентрироваться на обучении одного человека».

В конце 2012 года команда Intel создала систему, которая тщательно записывала, как Хокинг взаимодействует со своим компьютером. Они записали десятки часов видео, которые охватывали целый ряд различных ситуаций: Стивен печатает, Стивен печатает, когда устал, Стивен работает с помощью мыши, Стивен пытается получить окно нужного размера. «Я снова и снова смотрел эти кадры», - говорит Денман. «Иногда я запускал видео в четыре раза быстрее и все еще находил что-то новое».

К сентябрю 2013 года с помощью Джонатана Вуда, помощника Хокинга, они внедрили еще одну версию пользовательского интерфейса в компьютер ученого. «Я думал, что мы сделали это, и проблема решена», - говорит Денман. Однако к следующему месяцу стало ясно, что у Хокинга снова возникли проблемы с адаптацией. «Один из его помощников назвал это «пыткой ASTER», - вспоминает Денман. «Когда они это сказали, Стивен попытался усмехнуться».

Прошло еще много месяцев, прежде чем команда Intel придумала версию, которая понравилась Хокингу. Например, он теперь использует адаптивный предиктор слов из лондонского стартапа SwiftKey, который позволяет ему выбирать слово после ввода буквы, в то время как предыдущая система Хокинга требовала от него перехода к нижней части его пользовательского интерфейса и выбора слова из списка. «Его система предсказания слов была очень старой», - говорит Нахман. «Новая система намного быстрее и эффективнее, но нам нужно было обучать Стивена, чтобы он мог использовать ее. Сначала он жаловался на нее, и только потом я понял, почему: он уже знал, какие слова будет предсказать его предыдущая система, и он привык к этому». Intel стала работать с SwiftKey, включив в систему многие документы Хокинга, так что теперь в некоторых случаях ему больше не нужно было вводить ни одного символа для того, чтобы предиктор угадал нужное слово, основанное на контексте. «Фраза «черная дыра» теперь требует меньшего ввода текста», - говорит Нахман. «Ввод слова «черная» предсказывает сразу «дыру».

Новая версия пользовательского интерфейса Хокинга (которая теперь называется ACAT - Assistive Contextually Aware Toolkit) включает контекстные меню, которые предоставляют Стивену различные ярлыки для разговоров, поиска информации в интернете или переписке по электронной почты. Также в нее встроен новый менеджер лекций, который дает ему контроль над временем написания ответа во время бесед. Он также имеет кнопку отключения звука - любопытную функцию, которая позволяет Хокингу отключить его синтезатор речи. «Потому что он управляет своим выключателем щекой, и если он ест или путешествует, он создает случайный набор слов», - говорит Вуд. «Но бывают времена, когда ему нравится придумывать случайную речь. Он делает это постоянно, а иногда и совершенно неуместно. Я помню, как он случайно набрал «x x x», что через его синтезатор речи звучало как «секс-секс-секс».

Офис Вуда находится рядом с офисом Хокинга, хотя он больше похож на мастерскую. У одной стены свалено электронное оборудование и экспериментальные прототипы. На столе находится камера, часть текущего проекта с Intel. «Идея состоит в том, чтобы камера, направленная на лицо Стивена, считывала не только движения его щеки, но и другие движения лица», - говорит Вуд. «Он мог бы сдвинуть челюсть вбок, вверх или вниз, чтобы управлять курсором, и даже, потенциально, - его инвалидным креслом. Это классные идеи, но они не скоро будут завершены».

Еще один экспериментальный проект, предложенный производителями инвалидной коляски Хокинга в начале 2015 года - это джойстик, который прикрепляется к подбородку ученого и позволяет ему самостоятельно передвигаться на инвалидной коляске. «Это то, чем Стивен очень увлечен», - говорит Вуд. «Проблема заключается в контакте между подбородком Стивена и джойстиком. Поскольку он не может двигать шеей, трудно задействовать или отключить джойстик». Вуд показывает видео о недавнем испытании этой системы. В нем вы можете видеть Хокинга, у которого с трудом получается провести свою коляску через комнату. «Как вы можете видеть, он сумел управлять ей», - говорит Вуд. «Ну, вроде сумел».

Вуд показывает небольшую серую коробку, в которой хранится единственная копия синтезатора речи Хокинга. Это CallText 5010, модель, предоставленная Стивену в 1988 году, когда он посетил компанию, которая ее изготовила - Speech Plus. Плата внутри синтезатора имеет процессор, который превращает текст в речь - это устройство также использовалось для автоматизированных телефонных автоответчиков в 1980-х годах.

«Я пытаюсь сделать программную версию голоса Стивена, чтобы мы не полагались на эти старые аппараты», - говорит Вуд. Для этого ему пришлось отследить судьбу команды Speech Plus. В 1990 году эта компания была продана Centigram Communications. Centigram был приобретен Lernout and Hauspie Speech Products, который, в свою очередь, был приобретен ScanSoft в 2001 году. ScanSoft был куплен Nuance Communications - многонациональной компанией с 35 офисами и 1200 сотрудниками. Вуд связался с ней. «У них было программное обеспечение с голосом Стивена из 1986 года», - говорит Вуд. «Похоже, мы нашли его на резервной кассете Nuance».

Хокинг очень привязался к своему голосу: в 1988 году, когда Speech Plus дали ему новый синтезатор, голос был другим, поэтому он попросил их заменить его оригиналом. Его голос был создан в начале 80-х годов инженером MIT Деннисом Клаттом, пионером алгоритмов преобразования текста в речь. Он изобрел DECtalk, одно из первых устройств, созданных для таких задач. Изначально он записал три голоса - его жены, дочери и самого себя. Женский голос назывался «Прекрасная Бетти», детский - «Малыш Кит», а мужской - «Совершенный Пол». И именно этим голосом и говорит Стивен Хокинг.

Увы, многим идеям Intel уже никогда не суждено будет сбыться - Хокинг, один из величайших ученых современности, скончался в своем доме 14 марта на 77-ом году жизни. Однако, будем надеяться, эти идеи помогут другим людям с БАС более комфортно общаться с окружающими людьми и управлять своими компьютерами.

Встретился с Гордоном Муром, одним из основателей Intel, на конференции в 1997 году. Мур заметил, что компьютер, который Хокинг использовал для общения, был с процессором AMD, и спросил, не нужен ли ему взамен «настоящий компьютер» с микропроцессором Intel. С тех пор Intel предоставляет Хокингу настраиваемый персональный компьютер и техническую поддержку, заменяя его компьютер каждые два года.

Хокинг потерял способность говорить в 1985 году, когда подхватил воспаление легких во время поездки в ЦЕРН в Женеве. В больнице его перевели на искусственную вентиляцию легких. Состояние было критическим. Врачи спрашивали жену Хокинга Джейн, отключать аппарат искусственного жизнеобеспечения или нет. Она яростно отказывалась. Хокинга доставили в больницу Адденбрукс в Кембридже, где врачам удалось сдержать инфекцию. Чтобы облегчить дыхание Хокинга, они также провели трахеотомию, сделав отверстие в горле Хокинга и разместив трубку в его трахее. В результате Хокинг необратимо потерял способность говорить.

Некоторое время Хокинг общался с использованием орфографических карт, терпеливо указывая на буквы и образуя слова, поднимая брови. Мартин Кинг, физик, работавший с Хокингом над новой системой связи, связался с калифорнийской компанией Words Plus, которая разрабатывала программу Equalizer, позволявшую пользователям выбирать слова и команды на компьютере, используя ручной кликер. Кинг обратился к генеральному директору Words Plus Вальтеру Волтошу и спросил, какое программное обеспечение может помочь профессору физики в Англии с боковым амиотрофическим склерозом. Волтош создал раннюю версию Equalizer, чтобы помочь своей крестной матери, которая также страдала от ALS и потеряла способность писать и говорить.

«Я спросил, не Стивен Хокинг ли это, но он не мог назвать мне имя без разрешения, - рассказал Волтош. - На следующий день он позвонил и подтвердил это. Я сказал, что сделаю все, что смогу».

Первый Equalizer работал на компьютере Apple II, связанном с синтезатором речи, созданном компанией Speech Plus. Затем эту систему адаптировал Дэвид Мейсон, инженер и муж одной из медсестер Хокинга, превратив ее в портативную систему, которая может быть установлена на одном из плеч инвалидной коляски. С помощью этой новой системы Хокинг смог общаться со скоростью порядка 15 слов в минуту.

Тем не менее нерв, который позволяет ему двигать пальцами, продолжал деградировать. К 2008 году рука Хокинга стала слишком слабой, чтобы использовать кликер. Его ассистент тогда же разработал устройство, которым можно было управлять щекой. Прикрепленный к очкам инфракрасный датчик мог фиксировать движения мышцы щеки Хокинга. С тех пор, Хокинг приноровился отвечать на письма, серфить Интернет, писать книги и общаться, используя всего один мускул. Однако и этому умению общаться приходит конец. К 2011 году он мог выдать только одно-два слова в минуту, поэтому отправил такое письмо Муру (тому самому, который является автором закона Мура): «Мое устройство речевого ввода очень и очень медленное сейчас. Может ли Intel как-нибудь помочь?».

Мур поручил Джастину Раттнеру, на то время техническому директору Intel, разобраться с проблемой. Раттнер собрал команду экспертов по взаимодействию человека с компьютером в Intel Labs и привез ее в Кэмбридж на конференцию, посвященную 70-летию Хокинга, 8 января 2012 года.

«Я собрал группу специалистов в лабораториях Intel, - заявил Раттнер публике. - Мы собираемся осторожно применить передовые компьютерные технологии, чтобы улучшить коммуникационную скорость Стивена. Мы надеемся, что эта команда совершит прорыв и найдет технику, которая позволит ему общаться на уровне, который был несколько лет назад».

Хокинг был слишком болен, чтобы присутствовать на собственном дне рождения, поэтому встретился с экспертами Intel только несколько недель спустя, в своем офисе, в отделе прикладной математики и теоретической физики в Кембриджском университете. В команду из пяти человек вошли Хорст Хауссекер, директор Experience Technology Lab, Лама Нахман, директор Anticipatory Computing Lab и руководитель проекта, и Пит Денман, интерактивный дизайнер.

«Стивен всегда вдохновлял меня, - говорит Денман, тоже использующий инвалидное кресло. - После того как я сломал шею и оказался парализован, моя мать дала мне копию «Краткой истории времени», которая тогда только вышла. Она сказала мне, что люди в инвалидном кресле все еще могут делать невероятные вещи. Оглядываясь назад, я понимаю, насколько пророческими были эти слова».

После того как команда Intel представилась, Хауссекер взял на себя инициативу, объяснив, почему они были там и каковы были их планы. Хауссекер говорил минут двадцать, пока Хокинг внезапно не заговорил.

«Он поприветствовал нас и сказал, что очень счастлив видеть нас всех, - говорит Денман. - Нам было невдомек, что все это время он печатал. Ему потребовалось двадцать минут, чтобы написать приветствие в 30 слов. Мы просто остолбенели. Момент был очень острым. Мы осознали, что проблема была куда более серьезной, чем мы думали».

В то время Хокинг пользовался компьютерным интерфейсом в виде программы EZ Keys, обновленной версией предыдущих программ, также разработанной Words Plus. Она предоставляла ему клавиатуру на экране и базовый алгоритм прогнозирования слов. Курсор автоматически сканировал клавиатуру по рядам или столбцам, а Хокинг мог выбрать нужный символ движением щеки, останавливающей курсор. EZ Keys также позволяла Хокингу управлять мышью в Windows и работать с другими приложениями на его компьютере. Он мог серфить Интернет с Firefox и писать лекции с Notepad. У него также была веб-камера, которую он использовал со Skype.

Команда Intel решила обновить архаичную систему Хокинга, что потребовало бы создания нового аппаратного обеспечения.

«Джастин думал, что мы можем использовать технологии вроде распознавания лица, жестов, взгляда и нейрокомпьютерных интерфейсов, - говорит Нахман. - Изначально мы скормили ему множество этих диких идей и перепробовали массу редких технологий».

Чаще всего эти попытки были неудачными. Отслеживание взгляда не работало со взглядом Хокинга из-за его опущенных век. Еще до проекта Intel Хокинг экспериментировал с ЭЭГ-датчиками, которые могли бы считывать его мозговые волны и потенциально отправлять команды на компьютер. Непостижимым образом, достаточно сильного мозгового сигнала так и не получилось найти.

«Мы зажигали буквы на экране и пытались определить выбранную букву по отклику мозга, - вспоминает Вуд. - Со мной это работало хорошо, но когда Стивен попробовал, все было насмарку. Он не смог воспроизвести достаточно сильный сигнал, отличимый от шума».

«Чем больше мы наблюдали за ним и слушали его замечания, тем больше до нас доходило, что он просит нас, в довершение к улучшению скорости связи, дать ему новые функции, которые позволят ему лучше взаимодействовать со своим компьютером», - говорит Нахман.

Вернувшись в лаборатории Intel спустя месяцы исследований, Денман подготовил 10-минутное видео для Хокинга, в котором демонстрировались новые нейрокомпьютерые прототипы, которые команда хотела попробовать с Хокингом, и попросил его ответить.

«Мы пришли к выводам, что изменения, которые мы хотим внести, не особо изменят взаимодействие Хокинга с его системой, но все же изменят», - говорит Денман. Изменения включали дополнения вроде кнопки возврата, которую Хокинг мог использовать не только для удаления символов, но и для обратной навигации в интерфейсе; предиктивный алгоритм ввода слов; навигация следующего слова, которая позволяла ему эффективно выбирать слово за словом, вместо того чтобы вводить их.

Основное изменение, по мнению Денмана, заключалось в самом прототипе. Хокинг часто промахивался по клавишам, нажимая букву рядом с той, которую на самом деле хотел нажать. Он мог промазать по букве, удалить ее, снова промазать, снова удалить. Это ужасно удручало и замедляло процесс ввода. Также эта проблема усугублялась перфекционизмом Хокинга. Для него было крайне важно выражать свои мысли корректно, поэтому даже пунктуация должна была быть правильной. Он научился быть достаточно терпеливым, чтобы оставаться перфекционистом. Он не из тех, кто просто хотел отправлять сообщения. Он хотел делать это в совершенстве.

Чтобы решить проблему пропущенных букв, команда Intel добавила прототип, который интерпретировал бы намерения Хокинга, а не его фактический ввод, используя алгоритм, аналогичный тому, что используется в обработке текстов и мобильных телефонах. Когда iPhone впервые вышел на рынок, люди начали жаловаться на предиктивный текст, но недоверие быстро переросло в радость. Проблема в том, что нужно слишком много времени, чтобы привыкнуть к этому, и нужно доверить системе делать свою работу. Однако добавление этой функции может улучшить вашу скорость и позволить вам сосредоточиться на содержании.

В конце видео стоял вопрос: «Каков уровень ваших волнений или опасений?». В июне того же года Хокинг посетил Intel Labs, где Денман и его команда представили ему новую систему - ASTER (Assistive Text EditoR). «Ваше текущее программное обеспечение немного устарело, - сказал ему Денман. - На самом деле, оно очень устарело, но вы к нему привыкли, поэтому мы изменили метод работы вашего предиктивного ввода следующего слова, и оно почти всегда определяет нужное слово, даже если введенные вами буквы разительно далеки от него».

«Это большой шаг по сравнению с предыдущей версией, - ответил Хокинг. - Мне очень нравится».

Инженеры установили новый пользовательский интерфейс на компьютер Хокинга. Денман думал, что они на верном пути. К сентябрю появилась первая обратная связь: Хокинг не адаптировался к новой системе. Она была слишком сложной. Кнопка возврата и та, которая отвечала за промахи по буквам, вводили в недоумение, и их нужно было изменить.

«Он один из умнейших парней в мире, но он все же не привык к современным технологиям, - говорит Денман. - У него никогда не было возможности использовать iPhone. Мы пытались научить самого известного и умного 72-летнего дедушку на планете новому способу взаимодействия с технологиями».

Денман и остальная часть команды поняли, что им нужно начинать по-новому думать о проблеме. «Мы думали, что разрабатываем программное обеспечение в обычном смысле, когда ты разворачиваешь сеть и пытаешься вытащить максимум рыбы. Мы даже не представляли, насколько дизайн будет зависеть от Стивена. Нам нужно было сосредоточить силы на обучении одного человека».

В конце 2012 года команда Intel создала систему, которая записывала взаимодействие Хокинга с его компьютером. Они записали десятки сотен часов видео, которое включало целый спектр различных ситуаций: Стивен печатает, Стивен печатает устало, Стивен использует мышь, Стивен пытается настроить окно нужного размера. «Я смотрел на эти кадры снова и снова», - говорит Денман. «Иногда я запускал видео с четырехкратной скоростью и все равно находил что-то новое».

К сентябрю 2013 года, уже при помощи Джонатана Вуда, ассистента Хокинга, они реализовали еще одну итерацию пользовательского интерфейса в компьютере Хокинга. «Я думал, что у нас получилось, мы сделали это», - говорит Денман. Но в следующем месяце стало понятно, что у Хокинга опять проблемы. «Один из его ассистентов назвал это «пыткой ASTER», - вспоминает Денман. - Когда они так сказали, Стивен попытался улыбнуться».

Прошло еще много месяцев, прежде чем команда Intel придумала версию, которая понравилась Хокингу. К примеру, теперь Хокинг использует адаптивный предсказатель слов лондонского стартапа SwiftKey, который позволяет ему выбирать слово после печати буквы, тогда как предыдущая система требовала от Хокинга двигаться в самый низ интерфейса, чтобы выбрать слово из списка. Его система предсказания слов была слишком старой. Новая система оказалась быстрой и эффективной, но еще оставалось научить Хокинга пользоваться ей. Сначала он жаловался, и только много позже инженеры поняли, почему: он уже знал, какие слова предсказывала его старая система. Он привык пользоваться предсказаниями старой предиктивной системы.

Intel работала со SwiftKey и включила много документов Хокинга в систему, поэтому в некоторых случаях ему даже не нужно было вводить символ, прежде чем система напишет следующие слова из контекста. Фраза ‘the black hole’ не требует никакой печати. После ‘the’ автоматически появляется ‘black’. При выборе ‘black’, автоматически появляется ‘hole’.

Новая версия пользовательского интерфейса Хокинга (теперь известная как ACAT - от Assistive Contextually Aware Toolkit) включает контекстные меню, которые обеспечивают Хокинга различными ярлыками, чтобы поговорить, найти что-то или написать письмо; и новым менеджером лекций, который дает ему управление таймингом во время бесед. Также есть кнопка ‘mute’, которая позволяет Хокингу отключить его синтезатор.

«Поскольку он управляет переключателем с помощью щеки, если он ест или движется, она создает случайный выход, - объясняет Вуд. - Бывают и случаи, когда он специально хочет сказать что-то случайное. Он делает это постоянно, и иногда получается совсем неловко. Я помню, как однажды он случайно набрал “x x x x”, что в его синтезаторе речи звучало как «эксексексекс».

Офис Вуда находится рядом с офисом Хокинга. По большей части это мастерская. Одна стена завалена электронным оборудованием и экспериментальными прототипами. На столе установлена камера, часть рабочего проекта с Intel. «Идея заключается в том, чтобы камера, наведенная на лицо Стивена, считывала не только движения его щеки, но и другие движения лица, - говорит Вуд. - Он может двигать своими челюстями вверх-вниз, вправо-влево, управлять мышью и даже, возможно, своим инвалидным креслом. Это хорошие идеи, но они пока в разработке».

Другой экспериментальный проект, предложенный производителями инвалидной коляски Хокинга в начале этого года, это джойстик, который крепится к подбородку Хокинга и позволяет ему перемещать инвалидную коляску самостоятельно. «Стивен любит такое, - говорит Вуд. - Проблема в контакте подбородка Стивена и джойстика. Поскольку он не двигает шеей, весьма тяжело подключать и отключать джойстик». В целом же Хокинг вполне может ездить самостоятельно.

В маленькой серой коробочке хранится единственный экземпляр синтезатора речи Хокинга. Это CallText 5010, модель, которую дали Хокингу в 1988 году, когда он посетил компанию, производившую их, Speech Plus. Карта внутри синтезатора содержит процессор, который превращает текст в речь; это устройство также использовалось для автоматизированных систем ответа на телефонные звонки в 1980-х.

«Я пытаюсь сделать программную версию голоса Стивена, чтобы мы больше не полагались на эти старые аппаратные карты», - говорит Вуд. Чтобы сделать это, ему пришлось проследить путь команды Speech Plus. В 1990 году Speech Plus продали Centigram Communications. Centigram приобрела Lernout and Hauspie Speech Products, которую, в свою очередь, в 2001 году приобрела ScanSoft. ScanSoft приобрела Nuance Communications, многонациональная компания с 35 офисами и 1200 сотрудниками. Вуд связался с ней. «У них было программное обеспечение с голосом Стивена из 1986 года. Похоже, мы нашли его на резервной кассете Nuance».

Хокинг очень привязан к своему голосу. В 1988 году, когда Speech Plus дала ему новый синтезатор, голос был настолько другим, что он попросил заменить его оригинальным. Его голос был создан в начале 80-х годов инженером Массачусетского технологического института Деннисом Клаттом, пионером алгоритмов, преобразующих текст в речь. Он изобрел DECtalk, одно из первых устройств для этих задач. Первоначально было записано три голоса: Клатта, его жены и его дочери. Женский голос назывался «Прекрасная Бетти» (Beautiful Betty), детский «Крошка Кит» (Kit the Kid), а мужской «Совершенный Пол» (Perfect Paul). Именно этим голосом говорит Стивен Хокинг.

По материалам Wired

Покойный ученый Стивен Хокинг произвел революцию в понимании черных дыр, и его синтетический, сгенерированный компьютером, голос отправили в космос после похорон.

В Лондоне на территории Вестминстерского аббатства 15 июня предали земле прах астрофизика и популяризатора науки Стивена Хокинга. С ученым простились его друзья, родственники и коллеги по научной работе, пишет ВВС .

Прах Стивена Хокинга захоронили в аббатстве между могилами Исаака Ньютона и Чарльза Дарвина. С речами на мемориальной церемонии выступили давний друг и коллега Хокинга астрофизик Кип Торн, актер Бенедикт Камбербэтч, игравший ученого в фильме ВВС, астронавт Тим Пик и многие другие.

В церемонии приняли участие около тысячи поклонников ученого из 100 стран мира, выигравших в лотерею приглашения на похороны. Всего в розыгрыше билетов приняли участие около 25 тысяч человек.

Как сообщается, сайт, на котором разыгрывались приглашения, также позволял зарегистрироваться для участия путешественникам во времени, родившимся не позднее 2038 года. Пришел ли кто-то из еще не родившихся жителей Земли, не уточняется.

Также на похороны пригласили студентов, которые, как Хокинг, могут разговаривать только с помощью устройств синтезирования речи.

После церемонии прощания с Хокингом прошла трансляция его обращения в Космос, к ближайшей к Земле черной дыре, с музыкальным сопровождением в аранжировке композитора Вангелиса. Все гости церемонии получили диск с записью речи.

Мы просим вас о поддержке: сделайте свой вклад в развитие проекта ForumDaily

Спасибо, что остаетесь с нами и доверяете! За последние четыре года мы получили массу благодарных отзывов от читателей, которым наши материалы помогли устроить жизнь после переезда в США, получить работу или образование, найти жилье или устроить ребенка в садик.

Всегда ваш, ForumDaily!

Processing . . .

16/06/2018 в 14:32

Вчера в Вестминстерском аббатстве похоронили легендарного учёного-астрофизика Стивена Хокинга, а его голос отправили в космос.

Прах учёного захоронили в аббатстве между могилами Исаака Ньютона и Чарльза Дарвина. Как пишет BBC , в церемонии приняло участие порядка тысячи поклонников Хокинга из 100 стран мира, выигравших билеты в лотерею. Сайт, который разыграл билеты, регистрироваться путешественникам во времени. На камне высечены слова: «Здесь лежит то, что было смертным в Стивене Хокинге»:

После этого голос учёного был послан со спутниковой антенны Европейского космического агентства в сторону ближайшей от Земли чёрной дыры 1A 0620-00, находящейся от нас в 3,5 тысячах световых лет. В своём послании Хокинг говорит о важности мира и надежды для всего человечества.

Стивен Хокинг скончался в Кембридже на 77 году жизни. В 1963 году врачи поставили ему смертельный диагноз - боковой амиотрофический склероз, который привел к полному параличу. Обычно такая болезнь приводит к быстрой смерти, однако состояние учёного стало стабильным. В 1985 году Хокинг потерял способность говорить и стал пользоваться синтезатором речи.

Великий учёный стал основополжником квантовой космологии и астрофизики. Хокинг сделал множество открытий о чёрных дырах. Он открывал тайны Вселенной.

Подписывайтесь на «Код Дурова» в