Способ обнаружения эмоций, способ генерирования чувствительности и система и машиночитаемый носитель для их осуществления

Способ обнаружения эмоций, способ генерирования чувствительности и система и машиночитаемый носитель для их осуществления

Иллюстрации

Показать все

Реферат

Область техники, к которой относится изобретение

Данное изобретение относится к способу обнаружения эмоций, способу генерирования чувствительности, к системе и машиночитаемому носителю для их осуществления. Способ обнаружения эмоций, согласно данному изобретению, можно использовать для обнаружения эмоций в области медицины и для различных систем в качестве части искусственного интеллекта и искусственной чувствительности. Кроме того, способ генерирования чувствительности, согласно данному изобретению, можно использовать в различных системах, используемых различным образом для управления чувствительностью виртуальных людей и роботов.

Уровень техники

Уровень техники, относящийся к способу обнаружения эмоций, согласно данному изобретению, раскрыт, например, в непроверенных заявках на патент Японии №№ Hei5-12203, Hei9-22296, Hei11-119791.

В непроверенной заявке на патент Японии № Hei5-12203 раскрыто, что время продолжительности голоса, формантная частота голоса и интенсивность голоса для каждой частоты обнаруживаются, соответственно, как характеристические величины голоса. Кроме того, в этой публикации раскрывается также, что обнаруживается разница между опорным сигналом и соответствующими характеристическими величинами и выполняется обнаружение эмоции с помощью нечеткого вывода на основе обнаруженной величины разницы.

В непроверенной заявке на патент Японии № Hei9-22296 раскрыто, что скорость генерирования голоса (число пауз в единицу времени), частота основного тона голоса, громкость звука и спектр голоса определяются на основе обнаруженных характеристических величин голоса. Кроме того, в этой публикации раскрывается также, что эмоции обнаруживают на основе обнаруженных характеристических величин, а результаты получают с помощью статистической обработки НММ (скрытой марковской модели).

В непроверенной заявке на патент Японии № Hei11-119791 раскрыто, что эмоции обнаруживают на основе вероятности спектра фонемы в ее переходном состоянии с использованием скрытой марковской модели.

С другой стороны, уровень техники, относящийся к способу генерирования чувствительности, согласно данному изобретению, раскрыт, например, в непроверенной заявке на патент Японии № Hei11-265239 под названием "Система генерирования эмоций и способ генерирования эмоций".

Эмоции, которые выражают внутренние состояния людей и т.п., подвергаются различным изменениям в зависимости от ситуации в это время. В непроверенной заявке на патент Японии № Hei11-265239 раскрыта технология реализации генерирования эмоций в непредсказуемых ситуациях.

В частности, ситуации оценивают с точки зрения предсказуемых ситуаций и генерируют собственную эмоцию системы. Дополнительно к этому, анализируют эмоции, генерированные в прошлом, и ситуации в это время, и выполняют обучение непредсказуемым совместным условиям, свойственным соответствующим ситуациям и относящимся к ним эмоциям. Когда вновь введенная ситуация удовлетворяет совместным условиям, то выдаются эмоции, соответствующие совместным условиям.

Состояние эмоций, генерированных такой системой, отображаются на голосах и изображениях, которые выдаются.

Сущность изобретения

Однако обычный способ обнаружения эмоций имеет низкую точность обнаружения эмоций и не обеспечивает точное обнаружение действительных эмоций человека, даже если он обеспечивает обнаружение эмоций для частных ограниченных языков. В соответствии с этим, способ обнаружения эмоций практически используется ограниченно, например, в относительно простых игровых машинах.

Задачей данного изобретения является создание способа обнаружения эмоций, обеспечивающего точное обнаружение эмоций человека, являющегося субъектом.

Кроме того, обычный способ генерирования эмоций обеспечивает лишь генерирование эмоций непосредственно на основе информации, относящейся к введенным ситуациям. Для действительных людей различные параметры, включая инстинкт, разум, индивидуальность и т.п., влияют друг на друга сложным образом, приводя к разным поступкам, речи, выразительности и т.п. Обычный способ генерирования эмоций в результате не может точно отображать инстинкт, разум, индивидуальность и т.п.

Инстинкт и эмоции можно рассматривать как возбудимость. Дополнительно к этому, инстинкт становится основой биологической возбудимости и мотиваций для генерирования эмоций. Кроме того, учитывается, что люди не выдают эмоции непосредственно, а с учетом чувствительности, управляемой разумом и индивидуальностью.

Другой задачей данного изобретения является создание способа генерирования чувствительности, обеспечивающего выдачу чувствительности, более близкой чувствительности человека.

Согласно первому аспекту изобретения, способ обнаружения эмоций для обнаружения эмоции субъекта содержит следующие стадии: ввод голосового сигнала; обнаружение интенсивности голоса, темпа, выражающего скорость, с которой появляется голос, и интонации, выражающей рисунок изменения интенсивности в каждом слове голоса, на основе введенного голосового сигнала; получение величин изменения интенсивности обнаруженного голоса, темпа голоса и интонации голоса, соответственно; и генерирования сигналов, выражающих состояния эмоции, включая по меньшей мере гнев, печаль и удовольствие, соответственно, на основе полученных величин изменения.

Согласно первому аспекту изобретения, эмоцию обнаруживают путем принятия во внимание соответствующих величин изменения интенсивности, темпа и интонации голоса, вводимого от субъекта, для соответствия состояниям эмоции, включая гнев, печаль и удовольствие, соответственно. При использовании этого способа можно более точно обнаруживать эмоции, чем в уровне техники.

Согласно второму аспекту изобретения, система обнаружения эмоций для обнаружения эмоций субъекта содержит: блок ввода голоса для ввода голосового сигнала; блок обнаружения интенсивности для обнаружения интенсивности голоса на основе голосового сигнала, введенного блоком ввода голоса; блок обнаружения темпа для обнаружения скорости, с которой появляется голос, как темпа, основанного на голосовом сигнале, введенном блоком ввода голосового сигнала; блок обнаружения интонации для обнаружения интонации, выражающей рисунок изменения интенсивности в слове голоса на основе голосового сигнала, введенного блоком ввода голосового сигнала; блок обнаружения величины изменения для получения величин изменения интенсивности голоса, обнаруженной блоком обнаружения интенсивности, темпа голоса, обнаруженного блоком обнаружения темпа, и интонации голоса, обнаруженной блоком обнаружения интонации, соответственно; и блок обнаружения эмоций для выдачи сигналов, выражающих эмоциональные состояния, включая по меньшей мере гнев, печаль и удовольствие, соответственно, на основе величин изменения, обнаруженных блоком обнаружения величины изменения.

В системе обнаружения эмоций, согласно второму аспекту изобретения, предусмотрены блок ввода голоса, блок обнаружения интенсивности, блок обнаружения темпа, блок обнаружения интонации, блок обнаружения величины изменения и блок обнаружения эмоций, с помощью которых может быть реализован указанный способ обнаружения эмоций.

Согласно третьему аспекту изобретения, в системе обнаружения эмоций, согласно второму аспекту изобретения, блок обнаружения интонации содержит: блок полосовых фильтров для извлечения специфических частотных компонентов из голосового сигнала, который вводится отдельно для каждого слова; блок разделения зон для разделения спектра мощности сигнала, который извлекается блоком полосовых фильтров, на несколько зон на основе интенсивности спектра мощности; и блок вычисления интонации для вычисления величины интонации на основе временных интервалов между соответствующими центрами зон, выделенных блоком разделения на зоны.

Блок полосовых фильтров извлекает специфические частотные компоненты из голосового сигнала, отдельного для каждого слова и введенного в блок. Блок разделения на зоны разделяет обнаруженный спектр мощности на множество зон на основе их интенсивности. Блок вычисления интонации вычисляет величину интенсивности на основе временных интервалов между соответствующими центрами множества зон, выделенных блоком разделения на зоны.

Согласно третьему аспекту изобретения, схема распределения энергии в слове, относящаяся к специфическим частотным компонентам голоса, обнаруживается как величина времени, выражающая интервалы множества зон, а продолжительность времени используется в качестве интонации.

Согласно четвертому аспекту изобретения, система обнаружения эмоций, согласно второму аспекту изобретения, дополнительно содержит: блок изображения для приема информации изображения, относящейся по меньшей мере к лицу субъекта; блок распознавания изображения для обнаружения позиционной информации, относящейся к каждой части лица, на основе информации изображения, принятой блоком изображения; блок удерживания опорной информации изображения для удерживания опорной информации, относящейся к величине характеристики в каждой части лица; и блок обнаружения характеристической величины изображения для обнаружения характеристической величины изображения на основе позиционной информации, обнаруженной блоком распределения изображения, и опорной информации, удерживаемой блоком удерживания опорной информации изображения. Блок обнаружения эмоций оценивает состояние эмоций в соответствии с изменением характеристической величины изображения, обнаруженной блоком обнаружения характеристической величины изображения.

Согласно четвертому аспекту изобретения, дополнительно к голосу, состояние эмоций оценивают на основе выражения лица субъекта. Обычно, поскольку эмоциональные состояния людей отображаются на выражении их лиц, то эмоциональные состояния можно схватывать посредством обнаружения выражения их лиц. В соответствии с этим, согласно четвертому аспекту изобретения, блок обнаружения эмоций оценивает эмоциональное состояние на основе изменения характеристической величины изображения, обнаруженной блоком обнаружения характеристической величины изображения.

Согласно пятому аспекту изобретения, система обнаружения эмоций, согласно второму аспекту изобретения, дополнительно содержит: блок сохранения эмоциональной информации для последовательного приема порций информации, относящихся к эмоциональным состояниям, обнаруженным блоком обнаружения эмоций и сохранения в нем порций информации; и блок стирания для стирания информации, которая была сохранена на заданный период времени после первичного сохранения информации, среди порций информации, относящихся к эмоциональным состояниям, сохраненных в прошлом блоком сохранения эмоциональной информации, за исключением по меньшей мере информации, показывающей большую величину изменения эмоций, чем заданная величина, и информации, соответствующей заданной схеме изменений, из информации, подлежащей стиранию.

Согласно пятому аспекту изобретения, обеспечивается возможность сохранения информации, относящейся к обнаруженным в прошлом эмоциональным состояниям, в блоке сохранения эмоциональной информации. Кроме того, поскольку старая информация, сохраненная на длительный период времени после ее обнаружения, автоматически стирается из блока сохранения эмоциональной информации, то можно уменьшить емкость хранения, необходимую для блока сохранения эмоциональной информации.

Однако характеристическая информация, такая как информация, показывающая большую величину изменения эмоции, чем заданная величина, и информация, соответствующая заданной схеме изменения, автоматически исключается из информации, подлежащей стиранию. Поэтому характеристическая информация удерживается, как она есть, в блоке сохранения эмоциональной информации, даже если она устаревает. В соответствии с этим, аналогично памяти человека, характеристическую информацию, которая может быть полезной в будущем, можно считывать из блока сохранения эмоциональной информации для воспроизведения, даже если она устаревает.

Согласно шестому аспекту изобретения, система обнаружения эмоций, согласно пятому аспекту изобретения, дополнительно содержит: блок распознавания предложений для выполнения грамматического анализа с помощью обработки информации, относящейся к голосу, издаваемому субъектом, или знакам, вводимым субъектом, и для генерирования речевой информации, выражающей значение предложения; и блок управления сохранением для хранения речевой информации, генерированной блоком распознавания предложений, в блоке сохранения эмоциональной информации синхронно с информацией, относящейся к эмоциональным состояниям.

Блок распознавания предложений обрабатывает информацию, относящуюся к голосу, издаваемому субъектом, или знакам, вводимым субъектом с помощью клавиатуры или т.п., и выполняет грамматический анализ для генерирования речевой информации, выражающей смысл предложения.

Грамматический анализ обеспечивает возможность получения речевой информации, выражающей, например, "5W3H", то есть "кто", "что", "когда", "где", "почему", "как", "как долго, как далеко, как велико и т.д." и "сколько".

Блок управления сохранением сохраняет речевую информацию, генерированную блоком распознавания предложений, в блоке сохранения эмоциональной информации в состоянии, в котором речевая информация является синхронной с информацией, относящейся к эмоциональным состояниям.

Согласно шестому аспекту изобретения, посредством обращения в блок сохранения эмоциональной информации можно извлекать не только информацию, относящуюся к эмоции в любой момент времени в прошлом, но также речевую информацию, выражающую ситуации в это время.

Информация, удерживаемая в блоке сохранения эмоциональной информации, может использоваться для различных применений. Например, когда функция оценки эмоций самой системы обнаружения эмоций является неточной, то базу данных, которая используется для оценки эмоций, можно корректировать на основе прошлого результата обнаружения, удерживаемого в блоке сохранения эмоциональной информации.

Согласно седьмому аспекту изобретения, система обнаружения эмоций, согласно второму аспекту изобретения, дополнительно содержит: блок определения времени безмолвия для определения опорного времени безмолвия времени на основе эмоционального состояния из обнаруженных эмоциональных состояний; и блок обнаружения сегментации фраз для обнаружения сегментации голосовой фразы с помощью использования опорного времени безмолвия, определенного блоком определения времени безмолвия.

При выполнении распознавания голоса и обнаружения эмоций необходимо обнаруживать сегментацию для каждой фразы, и каждая фраза должна быть извлечена. В целом, поскольку существует безмолвная часть в сегментации между фразами, то можно выделить множество фраз в моменты времени, когда появляются безмолвные части.

Однако длина безмолвных частей не является постоянной. В частности, длина безмолвной части изменяется в соответствии с эмоциональным состоянием говорящего. Поэтому, когда устанавливается определенное пороговое значение для определения безмолвной части, то вероятность ошибки при обнаружении сегментации фразы становится высокой.

Согласно седьмому аспекту изобретения, опорное время безмолвия определяется, например, на основе эмоционального состояния, обнаруженного как раз перед определением, а сегментацию фразы речи обнаруживают в соответствии с опорным временем безмолвия. В соответствии с этим, можно правильно обнаруживать сегментацию фразы, даже когда изменяется эмоциональное состояние говорящего.

Согласно восьмому аспекту изобретения, машиночитаемый носитель, содержащий программу обнаружения эмоций, позволяет компьютеру выполнять способ обнаружения эмоций субъекта, включающий: стадию ввода голосового сигнала в программу обнаружения эмоций; стадию обнаружения интенсивности голоса, темпа, выражающего скорость появления голоса, и интонации, выражающей рисунок изменения интенсивности в каждом слове голоса, на основе введенного голосового сигнала; стадию получения величин изменения обнаруженных интенсивности голоса, темпа голоса и интонации голоса; и стадию генерирования сигналов, выражающих эмоциональные состояния по меньшей мере гнева, печали и удовольствия, соответственно, на основе полученных величин изменения.

Согласно девятому аспекту изобретения, способ генерирования чувствительности содержит стадии: удерживания заранее порций информации об индивидуальности, определяющей по меньшей мере разум, заданную характеристику и волю субъекта, который генерирует чувствительность; генерирования информации инстинктивной мотивации, включающей по меньшей мере первый инстинктивный параметр, выражающий степень удовольствия, второй инстинктивный параметр, выражающий степень опасности, и третий инстинктивный параметр, выражающий степень достижения и изменения, на основе введенной информации о ситуации, которая указывает состояние эмоции партнера или окружения, в котором находится партнер; генерирования эмоциональной информации, включающей основной эмоциональный параметр по меньшей мере удовольствия, гнева и печали, на основе генерированной информации инстинктивной мотивации; и управления генерированной эмоциональной информацией на основе информации об индивидуальности.

Согласно девятому аспекту изобретения, информация инстинктивной мотивации, которая мотивирует генерирование эмоции, генерируется на основе введенной информации о ситуации (эмоции, воле и окружения партнера). А именно, информация инстинктивной мотивации генерируется из информации о ситуации, а эмоциональная информация генерируется на основе информации инстинктивной мотивации. Кроме того, эмоциональная информация, подлежащая генерированию, управляется на основе информации об индивидуальности. Таким образом, может выдаваться эмоция, управляемая разумом и волей индивидуума, то есть информация чувствительности.

Дополнительно к этому, поскольку эмоциональная информация генерируется через информацию инстинктивной мотивации, то эмоциями, подлежащими генерированию, можно управлять более точно и просто.

Например, эмоция, генерированная, когда человек встречается с опасной ситуацией в состоянии распознавания опасной ситуации, и эмоция, генерированная, когда человек внезапно встречается с опасной ситуацией в состоянии непонимания опасности ситуации, являются разными. Эту разницу эмоций можно воспроизводить.

Предпочтительно, если параметр инстинкта дополнительно содержит степень внимания (степень отказа), степень уверенности (степень замешательства), степень следования (степень упорства) и т.п. в дополнение к указанным элементам. Кроме того, предпочтительно, если основной эмоциональный параметр, составляющий эмоциональную информацию, дополнительно содержит удивление, страх, страдание, отвращение, презрение, приближение, удаление, ревность, зависть, зависимость, раздражение, беспокойство и т.п. в дополнение к указанным элементам.

Согласно десятому аспекту изобретения, генератор чувствительности содержит: блок инстинктивной решительности для ввода информации об эпизодической ситуации, включающей эмоциональное состояние партнера, окружение, в котором находится партнер, и волю партнера, и для генерирования информации инстинктивной мотивации, включающей по меньшей мере первый инстинктивный параметр, выражающий степень удовольствия, второй инстинктивный параметр, выражающий степень опасности, и третий инстинктивный параметр, выражающий степень достижения или изменения, на основе информации эпизодической ситуации; блок генерирования эмоций для генерирования эмоциональной информации, включающей основные эмоциональные параметры по меньшей мере удовольствия, гнева и печали, на основе информации инстинктивной мотивации, выдаваемой из блока инстинктивной решительности; блок обеспечения информации об индивидуальности для обеспечения информации об индивидуальности, которая определяет по меньшей мере разум и волю с чувствительностью субъекта, который генерирует чувствительность; и блок управления эмоциями для управления эмоциональной информацией, выдаваемой блоком генерирования эмоций, на основе информации об индивидуальности, поставляемой из блока обеспечения информации об индивидуальности.

Согласно десятому аспекту изобретения, можно выполнять способ генерирования чувствительности в соответствии с пунктом 9 формулы изобретения посредством предусмотрения блока инстинктивной решительности, блока генерирования эмоций, блока обеспечения информации об индивидуальности и блока управления эмоциями.

В соответствии с этим, можно выдавать эмоции, управляемые разумом и волей индивидуума, то есть информацию о чувствительности. Кроме того, поскольку эмоциональная информация генерируется через информацию инстинктивной мотивации, то эмоциями, подлежащими генерированию, можно управлять более точно и просто.

Согласно одиннадцатому аспекту изобретения, блок генерирования эмоций, согласно десятому аспекту изобретения, содержит: блок генерирования жизненного ритма для генерирования информации, выражающей периодически изменяющееся окружение или жизненный ритм живого тела; и блок управления произвольными эмоциями для управления произвольными эмоциями в блоке генерирования эмоций в соответствии с информацией о жизненном ритме, выдаваемой блоком генерирования жизненного ритма. Кроме того, учитывается, что соответствующие люди имеют индивидуальные ритм тела, ритм эмоций, ритм интеллекта и т.п. Считается, что периодически изменяющийся ритм оказывает различное влияние на действительные эмоции человека.

Согласно одиннадцатому аспекту изобретения, блок управления произвольными эмоциями управляет произвольными эмоциями в блоке генерирования эмоций в соответствии с информацией, выдаваемой блоком генерирования ритмов. В соответствии с этим, подлежащие выдачи эмоции можно изменять в соответствии с окружением или жизненным ритмом живого тела.

Согласно двенадцатому аспекту изобретения, в генераторе чувствительности, согласно десятому аспекту изобретения, блок генерирования эмоций содержит: блок удерживания информации инстинкт-эмоции для удерживания шаблонов информации, которые обеспечивают соответствие друг другу основного эмоционального параметра и информации инстинктивной мотивации; и блок обучения информации согласования для выдачи информации, выражающей согласование/рассогласование информации инстинктивной мотивации с шаблоном информации блока удерживания информации инстинкт-эмоции, при этом информация инстинктивной мотивации выдается из блока инстинктивной решительности.

Согласно двенадцатому аспекту изобретения, можно получать вероятность согласования информации инстинктивной мотивации с шаблоном информации из блока обучения информации вероятности согласования для использования в качестве фактора определения эмоций.

Например, когда психическое состояние человека изменяется из первого состояния во второе состояние, то психическое состояние переходит через третье состояние на пути из первого состояния во второе состояние. В соответствии с этим, имеется вероятность того, что психическое состояние временно согласовывается с определенным шаблоном информации в третьем состоянии. Однако шаблон информации, согласованный с психическим состоянием в третьем состоянии, не имеет значения большой полезности. За счет использования вероятности согласования, полученной блоком обучения вероятности согласования, можно подавлять генерирование эмоций шаблона информации с низкой вероятностью.

Согласно тринадцатому аспекту изобретения, в генераторе чувствительности, согласно десятому аспекту изобретения, блок генерирования эмоций содержит блок управления обратной связи эмоций для ввода в блок генерирования эмоций по меньшей мере его собственной эмоциональной информации, генерированной в конце, и для отображения конечной генерированной информации на его собственной эмоциональной информации, подлежащей генерированию в последующем.

Считается, что ввод различных мотиваций приводит к цепным изменениям эмоций человека. Например, степень гнева, который является эмоцией, генерированной, когда мотивация дается человеку в нормальном состоянии для вызова у него гнева, и степень гнева, генерированная, когда мотивация дается человеку, который был уже в гневе, так что он становится более гневным, сильно отличаются друг от друга.

Согласно тринадцатому аспекту изобретения, наличие блока управления обратной связью эмоций обеспечивает перенос состояния только что генерированной эмоции обратно на вход, и отображение состояния эмоции на генерируемой следующей эмоции. В соответствии с этим, можно генерировать эмоцию, более близкую эмоции человека.

Согласно четырнадцатому аспекту изобретения, генератор чувствительности, согласно десятому аспекту изобретения, имеет признак, в соответствии с которым блок управления эмоциями отображает информацию о жизненном ритме, что является индивидуальностью субъекта, который генерирует чувствительность, на эмоциональной информации, подлежащей вводу.

Согласно четырнадцатому аспекту изобретения, информацию о жизненном ритме можно отображать на чувствительности. Например, разница возникает в результате определения, осуществляемого разумом и т.п. в зависимости от того, желает ли человек делать что-либо.

Согласно пятнадцатому аспекту изобретения, генератор чувствительности, согласно десятому аспекту изобретения, дополнительно содержит: базу данных знания для сохранения информации о ситуациях, показывающую прошлую ситуацию, прошлый эпизод и результат прошлой ситуации и эпизода; блок сортировки знания для поиска и извлечения информации о прошлой ситуации, аналогичной введенной новой информации о ситуации, из базы данных знания, и для выдачи информации о прошлой ситуации в блок управления эмоциями; и блок управления обновлением данных для обновления содержимого базы данных знания на основе информации о ситуации, показывающей вновь введенную ситуацию, и результата ситуации, и для автоматического стирания со временем из базы данных знания информации о ситуации с низким приоритетом в соответствии с весовым коэффициентом содержимого.

Согласно пятнадцатому аспекту изобретения, информация о ситуации, показывающая прошлую ситуацию, и результат ситуации сохраняются в базе данных знания. Например, сохраняется информация, показывающая ситуацию определенного эпизода и наступивший окончательный результат эпизода. Поэтому, информацию о прошлой ситуации, аналогичную информации о настоящей ситуации, можно получать из базы данных знания для использования для управления эмоцией. По прошествии времени вновь генерированную информацию необходимо затем добавлять по случайному закону в базу данных знания. Однако емкость хранения системы, образующей базу данных знания, ограничена. Кроме того, по мере увеличения количества сохраняемой информации уменьшается скорость обработки.

Однако, согласно пятнадцатому аспекту изобретения, информация о ситуации с низким приоритетом со временем автоматически стирается из базы данных знания под управлением блока управления обновлением данных. Поэтому может быть реализован результат, аналогичный забыванию человеком, и тем самым предотвращено уменьшение емкости хранения и скорости обработки.

Согласно шестнадцатому аспекту изобретения, генератор чувствительности, согласно десятому аспекту изобретения, дополнительно содержит: блок ввода голоса для ввода голосового сигнала; блок обнаружения интенсивности для обнаружения интенсивности голоса на основе голосового сигнала, введенного блоком ввода голоса; блок обнаружения темпа для обнаружения в качестве темпа скорости, с которой появляется голос, на основе голосового сигнала, введенного блоком ввода голоса; блок обнаружения интонации для обнаружения интонации, выражающей схему изменения интенсивности в слове голоса, на основе голосового сигнала, введенного блоком ввода голоса; блок обнаружения величины изменения для обнаружения величин изменения в интенсивности голоса, обнаруженной блоком обнаружения интенсивности, темпа голоса, обнаруженного блоком обнаружения темпа, и интонации голоса, обнаруженной блоком обнаружения интонации, соответственно; и блок обнаружения эмоций для выдачи сигналов, выражающих эмоциональные состояния по меньшей мере гнева, печали и удовольствия, соответственно, на основе величин изменения, обнаруженных блоком обнаружения величины изменения.

Согласно шестнадцатому аспекту изобретения, эмоциональное состояние партнера можно обнаруживать на основе характеристической величины, выделенной из голоса. В соответствии с этим, можно генерировать собственную эмоцию в соответствии с эмоцией партнера.

Согласно семнадцатому аспекту изобретения, генератор чувствительности, согласно шестнадцатому аспекту изобретения, дополнительно содержит: блок распознавания голоса для распознавания голоса, введенного блоком ввода голоса, и для выдачи знаковой информации; и блок обработки на естественном языке для выполнения обработки на естественном языке вокальной информации, распознанной блоком распознавания голоса, и для генерирования смысловой информации, выражающей смысл введенного голоса.

Согласно семнадцатому аспекту изобретения, получают смысловую информацию, относящуюся к слову, произносимому партнером и, таким образом, результат, полученный посредством понимания смысловой информации, можно отображать на собственной чувствительности.

Согласно восемнадцатому аспекту изобретения, машиночитаемый носитель, содержащий программу и данные, выполняемые компьютером, используется для осуществления способа управления генерированием чувствительности, включающего: стадию генерирования информации инстинктивной мотивации, включающей по меньшей мере первый инстинктивный параметр, выражающий степень удовольствия, второй инстинктивный параметр, выражающий степень опасности, и третий инстинктивный параметр, выражающий степень достижения или изменения, на основе введенной информации о ситуации, которая показывает эмоциональное состояние партнера, или окружение, в котором находится партнер; стадию генерирования эмоциональной информации, включающей основной эмоциональный параметр по меньшей мере удовольствия, гнева или печали, на основе генерированной информации инстинктивной мотивации; стадию получения информации об индивидуальности, определяющей по меньшей мере разум и волю субъекта, который генерирует чувствительность; и стадию управления генерированной эмоциональной информацией на основе информации об индивидуальности.

Машиночитаемый носитель, согласно восемнадцатому аспекту изобретения, вводится в заданный компьютер для выполнения записанной на нем программы, и тем самым обеспечивается реализация способа генерирования чувствительности, согласно девятому аспекту изобретения.

Краткое описание чертежей

Сущность, принципы и полезность данного изобретения следуют из приведенного ниже подробного описания со ссылками на прилагаемые чертежи, в которых аналогичные части обозначены одинаковыми позициями, при этом на чертежах изображено:

фиг.1 - блок-схема варианта выполнения системы обнаружения эмоций;

фиг.2 - блок-схема блока обнаружения интонации;

фиг.3 - график соотношения между изменением эмоционального состояния и интенсивностью, темпом и интонацией голоса;

фиг.4 - временные диаграммы процессов обработки голосового сигнала в блоке обнаружения интонации;

фиг.5 - графическая схема работы блока процесса забывания;

фиг.6 - пример конфигурации информации, хранящейся в базе данных эмоций и чувствительности;

фиг.7 - блок-схема примера конфигурации системы с использованием генератора чувствительности;

фиг.8 - блок-схема блока генерирования инстинктивной информации;

фиг.9 - блок-схема блока генерирования эмоциональной информации;

фиг.10 - пример модели шаблона реакции в базе данных для шаблонов эмоциональных реакций; и

фиг.11 - блок-схема блока распознавания чувствительности и мысли.

Описание предпочтительных вариантов выполнения

Первый вариант выполнения

Ниже приводится описание одного варианта выполнения способа обнаружения эмоций, согласно данному изобретению, со ссылками на фиг.1-6.

На фиг.1 показана блок-схема системы обнаружения эмоций, согласно этому варианту выполнения. На фиг.2 показана блок-схема блока обнаружения интонации. На фиг.3 показан график зависимости между изменением эмоционального состояния и интенсивностью, темпом и интонацией голоса. На фиг.4 показаны временные диаграммы процессов обработки голосового сигнала в блоке обнаружения интонации. На фиг.5 показана графическая схема работы блока процесса забывания. На фиг.6 схематично показан пример информации, хранящейся в базе данных памяти эмоций и чувствительности.

Как показано на фиг.1, система обнаружения эмоций содержит: микрофон 11; аналого-цифровой преобразователь 12; блок 13 обработки сигналов; блок 20 распознавания голоса; блок 17 обнаружения интенсивности; блок 18 обнаружения темпа; блок 19 обнаружения интонации; блок 21 временного хранения данных; блок 22 обнаружения изменения эмоций; блок 23 обнаружения эмоций в голосе; базу 24 данных шаблонов эмоций; клавиатуру 25; блок 26 распознавания фраз; телевизионную камеру 31; блок 32 распознавания изображений; базу 32 данных шаблонов лица; блок 34 обнаружения эмоций в лице; блок 39 распознавания знаков; базу 41 данных памяти эмоций и чувствительности; блок 42 процесса забывания; блок 43 синхронной обработки; базу 44 данных информации о человеческой природе; базу 45 данных об индивидуальности; базу 46 данных информации о специальностях; и блок 60 распознавания эмоций.

Кроме того, в блоке 20 распознавания голоса предусмотрены блок 13 обработки сигналов; блок 14 обнаружения фонем; блок 15 обнаружения слов; и блок 16 обнаружения фраз. Блок 20 распознавания голоса выполняет также функцию устройства распознавания голоса (обработки на естественном языке), поставляемого отдельно.

Как показано на фиг.1, блок 20 распознавания голоса, блок 17 обнаружения интенсивности, блок 18 обнаружения темпа, блок 19 обнаружения интонации, блок 21 временного хранения данных, блок 22 обнаружения изменения эмоций и блок 23 обнаружения эмоций в голосе являются схемами для обнаружения эмоции из голоса.

Система обнаружения эмоций содержит микрофон 11, клавиатуру 25 и телевизионную камеру 31 в качестве блока ввода для считывания информации от человека, который является партнером, для которого выполняется обнаружение эмоции. В частности, эмоции человека, который является партнером, обнаруживают с использованием голоса, вводимого посредством микрофона 11, знаковой информации, вводимой посредством клавиатуры 25, и информации, включающей выражение лица и т.п., которая вводится посредством телевизионной камеры 31.

Следует отметить, что эмоции можно обнаруживать на основе только голоса, вводимого из микрофона 11, или знаковой информации, вводимой из клавиатуры 25, или выражения лица, которое вводится из телевизионной камеры 31. Однако с точки зрения повышения точности обнаружения эмоций, более эффективно всесторонне оценивать информацию, полученную из нескольких источников информации.

Сначала приводится описание обработки, относящейся к голосу. Голосовой сигнал, введенный через микрофон 11, квантуется с помощью аналого-цифрового преобразователя 12, а затем преобразуется в цифровой сигнал. Цифровой голосовой сигнал, полученный на выходе аналого-цифрового преобразователя 12, подается в блок 20 распознавания голоса.

Блок 13 обработки сигналов извлекает частотные составляющие, необходимые для обнаружения интенсивности голоса. Блок 17 обнаружения интенсивности обнаруживает интенсивности из сигнала, из