Оборудование для записи и воспроизведения звуковых сигналов

Иллюстрации

Показать все

Изобретение относится к акустике. Способ захвата звуковых сигналов предполагает прием двух звуковых сигналов с относительным разнесением между ними соответственно от двух микрофонов, определение ориентации захвата звукового сигнала на основе информации о местоположении микрофонов. При этом устройство, используя информацию об ориентации захвата звука, обеспечивает возможность воспроизведения двух звуковых сигналов, которые должны быть обработаны, на основе ориентации захвата так, чтобы синхронизировать использование двух звуковых сигналов для воспроизведения. При этом маршрутизация двух звуковых сигналов выполняется с учетом ориентации устройства воспроизведения, а затем выполняется микширование звуковых сигналов. Устройство содержит датчик ориентации, микрофоны, динамик, АЦП, ЦАП, процессор, память, дисплей, приемопередатчик, интерфейс пользователя, камеру. Также устройство содержит генератор порядка микрофонов, генератор ориентации звукового сигнала, микшер, селектор каналов. Технический результат – обеспечение возможности записи и воспроизведения пространственно разнесенных звуковых сигналов в зависимости от ориентации устройства. 4 н. и 11 з.п. ф-лы, 28 ил., 2 табл.

Реферат

ОБЛАСТЬ ТЕХНИКИ

Настоящее изобретение относится к оборудованию для записи и воспроизведения звуковых сигналов. Настоящее изобретение, помимо прочего, также относится к оборудованию для записи и воспроизведения звуковых сигналов в устройстве мобильной связи.

УРОВЕНЬ ТЕХНИКИ

Пространственно разнесенные звуковые сигналы достаточно часто используются для более точного воспроизведения эффекта присутствия. Записанный стереофонический или многоканальный сигнал может передаваться записывающим или захватывающим звуковой сигнал оборудованием в оборудование для прослушивания и воспроизводиться с помощью подходящего многоканального выходного устройства, такого как многоканальная акустическая система, и с использованием пары наушников или гарнитуры, формирующих виртуальное окружающее звучание.

Следует принимать во внимание, что в ближайшем будущем возможно появление мобильного оборудования, такого как мобильные телефоны, оснащенного тремя и более микрофонами. Это обеспечит возможность записи реального многоканального звукового сигнала. Также возможно появление мобильных устройств, таких как мобильные телефоны, оснащенных тремя и более динамиками. Таким образом, в мобильном устройстве (например, в смартфоне) может воспроизводиться стереофоническое и объемное звучание.

Другими словами, уже сегодня или в ближайшем будущем мобильные устройства смогут записывать (или захватывать) и воспроизводить стереофонический и объемный звуковой сигнал. Таким образом, мобильные устройства также смогут обмениваться этими звуковыми сигналами и, благодаря этому, использовать стереофоническое и объемное звучание в телекоммуникационных приложениях и в рамках других услуг, таких как потоковая передача данных, широковещательная и многоадресная передача, если запись или захват звукового сигнала выполнен подходящим или оснащенным соответствующими функциями мобильным устройством.

СУЩНОСТЬ ИЗОБРЕТЕНИЯ

Аспекты настоящей заявки относятся к процедурам захвата и обработки пространственно разнесенного звукового сигнала, позволяющим компенсировать разницу в ориентации при прослушивании или захвате видеосигнала и звукового сигнала.

В соответствии с первым аспектом настоящего изобретения предлагается способ, включающий генерацию по меньшей мере двух звуковых сигналов с относительным разнесением между ними; определение ориентации захвата звукового сигнала и вывод по меньшей мере двух звуковых сигналов на основе ориентации захвата таким образом, чтобы воспроизведение по меньшей мере двух звуковых сигналов выполнялось на основе ориентации захвата.

Процедура определения ориентации захвата может включать определение ориентации захвата звукового сигнала на основе ориентации устройства и информации, связанной с конфигурацией микрофонов в оборудовании захвата.

Ориентация захвата может представлять собой значение начальной ориентации захвата, а вывод по меньшей мере двух звуковых сигналов на основе ориентации захвата может включать вывод по меньшей мере двух звуковых сигналов в соответствии с начальным порядком вывода звуковых сигналов.

Способ также может включать определение, превышает ли различие между ориентацией захвата и более ранней ориентацией заданное значение; и последующий вывод ориентации захвата с упомянутыми по меньшей мере двумя звуковыми сигналами таким образом, чтобы воспроизведение по меньшей мере двух звуковых сигналов выполнялось на основе ориентации захвата звукового сигнала.

Более ранняя ориентация может представлять собой начальную ориентацию.

Способ также может включать определение порядка вывода по меньшей мере двух звуковых сигналов на основе ориентации захвата и последующий вывод порядка вывода звуковых сигналов с упомянутыми по меньшей мере двумя звуковыми сигналами таким образом, чтобы воспроизведение по меньшей мере двух звуковых сигналов в дальнейшем выполнялось на основе порядка вывода звуковых сигналов.

Способ также может включать определение, превышает ли различие между ориентацией захвата и более ранней ориентацией заданное значение переупорядочения вывода звуковых сигналов; и активизацию процесса определения порядка вывода звуковых сигналов, если различие между ориентацией захвата и более ранней ориентацией превышает заданное значение переупорядочения вывода звуковых сигналов.

Генерация по меньшей мере двух звуковых сигналов с относительным разнесением между ними может включать генерацию первого из по меньшей мере двух звуковых сигналов с использованием первого микрофона в первом местоположении; генерацию второго из по меньшей мере двух звуковых сигналов с использованием второго микрофона во втором местоположении, при этом относительное разнесение между по меньшей мере двумя звуковыми сигналами представляет собой разнесение между первым и вторым местоположениями.

Генерация по меньшей мере двух звуковых сигналов с относительным разнесением между ними может включать выполнение следующих операций: прием по меньшей мере двух звуковых сигналов из удаленного оборудования, содержащего по меньшей мере два разнесенных относительно друг друга микрофона; и/или прием по меньшей мере двух звуковых сигналов из памяти.

В соответствии со вторым аспектом настоящего изобретения предлагается способ, включающий прием по меньшей мере двух звуковых сигналов; определение ориентации воспроизведения и вывод по меньшей мере двух звуковых сигналов по меньшей мере в два динамика на основе ориентации воспроизведения.

Способ может также включать прием ориентации захвата звукового сигнала, связанной с упомянутыми по меньшей мере двумя звуковыми сигналами; при этом вывод по меньшей мере двух звуковых сигналов по меньшей мере в два динамика также основан на ориентации захвата.

Способ также может включать прием порядка вывода по меньшей мере двух звуковых сигналов на основе ориентации захвата; при этом вывод по меньшей мере двух звуковых сигналов по меньшей мере в два динамика также основан на порядке вывода звуковых сигналов.

Вывод по меньшей мере двух звуковых сигналов по меньшей мере в два динамика может включать выполнение по меньшей мере одной из следующих операций: маршрутизация по меньшей мере двух звуковых сигналов по меньшей мере в два динамика на основе ориентации воспроизведения и микширование по меньшей мере двух звуковых сигналов для генерации звукового сигнала, микшированного с получением меньшего количества каналов и подлежащего выводу по меньшей мере в один из по меньшей мере двух динамиков.

По меньшей мере два динамика могут представлять собой по меньшей мере одно из следующих устройств: громкоговоритель; наушники; гарнитура; головной телефон; внешний громкоговоритель и интегрированный бесконтактный динамик.

В соответствии с третьим аспектом настоящего изобретения предлагается оборудование, содержащее по меньшей мере один процессор и по меньшей мере одну память, в которой хранится компьютерный код одной или более программ, при этом по меньшей мере одна память и компьютерный код сконфигурированы таким образом, чтобы при взаимодействии по меньшей мере с одним процессором устройство выполняло по меньшей мере следующие операции: генерация по меньшей мере двух звуковых сигналов с относительным разнесением; определение ориентации захвата звукового сигнала и вывод по меньшей мере двух звуковых сигналов на основе ориентации захвата таким образом, чтобы воспроизведение по меньшей мере двух звуковых сигналов выполнялось на основе ориентации захвата.

В процессе определения ориентации захвата оборудование может определять ориентацию захвата звукового сигнала на основе ориентации устройства и информации, связанной с конфигурацией микрофонов в оборудовании захвата.

Ориентация захвата может представлять собой значение начальной ориентации захвата, и в процессе вывода по меньшей мере двух звуковых сигналов на основе ориентации захвата оборудование может выводить два звуковых сигнала в соответствии с начальным порядком вывода звуковых сигналов.

Оборудование также может выполнять следующие операции: определение, превышает ли различие между ориентацией захвата и более ранней ориентацией заданное значение; и последующий вывод ориентации захвата с упомянутыми по меньшей мере двумя звуковыми сигналами таким образом, чтобы воспроизведение по меньшей мере двух звуковых сигналов выполнялось на основе ориентации захвата.

Более ранняя ориентация может представлять собой начальную ориентацию.

Оборудование также может выполнять следующие операции: определение порядка вывода по меньшей мере двух звуковых сигналов на основе ориентации захвата и последующий вывод порядка вывода звуковых сигналов совместно меньшей мере с двумя звуковыми сигналами таким образом, чтобы воспроизведение по меньшей мере двух звуковых сигналов в дальнейшем выполнялось на основе порядка вывода звуковых сигналов.

Оборудование также может выполнять следующие операции: определение, превышает ли различие между ориентацией захвата и более ранней ориентацией заданное значение переупорядочения вывода звуковых сигналов; и активизация процесса определения порядка вывода звуковых сигналов, если различие между ориентацией при записи и более ранней ориентацией превышает заданное значение переупорядочения вывода звуковых сигналов.

В процессе генерации по меньшей мере двух звуковых сигналов с относительным разнесением между ними оборудование может выполнять следующие операции: генерация первого из по меньшей мере двух звуковых сигналов с использованием первого микрофона в первом местоположении и генерация второго из по меньшей мере двух звуковых сигналов с использованием второго микрофона во втором местоположении, при этом относительное разнесение между по меньшей мере двумя звуковыми сигналами представляет собой разнесение между первым и вторым местоположениями.

В процессе генерации по меньшей мере двух звуковых сигналов с относительным разнесением между ними оборудование может выполнять следующие операции: прием по меньшей мере двух звуковых сигналов из удаленного оборудования, содержащего по меньшей мере два разнесенных относительно друг друга микрофона; и/или прием по меньшей мере двух звуковых сигналов из памяти.

В соответствии с четвертым аспектом настоящего изобретения предлагается оборудование, содержащее по меньшей мере один процессор и по меньшей мере одну память, в которой хранится компьютерный код одной или более программ, при этом по меньшей мере одна память и компьютерный код сконфигурированы таким образом, чтобы при взаимодействии по меньшей мере с одним процессором оборудование выполняло по меньшей мере следующие операции: прием по меньшей мере двух звуковых сигналов; определение ориентации воспроизведения и вывод по меньшей мере двух звуковых сигналов по меньшей мере в два динамика на основе ориентации воспроизведения.

Оборудование может также принимать информацию об ориентации захвата звукового сигнала, связанную с упомянутыми по меньшей мере двумя звуковыми сигналами; при этом вывод по меньшей мере двух звуковых сигналов по меньшей мере в два динамика также основан на ориентации захвата.

Оборудование также может выполнять следующие операции: прием порядка вывода по меньшей мере двух звуковых сигналов на основе ориентации захвата; при этом вывод по меньшей мере двух звуковых сигналов по меньшей мере в два динамика также может быть основан на порядке вывода звуковых сигналов.

В процессе вывода по меньшей мере двух звуковых сигналов по меньшей мере в два динамика оборудование может выполнять следующие операции: маршрутизация по меньшей мере двух звуковых сигналов по меньшей мере в два динамика на основе ориентации воспроизведения и/или микширование по меньшей мере двух звуковых сигналов для генерации звукового сигнала, микшированного с получением меньшего количества каналов и подлежащего выводу по меньшей мере в один динамик из по меньшей мере двух динамиков.

По меньшей мере два динамика могут представлять собой по меньшей мере одно из следующих устройств: громкоговоритель; наушники; гарнитура; головной телефон; внешний громкоговоритель и интегрированный бесконтактный динамик.

В соответствии с пятым аспектом настоящего изобретения предлагается оборудование, содержащее средства для генерации по меньшей мере двух звуковых сигналов с относительным разнесением; средства для определения ориентации захвата звукового сигнала и средства для вывода по меньшей мере двух звуковых сигналов на основе ориентации захвата таким образом, чтобы воспроизведение по меньшей мере двух звуковых сигналов выполнялось на основе ориентации захвата.

Средства для определения ориентации захвата могут содержать средства для определения ориентации захвата звукового сигнала на основе ориентации устройства и информации, связанной с конфигурацией микрофонов в оборудовании захвата.

Ориентация захвата может представлять собой значение начальной ориентации захвата, и средства для вывода по меньшей мере двух звуковых сигналов на основе ориентации захвата могут содержать средства для вывода по меньшей мере двух звуковых сигналов в соответствии с начальным порядком вывода звуковых сигналов.

Оборудование также может содержать средства для определения, превышает ли различие между ориентацией захвата и более ранней ориентацией заданное значение; и средства для вывода могут содержать средства для вывода ориентации захвата с упомянутыми по меньшей мере двумя звуковыми сигналами таким образом, чтобы воспроизведение по меньшей мере двух звуковых сигналов выполнялось на основе ориентации захвата.

Более ранняя ориентация может представлять собой начальную ориентацию.

Оборудование также может содержать средства для определения порядка вывода по меньшей мере двух звуковых сигналов на основе ориентации захвата; и средства для вывода могут содержать средства для последующего вывода порядка вывода звуковых сигналов с упомянутыми по меньшей мере двумя звуковых сигналами таким образом, чтобы воспроизведение по меньшей мере двух звуковых сигналов в дальнейшем выполнялось на основе порядка вывода звуковых сигналов.

Оборудование также может содержать средства для определения, превышает ли различие между ориентацией захвата и более ранней ориентацией заданное значение переупорядочения вывода звуковых сигналов; и средства для активизации процесса определения порядка вывода звуковых сигналов, если различие между ориентацией захвата и более ранней ориентацией превышает заданное значение переупорядочения вывода звуковых сигналов.

Средства для генерации по меньшей мере двух звуковых сигналов с относительным разнесением между ними могут содержать средства для генерации первого из по меньшей мере двух звуковых сигналов с использованием первого микрофона в первом местоположении и средства для генерации второго из по меньшей мере двух звуковых сигналов с использованием второго микрофона во втором местоположении, при этом относительное разнесение между по меньшей мере двумя звуковыми сигналами представляет собой разнесение между первым и вторым местоположениями.

Средства для генерации по меньшей мере двух звуковых сигналов с относительным разнесением между ними могут включать в свой состав средства для приема по меньшей мере двух звуковых сигналов из удаленного оборудования, содержащего по меньшей мере два разнесенных относительно друг друга микрофона, и/или средства для приема по меньшей мере двух звуковых сигналов из памяти.

В соответствии с шестым аспектом настоящего изобретения предлагается оборудование, содержащее средства для приема по меньшей мере двух звуковых сигналов; средства для определения ориентации воспроизведения и средства для вывода по меньшей мере двух звуковых сигналов по меньшей мере в два динамика на основе ориентации воспроизведения.

Оборудование может также содержать средства для приема ориентации захвата звукового сигнала, связанной с упомянутыми по меньшей мере двумя звуковыми сигналами; при этом средства для вывода по меньшей мере двух звуковых сигналов по меньшей мере в два динамика также основаны на ориентации захвата.

Оборудование также может содержать средства для приема порядка вывода по меньшей мере двух звуковых сигналов на основе ориентации захвата; при этом средства для вывода по меньшей мере двух звуковых сигналов по меньшей мере в два динамика также могут быть основаны на порядке вывода звуковых сигналов.

Средства для вывода по меньшей мере двух звуковых сигналов по меньшей мере в два динамика могут содержать следующие компоненты: средства для маршрутизации по меньшей мере двух звуковых сигналов по меньшей мере в два динамика на основе ориентации воспроизведения и/или средства для микширования по меньшей мере двух звуковых сигналов для генерации звукового сигнала, микшированного с получением меньшего количества каналов и подлежащего выводу по меньшей мере в один динамик из по меньшей мере двух динамиков.

По меньшей мере два динамика могут представлять собой по меньшей мере одно из следующих устройств: громкоговоритель; наушники; гарнитура; головной телефон; внешний громкоговоритель и интегрированный бесконтактный динамик.

В соответствии с седьмым аспектом настоящего изобретения предлагается оборудование, содержащее вход, сконфигурированный для приема по меньшей мере двух звуковых сигналов с относительным разнесением между ними; определитель-датчик ориентации, сконфигурированный для определения ориентации захвата звукового сигнала на основе ориентации устройства и информации, относящейся к конфигурации микрофонов в оборудовании захвата; и генератор выходных звуковых сигналов, сконфигурированный для вывода по меньшей мере двух звуковых сигналов на основе ориентации захвата таким образом, чтобы воспроизведение по меньшей мере двух звуковых сигналов выполнялось на основе ориентации захвата.

Ориентация захвата может представлять собой значение начальной ориентации захвата, а генератор выходных звуковых сигналов может быть сконфигурирован для вывода по меньшей мере двух звуковых сигналов в соответствии с начальным порядком вывода звуковых сигналов.

Оборудование также может содержать компаратор ориентации, сконфигурированный для определения, превышает ли различие между ориентацией захвата и более ранней ориентацией заданное значение; и генератор сигнала ориентации звукового сигнала, сконфигурированный для последующего вывода сигнала об ориентации захвата с упомянутыми по меньшей мере двумя звуковыми сигналами таким образом, чтобы воспроизведение по меньшей мере двух звуковых сигналов выполнялось на основе ориентации захвата.

Более ранняя ориентация может представлять собой начальную ориентацию.

Генератор выходных звуковых сигналов может быть сконфигурирован для определения порядка вывода по меньшей мере двух звуковых сигналов на основе ориентации захвата; и также он может конфигурироваться для вывода порядка вывода звуковых сигналов с упомянутыми по меньшей мере двумя звуковыми сигналами таким образом, чтобы воспроизведение по меньшей мере двух звуковых сигналов в дальнейшем выполнялось на основе порядка вывода звуковых сигналов.

Оборудование может содержать компаратор ориентации, сконфигурированный для определения, превышает ли различие между ориентацией захвата и более ранней ориентацией заданное значение переупорядочения вывода звуковых сигналов; и также он может конфигурироваться для активизации процесса определения порядка вывода звуковых сигналов, если различие между ориентацией захвата и более ранней ориентацией превышает заданное значение переупорядочения вывода звуковых сигналов.

Вход может быть связан с первым микрофоном, сконфигурированным для генерации первого из по меньшей мере двух звуковых сигналов в первом местоположении, и со вторым микрофоном, сконфигурированным для генерации второго из по меньшей мере двух звуковых сигналов во втором местоположении, при этом относительное разнесение между по меньшей мере двумя звуковыми сигналами представляет собой разнесение между первым и вторым местоположениями.

Вход может включать по меньшей мере одно из следующего: вход, сконфигурированный для приема по меньшей мере двух звуковых сигналов от удаленного оборудования, содержащего по меньшей мере два разнесенных относительно друг друга микрофона; и/или вход, сконфигурированный для приема по меньшей мере двух звуковых сигналов из памяти.

В соответствии с восьмым аспектом настоящего изобретения предлагается оборудование, содержащее вход, сконфигурированный для приема по меньшей мере двух звуковых сигналов; селектор каналов, сконфигурированный для определения ориентации воспроизведения; и коммутатор каналов, сконфигурированный для вывода по меньшей мере двух звуковых сигналов по меньшей мере в два динамика на основе ориентации воспроизведения.

Селектор каналов может быть также сконфигурирован для приема ориентации захвата, связанной с упомянутыми по меньшей мере двумя звуковыми сигналами, и определения ориентации воспроизведения на основе ориентации захвата; при этом коммутатор каналов сконфигурирован для вывода по меньшей мере двух звуковых сигналов по меньшей мере в два динамика также на основе ориентации захвата.

Селектор каналов может быть также сконфигурирован для приема порядка вывода по меньшей мере двух звуковых сигналов на основе ориентации захвата, определения ориентации воспроизведения на основе порядка вывода по меньшей мере двух звуковых сигналов и ориентации захвата, при этом коммутатор каналов может конфигурироваться для вывода по меньшей мере двух звуковых сигналов по меньшей мере в два динамика также на основе порядка вывода звуковых сигналов.

Коммутатор каналов может включать по меньшей мере один из следующих компонентов: маршрутизатор, сконфигурированный для маршрутизации по меньшей мере двух звуковых сигналов по меньшей мере в два динамика на основе ориентации воспроизведения; и микшер, сконфигурированный для микширования по меньшей мере двух звуковых сигналов для генерации звукового сигнала, микшированного с получением меньшего количества каналов и подлежащего выводу по меньшей мере в один динамик из по меньшей мере двух динамиков. По меньшей мере два динамика могут представлять собой по меньшей мере одно из следующих устройств: громкоговоритель; наушники; гарнитура; головной телефон; внешний громкоговоритель и интегрированный бесконтактный динамик.

Компьютерное программное изделие, хранимое на носителе информации, может вызывать выполнение оборудованием описываемого способа.

Электронное устройство может включать в свой состав описанное оборудование.

Набор микросхем может включать в свой состав описанное выше оборудование.

Варианты осуществления настоящего изобретения направлены на решение проблем известного уровня техники.

КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ

Для лучшего понимания настоящего изобретения далее в примерах приводятся ссылки на прилагаемые чертежи, на которых:

на фиг. 1 схематично показано оборудование, подходящее для использования в некоторых вариантах осуществления настоящего изобретения;

на фиг. 2 схематично показан пример оборудования захвата или записи звукового сигнала в соответствии с некоторыми вариантами осуществления настоящего изобретения;

на фиг. 3 показан алгоритм работы оборудования захвата или записи звукового сигнала, показанного на фиг. 2, в соответствии с некоторыми вариантами осуществления настоящего изобретения;

на фиг. 4 показан другой алгоритм работы оборудования захвата или записи звукового сигнала, показанного на фиг. 2, в соответствии с некоторыми вариантами осуществления настоящего изобретения;

на фиг. 5 схематично показан пример оборудования воспроизведения звукового сигнала в соответствии с некоторыми вариантами осуществления настоящего изобретения;

на фиг. 6 показан алгоритм работы оборудования воспроизведения звукового сигнала, показанного на фиг. 5, в соответствии с некоторыми вариантами осуществления настоящего изобретения;

на фиг. 7 показан другой алгоритм работы оборудования воспроизведения звукового сигнала, показанного на фиг. 5, в соответствии с некоторыми вариантами осуществления настоящего изобретения;

на фиг. 8-11 в соответствии с некоторыми вариантами осуществления настоящего изобретения показаны примеры комбинаций ориентации оборудования захвата с 3 микрофонами и оборудования воспроизведения с 3 динамиками в условиях вращения на 90 градусов;

на фиг. 12-15 в соответствии с некоторыми вариантами осуществления настоящего изобретения показаны примеры комбинаций ориентации оборудования захвата с 2 микрофонами и оборудования воспроизведения с 2 динамиками в условиях вращения на 90 градусов;

на фиг. 16-19 в соответствии с некоторыми вариантами осуществления настоящего изобретения показаны примеры комбинаций ориентации оборудования захвата с 2 микрофонами и оборудования воспроизведения с 3 динамиками в условиях вращения на 90 градусов;

на фиг. 20-23 в соответствии с некоторыми вариантами осуществления настоящего изобретения показаны примеры комбинаций ориентации оборудования захвата с 3 микрофонами и оборудования воспроизведения с 2 динамиками в условиях вращения на 90 градусов;

на фиг. 24 в соответствии с некоторыми вариантами осуществления настоящего изобретения показан пример конфигурации оборудования захвата с 8 микрофонами и оборудования воспроизведения с 8 динамиками;

на фиг. 25 схематично показан пример конфигурации оборудования захвата с 3 микрофонами в соответствии с некоторыми вариантами осуществления настоящего изобретения;

на фиг. 26 показан алгоритм работы систем записи и воспроизведения звукового сигнала с обнаружением произвольной ориентации в соответствии с некоторыми вариантами осуществления настоящего изобретения;

на фиг. 27 показан другой алгоритм работы систем записи и воспроизведения звукового сигнала с обнаружением горизонтальной и вертикальной ориентации в соответствии с некоторыми вариантами осуществления настоящего изобретения;

на фиг. 28 показан алгоритм работы систем записи и воспроизведения звукового сигнала с обнаружением ориентации по квартилям в соответствии с некоторыми вариантами осуществления настоящего изобретения.

ВАРИАНТЫ ОСУЩЕСТВЛЕНИЯ НАСТОЯЩЕГО ИЗОБРЕТЕНИЯ

Ниже более подробно описываются подходящее оборудование и возможные механизмы для обеспечения эффективного выполнения процессов акустической записи и воспроизведения, например, в оборудовании записи и воспроизведения звуковых и видеосигналов, работающего по беспроводным линиям связи. В последующих примерах описывается оборудование для захвата и воспроизведения звукового сигнала. Однако следует учитывать, что в некоторых вариантах осуществления оборудование для захвата и воспроизведения звукового сигнала может входить в состав аудио-видео системы.

Чаще всего описываемые мобильные устройства или оборудование оснащены несколькими микрофонами или микрофонными массивами, подходящими для записи или захвата звуковой среды или звуковой сцены, окружающей мобильное устройство или оборудование. Конфигурация с множеством микрофонов позволяет осуществлять запись стерео или пространственных звуковых сигналов.

Однако такие мобильные устройства или оборудование (например, смартфоны) ограничены в том, что касается количества микрофонов и их местоположения. Поскольку дополнительные микрофоны увеличивают размер и стоимость производства, в применяемых в настоящий момент конструкциях микрофоны используются для различных приложений. Например, расположение микрофона в нижней и верхней частях может применяться для захвата речи и определения опорного уровня шумов в переносных телефонах, и такие микрофоны используются также в приложениях записи видео/аудио сигнала.

Подобные мобильные устройства или оборудование, как правило, оснащены несколькими динамиками, подходящими для генерации требуемого звукового сигнала окружения или звуковой сцены в стереофоническом или многоканальном формате. Однако такие мобильные устройства или оборудование (например, смартфоны) ограничены в том, что касается количества микрофонов и их местоположения. В случае применения дополнительных динамиков существуют те же ограничения, что и для микрофонов, связанные с увеличением размера и стоимости производства.

Таким образом, если мобильное устройство используется для захвата звукового сигнала, то ориентация этого устройства оказывает существенное воздействие на качество захваченного звукового сигнала. Например, стереофоническое устройство способно захватывать стереофонический звуковой сигнал только в одной ориентации относительно телефона (например, в горизонтальной или вертикальной ориентации вследствие определенного местоположения микрофонов), в результате чего при изменении ориентации устройства также изменяется "ориентация" захваченного стереофонического звукового сигнала.

Например, при захвате видеосигнала и звукового сигнала (например, в процессе выполнения видеотелефонных вызовов) пользователь иногда желает захватывать видеоизображение в вертикальной ориентации, а иногда - в горизонтальной ориентации и изменяет положение устройства даже в процессе выполнения одного вызова. Это может привести к тому, что устройство воспроизведения или формирования сигнала не будет осведомлено об ориентации устройства захвата звукового сигнала, из-за чего, возможно, не удастся корректно воспроизвести стереофонический звуковой сигнал. В результате на приемной стороне снижается качество звукового сигнала.

Были предложены решения для сигнализации об ориентации устройства для захвата видеоизображения в процессе его функционирования, обеспечивающие воспроизведение захваченного видеоизображения в корректной ориентации на стороне приемника в ходе выполнения вызова, без необходимости ручного вращения приемного устройства воспроизведения для согласования его позиции с устройством захвата. Кроме того, вращение захваченного видеоизображения с целью изменения его ориентации на устройстве воспроизведения или на стороне приемника является относительно простой задачей, поскольку вся информация, требуемая для вращения, содержится в захваченном видеосигнале. Однако процесс захвата/формирования звукового сигнала обычно ограничен определенной ориентацией (вследствие ограниченного количества микрофонов/динамиков и их относительных позиций на устройстве) и, таким образом, может не допускать "свободного" вращения захваченного звукового сигнала в устройстве воспроизведения.

Кроме того, при коррекции ориентации видеоизображения в последующих устройствах с использованием стандарта версии 5.1 GSMA комплекта расширенных услуг связи (RCS, Rich Communications Suite) ориентация звукового сигнала (то есть ориентация захваченного звукового сигнала) должным образом не корректируется, что может привести к ухудшению ситуации, поскольку при выполнении предлагаемых способов коррекции может пропасть синхронизация звукового сигнала и видеоизображения (например, сигнал источника звука, показанного в верхней части экрана, воспроизводится динамиком, расположенным с правой или с левой стороны экрана, или сигнал источник звука, расположенного с левой стороны экрана, воспроизводится с правой стороны экрана).

Таким образом, более подробно описываемая ниже концепция заключается в обеспечении системой записи звукового сигнала оптимального захвата и формирования стереофонического сигнала для требуемой дистанции записи с минимальным количеством микрофонов и с учетом ограничений при позиционировании микрофонов.

Описываемая более подробно концепция предназначена для предоставления решения по синхронизации использования динамиков (или наушников, или внешних акустических систем) устройства воспроизведения или формирования звукового сигнала (на приемной стороне) и микрофонов записывающего или захватывающего звуковой сигнал устройства (на передающей стороне).

Эта цель достигается с помощью некоторых вариантов осуществления настоящего изобретения путем сигнализации об ориентации при записи (захвате) звукового сигнала, передаваемой из передающего в приемное устройство. Информация сигнализации в некоторых вариантах осуществления может включаться в состав звуковых данных и передаваться в сеансе связи или может представлять собой дополнительную информацию, передаваемую только в том случае, если при захвате звукового сигнала изменяется принятая по умолчанию ориентация устройства (например, в случае захвата в вертикальной плоскости для стереофонического звукового сигнала).

В некоторых вариантах осуществления, подробно описываемых ниже, концепция распространяется на оборудование и способы обеспечения наилучшего качества звукового сигнала в устройстве формирования, если нарушается синхронизация ориентации звукового сигнала между устройствами захвата и воспроизведения.

Следует принимать во внимание, что согласно приведенному описанию ориентация устройства захвата звукового сигнала (на передающей стороне) обнаруживается с использованием датчика гравитации и на основе информации о свойствах процесса захвата звукового сигнала, выполняемого устройством (другими словами, на основе данных о количестве микрофонов и их позиции, вместе с информацией о том, какие микрофоны используются в конкретной позиции устройства). В некоторых вариантах осуществления вставка данных сигнализации об ориентации звукового сигнала может выполняться посредством расширения заголовка протокола реального времени (RTP, Real Time Protocol).

В этом отношении вначале со ссылкой на фиг. 1 рассматривается блок-схема типового оборудования или электронного устройства 10, которое может использоваться для записи (или функционировать в качестве оборудования захвата) или воспроизведения (или функционировать в качестве оборудования формирования) звуковых сигналов.

Электронное устройство 10, например, может представлять собой мобильный терминал или пользовательское оборудование системы беспроводной связи, функционирующее в качестве оборудования записи или прослушивания звуковых сигналов. В некоторых вариантах осуществления настоящего изобретения такое оборудование может представлять собой аудиоплеер или устройство звукозаписи, такое как МР3-плеер, плеер/устройство записи мультимедийных данных (также называемое МР4-плеер), или любое портативное оборудование, подходящее для записи звуковых сигналов, или аудио/видео камкодер/память для хранения звуковых сигналов, или аудио или видеомагнитофон.

Устройство 10 в некоторых вариантах осуществления может содержать аудио-видео подсистему. Аудио-видео подсистема в некоторых вариантах осуществления может, например, содержать микрофон 11 или массив микрофонов для захвата звуковых сигналов. В некоторых вариантах осуществления микрофон 11 или массив микрофонов может представлять собой полупроводниковый микрофон, способный, другими словами, захватывать звуковые сигналы и выводить сигнал в подходящем цифровом формате, не требуя использования аналого-цифрового преобразователя. В других вариантах осуществления микрофон 11 или массив микрофонов может содержать любой подходящий микрофон или средства захвата звукового сигнал, например, емкостной микрофон, конденсаторный микрофон, электростатический микрофон, электретный микрофон, электродинамический микрофон, ленточный микрофон, угольный микрофон, пьезоэлектрический микрофон или микрофон микроэлектромеханической системы (MEMS, Micro Electrical-Mechanical System). Микрофон 11 или массив микрофонов в некоторых вариантах осуществления подают захваченный звуковой сигнал в аналого-цифровой преобразователь 14 (ADC, Analogue-To-Digital Converter).

В некоторых вариантах осуществления оборудован