Способ и устройство для улавливания звуков, соответствующих изображениям наблюдения

Способ и устройство для улавливания звуков, соответствующих изображениям наблюдения

Иллюстрации

Показать все

Реферат

ПЕРЕКРЕСТНАЯ ССЫЛКА НА РОДСТВЕННЫЕ ЗАЯВКИ

[0001] Настоящая заявка основана на и испрашивает приоритет Китайской патентной заявки № 201510462792.9, поданной 31 июля 2015, все содержание которой включено в настоящий документ посредством ссылки.

ОБЛАСТЬ ТЕХНИКИ

[0002] Настоящее раскрытие в основном относится к области компьютерных технологий, более конкретно к способу и устройству для улавливания (сбора) звуков, соответствующих изображениям наблюдения.

ПРЕДШЕСТВУЮЩИЙ УРОВЕНЬ ТЕХНИКИ

[0003] Камеры могут точно контролировать процесс различных событий, и контрольная функция камер широко применяется, например, в наблюдении за дорожным движением, наблюдении в супермаркетах или наблюдении за населением и т.п.

[0004] При наблюдении с использованием камер на устройстве контроля, если наблюдаемый объект, подлежащий съемке, находится относительно далеко, устройство контроля не может четко уловить звуки от наблюдаемого объекта, и, таким образом, информация наблюдения является неполной.

СУЩНОСТЬ ИЗОБРЕТЕНИЯ

[0005] Для того чтобы решить проблему, состоящую в том, что устройство контроля не может четко уловить звуки от наблюдаемого объекта, который находится относительно далеко от устройства контроля, настоящее раскрытие обеспечивает способ и устройство для улавливания звуков, соответствующих изображениям наблюдения. Технические решения заключаются в следующем.

[0006] В соответствии с первым аспектом вариантов осуществления настоящего раскрытия, предложен способ улавливания звуков, соответствующих изображениям наблюдения, включающий в себя:

[0007] когда изображения наблюдения собираются камерой устройства контроля, обнаружение, имеется ли наблюдаемый объект, создающий звуки, в изображениях наблюдения;

[0008] если имеется наблюдаемый объект, создающий звуки, в изображениях наблюдения, определение получающего звуки устройства, удовлетворяющего предварительно установленному условию, которое требует, чтобы уровень сигнала звуков, улавливаемых получающим звуки устройством от наблюдаемого объекта, был больше, чем уровень сигнала звуков, улавливаемых устройством контроля от наблюдаемого объекта; и

[0009] управление получающим звуки устройством, чтобы улавливать звуки от наблюдаемого объекта.

[0010] Опционально, обнаружение, имеется ли наблюдаемый объект, создающий звуки, в изображениях наблюдения, включает в себя:

[0011] обнаружение, имеется ли элемент изменения изображения, создающий звуки, в изображениях наблюдения, причем элемент изменения изображения включает в себя наблюдаемый объект, входящий в изображения наблюдения, или наблюдаемый объект, губы которого двигаются; или

[0012] обнаружение, создает ли звуки объект указанного типа в изображениях наблюдения, причем объект указанного типа включает в себя по меньшей мере одно из двери, окна и бытового прибора; или

[0013] в соответствии с указанным индексом, сообщенным устройством обнаружения, обнаружение, имеется ли наблюдаемый объект, создающий звуки, в изображениях наблюдения, причем устройство обнаружения является устройством, связанным с устройством контроля, для обнаружения указанного индекса, и указанный индекс включает в себя одно из состояний включения/выключения, параметров качества воздуха, температуры, параметров, указывающих изменения источников тепла, или параметров физиологических признаков.

[0014] Опционально, определение получающего звуки устройства, удовлетворяющего предварительно установленному условию, включает в себя:

[0015] обнаружение, являются ли звуки, соответствующие изображениям наблюдения, собранным устройством контроля, меньшими, чем предварительно установленное пороговое значение звука; и

[0016] если звуки, соответствующие изображениям наблюдения, собранным устройством контроля, меньше, чем предварительно установленное пороговое значение звука, определение получающего звуки устройства, удовлетворяющего предварительно установленному условию.

[0017] Опционально, определение получающего звуки устройства, удовлетворяющего предварительно установленному условию, включает в себя:

[0018] идентификацию получающего звуки устройства, ближайшего к наблюдаемому объекту, создающему звуки, из всех получающих звуки устройств, связанных с устройством контроля, и определение идентифицированного получающего звуки устройства в качестве получающего звуки устройства, удовлетворяющего предварительно установленному условию; или

[0019] управление всеми получающими звуки устройствами, связанными с устройством контроля, чтобы улавливать звуки от наблюдаемого объекта, создающего звуки, и определение получающего звуки устройства, которое улавливает самый сильный звуковой сигнал, в качестве получающего звуки устройства, удовлетворяющего предварительно установленному условию; или

[0020] определение по меньшей мере одного мобильного устройства, связанного с устройством контроля, в качестве получающего звуки устройства, удовлетворяющего предварительно установленному условию.

[0021] Опционально, идентификация получающего звуки устройства, ближайшего к наблюдаемому объекту, создающему звуки, среди всех получающих звуки устройств, связанных с устройством контроля, включает в себя:

[0022] посредством технологии позиционирования внутри помещения, идентификацию получающего звуки устройства, ближайшего к наблюдаемому объекту, создающему звуки, среди всех получающих звуки устройств, связанных с устройством контроля; или

[0023] посредством технологии распознавания образов, определение местоположения, где находится наблюдаемый объект, создающий звуки, и определение получающего звуки устройства для контроля звуков от наблюдаемого объекта, создающего звуки, в соответствии с соответствующими диапазонами области наблюдения, соответствующими получающим звуки устройствам.

[0024] Опционально, управление получающим звуки устройством для улавливания звуков от наблюдаемого объекта включает в себя:

[0025] когда получающее звуки устройство, удовлетворяющее предварительно установленному условию, является получающим звуки устройством, ближайшим к наблюдаемому объекту, создающему звуки, управление получающим звуки устройством для улавливания звуков; или

[0026] когда получающее звуки устройство, удовлетворяющее предварительно установленному условию, является получающим звуки устройством, которое улавливает самый сильный звуковой сигнал, управление получающим звуки устройством для улавливания звуков; или

[0027] когда получающее звуки устройство, удовлетворяющее предварительно установленному условию, является мобильным устройством, связанным с устройством контроля, управление мобильным устройством для перемещения к местоположению наблюдаемого объекта, создающего звуки, в изображениях наблюдения, и управление мобильным устройством для улавливания звуков в местоположении, где находится наблюдаемый объект.

[0028] В соответствии с вторым аспектом вариантов осуществления настоящего раскрытия, предложено устройство для улавливания звуков, соответствующих изображениям наблюдения, включающее в себя:

[0029] модуль обнаружения, сконфигурированный, чтобы, когда изображения наблюдения собираются камерой устройства контроля, обнаруживать, имеется ли наблюдаемый объект, создающий звуки, в изображениях наблюдения;

[0030] модуль определения, сконфигурированный, чтобы, если модуль обнаружения обнаруживает, что имеется наблюдаемый объект, создающий звуки, в изображениях наблюдения, определять получающее звуки устройство, удовлетворяющее предварительно установленному условию, которое требует, чтобы уровень сигнала звуков, улавливаемых получающим звуки устройством от наблюдаемого объекта, был больше, чем уровень сигнала звуков, улавливаемых устройством контроля от наблюдаемого объекта; и

[0031] модуль управления, сконфигурированный для управления получающим звуки устройством, определенным модулем определения, чтобы улавливать звуки от наблюдаемого объекта.

[0032] Опционально, модуль обнаружения включает в себя:

[0033] первый подмодуль обнаружения, сконфигурированный для обнаружения, имеется ли элемент изменения изображения, создающий звуки, в изображениях наблюдения, причем элемент изменения изображения включает в себя наблюдаемый объект, входящий в изображения наблюдения, или наблюдаемый объект, губы которого двигаются; или

[0034] второй подмодуль обнаружения, сконфигурированный для обнаружения, создает ли звуки объект указанного типа в изображениях наблюдения, причем объект указанного типа включает в себя по меньшей мере одно из двери, окна и бытового прибора; или

[0035] третий подмодуль обнаружения, сконфигурированный, чтобы, в соответствии с указанным индексом, сообщенным устройством обнаружения, обнаруживать, имеется ли наблюдаемый объект, создающий звуки, в изображениях наблюдения, причем устройство обнаружения является устройством, связанным с устройством контроля для обнаружения указанного индекса, и указанный индекс включает в себя одно из состояний включения/выключения, параметров качества воздуха, температуры, параметров, указывающих изменения источников тепла, или параметров физиологических признаков.

[0036] Опционально, модуль определения включает в себя:

[0037] четвертый подмодуль обнаружения, сконфигурированный для обнаружения, являются ли звуки, соответствующие изображениям наблюдения, собранным устройством контроля, меньшими, чем предварительно установленное пороговое значение звука; и

[0038] первый подмодуль определения, сконфигурированный, чтобы, если четвертый подмодуль обнаружения обнаруживает, что звуки, соответствующие изображениям наблюдения, собранным устройством контроля, меньше, чем предварительно установленное пороговое значение звука, определять получающее звуки устройство, удовлетворяющее предварительно установленному условию.

[0039] Опционально, первый подмодуль определения включает в себя:

[0040] первый подмодуль идентификации, сконфигурированный для идентификации получающего звуки устройства, ближайшего к наблюдаемому объекту, создающему звуки, среди всех получающих звуки устройств, связанных с устройством контроля, и определения идентифицированного получающего звуки устройства в качестве получающего звуки устройства, удовлетворяющего предварительно установленному условию; или

[0041] второй подмодуль идентификации, сконфигурированный для управления всеми получающими звуки устройствами, связанными с устройством контроля, чтобы улавливать звуки от наблюдаемого объекта, создающего звуки, и определения получающего звуки устройства, которое улавливает самый сильный звуковой сигнал, в качестве получающего звуки устройства, удовлетворяющего предварительно установленному условию; или

[0042] второй подмодуль определения, сконфигурированный для определения по меньшей мере одного мобильного устройства, связанного с устройством контроля, в качестве получающего звуки устройства, удовлетворяющего предварительно установленному условию.

[0043] Опционально, первый подмодуль идентификации включает в себя:

[0044] третий подмодуль идентификации, сконфигурированный, чтобы, посредством технологии позиционирования внутри помещения, идентифицировать получающее звуки устройство, ближайшее к наблюдаемому объекту, создающему звуки, среди всех получающих звуки устройств, связанных с устройством контроля; или

[0045] четвертый подмодуль определения, сконфигурированный, чтобы, посредством технологии распознавания образов, определять местоположение, где находится наблюдаемый объект, создающий звуки, и определять получающее звуки устройство для контроля звуков от наблюдаемого объекта, создающего звуки, в соответствии с соответствующими диапазонами области наблюдения, соответствующими получающим звуки устройствам.

[0046] Опционально, модуль управления включает в себя:

[0047] первый подмодуль управления, сконфигурированный, чтобы, когда получающее звуки устройство, удовлетворяющее предварительно установленному условию, является получающим звуки устройством, ближайшим к наблюдаемому объекту, создающему звуки, управлять получающим звуки устройством для улавливания звуков; или

[0048] второй подмодуль управления, сконфигурированный, чтобы, когда получающее звуки устройство, удовлетворяющее предварительно установленному условию, является получающим звуки устройством, которое улавливает самый сильный звуковой сигнал, управлять получающим звуки устройством для улавливания звуков; или

[0049] третий подмодуль управления, сконфигурированный, чтобы, когда получающее звуки устройство, удовлетворяющее предварительно установленному условию, является мобильным устройством, связанным с устройством контроля, управлять мобильным устройством для перемещения к местоположению наблюдаемого объекта, создающего звуки, в изображениях наблюдения, и управлять мобильным устройством для улавливания звуков в местоположении, где находится наблюдаемый объект.

[0050] В соответствии с третьим аспектом вариантов осуществления настоящего раскрытия, предложено устройство для улавливания звуков, соответствующих изображениям наблюдения, включающее в себя:

[0051] процессор и

[0052] память для хранения инструкций, исполняемых процессором;

[0053] при этом процессор сконфигурирован, чтобы:

[0054] когда изображения наблюдения собираются камерой устройства контроля, обнаруживать, имеется ли наблюдаемый объект, создающий звуки, в изображениях наблюдения;

[0055] если имеется наблюдаемый объект, создающий звуки, в изображениях наблюдения, определять получающее звуки устройство, удовлетворяющее предварительно установленному условию, которое требует, чтобы уровень сигнала звуков, улавливаемых получающим звуки устройством от наблюдаемого объекта, был выше, чем уровень сигнала звуков, улавливаемых устройством контроля от наблюдаемого объекта; и

[0056] управлять получающим звуки устройством для улавливания звуков от наблюдаемого объекта.

[0057] Технические решения, обеспечиваемые вариантами осуществления настоящего раскрытия, могут иметь следующие полезные результаты:

[0058] Идентифицируют наблюдаемый объект, создающий звуки, в изображениях наблюдения и управляют получающим звуки устройством, которое улавливает звуки с более высоким уровнем сигнала от наблюдаемого объекта, чем уровень сигнала звуков, улавливаемых устройством контроля от наблюдаемого объекта, для улавливания звуков от наблюдаемого объекта. Таким образом, настоящее раскрытие может решить проблему, состоящую в том, что устройство контроля не может четко улавливать звуки от наблюдаемого объекта, который находится относительно далеко от устройства контроля. Устройство контроля управляет получающим звуки устройством для улавливания звуков от наблюдаемого объекта, и, таким образом, информация наблюдения становится более полной.

[0059] Следует иметь в виду, что приведенное выше обобщенное описание и последующее детальное описание являются только иллюстративными и пояснительными, но не ограничивающими настоящее изобретение, как оно заявлено.

КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ

[0060] Приложенные чертежи, которые включены в настоящий документ и составляют часть настоящего описания, иллюстрируют варианты осуществления, соответствующие настоящему раскрытию, и вместе с описанием служат для пояснения принципов настоящего раскрытия.

[0061] Фиг. 1 является блок-схемой последовательности операций, иллюстрирующей способ улавливания звуков, соответствующих изображениям наблюдения, в соответствии с примерным вариантом осуществления.

[0062] Фиг. 2A является блок-схемой последовательности операций, иллюстрирующей обнаружение, имеется ли наблюдаемый объект, создающий звуки, в изображениях наблюдения, в соответствии с примерным вариантом осуществления.

[0063] Фиг. 2B является блок-схемой последовательности операций, иллюстрирующей способ обнаружения, имеется ли наблюдаемый объект, создающий звуки, в изображениях наблюдения, в соответствии с примерным вариантом осуществления.

[0064] Фиг. 2C является схематичным представлением, иллюстрирующим, что наблюдаемый объект входит в изображения наблюдения, в соответствии с примерным вариантом осуществления.

[0065] Фиг. 2D является схематичным представлением, иллюстрирующим, что имеется наблюдаемый объект, у которого губы двигаются на изображениях наблюдения, в соответствии с an примерным вариантом осуществления.

[0066] Фиг. 2E является схематичным представлением, иллюстрирующим объект указанного типа, создающий звуки, в изображениях наблюдения, в соответствии с примерным вариантом осуществления.

[0067] Фиг. 2F является схематичным представлением, иллюстрирующим обнаружение, имеется ли наблюдаемый объект, создающий звуки, в изображениях наблюдения, в соответствии с указанным индексом, сообщенным устройством обнаружения, в соответствии с примерным вариантом осуществления.

[0068] Фиг. 2G является блок-схемой последовательности операций, иллюстрирующей способ определения получающего звуки устройства, удовлетворяющего предварительно установленному условию, в соответствии с примерным вариантом осуществления.

[0069] Фиг. 2H является схематичным представлением, иллюстрирующим, что получающее звуки устройство, которое улавливает самый сильный звуковой сигнал, определено как получающее звуки устройство, удовлетворяющее предварительно установленному условию, в соответствии с примерным вариантом осуществления.

[0070] Фиг. 2I является блок-схемой последовательности операций, иллюстрирующей способ идентификации получающего звуки устройства, ближайшего к наблюдаемому объекту, создающему звуки, в изображениях наблюдения, среди всех получающих звуки устройств, связанных с устройством контроля, в соответствии с примерным вариантом осуществления.

[0071] Фиг. 2J является схематичным представлением, иллюстрирующим, что устройство контроля определяет получающее звуки устройство для контроля звуков от наблюдаемого объекта, создающего звуки, в соответствии с примерным вариантом осуществления.

[0072] Фиг. 2K является блок-схемой последовательности операций, иллюстрирующей способ управления получающим звуки устройством для улавливания звуков от наблюдаемого объекта в соответствии с примерным вариантом осуществления.

[0073] Фиг. 2L является схематичным представлением, иллюстрирующим, что устройство контроля управляет мобильным устройством для перемещения к местоположению наблюдаемого объекта, создающему звуки, в изображениях наблюдения, в соответствии с примерным вариантом осуществления.

[0074] Фиг. 3 является блок-схемой, иллюстрирующей устройство для улавливания звуков, соответствующих изображениям наблюдения, в соответствии с примерным вариантом осуществления.

[0075] Фиг. 4 является блок-схемой, иллюстрирующей устройство для улавливания звуков, соответствующих изображениям наблюдения, в соответствии с другим примерным вариантом осуществления.

[0076] Фиг. 5 является блок-схемой, иллюстрирующей устройство для улавливания звуков, соответствующих изображениям наблюдения, в соответствии с примерным вариантом осуществления.

ДЕТАЛЬНОЕ ОПИСАНИЕ

[0077] Ссылка далее будет даваться на детальное описание примерных вариантов осуществления, примеры которых иллюстрируются на приложенных чертежах. Следующее описание относится к приложенным чертежам, на которых те же ссылочные позиции на различных чертежах представляют те же или подобные элементы, если не представлено иначе. Реализации примерных вариантов осуществления, изложенные в последующем описании, не представляют все возможные реализации, соответствующие настоящему раскрытию. Напротив, они являются только примерами устройств и способов, соответствующих аспектам, относящимся к настоящему раскрытию, как изложено в приложенной формуле изобретения.

[0078] Фиг. 1 является блок-схемой последовательности операций, иллюстрирующей способ улавливания звуков, соответствующих изображениям наблюдения, в соответствии с примерным вариантом осуществления. Как показано на фиг. 1, способ улавливания звуков, соответствующих изображениям наблюдения, включает в себя следующие этапы.

[0079] На этапе 101, когда изображения наблюдения собираются камерой устройства контроля, обнаруживают, имеется ли наблюдаемый объект, создающий звуки, в изображениях наблюдения.

[0080] В общем, устройство контроля может собирать не только изображения наблюдения, но и звуки, создаваемые наблюдаемым объектом в изображениях наблюдения.

[0081] На этапе 102, если имеется наблюдаемый объект, создающий звуки, в изображениях наблюдения, определяют получающее звуки устройство, удовлетворяющее предварительно установленному условию. Предварительно установленное условие требует, чтобы уровень сигнала звуков, улавливаемых получающим звуки устройством от наблюдаемого объекта, был больше, чем уровень сигнала звуков, улавливаемых устройством контроля от наблюдаемого объекта.

[0082] При этом, даже хотя устройство контроля может четко формировать изображения наблюдения, устройство контроля не может эффективно улавливать звуки от наблюдаемого объекта в изображениях наблюдения. Например, если наблюдаемый объект в изображениях наблюдения создает очень слабые звуки, или наблюдаемый объект в изображениях наблюдения находится относительно далеко от устройства контроля, звуки от наблюдаемого объекта не могут четко улавливаться устройством контроля и могут даже автоматически отфильтровываться устройством контроля. Таким образом, требуется дополнительное получающее звуки устройство, удовлетворяющее предварительно установленному условию, для улавливания звуков от наблюдаемого объекта.

[0083] Предварительно установленное условие здесь может определять, что уровень сигнала звуков, улавливаемых получающим звуки устройством от наблюдаемого объекта, больше, чем уровень сигнала звуков, улавливаемых устройством контроля от наблюдаемого объекта. Когда предварительно установленное условие удовлетворено, получающее звуки устройство включается для улавливания звуков от наблюдаемого объекта.

[0084] Получающим звуки устройством здесь могут быть устройства, имеющие элементы улавливания звука, такие как мобильный телефон, аудиооборудование или Bluetooth-наушники.

[0085] На этапе 103 получающее звуки устройство управляется для улавливания звуков от наблюдаемого объекта.

[0086] Когда устройство контроля обнаруживает, что наблюдаемый объект в изображения наблюдения создает звуки, но звуки от наблюдаемого объекта слишком слабы, или наблюдаемый объект слишком удален от устройства контроля, устройство контроля не может четко улавливать звуки от наблюдаемого объекта. При этом устройство контроля может управлять получающим звуки устройством, удовлетворяющим предварительно установленному условию, для улавливания звуков от наблюдаемого объекта.

[0087] Ввиду вышеизложенного, в способе улавливания звуков, соответствующих изображениям наблюдения, обеспечиваемом вариантами осуществления настоящего раскрытия, идентифицируют наблюдаемый объект, создающий звуки, в изображениях наблюдения и управляют получающим звуки устройством, которое улавливает звуки с более высоким уровнем сигнала от наблюдаемого объекта, чем уровень сигнала звуков, улавливаемых устройством контроля от наблюдаемого объекта, для улавливания звуков от наблюдаемого объекта. Таким образом, настоящее раскрытие может решить проблему, состоящую в том, что устройство контроля не может четко улавливать звуки от наблюдаемого объекта, который находится относительно далеко от устройства контроля. Устройство контроля управляет получающим звуки устройством для улавливания звуков от наблюдаемого объекта, и, таким образом, информация наблюдения становится более полной.

[0088] В возможной реализации этап 102 на фиг. 1 может быть заменен этапами 102a-102b. Фиг. 2A является блок-схемой последовательности операций, иллюстрирующей обнаружение, имеется ли наблюдаемый объект, создающий звуки, в изображениях наблюдения, в соответствии с примерным вариантом осуществления. Как показано на фиг. 2A, обнаружение устройством контроля, имеется ли наблюдаемый объект, создающий звуки, в изображениях наблюдения, может включать в себя следующие этапы.

[0089] На этапе 102a, обнаруживают, являются ли звуки, соответствующие изображениям наблюдения, собранным устройством контроля, меньшими, чем предварительно установленное пороговое значение звука.

[0090] Если звуки, создаваемые наблюдаемым объектом в изображениях наблюдения, являются слишком слабыми, или наблюдаемый объект в изображениях наблюдения находится слишком далеко от устройства контроля, звуки, создаваемые наблюдаемым объектом, не могут четко улавливаться устройством контроля. Таким образом, предварительно установленное пороговое значение звука относится здесь к пороговому значению, определяющему, может ли устройство контроля четко улавливать звуки, соответствующие изображениям наблюдения. Если звуки, соответствующие изображениям наблюдения, собранным устройством контроля, меньше, чем предварительно установленное пороговое значение звука, это указывает, что устройство контроля временно не может улавливать звуки, соответствующие изображениям наблюдения.

[0091] На этапе 102b, если звуки, соответствующие изображениям наблюдения, собранным устройством контроля, меньше, чем предварительно установленное пороговое значение звука, то определяют получающее звуки устройство, удовлетворяющее предварительно установленному условию.

[0092] Когда звуки, соответствующие изображениям наблюдения, собранным устройством контроля, меньше, чем предварительно установленное пороговое значение звука, это указывает на то, что устройство контроля временно не может улавливать звуки, соответствующие изображениям наблюдения. Таким образом, необходимо определить получающее звуки устройство, удовлетворяющее предварительно установленному условию, для улавливания звуков, соответствующих изображениям наблюдения, вместо устройства контроля.

[0093] Ввиду изложенного выше, в способе улавливания звуков, соответствующих изображениям наблюдения, обеспеченном вариантами осуществления настоящего раскрытия, идентифицируют наблюдаемый объект, создающий звуки, в изображениях наблюдения и управляют получающим звуки устройством, которое улавливает звуки с более высоким уровнем сигнала от наблюдаемого объекта, чем уровень сигнала звуков, улавливаемых устройством контроля от наблюдаемого объекта, для улавливания звуков от наблюдаемого объекта. Таким образом, настоящее раскрытие может решить проблему, состоящую в том, что устройство контроля не может четко улавливать звуки от наблюдаемого объекта, который находится относительно далеко от устройства контроля. Устройство контроля управляет получающим звуки устройством для улавливания звуков от наблюдаемого объекта, и, таким образом, информация наблюдения становится более полной.

[0094] Кроме того, когда устройство контроля не может четко улавливать звуки, создаваемые наблюдаемым объектом, устройство контроля может послать инструкцию об улавливании на получающее звуки устройство, удовлетворяющее предварительно установленному условию, чтобы инструктировать получающее звуки устройство улавливать звуки от наблюдаемого объекта. Предварительно установленное условие требует, чтобы получающее звуки устройство было ближайшим к наблюдаемому объекту, или чтобы получающее звуки устройство улавливало самый сильный звуковой сигнал, или чтобы получающее звуки устройство было мобильным устройством, связанным с устройством контроля.

[0095] Возможная реализация показана на фиг. 2B, которая является блок-схемой последовательности операций, иллюстрирующей способ обнаружения, имеется ли наблюдаемый объект, создающий звуки, в изображениях наблюдения, в соответствии с примерным вариантом осуществления. Как показано на фиг. 2B, этап 101 может включать в себя следующие три реализации.

[0096] В первой реализации 101a обнаруживают, имеется ли элемент изменения изображения, создающий звуки, в изображениях наблюдения. Элемент изменения изображения включает в себя наблюдаемый объект, входящий в изображения наблюдения, или наблюдаемый объект, губы которого двигаются.

[0097] Здесь, элемент изменения изображения может относиться к человеку или объекту, перемещающемуся в изображения наблюдения, или движению губ человека или животного.

[0098] Фиг. 2C является схематичным представлением, иллюстрирующим наблюдаемые объекты, входящие в изображения наблюдения, в соответствии с примерным вариантом осуществления. Как показано на фиг. 2C, когда человек 11, кошка 12 и собака 13 перемещаются в изображения, наблюдаемые устройством 10 контроля, устройство 10 контроля может рассматривать человека 11, кошку 12 и собаку 13 в качестве наблюдаемых объектов. Фиг. 2D является схематичным представлением, иллюстрирующим наблюдаемые объекты, губы которых двигаются в изображениях наблюдения, в соответствии с примерным вариантом осуществления. Как показано на фиг. 2D, когда люди 11a и 11b в изображениях, наблюдаемых устройством 10 контроля, разговаривают, устройство 10 контроля может рассматривать людей 11a и 11b в качестве наблюдаемых объектов, когда обнаруживается, что губы этих людей 11a, 11b двигаются.

[0099] Во второй реализации 101b обнаруживают, создает ли звуки объект указанного типа в изображениях наблюдения. Объект указанного типа включает в себя по меньшей мере одно из двери, окна и бытового прибора.

[00100] Иногда, когда дверь, окно и бытовой прибор в изображениях наблюдения создают звуки (например, когда человек стучит в дверь, включается телевизор или работает вентилятор), никаких существенных изменений не происходит в изображениях наблюдения. Таким образом, объект указанного типа относится к объекту, который не перемещается, и камера должна определять, следует ли получать звуки от объекта, в соответствии с улавливаемыми звуками.

[00101] Фиг. 2E является схематичным представлением, иллюстрирующим объект указанного типа, создающий звуки в изображениях наблюдения, в соответствии с примерным вариантом осуществления. Как показано на фиг. 2E, когда в дверь 14 стучат, телевизор 15 включается, и вентилятор 16 работает в изображениях наблюдения, даже если не имеется существенных изменений в изображениях наблюдения в целом, устройство 10 контроля может все же рассматривать дверь 14, телевизор 15 и вентилятор 16 в качестве наблюдаемых объектов в соответствии со стуком, звуком, создаваемым телевизионной программой, и звуком, создаваемым лопастями вентилятора.

[00102] В третьей реализации 101c, в соответствии с указанным индексом, сообщенным устройством обнаружения, обнаруживают, имеется ли наблюдаемый объект, создающий звуки, в изображениях наблюдения. Устройство обнаружения является устройством, связанным с устройством контроля, для обнаружения указанного индекса, причем указанный индекс включает в себя одно из состояний включения/выключения, параметров качества воздуха, температуры, параметров, указывающих изменения источников тепла, или параметров физиологических признаков.

[00103] Когда звуки, создаваемые наблюдаемым объектом в изображениях наблюдения, являются слишком слабыми, устройство контроля может определить, какие наблюдаемые объекты в изображениях наблюдения создают звуки, с помощью устройства обнаружения. Здесь, устройство обнаружения относится к устройству для обнаружения состояний наблюдаемых объектов, которое установлено около наблюдаемых объектов или на наблюдаемых объектах.

[00104] Например, устройство обнаружения установлено на выключателе бытового прибора. Когда бытовой прибор включается, устройство обнаружения посылает данные о состоянии включения на устройство контроля. После приема данных, устройство контроля определяет, что бытовой прибор является наблюдаемым объектом, и посылает инструкцию об улавливании на получающее звуки устройство, удовлетворяющее предварительно установленному условию, чтобы инструктировать получающее звуки устройство, удовлетворяющее предварительно установленному условию, улавливать звуки от бытового прибора. В другом примере, устройство обнаружения может быть установлено рядом с окном или дверью. Когда дверь или окно открывается, и устройство обнаружения воспринимает изменения температуры внешнего воздуха, устройство обнаружения посылает данные об изменении температуры на устройство контроля. После приема данных, устройство контроля определяет, что окно или дверь является наблюдаемым объектом, и посылает инструкцию об улавливании на получающее звуки устройство, удовлетворяющее предварительно установленному условию, чтобы инструктировать получающее звуки устройство, удовлетворяющее предварительно установленному условию, улавливать звуки от двери или окна.

[00105] Фиг. 2F является схематичным представлением, иллюстрирующим обнаружение, имеется ли наблюдаемый объект, создающий звуки, в изображениях наблюдения, в соответствии с указанным индексом, сообщенным устройством обнаружения, в соответствии с примерным вариантом осуществления. Как показано на фиг. 2F, когда дверь 18 в изображениях наблюдения открыта, датчик 17, установленный над дверью 18, воспринимает изменения температуры внешнего воздуха и посылает данные об изменении температуры на устройство 10 контроля, которое принимает возвращенные данные и посылает инструкцию об улавливании на получающее звуки устройство, удовлетворяющее предварительно установленному условию, чтобы инструктировать получающее звуки устройство, удовлетворяющее предварительно установленному условию, улавливать звуки от двери 18.

[00106] Возможная реализация показана на фиг. 2G, которая является блок-схемой последовательности операций, иллюстрирующей способ определения получающего звуки устройства, удовлетворяющего предварительно установленному условию, в соответствии с примерным вариантом осуществления. Как показано на фиг. 2G, определение получающего звуки устройства, удовлетворяющего предварительно установленному условию (этап 102b), может включать в себя следующие три реализации:

[00107] В первой реализации 102b1 идентифицируют получающее звуки устройство, ближайшее к наблюдаемому объекту, создающему звуки, из всех получающих звуки устройств, связанных с устройством контроля, и идентифицированное получающее звуки устройство определяется как получающее звуки устройство, удовлетворяющее предварительно установленному условию.

[00108] Когда предварительно установленное условие требует, чтобы получающее звуки устройство было ближайшим к наблюдаемому объекту, устройство контроля может идентифицировать получающее звуки устройство, ближайшее к наблюдаемому объекту, создающему звуки, в соответствии с изображениями наблюдения и определять получающее звуки устройство в качестве получающего звуки устройства, удовлетворяющего предварительно установленному условию.

[00109] Во второй реализации 102b2 управляют всеми получающими звуки устройствами, связанными с устройством контроля, для улавливания звуков от наблюдаемого объекта, создающего звуки, и определяют получающее звуки устройство, которое улавливает самый сильный звуковой сигнал, в качестве получающего звуки устройства, удовлетворяющего предварительно установленному условию.

[00110] Когда предварительно установленное условие требует, чтобы получающее звуки устройство собирало самый сильный звуковой сигнал, устройство контроля может посылать инструкцию об улавливании на все получающие звуки устройства, чтобы инструктировать все получающие звуки устройства улавливать звуки от наблюдаемого объекта в изображениях наблюдения. После приема инструкции об улавливании, все получающие звуки устройства начинают улавливать звуки от наблюдаемого объекта и посылать полученные звуки на устройство контроля для тестирования. Устройство контроля принимает и тестирует все звуки, полученные получающими звуки устройствами, определяет получающее звуки устройство, которое улавливает самый сильный звуковой сигнал, и определяет получающее звуки устройство в качестве получающег