Способ формирования анализа поведения в системе наблюдения и мониторинга

Способ формирования анализа поведения в системе наблюдения и мониторинга

Иллюстрации

Показать все

Реферат

Ссылка на родственную заявку

В настоящей заявке испрашиваются права и приоритет по предварительной патентной заявке США с №61/798740, озаглавленной «INVESTIGATION GENERATION IN AN OBSERVATION AND SURVEILLANCE SYSTEM», поданной 15 марта 2013 г., которая посредством ссылки полностью включена в настоящую заявку для любых целей.

Область техники

Раскрытое далее решение относится к системам видеонаблюдения, мониторинга и контроля и к способам использования таких систем. Конкретная реализация может работать совместно с системой, предоставляющей внешние данные, например, с рассматриваемой здесь расчетной системой транзакций пункта продаж (POS, point of sale), однако информация может предоставляться из любой внешней системы данных, работающей с транзакциями и имеющей отношение к операциям в оздоровительных центрах, ресторанах и т.п.

Уровень техники

Коммерческие компании, стремясь повысить свои обороты и эффективность, непрерывно работают над поиском способов идентификации конкретного поведения пользователей. Например, изучая поведение пользователя в сфере розничной торговли, компании могут увеличить продажи и снизить потери товара. Если говорить о потерях, то их наиболее значительной составляющей в розничной торговле являются кражи материальных ценностей, совершаемые работниками. Поэтому компании стремятся изучать поведение пользователя с целью снижения и, в итоге, устранения потерь материальных ценностей.

Для предотвращения потерь материальных ценностей вследствие действий работников компании используют различные средства. В розничных магазинах к предметам, которые могут быть похищены, крепят электронные устройства, вызывающие срабатывание сигнализации, но покупатели и/или работники могут деактивировать эти устройства до выноса предмета из магазина. Некоторые предприятия розничной торговли практикуют проверку сумок и/или тележек как у покупателей, так и у работников; на других внедрен видеоконтроль транзакций в пунктах продаж с целью обнаружения транзакций, проводимых с возможным нарушением установленных правил. В большинстве способов внимание сосредоточено на идентификации индивидуальных проявлений, а не на изучении базовых актов поведения пользователя, имеющего место в ходе таких событий. По этой причине компании не могут направить свои усилия на устранение условий, из-за которых у людей появляется возможность совершения хищений.

Раскрытие изобретения

Варианты осуществления настоящего изобретения раскрыты здесь в контексте борьбы с потерями материальных ценностей в розничной торговле, но раскрытые здесь системы и способы могут быть использованы и в других отраслях, связанных с розничными продажами и обслуживанием посетителей, например, в оздоровительных центрах, ресторанах и т.п.

В одном аспекте настоящее изобретение относится к системе для формирования материалов расследования поведения пользователя в режиме реального времени. В примерном варианте осуществления система содержит видеокамеру, выполненную с возможностью съемки видеоматериала о действиях пользователя, модуль анализа видеоматериала, выполненный с возможностью осуществления обработки отснятого видеоматериала в режиме реального времени с целью формирования невизуальных данных из видеоматериала, и компьютер, выполненный с возможностью приема видеоданных и невизуальных данных из видеокамеры. Компьютер содержит модуль видеоанализа, выполненный с возможностью анализа либо видеоданных, либо невизуальных данных с целью идентификации проявлений конкретного поведения пользователя, и модуль формирования материалов расследования, выполненный с возможностью формирования материалов расследования, содержащих по меньшей мере одну видеопоследовательность с конкретным поведением пользователя. В некоторых вариантах осуществления материалы расследования формируются в режиме, близком к реальному времени. Конкретное поведение пользователя может быть определено как действие, бездействие, движение, множество проявлений события, длящееся событие и/или внешнее событие.

В некоторых вариантах осуществления модуль формирования материалов расследования выполняет привязку внешних данных к материалам расследования. В некоторых вариантах осуществления компьютер принимает внешние данные из расчетной системы пункта продаж, и внешние данные содержат по меньшей мере одну транзакцию пункта продаж. В некоторых вариантах осуществления конкретное поведение пользователя может определяться моделью конкретного поведения пользователя. В вариантах осуществления модуль видеоанализа содержит модуль сравнения, выполненный с возможностью сравнения модели конкретного поведения пользователя и невизуальных данных.

В некоторых вариантах осуществления модуль формирования материалов расследования выполнен с возможностью одновременного ведения и наполнения множества отдельных материалов расследования.

В еще одном аспекте настоящее изобретение относится к системе для формирования материалов расследования поведения пользователя в режиме реального времени. Примерный вариант осуществления системы содержит видеокамеру, выполненную с возможностью съемки видеоматериала о действиях пользователя, модуль анализа видеоматериала, выполненный с возможностью осуществления обработки отснятого видеоматериала в режиме реального времени с целью формирования невизуальных данных из видеоматериала, и компьютер, выполненный с возможностью приема видеоданных и невизуальных данных из видеокамеры. Компьютер содержит модуль видеоанализа, выполненный с возможностью анализа либо видеоданных, либо невизуальных данных с целью идентификации проявлений конкретного поведения пользователя, и модуль формирования материалов расследования, выполненный с возможностью привязки видеопоследовательности, относящейся к идентифицированному проявлению конкретного поведения пользователя, к материалам расследования. В некоторых вариантах осуществления изобретения материалы расследования формируются в режиме, близком к реальному времени. В некоторых вариантах осуществления изобретения модуль формирования материалов анализ выполняет привязку внешних данных к материалам расследования. В некоторых вариантах осуществления изобретения компьютер принимает внешние данные из расчетной системы пункта продаж. Указанные внешние данные содержат по меньшей мере одну транзакцию пункта продаж.

В некоторых вариантах осуществления модуль формирования материалов расследования выполнен с возможностью одновременного ведения и наполнения множества отдельных материалов расследования. В некоторых вариантах осуществления конкретное поведение пользователя определено как по меньшей мере одно из следующего: действие, бездействие, движение, множество проявлений события, длящееся событие, внешнее событие. В некоторых вариантах осуществления конкретное поведение пользователя определено моделью конкретного поведения пользователя. Модуль видеоанализа содержит модуль сравнения, выполненный с возможностью сравнения модели конкретного поведения пользователя и невизуальных данных.

В еще одном аспекте настоящее раскрытие относится к способу анализа поведения. В примерном варианте осуществления способ включает прием видеоматериала из камеры и формирование из видеоматериала невизуальных данных. Невизуальные данные содержат невизуальные данные, относящиеся к поведению пользователя. Способ включает идентификацию конкретного поведения пользователя, идентификацию по меньшей мере одного проявления конкретного поведения пользователя в видеоданных и формирование материалов расследования, относящихся к конкретному поведению пользователя.

В некоторых вариантах осуществления способ включает определение конкретного поведения пользователя как по меньшей мере одного из следующего: действие, бездействие, движение, множество проявлений события, длящееся событие, внешнее событие.

В еще одном аспекте настоящее изобретение относится к долговременному машиночитаемому носителю информации, содержащему программное обеспечение для контроля транзакций пункта продаж, которое при выполнении компьютерной системой обеспечивает выполнение компьютерной системой приема видеоматериала из камеры, формирования из видеоматериала невизуальных данных, идентификацию конкретного поведения пользователя, идентификацию проявления конкретного поведения пользователя, содержащегося в невизуальных данных, и формирования материалов расследования, относящихся к идентифицированному проявлению конкретного поведения пользователя. В некоторых вариантах осуществления материалы расследования содержат видеоматериал с проявлением конкретного поведения пользователя, содержащимся в невизуальных данных. В некоторых вариантах осуществления изобретения программное обеспечение обеспечивает выполнение компьютерной системой приема из расчетной системы пункта продаж внешних данных транзакции операции пункта продаж, содержащих по меньшей мере одну индивидуальную транзакцию. В некоторых вариантах осуществления изобретения программное обеспечение обеспечивает выполнение компьютером идентификации конкретного поведения пользователя, соотнесенного по времени с по меньшей мере одной индивидуальной транзакцией. В некоторых вариантах осуществления программное обеспечение обеспечивает передачу компьютером данных, относящихся к по меньшей мере одной индивидуальной операции, в материалы расследования. В некоторых вариантах осуществления изобретения программное обеспечение обеспечивает выполнение компьютером определения конкретного поведения пользователя как по меньшей мере одного из следующего: действие, бездействие, движение, множество проявлений события, длящееся событие, внешнее событие.

В еще одном аспекте настоящего изобретения примерный вариант осуществления долговременного машиночитаемого носителя информации содержит программное обеспечение для контроля поведения пользователя, которое при выполнении компьютерной системой обеспечивает выполнение компьютерной системой приема из камеры невизуальных данных, содержащих данные информации о поведении пользователя, идентификации конкретного поведения пользователя, идентификации проявления конкретного поведения пользователя в невизуальных данных, идентификации видеоматериала с идентифицированным проявлением конкретного поведения пользователя и формирования материалов расследования, относящихся к идентифицированному проявлению указанного конкретного поведения пользователя и содержащих идентифицированный видеоматериал. В некоторых вариантах осуществления изобретения программное обеспечение обеспечивает выполнение компьютером определения конкретного поведения пользователя как по меньшей мере одного из следующего: действие, бездействие, движение, множество проявлений события, длящееся событие, внешнее событие. В некоторых вариантах осуществления конкретное поведение пользователя определено моделью конкретного поведения пользователя. Шаг идентификации проявления содержит сравнение модели конкретного поведения пользователя с невизуальными данными. В некоторых вариантах осуществления программное обеспечение обеспечивает выполнение компьютером приема з расчетной системы пункта продаж внешних данных, причем внешние данные содержат по меньшей мере одну транзакцию пункта продаж, и идентификации проявления конкретного поведения пользователя в невизуальных данных, относящихся к по меньшей мере одной транзакции пункта продаж. В некоторых вариантах осуществления программное обеспечение обеспечивает предоставление компьютером данных, относящихся к по меньшей мере одному пункту продаж, в материалах расследования.

Термином «видеокамера» может обозначаться устройство записи визуальной информации. В число примеров видеокамеры может входить одно или более из следующих устройств: система с регистратором видеоизображения и объективом; видеокамера; цифровая видеокамера; цветная камера; монохромная камера; фотоаппарат; видеокамера, совмещенная с устройством записи; компьютерная камера; веб-камера; инфракрасная (ИК) видеокамера; видеокамера для работы при малой освещенности; тепловая видеокамера; камера системы видеонаблюдения; камера с управлением ориентацией и панорамированием; устройство для восприятия видеоинформации. Видеокамера может быть расположена с целью наблюдения за определенной зоной.

Термином «видеоматериал» может обозначаться видеоизображение, полученное из видеокамеры и представленное в аналоговой и/или в цифровой форме. В число примеров видеоматериала могут входить: телевизионное изображение; фильм; последовательность изображений из видеокамеры или другого устройства наблюдения; последовательность изображений из передачи, ведущейся в реальном времени; последовательность изображений, сформированная компьютером; последовательность изображений из компьютерной графической системы; последовательность изображений из запоминающего устройства, например, из машиночитаемого носителя информации, цифрового видеодиска (digital video disk, DVD) или диска высокого разрешения (high-definition disk, HDD); последовательность изображений из интерфейса на основе IEEE 1394; последовательность изображений из устройства преобразования видеоизображения в цифровую форму; или последовательность изображений из сети.

«Видеоданные» представляют собой визуальную часть видеоматериала.

«Невизуальные данные» представляют собой невизуальную информацию, извлеченную из видеоданных.

Термином «видеопоследовательность» может обозначаться выбранная часть видеоданных и/или невизуальных данных.

Термином «обработка видеоматериала» может обозначаться любая операция с видеоданными и/или анализ видеоданных, в том числе, например, сжатие, монтаж и выполнение алгоритма, формирующего невизуальные данные из видеоматериала.

Термином «кадр» может обозначаться конкретное изображение или иной дискретный элемент видеоматериала.

Термином «компьютер» может обозначаться одно или более устройств и/или одна или более систем, выполненных с возможностью приема структурированных входных данных, обработки указанных данных в соответствии с предписанными правилами и формирования результатов указанной обработки в виде выходных данных. В число примеров компьютера могут входить: компьютер; стационарный и/или портативный компьютер; компьютер с одним процессором, несколькими процессорами или с многоядерными процессорами, которые могут работать параллельно и/или не параллельно; компьютер общего назначения; суперкомпьютер; электронная вычислительная машина коллективного пользования; сверхминиатюрный компьютер; мини-компьютер; рабочая станция; микрокомпьютер; сервер; клиент; устройство интерактивного телевидения; бытовой прибор с подключением к интернету; телекоммуникационное устройство с доступом в интернет; гибридная комбинация компьютера и устройства интерактивного телевидения; портативный компьютер; планшетный персональный компьютер (ПК); карманный персональный компьютер (КПК); портативный телефон; специализированное аппаратное средство для эмуляции компьютера и/или программы, например, цифровой сигнальный процессор (digital signal processor, DSP), перепрограммируемая матрица логических элементов (field-programmable gate array, FPGA), интегральная схема специального назначения (application specific integrated circuit, ASIC), процессор с набором команд специального назначения (application specific instruction-set processor, ASIP), микросхема, микросхемы или набор микросхем; однокристальная электронная система (system on a chip, SoC) или многопроцессорная однокристальная электронная система (multiprocessor system-on-chip, MPSoC); оптический компьютер; квантовый компьютер; биологический компьютер; и устройство, выполненное с возможностью приема данных, с возможностью обработки данных в соответствии с одной или несколькими сохраненными программами, реализованными программным способом, с возможностью формирования результатов, которое, как правило, может содержать модули ввода, вывода, хранения, арифметических операций, логических операций и управления.

Термином «программное обеспечение» могут обозначаться предписанные правила для работы компьютера. В число примеров программного обеспечения могут входить: программное обеспечение; сегменты кода; команды; апплеты; предварительно откомпилированный код; компилированный код; интерпретированный код; компьютерные программы; и запрограммированная логика.

Термином «машиночитаемый носитель информации» может обозначаться любое запоминающее устройство, используемое для хранения данных и выполненное с возможностью использования компьютером. В число примеров машиночитаемого носителя информации могут входить: магнитный жесткий диск; гибкий диск; оптический диск, например, CD-ROM и DVD; магнитная лента; съемная флэш-память; микросхема памяти; и/или другие типы носителей информации, выполненные с возможностью хранения в себе машиночитаемых команд.

Термином «компьютерная система» может обозначаться система, содержащая один или более компьютеров, в которой каждый компьютер может содержать машиночитаемый носитель информации, содержащий в своем составе программное обеспечение для работы компьютера. В число примеров компьютерной системы могут входить: распределенная компьютерная система для обработки информации посредством компьютерных систем, связанных сетью; две или более компьютерных системы, соединенные через сеть с целью передачи и/или приема информации между указанными компьютерными системами; и одно или несколько устройств и/или одна или несколько систем, которые выполнены с возможностью приема данных, с возможностью обработки данных в соответствии с одной или более сохраненными программами, с возможностью формирования результатов, и которые, как правило, могут содержать модули ввода, вывода, хранения, арифметических операций, логических операций и управления.

Термином «сеть» могут обозначаться несколько компьютеров и относящихся к ним устройств, которые могут быть соединены между собой средствами связи. В сети могут использоваться постоянные соединения, например, кабели, или временные соединения, например, устанавливаемые через телефонные или другие линии связи. Сеть может дополнительно содержать проводные соединения (к примеру, коаксиальный кабель, витую пару, волоконно-оптический кабель, волноводы и т.д.) и/или беспроводные соединения (к примеру, радиочастотные сигналы, оптические сигналы в свободном пространстве, акустические сигналы и т.д.). В число примеров сети могут входить: межсетевая сеть, например, интернет; внутренняя сеть (интранет); локальная сеть (local area network, LAN); распределенная сеть (wide area network, WAN); и комбинация сетей, например, интернета и интранета. Предлагаемые в качестве примера сети могут работать с использованием произвольного количества протоколов, например, межсетевого протокола (Internet protocol, IP), протокола асинхронного режима передачи (asynchronous transfer mode, ATM) и/или протокола синхронной оптической сети (synchronous optical network, SONET), протокола передачи пользовательских данных (user datagram protocol, UDP), протокола IEEE 802.x и т.д.

Краткое описание чертежей

Фиг. 1 представляет системную функциональную схему варианта осуществления системы видеонаблюдения, мониторинга и контроля в соответствии с настоящим раскрытием.

Фиг. 2 представляет вид экрана варианта осуществления модуля 200 материалов расследования, отображающего материалы расследования в соответствии с настоящим раскрытием.

Осуществление изобретения

Далее со ссылкой на сопровождающие чертежи раскрываются конкретные варианты осуществления настоящего изобретения, однако должно быть понятно, что раскрытые варианты представляют собой лишь примеры осуществления изобретения, которое может быть осуществлено в различных формах. Чтобы не загромождать настоящее раскрытие ненужными подробностями, хорошо известные функциональные модули или конструкции не описываются подробно. Поэтому раскрытые здесь конкретные подробности структуры и функционирования должны интерпретироваться не как ограничивающие, а лишь как основа для формулирования изобретения и как иллюстративная основа для ориентированного на специалиста в данной области техники пояснения различных вариантов осуществления настоящего изобретения в практически любой должным образом детализированной структуре. В описании и чертежах подобными номерами представлены элементы, которые могут выполнять одинаковые, подобные или эквивалентные функции.

Кроме того, настоящее изобретение может быть раскрыто здесь посредством компонентов функциональных блоков, листингов кода, элементов выбора, экранов отображения страниц и различных шагов обработки. Должно быть понятно, что такие функциональные блоки могут быть осуществлены посредством произвольного количества аппаратных и/или программных компонентов, выполненных с возможностью реализации определенных функций. Например, в вариантах осуществления настоящего изобретения могут использоваться различные компоненты, представляющие собой интегральные схемы, к примеру, элементы памяти, элементы, обрабатывающие информацию, логические элементы, таблицы соответствия и т.п., которые могут выполнять разнообразные функции под управлением одного или более микропроцессоров или иных управляющих устройств.

Аналогично, программные элементы настоящего изобретения могут быть осуществлены с использованием любого языка программирования или языка описания сценариев, например, С, С++, С#, Java, COBOL, ассемблер, PERL, Python, PHP и т.п. с реализацией различных алгоритмов посредством произвольной комбинации структур данных, объектов, операций, подпрограмм или иных программных элементов. Созданный объектный код может исполняться под управлением различных операционных систем, включая Windows®, Macintosh OSX®, iOS®, linux и/или Android®, но не ограничиваясь перечисленным.

Кроме того, следует отметить, что в вариантах осуществления настоящего изобретения может использоваться произвольное количество общеизвестных способов передачи данных, сигнализации, обработки данных, управления сетью и т.п.Следует понимать, что представленные и раскрытые здесь конкретные варианты осуществления предназначены лишь для иллюстрации изобретения и предпочтительного варианта его осуществления, но не подразумевают какого-либо ограничения объема настоящего изобретения. В представленных здесь примерах могут содержаться образцы элементов данных (к примеру, имена, даты и т.д.), которые служат лишь для пояснения и не должны пониматься как ограничивающие. Для краткости здесь могут не описываться подробно обычные сети передачи данных, разработка прикладных программ и другие функциональные аспекты систем (и компоненты отдельных функциональных элементов систем). Соединительные линии, представленные на различных фигурах чертежей, входящих в состав настоящего документа, предназначены для представления примера функциональных взаимосвязей и/или физических или виртуальных соединений между различными элементами. Следует отметить, что на практике в электронной системе передачи данных может быть множество альтернативных или дополнительных функциональных взаимосвязей и физических или виртуальных соединений.

Специалисту в данной области техники должно быть понятно, что настоящее изобретение может быть осуществлено в виде способа, системы обработки данных, устройства для обработки данных и/или компьютерного программного продукта. Соответственно, настоящее изобретения может принимать форму полностью программного варианта осуществления, полностью аппаратного варианта осуществления или варианта осуществления, сочетающего как программный аспект, так и аппаратный аспект. Кроме того, варианты осуществления настоящего изобретения могут принимать форму компьютерного программного продукта на машиночитаемом носителе информации, содержащего машиночитаемые программные кодовые средства, входящие в состав указанного носителя информации. Может быть использован любой пригодный машиночитаемый носитель информации, в том числе жесткие диски, диски CD-ROM, DVD-ROM, оптические запоминающие устройства, магнитные запоминающие устройства, полупроводниковые запоминающие устройства (к примеру, портативные запоминающие устройства с интерфейсом USB) и т.п.

В содержащемся здесь обсуждении термины «элемент пользовательского интерфейса» и/или «кнопка» следует понимать как неограничивающие, охватывающие своим содержанием и другие элементы интерфейса, например, без ограничений, гиперссылку, изображение, представляющее собой гиперссылку, и т.п.

Варианты осуществления настоящего изобретения далее описываются со ссылкой на иллюстративные функциональные схемы и диаграммы способов, устройств (к примеру, систем) и компьютерных программных продуктов в соответствии с различными аспектами настоящего изобретения. Следует понимать, что любые функциональные блоки иллюстративных функциональных схем и диаграмм, а также комбинации функциональных блоков, показанные на функциональных схемах и диаграммах, соответственно, могут быть осуществлены посредством команд компьютерной программы. Эти команды компьютерной программы могут быть загружены в компьютер общего назначения, в компьютер специального назначения, в мобильное устройство или в другое программируемое устройство обработки данных с целью реализации устройства, функционирующего таким образом, что посредством команд, исполняемых этим компьютером или другим программируемым устройством обработки, создается средство реализации функций, указанных в блоке или блоках схемы.

Эти команды компьютерной программы также могут быть сохранены в машиночитаемой памяти, которая может управлять компьютером или другим программируемым устройством обработки данных для обеспечения его функционирования определенным образом, т.е. команды, сохраненные в этой машиночитаемой памяти, создают изделие, содержащее командные средства, реализующие функцию, указанную в блоке или блоках блок-схемы. Эти команды компьютерной программы также могут быть загружены в компьютер или другое программируемое устройство обработки данных с целью инициирования выполнения на указанном компьютере или другом программируемом устройстве обработки данных последовательности рабочих шагов, реализующей выполняемую компьютером операцию таким образом, что посредством команд, исполняемых этим компьютером или другим программируемым устройством, создаются шаги реализации функций, указанных в блоке или блоках схемы.

Соответственно, функциональные блоки иллюстративных функциональных схем и диаграмм допускают комбинирование средств выполнения указанных функций, комбинирование шагов выполнения указанных функций и средств реализации указанных функций посредством команд программы. Также следует понимать, что любые функциональные блоки иллюстративных функциональных схем и диаграмм, а также комбинации функциональных блоков, показанные на функциональных схемах и диаграммах, могут быть осуществлены как аппаратно реализованной компьютерной системой специального назначения, выполняющей указанные функции или шаги, так и пригодными для этой цели комбинациями аппаратуры специального назначения и компьютерных команд.

Специалисту в данной области техники также должно быть понятно, что по соображениям безопасности какие-либо базы данных, системы или компоненты вариантов осуществления настоящего изобретения могут состоять из произвольной комбинации баз данных или компонентов, находящихся в одном месте или в нескольких местах, при этом каждая база данных или система содержит любые пригодные для это цели средства защиты, например, межсетевые экраны, коды доступа, шифрование, дешифрование, сжатие, восстановление сжатых данных и т.п.

Объем настоящего изобретения следует определять по прилагаемой формуле изобретения и ее законным эквивалентам, а не по приведенным здесь примерам. Например, шаги, изложенные в каком-либо способе формулы изобретения, могут выполняться в произвольном порядке и не ограничены порядком, представленном в формуле изобретения. Кроме того, ни один элемент не является принципиально важным для практического осуществления изобретения, если явным образом не указано, что элемент является принципиально важным или существенным.

Со ссылкой на фиг. 1 представлена система 100 видеонаблюдения, мониторинга и контроля в соответствии с вариантом осуществления настоящего изобретения. Система 100 представляет собой сетевое видеозаписывающее устройство, выполненное с возможностью записи видеоматериала из одной или более камер 110 (к примеру, аналоговых камер и/или IP-камер). Система 110 содержит одну или более видеокамер 110, соединенных с компьютером 120 посредством соединения 130. Соединением 130 может быть аналоговое соединение, посредством которого видеоматериал передается в компьютер 120, цифровое соединение, посредством которого обеспечивается сетевое соединение между видеокамерой 110 и компьютером 120, либо соединение 130 может содержать аналоговое соединение и цифровое соединение.

Система 100 может содержать одну или более видеокамер 110, причем каждая видеокамера 110 подключается к компьютеру 100, пользовательский интерфейс 122, образуя тем самым пользовательское подключение к компьютеру 120. Каждая из указанных одной или более видеокамер 110 может подключаться через индивидуальное соединение, может подключаться через общее сетевое соединение или через любое сочетание указанных соединений.

Система 100 содержит по меньшей мере один модуль 120 видеоанализа. Модуль 140 видеоанализа может находиться в компьютере 120 и/или в одной или более видеокамерах 110. Модуль 140 видеоанализа выполняет обработку видеоматериала. В частности, модуль 140 видеоанализа выполняет один или более алгоритмов формирования невизуальных данных из видеоматериала. Невизуальные данные содержат невизуальные данные кадра, описывающие содержание отдельных кадров, например, объекты, идентифицированные в кадре, одно или более свойств объектов, идентифицированных в кадре, и одно или более свойств, относящихся к заранее определенным частям кадра. В число невизуальных данных также могут входить невизуальные данные, зависящие от времени (длящиеся данные), описывающие длящееся во времени содержание между двумя или большим числом кадров. Невизуальные данные, зависящие от времени, могут формироваться из визуальных и/или из невизуальных данных кадра. Невизуальные данные, зависящие от времени, содержат данные, зависящие от времени, например, зависящие от времени свойства объекта, идентифицированного на двух или более кадрах, и зависящее от времени свойство одной или более заранее определенных частей двух или более кадров. В число невизуальных данных кадра может входить количество идентифицированных объектов (в число объектов, к примеру, могут входить люди и/или произвольные части их тел, неживые объекты, животные, транспортные средства либо заданные пользователем и/или возникающие объекты) и одно или более свойств объекта (к примеру, положение объекта, положение произвольной части объекта, размерные свойства объекта, размерные свойства частей и/или идентифицированные особенности объекта) и свойств взаимосвязей (к примеру, положение первого объекта относительно второго объекта или любого другого объекта, который может быть обнаружен в кадре). Объекты могут быть идентифицированы как объекты, появившиеся в видеоматериале, или объекты, исчезнувшие из видеоматериала.

Модуль 140 видеоанализа, находящийся в камере 110, преобразует видеоматериал в видеоданные и невизуальные данные, и камера 110 передает указанные видеоданные и невизуальные данные в компьютер 120 через сеть. Таким образом система 100 переносит обработку видеоматериала на периферию сети, чем минимизирует объем обработки, который должен выполняться компьютером 120.

Компьютер 120 может быть соединен с внешней системой 150, предоставляющей информацию, связанную с видеоматериалом. Например, внешней системой 150 может быть расчетная система пункта продаж, передающая в компьютер информацию о транзакциях пункта продаж. Компьютер 120 может содержать модуль 190 пункта продаж, принимающий информацию о транзакциях пункта продаж и преобразующий указанную информацию в события. Например, модуль 190 пункта продаж может принимать описания данных содержания указанных данных пункта продаж. Модуль 190 пункта продаж формирует события на основании задаваемого пользователем поведения, рассматриваемого далее.

Компьютер 120 содержит машиночитаемый носитель информации, содержащий программное обеспечение для контроля поведения пользователя, которое при исполнении компьютером 120 обеспечивает выполнение операций компьютером 120. Пользовательский интерфейс 122 обеспечивает интерфейс с компьютером 120. Пользовательский интерфейс 122 может подключаться непосредственно к компьютеру 120 или может опосредованно подключаться к компьютеру 120 через сеть пользователя.

Поведение пользователя задается как действие, бездействие, движение, множество проявлений события, длящееся событие (событие, зависящее от времени), внешнее событие или любое сочетание перечисленных элементов. Конкретное поведение пользователя задается и сообщается в компьютер 120.

Действие может содержать касание объекта рукой, например, выбор товара на полке в розничном магазине или получение талона заказа в отделе деликатесов. Действие может содержать взятие объекта, при котором объект размещают или оставляют в определенном местоположении. Действие может содержать перемещение определенного объекта, например, открывание двери, выдвижного ящика или ячейки. Действие может содержать расположение (или изменение положения) части тела, например, помещение руки в карман после совершения операции розничной продажи. Действие может содержать движение в определенное место, прикосновение одного человека к другому человеку и/или перемещение кисти руки, руки, ноги и/или ступни в ходе определенного движения. Действие также может содержать расположение головы в определенном направлении, например, прямой взгляд на кабинет руководителя или в камеру 110 охраны. Другие примеры рассматриваются далее. Действия также могут содержать движения, результатом которых может стать нарушение санитарных норм, например, прикосновения сотрудников отдела деликатесов к своим лицам при выполнении заказов.

Бездействие может содержать невзятие объекта, когда объект уронили или разместили определенным образом, а человек (к примеру, объект) не поднял упавший объект. Бездействие также может содержать невыполнение функции, в которой должно быть совершено действие, например, невыдачу кассового чека, сдачи или денег, затребованных покупателем при выполнении дебетовой транзакции. Бездействие также может содержать непомещение денег, принятых от покупателя, в кассу и/или в щель ящика для денег. Бездействие также может содержать невыполнение инспекции, требующей совершения движения телом или головой, например, проверки пространства под магазинной тележкой в ходе операции розничной продажи. Бездействие также может содержать неприбытие в определенное место или невыполнение определенной функции. Например, чтобы проверить, заперта ли дверь запасного выхода, требуется действие, состоящее в приближении к двери, и действие, состоящее в приложении усилия к двери с целью убедиться в том, что дверь не откроется. При этом поведение пользователя при проверке того, заперта ли дверь, может быть задано как бездействие - невыполнение приближения к двери и/или как бездействие - невыполнение надавливания на дверь. В оздоровительном центре примером бездействия будет непомещение членской карточки в считывающее устройство (признак того, что вошел человек, не имеющий членства в данном центре). Примером бездействия является невыполненное охраной патрулирование заданных зон через заданные интервалы времени или в заданные моменты времени.

Движение может содержать движение, выполняемое электронной системой, например, выход части чека покупате