Система и способ управления управляемым транспортным устройством для собранного урожая

Система и способ управления управляемым транспортным устройством для собранного урожая

Иллюстрации

Показать все

Реферат

Область техники

Данное изобретение относится к системе управления управляемым транспортным устройством для собранного урожая на сельскохозяйственной машине, в частности самоходном комбайне. Кроме того, изобретение относится к сельскохозяйственной машине, содержащей систему управления, и к способу управления управляемым транспортирующим устройством сельскохозяйственной машины при помощи системы управления.

Уровень техники

Собранный урожай обычно транспортируют с первой сельскохозяйственной машины, например кормоуборочного комбайна, на вторую сельскохозяйственную машину, например буксируемую трактором тележку, при помощи транспортирующего устройства. Вследствие перемещения сельскохозяйственных машин друг относительно друга транспортирующее устройство выполнено с возможностью регулирования, например, оператором первой или второй сельскохозяйственной машины.

В целях поддержки оператора составлен европейский патент ЕР 2266383 А1, раскрывающий устройство управления, предназначенное для управления передачей сельскохозяйственной культуры с уборочной машины на транспортную машину, при этом транспортная машина содержит погрузочный контейнер. Устройство управления, основываясь на сигналах от сенсорного устройства, распознает уровень заполнения и/или внешние контуры погрузочного контейнера и управляет положением выходного конца разгрузочного устройства по отношению к уборочной машине и/или направлением выброса из разгрузочного устройства, и/или положением транспортной машины с погрузочным контейнером по отношению к уборочной машине таким образом, чтобы погрузочный контейнер постепенно заполнялся собранной культурой. Кроме того, предложено выполнить сенсорное устройство с возможностью распознавания положения второго погрузочного контейнера, и выполнить устройство управления с возможностью автоматического выравнивания разгрузочного устройства по второму погрузочному контейнеру после регистрации в целом достаточного заполнения первого погрузочного контейнера, основываясь на сигналах от сенсорного устройства.

Автоматическое выравнивание транспортирующего устройства имеет недостаток, заключающийся в том, что в условиях запыленности и наличия рассеянных в воздухе частиц культуры сенсорное устройство может оказаться неспособным к выравниванию транспортного устройства должным образом, и в этом случае оператор должен вручную корректировать транспортное устройство, что увеличивает рабочую нагрузку оператора.

Раскрытие изобретения

Таким образом, задачей данного изобретения является разработка системы управления для управляемого транспортного устройства для собранного урожая на сельскохозяйственной машине, в частности самоходном комбайне, что улучшит эксплуатацию транспортного устройства. Еще одной задачей данного изобретения является разработка способа управления управляемым транспортным устройством для собранного урожая на сельскохозяйственной машине, который улучшит эксплуатацию транспортного устройства.

Эту задачу решают системой управления для управляемого транспортного устройства для собранного урожая на сельскохозяйственной машине с признаками, раскрываемыми в п.1, и способом интерактивного управления управляемым транспортным устройством для собранного урожая на сельскохозяйственной машине с признаками, раскрываемыми в п.9. Желаемые варианты осуществления изобретения, дополнительные детали, признаки, характеристики и преимущества упомянутой системы управления и упомянутого способа управления раскрыты в зависимых пунктах формулы.

В общем аспекте данного изобретения система управления управляемым транспортным устройством для собранного урожая на сельскохозяйственной машине, в частности самоходном комбайне, содержит, по меньшей мере, одно устройство формирования трехмерного изображения для захвата реального объекта и для получения массива трехмерных данных для реального объекта, а также сенсорный дисплей для отображения объекта и для приема команд сенсорного ввода. Согласно изобретению система управления выполнена с возможностью генерирования командных сигналов на основе массива трехмерных данных, соответствующих взаимодействию с отображаемым объектом, с целью управления транспортным устройством.

Сельскохозяйственная машина может представлять собой уборочный комбайн, кормоуборочный комбайн, транспортную машину, трактор и/или прицеп для погрузки и транспортировки собранного урожая. Система управления транспортным устройством может быть расположена на сельскохозяйственной машине с транспортным устройством или на другой сельскохозяйственной машине, например тракторе, буксирующем прицеп, который должен быть загружен посредством транспортного устройства. Управляемое транспортное устройство может представлять собой шнековый транспортер уборочного комбайна или выгрузной рукав кормоуборочного комбайна, причем транспортное устройство может содержать регулируемый клапан на его свободном конце, предназначенный для, по меньшей мере, частичного управления транспортировкой собранного урожая. Транспортное устройство может содержать блок управления для управления транспортным устройством, в частности приводом транспортного устройства, причем блок управления может быть выполнен с возможностью подачи управляющих сигналов для перемещения, например, путем поворота и/или наклона, транспортного устройства в желаемое положение для транспортировки собранного урожая. Блок управления может также управлять клапаном на свободном конце транспортного устройства.

Система управления содержит, по меньшей мере, одно устройство формирования трехмерного изображения для захвата реальных объектов в реальном мире с целью создания отображаемого двумерного изображения, с которым можно взаимодействовать. При захвате реального объекта устройство формирования трехмерного изображения, в частности процессор устройства формирования трехмерного изображения, может получать массив трехмерных данных и/или трехмерную карту дальностей для захваченного реального объекта, причем может быть рассчитано расстояние для каждого пикселя устройства формирования трехмерного изображения, причем информация о расстоянии может относиться к относительному расстоянию и/или абсолютному расстоянию. Устройство формирования трехмерного изображения может захватывать реальные объекты в реальном времени. Полученный массив трехмерных данных может содержать информацию о расстоянии и/или трехмерные координаты реального объекта. Расстояние может быть относительным по отношению к системе управления и/или сельскохозяйственной машине и/или в абсолютным, например, в виде трехмерных координат. Информация об абсолютном расстоянии может быть получена при помощи навигационной системы, в частности спутниковой навигационной системы, например глобальной системы позиционирования (GPS). Навигационная система может предоставлять трехмерные координаты, в частности, для системы формирования трехмерного изображения и/или сельскохозяйственной машины, основываясь на которых, можно вычислить трехмерные координаты реального объекта путем определения положения, например расстояния и направления, реального объекта относительно устройства формирования трехмерного изображения и/или сельскохозяйственной машины.

Захваченный реальный объект может быть визуализирован для отображения на устройстве отображения, например, в виде карты дальностей. Визуализация захваченного объекта может осуществляться в форме прямого изображения и/или видео в реальном времени или в виде смоделированного видео и/или смоделированного изображения, подходящего для визуализации собранной информации о расстоянии для оператора системы управления. Для каждого визуализированного и, в частности, отображенного пикселя на устройстве отображения может быть рассчитана соответствующая информация о расстоянии. Пиксель устройства формирования трехмерного изображения может представлять собой наименьшую захватываемую точку разрешения изображения в устройстве формирования изображения, причем пиксель устройства отображения может представлять собой наименьший адресуемый элемент устройства отображения. Разрешение устройства формирования трехмерного изображения может превышать разрешение устройства отображения, причем массив трехмерных данных может соответствовать более высокому разрешению устройства формирования трехмерного изображения.

Устройство отображения может представлять собой многофункциональный дисплей, выполненный с возможностью принимать сенсорный ввод, в частности мультисенсорный ввод, например, вплоть до мультисенсорного ввода пятью пальцами. Многофункциональный дисплей может содержать несколько зон, например, в виде разделенного экрана для независимого отображения информации и независимого приема сенсорного ввода. Многофункциональный дисплей может содержать дополнительные элементы ввода, например кнопки и/или колеса. Устройство отображения может принимать данные от устройства формирования трехмерного изображения с целью отображения, например, захваченного и визуализированного реального объекта и/или виртуального элемента. Объекты, например, в виде прямого видео реального объекта или в виде виртуального элемента, отображенного на устройстве отображения, представляют собой отображаемые объекты, причем массив трехмерных данных соответствует каждому, в частности, захваченному и/или визуализированному отображаемому объекту. Отображаемые объекты могут быть увеличены на устройстве отображения.

Устройство отображения отображает захваченные и визуализированные объекты и может принимать и/или распознавать обратную связь в виде сенсорного ввода, в частности, соответствующего отображаемому объекту, причем сенсорный ввод можно принимать в форме установленных двумерных координат, относящихся к выполненному сенсорному вводу, в частности, выполненному жестовому вводу. Сенсорный ввод может представлять собой несколько различных жестов ввода, причем реакция системы управления на различные жесты ввода может быть предопределена. С отображаемым объектом можно взаимодействовать сенсорным вводом. Взаимодействие с отображаемым объектом можно осуществлять манипулированием рукой с отображаемым объектом, в частности, по меньшей мере, одним пальцем для сенсорного ввода. Например, отображаемый объект может быть выбран, перемен и/или изменен в форме и/или размере. Процесс взаимодействия может быть выведен на устройство отображения в режиме реального времени, что делает возможной интерактивную манипуляцию с отображаемым объектом.

Полученный сенсорный ввод, например выбор отображаемого объекта и/или манипулирование с отображаемым объектом, может быть передан в устройство формирования изображения, например, в виде двумерных координат. Устройство формирования изображения, в частности процессор устройства формирования трехмерного изображения, может зафиксировать полученную обратную связь, например двумерные координаты сенсорного ввода, в виде отображаемого объекта, отображаемого в этих координатах. Устройство формирования трехмерного изображения может оценивать полученную обратную связь и соотносить обратную связь с соответствующим отображаемым объектом и связанным с ним массивом трехмерных данных. Устройство формирования трехмерного изображения может генерировать основанные на массиве трехмерных данных командные сигналы, соответствующие принятому двумерному сенсорному вводу. Командные сигналы могут быть приняты блоком управления управляемого транспортного устройства в качестве входных сигналов для соответствующего управления транспортным устройством, например, дольше оставляя транспортное устройство на прицепе с целью автоматического увеличения уровня собранного урожая в прицепе, или выбирая порядок, в котором несколько прицепов будут автоматически заполняться системой управления. Командные сигналы могут содержать информацию о положении реальных объектов, которая может быть необходима в качестве входных данных для блока управления для правильного расположения транспортного устройства. Отображаемым объектом можно интерактивно манипулировать, причем двумерное манипулирование отображаемым объектом соответствует генерированию трехмерных команд управления. Команды управления могут быть, например, переданы в блок управления транспортного устройства для обеспечения желаемого перемещения транспортного устройства, необходимого, например, для изменения места выгрузки транспортируемой культуры и/или для повышения уровня перегружаемой культуры в прицепе.

Генерирование на основании массива трехмерных данных командных сигналов, соответствующих взаимодействию с отображаемым объектом, для управления транспортным устройством имеет преимущество в том, что оператор может вручную взаимодействовать с визуальной информацией, предоставляемой устройством формирования трехмерного изображения. Визуальная информация позволяет оператору контролировать, например, автоматически, процесс транспортировки собранного урожая, а манипулирование отображаемыми объектами делает возможным прямое взаимодействие, например, с процессом транспортировки и/или устройством, если необходима корректировка или ввод других данных. Таким образом, система управления позволяет легко и эффективно управлять управляемым транспортным устройством, благодаря чему уменьшается стресс и рабочая нагрузка на оператора.

В желаемом варианте осуществления изобретения система управления также выполнена с возможностью генерирования командных сигналов в виде управляющих сигналов для транспортного устройства для непосредственного управления транспортным устройством. Устройство формирования трехмерного изображения может быть непосредственно соединено с управляемым транспортным устройством, в частности, с приводами транспортного устройства, с тем, чтобы непосредственно управлять транспортным устройством. Командные сигналы, генерируемые устройством формирования изображения, в частности, на основе полученного сенсорного ввода, могут представлять собой управляющие сигналы, которые непосредственно управляют приводами транспортного устройства. Например, транспортное устройство или отображаемый поток выбрасываемой собранной культуры можно выбирать при помощи сенсорного ввода, причем движение при сенсорном вводе может приводить к непосредственно связанному движению транспортного устройства и потока выбрасываемой собранной культуры. Это является преимуществом в том, что транспортным устройством может управляться непосредственно устройством формирования трехмерного изображения, что позволяет приводу транспортного устройства более быстро реагировать на движения оператора при сенсорном вводе на устройстве отображения. Кроме того, непосредственное взаимодействие с отображаемым объектом при работе с системой управления дополнительно повышает удобство обращения с системой.

Желательно, чтобы система управления также была выполнена с возможностью распознавания захваченного реального объекта. Система управления может включать в себя запоминающее устройство для хранения справочных данных, соответствующих реальным объектам. Захваченный реальный объект, в частности полученный массив трехмерных данных, соответствующий реальному объекту, можно сравнить с предопределенными справочными данными с тем, чтобы распознать реальный объект, например, является ли он прицепом и/или какой тип имеет этот прицеп. Если захваченный реальный объект распознан, то соответствующие данные объекта, например размеры реального объекта, в частности длина, высота и/или ширина, могут быть привязаны к реальному объекту и/или отображаемому объекту и могут быть предоставлены для управления транспортным устройством. Данные объекта могут быть предварительно сохранены в запоминающем устройстве. Это является преимуществом в том, что обеспечивается эффективная доступность точных данных о реальном объекте, таким образом, повышается точность процесса перегрузки без увеличения рабочей нагрузки на оператора.

В следующем желательном варианте осуществления система управления выполнена с возможностью привязки и/или изменения данных, соответствующих отображаемому объекту. Захваченный реальный объект, в частности полученный массив трехмерных данных, соответствующий реальному объекту, можно сравнить с предопределенными справочными данными с тем, чтобы распознать реальный объект, например, является ли он прицепом и/или какой тип имеет этот прицеп. В случае если захваченный реальный объект, который показан в виде отображаемого объекта на устройстве отображения, не был распознан, оператор может привязать данные объекта, например, полученные из запоминающего устройства, к отображаемому объекту, соответствующему реальному объекту. Отображаемый объект также может быть сгенерирован и отображен для реального объекта, передавшего свое положение в систему управления, например, в виде трехмерных координат. Реальный объект вместе с информацией о своем положении может передавать идентификатор. Идентификатор позволяет идентифицировать реальный объект, например определить тип объекта. Данные объекта, соответствующего реальному объекту, передавшему свое положение и, в частности, идентификатор в систему управления, могут быть извлечены из запоминающего устройства с целью уменьшения количества передаваемых данных. Такой реальный объект может представлять собой, например, другую сельскохозяйственную машину, например транспортную машину или трактор с прицепом. Оператор может исправлять отображаемый объект. Это является преимуществом в том, что можно эффективность перегрузки собранного урожая может быть повышена за счет улучшения наполнения, например, ранее не распознанного прицепа. Данные объекта могут быть изменены, например, в случае если реальный объект был ошибочно распознан или если нужно внести изменения в данные объекта. Привязка и/или изменение данных, соответствующих отображаемому объекту, могут быть осуществлены при помощи сенсорного ввода, в частности жестовым вводом на устройстве отображения, в частности изменением отображаемого объекта. Это является преимуществом в том, что оператор может легко и более эффективно управлять транспортным устройством, что позволяет снизить рабочую нагрузку на оператора.

В более желательном варианте осуществления изобретения система управления выполнена с возможностью генерирования визуальной и/или звуковой обратной связи, в частности сенсорного ввода. Сенсорный ввод, например, для выбора и/или манипулирования отображаемым объектом, может приводить к образованию звуковой и/или визуальной обратной связи, предназначенной для информирования оператора о выполнении желаемого действия. Звуковая и/или визуальная обратная связь может представлять собой визуальную индикацию на устройстве отображения, световой индикатор и/или звуковой сигнал, например тональный сигнал или сообщение. Это является преимуществом в том, что оператор получает четкую обратную связь с введенными им данными.

Желательно, чтобы система управления была выполнена с возможностью генерирования, по меньшей мере, одного виртуального элемента, соответствующего отображаемому объекту. Виртуальный элемент может быть сгенерирован при помощи устройства формирования трехмерного изображения и может быть отображен на устройстве отображения, например, наложением на отображаемый реальный объект. Виртуальным элементом можно интерактивно манипулировать при помощи сенсорного ввода. Отображаемый объект может представлять собой реальный объект, например прямое изображение и/или видео, и/или виртуальный элемент. Виртуальный элемент может быть сгенерирован в соответствии с распознанным и отображенным реальным объектом, например, в виде искусственного изображения реального объекта, символа или графических элементов.

Данные объекта, соответствующие отображаемому реальному объекту, могут содержать, например, информацию о размерах прицепа, максимальной высоте подачи и/или о безопасном расстоянии, показывающем, насколько близко к стенке прицепа транспортное устройство может транспортировать собранный урожай. Виртуальный элемент, изображающий стенки и/или безопасные расстояния для распознанного прицепа, может быть показан в виде отображаемых объектов, виртуальных элементов, наложенных на прямое изображение прицепа. Данные объекта можно изменять, например, в том случае, если реальный объект был распознан ошибочно или если необходимо изменить данные объекта, взаимодействием с виртуальным элементом. Например, безопасные расстояния прицепа, ограничивающие перемещение транспортного устройства, можно изменить их выбором и перемещением при помощи сенсорного ввода, а также расширением или сужением площади, доступной для транспортного устройства для перегрузки урожая, благодаря чему генерируются командные сигналы для блока управления, позволяющие соответственно перемещать транспортное устройство и управлять им. Преимущество виртуального элемента заключается в увеличении информации, которая может быть показана оператору без увеличения рабочей нагрузки. Кроме того, дальнейшие взаимодействия могут быть включены в систему управления, увеличивая разнообразие параметров ввода для оператора.

В желательном варианте осуществления изобретения устройство формирования трехмерного изображения содержит, по меньшей мере, одно электрооптическое устройство измерения дальности, в частности, в виде стереокамеры, лазерной системы обнаружения и измерения дальности и/или камеры, работающей по времени прохождения. Электрооптическое устройство измерения дальности может представлять собой активное и/или пассивное устройство измерения дальности, предназначенное для генерирования интерактивного двумерного изображения захваченного трехмерного реального мира и/или трехмерного реального объекта, показывая, например, расстояние от электрооптического устройства измерения дальности до отдельных точек в картине реального мира. Лазерная система обнаружения и измерения дальности, называемая LIDAR или иногда LADAR (сокращение от Laser Imaging Detection and Ranging), построена по технологии активного оптического дистанционного обнаружения, которая позволяет измерить расстояние до объекта, например земли или реального объекта, освещением цели светом лазера и анализом отраженного света. Работающая по времени прохождения камера, используемая в качестве активного устройства измерения дальности, может определять расстояние на основании известной скорости света, измеряя время прохождения светового сигнала между камерой и реальным объектом для каждой точки изображения. Устройство формирования трехмерного изображения может представлять собой радар или ультразвуковое устройство измерения дальности. Могут быть скомбинированы различные виды устройств формирования трехмерного изображения. Полученный массив трехмерных данных может быть представлен, например, в виде соответствующей карты дальностей, причем карта дальностей содержит значения пикселей, каждое из которых соответствует расстоянию. Карта дальностей может быть визуализирована на основании массива трехмерных данных при помощи устройства формирования трехмерного изображения, обеспечивая тем самым возможность отображения изображения на устройстве отображения для оператора, например, в виде прямого изображения и/или видео реального мира и/или объекта. Стереокамера, будучи пассивным устройством измерения дальности, может получать массив трехмерных данных и соответствующие значения пикселей для реального объекта непосредственно из захваченного изображения. Карта дальностей может быть составлена из отдельных массивов трехмерных данных и/или карт дальности, например, в форме панорамного изображения, причем отдельные карты дальности могут быть получены от одного или нескольких (даже различных) устройств формирования трехмерного изображения. Это является преимуществом в том, что позволяет увеличить поле зрения.

Кроме того, изобретение относится к сельскохозяйственной машине, содержащей, по меньшей мере, одну систему управления, описанную выше. Система управления, описываемая изобретением, позволяет легко и эффективно управлять управляемым транспортным устройством, уменьшая стресс и рабочую нагрузку на оператора.

Еще один аспект данного изобретения относится к способу интерактивного управления, в частности, описанной выше системой управления, управляемым транспортным устройством для собранного урожая на сельскохозяйственной машине, в частности самоходном уборочном комбайне, включающему следующие этапы:

- получение массива трехмерных данных для реального объекта, захваченного устройством формирования трехмерного изображения,

- отображение объекта на сенсорном устройстве отображения,

- получение обратной связи от устройства отображения по результатам сенсорного ввода при взаимодействии с отображаемым объектом,

- генерирование на основании массивов трехмерных данных управляющих сигналов, соответствующих взаимодействию с отображаемым объектом, для управления транспортным устройством.

Устройство формирования трехмерного изображения может захватывать изображение реального объекта в реальном мире, получая массив трехмерных данных для захваченного реального объекта. Массив трехмерных данных может содержать информацию, в частности информацию о положении, о расстоянии от реального объекта до устройства формирования изображения и/или сельскохозяйственной машины. Каждый пиксель захваченного изображения в устройстве формирования изображения может содержать информацию о расстоянии от реального объекта до устройства формирования изображения. Массив трехмерных данных может содержать информацию об относительном и/или абсолютном положении и/или трехмерные координаты. Трехмерные координаты могут быть получены при помощи навигационной системы, в частности спутниковой навигационной системы, например системы глобального позиционирования (GPS). Навигационная система позволяет получить трехмерные координаты, в частности, для системы формирования трехмерного изображения и/или сельскохозяйственной машины, на основе которых можно вычислить трехмерные координаты реального объекта путем определения положения, например расстояния и направления, реального объекта относительно устройства формирования трехмерного изображения и/или сельскохозяйственной машины. Визуализация захваченного реального объекта позволяет получить отображаемый вариант изображения, захваченного устройством формирования изображения. Визуализация реального объекта может осуществляться в форме прямого и/или искусственного изображения и/или видео реального объекта. Это позволяет предоставлять трехмерную информацию, которая может быть легко воспринята оператором сельскохозяйственной машины, управляющим транспортным устройством. Для отображения визуализированного захваченного реального объекта информация может быть передана от устройства формирования изображения на сенсорное устройство отображения. Визуализированный захваченный реальный объект может отображаться в виде отображаемого объекта на устройстве отображения, причем несколько объектов могут отображаться в одной или нескольких зонах устройства отображения по отдельности и/или совместно. Устройство отображения может воспринимать мультисенсорный ввод, в частности, для каждой зоны и/или отображаемого объекта.

С отображаемым объектом можно взаимодействовать прикосновением к сенсорному устройству отображения в области, показывающей отображаемый объект. Под взаимодействием можно понимать выбор отображаемого объекта и/или манипулирование отображаемым объектом, например его формой и/или размерами. Сенсорный ввод зарегистрирован в качестве обратной связи устройством отображения в двумерных координатах. Двумерные координаты обратной связи и взаимодействие с отображаемым объектом передают обратно на устройство формирования трехмерного изображения, причем устройство формирования трехмерного изображения соотносит двумерные координаты с массивом трехмерных данных, соответствующих отображаемому объекту. На основе взаимодействия с отображаемым объектом могут быть сгенерированы командные сигналы, предназначенные для управления транспортным устройством в соответствии с взаимодействием, основываясь на массиве трехмерных данных. Командные сигналы могут быть переданы в качестве входных сигналов на блок управления, управляющий транспортным устройством. Сгенерированные командные сигналы могут содержать информацию, основанную на массиве трехмерных данных и соответствующую сенсорному вводу, например трехмерные координаты выбранного положения или предполагаемого перемещения транспортного устройства, которые впоследствии могут быть переданы в качестве входных сигналов на блок управления, соответствующим образом управляющий транспортным устройством с тем, чтобы выполнить перемещения и/или операцию, предназначенную для взаимодействия с отображаемым объектом. Например, место выгрузки, в котором сбрасывают собранную культуру, на отображаемом объекте, имеющем форму прицепа, может быть выбрано сенсорным вводом, причем двумерные координаты сенсорного ввода передают в устройство формирования изображения, которое соотносит эти двумерные координаты с трехмерными координатами, основываясь на массиве трехмерных данных отображаемого прицепа. Впоследствии эти трехмерные координаты могут быть переданы в качестве входных сигналов на блок управления, управляющий транспортным устройством соответствующим образом, чтобы блок управления мог расположить транспортное устройство в соответствии с местом выгрузки собранного урожая, выбранным оператором.

Генерирование на основании массива трехмерных данных командных сигналов, соответствующих взаимодействию с отображаемым объектом, для управления транспортным устройством имеет преимущество в том, что оператор может вручную взаимодействовать с визуальной информацией, предоставленной устройством формирования трехмерного изображения. Визуальная информация позволяет оператору контролировать, например автоматически, процесс транспортировки собранного урожая, а манипулирование отображаемыми объектами делает возможным прямое взаимодействие, например, с процессом транспортировки и/или устройством, если необходима корректировка или ввод других данных. Таким образом, система управления позволяет легко и эффективно управлять управляемым транспортным устройством, благодаря чему уменьшается стресс и рабочая нагрузка на оператора.

В желательном варианте осуществления изобретения способ дополнительно содержит этап генерирования командных сигналов в виде сигналов управления для непосредственного управления транспортным устройством. Командные сигналы могут быть сгенерированы в виде сигналов управления, которые могут быть переданы непосредственно на, по меньшей мере, один привод транспортного устройства с целью непосредственного управления перемещением транспортного устройства. Таким образом, взаимодействие с отображаемым объектом посредством сенсорного ввода может быть непосредственно преобразовано в управляющие сигналы для прямого управления, по меньшей мере, одним приводом транспортного устройства. Это имеет преимущество в том, что транспортное устройство может управляться непосредственно при помощи устройства формирования трехмерного изображения, что позволяет движениям транспортного устройства более быстро реагировать на сенсорный ввод оператора на устройстве отображения. Например, с отображаемым объектом потока выбрасываемого собранного урожая можно взаимодействовать с помощью сенсорного дисплея, причем поток может быть выбран с помощью жестов ввода и перемещен в другое положение, причем транспортное устройство и поток выбрасываемого собранного урожая реагируют непосредственно и перемещают в соответствии с сенсорным вводом.

В более желательном варианте осуществления изобретения способ дополнительно содержит этап распознавания захваченного реального объекта. Захваченный реальный объект, в частности полученный массив трехмерных данных, соответствующий реальному объекту, можно сравнить с предопределенными справочными данными с целью распознавания реального объекта. Справочные данные могут быть предварительно сохранены в запоминающем устройстве. При распознавании реального объекта путем сравнения полученного массива трехмерных данных со справочными данными соответствующие данные объекта могут быть привязаны к захваченному реальному объекту и предоставлены управления транспортным устройством. Данные объекта могут быть предварительно сохранены в запоминающем устройстве. Данные объекта могут представлять собой, например, точные размеры реального объекта, например высоту, ширину, длину, грузоподъемность, уровень заполнения и т.д. Это имеет преимущество в том, что становится возможным эффективный доступ к точным данным о реальном объекте в целях управления процессом перегрузки и/или транспортным устройством, в результате чего повышается точность процесса перегрузки без увеличения нагрузки на оператора.

В еще более желательном варианте осуществления изобретения способ дополнительно содержит этап хранения и/или извлечения справочных данных, в частности, для сравнения полученного массива трехмерных данных со справочными данными. Справочные данные могут быть извлечены и использованы для сравнения полученных массивов трехмерных данных захваченного реального объекта с предопределенными данными. В случае если реальный объект не удается распознать, в частности, если справочные данные недоступны, полученный массив трехмерных данных захваченного и нераспознанного реального объекта могут быть сохранены, например, в запоминающем устройстве, в качестве справочных данных. Это может иметь место в том случае, если для погрузки собранного урожая используют новый тип прицепа. Сохраненные справочные данные могут быть дополнены впоследствии более точной информацией о реальном объекте, например, из спецификации к реальному объекту. Это имеет преимущество в том, что нераспознанный реальный объект может потребоваться сохранить только один раз, и он будет автоматически распознаваться впоследствии, уменьшая, тем самым, рабочую нагрузку на оператора.

В следующем желательном варианте осуществления изобретения способ дополнительно включает этап привязки и/или изменения данных, соответствующих отображаемому объекту. Данные, соответствующие отображаемому объекту, могут представлять собой массив трехмерных данных, данные объекта и/или справочные данные. В случае если захваченный реальный объект, показанный в виде отображаемого объекта, не удалось распознать, оператор может привязать данные объекта к отображаемому объекту. Привязанные данные объекта могут быть получены, например, из запоминающего устройства. В случае если захваченный реальный объект, показанный в виде отображаемого объекта, не удалось распознать корректно, оператор может изменить данные объекта, привязанные к отображаемому объекту, например, путем извлечения правильных данных объекта из запоминающего устройства и/или путем изменения данных объекта, например, с помощью сенсорного ввода, на устройстве отображения. Отображаемый объект может также быть сгенерирован и отображен для реального объекта, передавшего свое положение в систему управления, например, в виде трехмерных координат. Реальный объект может передавать идентификатор вместе с информацией о своем положении. Данные объекта, соответствующие реальному объекту, передавшему свое положение в систему управления, могут быть извлечены из запоминающего устройства с тем, чтобы уменьшить количество передаваемых данных. Такой реальный объе