прогнозирующий человеко-машинный интерфейс с использованием технологии обнаружения взгляда, индикаторов "мертвых" зон и водительского опыта

Формула изобретения

1. Способ предоставления аварийного предупредительного оповещения в транспортном средстве, содержащий этапы, на которых:

- принимают вектор взгляда от водителя с использованием детектора (120) взгляда;

- обнаруживают местоположение ближайшего объекта с использованием датчика (420; 1120a-d) близости, причем упомянутый ближайший объект находится за пределами транспортного средства;

- определяют риск аварии транспортного средства на основе местоположения ближайшего объекта;

- определяют знание водителем обстановки транспортного средства на основе местоположения ближайшего объекта и вектора взгляда; и

- активируют оповещение транспортного средства на основе знания водителем обстановки транспортного средства и риска аварии транспортного средства,

отличающийся тем, что способ дополнительно содержит этапы, на которых:

- собирают информацию водительского опыта от водителя с использованием детектора (120) взгляда и данных вождения транспортного средства, при этом упомянутая информация водительского опыта включает в себя данные записанного времени вождения, данные условия вождения и информацию вектора взгляда; и

- вычисляют уровень водительского опыта на основе информации водительского опыта, причем упомянутый уровень водительского опыта отражает навык вождения водителя, и при этом активация оповещения транспортного средства дополнительно основана на уровне водительского опыта.

2. Способ по п.1, дополнительно содержащий этап, на котором:

- активируют функцию управления автомобилем на основе знания водителем обстановки транспортного средства и риска аварии транспортного средства.

3. Способ по п.2, в котором функцией управления автомобилем является по меньшей мере одна из функции торможения транспортного средства, функции рулевого колеса или функции управления информационно-развлекательной средой.

4. Способ по п.1, в котором определение знания водителем обстановки транспортного средства дополнительно содержит определение того, находится или нет местоположение ближайшего объекта в поле зрения вектора взгляда.

5. Способ по п.1, в котором оповещение транспортного средства содержит первое визуальное оповещение, активируемое выше первого порогового значения, на основе знания водителем обстановки транспортного средства и риска аварии транспортного средства.

6. Способ по п.5, в котором оповещение транспортного средства содержит второе визуальное оповещение, активируемое выше второго порогового значения, на основе знания водителем обстановки транспортного средства и риска аварии транспортного средства.

7. Способ по п.6, в котором оповещение транспортного средства содержит слуховое оповещение, активируемое выше третьего порогового значения, на основе знания водителем обстановки транспортного средства и риска аварии транспортного средства.

8. Способ по п.1, в котором ближайшим объектом является по меньшей мере одно из второго транспортного средства, неподвижного объекта или разделения полос движения.

9. Способ по п.1, дополнительно содержащий обнаружение скорости ближайшего объекта с использованием датчика (420) близости, и при этом определение риска аварии транспортного средства и знания водителем обстановки транспортного средства дополнительно основано на скорости ближайшего объекта.

10. Система предоставления аварийного предупредительного оповещения в транспортном средстве, содержащая:

- детектор (120) взгляда, выполненный с возможностью принимать вектор взгляда от водителя;

- датчик (420; 1120a-d) близости, выполненный с возможностью обнаруживать местоположение ближайшего объекта, причем упомянутый ближайший объект находится за пределами транспортного средства;

- электронный блок (410; 810; 1110) управления, выполненный с возможностью определять риск аварии транспортного средства на основе местоположения ближайшего объекта и определять знание водителем обстановки транспортного средства на основе местоположения ближайшего объекта и вектора взгляда; и

- причем электронный блок (410; 810; 1110) управления дополнительно выполнен с возможностью активировать оповещение транспортного средства на основе знания водителем обстановки транспортного средства и риска аварии транспортного средства,

отличающаяся тем, что система дополнительно содержит:

- систему водительского опыта, выполненную с возможностью собирать информацию водительского опыта от водителя с использованием детектора (120) взгляда и данные вождения транспортного средства, при этом упомянутая информация водительского опыта включает в себя данные записанного времени вождения, данные условия вождения и информацию вектора взгляда, и определять уровень водительского опыта на основе информации водительского опыта, причем упомянутый уровень водительского опыта отражает навык вождения водителя, и при этом активация оповещения транспортного средства дополнительно основана на уровне водительского опыта.

11. Система по п.10, в которой электронный блок (410; 810; 1110) управления дополнительно выполнен с возможностью активировать функцию управления автомобилем на основе знания водителем обстановки транспортного средства и риска аварии транспортного средства.

12. Система по п.11, в которой функцией управления автомобилем является по меньшей мере одно из функции торможения транспортного средства, функции рулевого колеса или функции управления информационно-развлекательной средой.

13. Система по п.10, в которой определение знания водителем обстановки транспортного средства дополнительно основано на том, находится или нет местоположение ближайшего объекта в поле зрения вектора взгляда.

14. Система по п.10, в которой оповещение транспортного средства содержит первое визуальное оповещение, активируемое выше первого порогового значения, на основе знания водителем обстановки транспортного средства и риска аварии транспортного средства.

15. Система по п.14, в которой оповещение транспортного средства содержит второе визуальное оповещение, активируемое выше второго порогового значения, на основе знания водителем обстановки транспортного средства и риска аварии транспортного средства.

16. Система по п.15, в которой оповещение транспортного средства содержит слуховое оповещение, активируемое выше третьего порогового значения, на основе знания водителем обстановки транспортного средства и риска аварии транспортного средства.

17. Система по п.10, в которой ближайшим объектом является по меньшей мере одно из второго транспортного средства, неподвижного объекта или разделения полос движения.

18. Система по п.10, в которой датчик (420; 1120a-d) близости дополнительно выполнен с возможностью обнаруживать скорость ближайшего объекта, и при этом риск аварии транспортного средства и знание водителем обстановки транспортного средства дополнительно основано на скорости ближайшего объекта.

Описание изобретения к патенту

Родственные заявки

Данная заявка притязает на приоритет предварительной заявки на патент (США) № 61/288200, поданной 18 декабря 2009 года, содержимое которой полностью содержится в данном документе по ссылке.

Область техники, к которой относится изобретение

Примерные варианты осуществления относятся к области техники автомобильных человеко-машинных интерфейсов, а более конкретно, к прогнозирующему человеко-машинному интерфейсу с использованием технологии обнаружения взгляда, индикаторов "мертвых" зон и информации водительского опыта.

Уровень техники

Автомобильная безопасность остается поводом для общего беспокойства автопроизводителей и потребителей. Хотя современные автомобили содержат множество усовершенствований, выполненных с возможностью повышать безопасность пассажира, действия водителя зачастую являются окончательным фактором того, приводит или нет автомобильная авария к повреждениям у пассажиров. Чтобы разрешать эту проблему, изготовители с недавних пор включают системы предотвращения аварий в конструкции автомобилей в попытке уменьшать ошибки водителя и предотвращать возникновение аварий, вместо концентрации на послеаварийных мерах безопасности. Системы предотвращения аварий ранжируются по функциональности от простого предупреждения водителей о неизбежной аварии до принятия управления транспортным средством, чтобы активно предотвращать или смягчать аварию.

Системы предотвращения аварий, тем не менее, имеют внутренне присущие проблемы, которые не допускают их широкое применение. Системы предотвращения аварий по своей природе создают помехи для управления водителем автомобиля. Также интерпретация водителем обстановки, окружающей транспортное средство, заменяется или изменяется посредством собственной интерпретации автомобилем идентичных событий. Существующие системы предотвращения аварий, тем не менее, имеют доступ к гораздо меньшему объему информации, чем компетентный водитель. Как результат, существующие системы предотвращения аварий зачастую предоставляют предупреждения об авариях, о которых водитель знает, что они не произойдут.

Еще чаще нехватка информации об обстановке касательно автомобиля приводит к тому, что система предотвращения аварий предоставляет предупреждение об опасной ситуации при вождении, о которой водитель уже знает. Существующие системы предотвращения аварий не имеют способа получения сведений о том, что водитель знает об обстановке касательно автомобиля. Во многих случаях нет необходимости предупреждать водителя о возможно опасной ситуации при вождении, которая, как уже выяснено, может возникнуть. Как результат, существующие системы предотвращения аварий предоставляют больше предупреждений, чем требуется, и тем самым раздражают водителей. Как результат, многие владельцы автомобилей с такими системами могут игнорировать или полностью деактивировать системы предотвращения аварий, тем самым сводя к нулю их эффективность.

Сущность изобретения

Один вариант осуществления настоящего изобретения содержит прогнозирующий человеко-машинный интерфейс для предотвращения аварий. Этот человеко-машинный интерфейс содержит систему предотвращения аварий и систему обнаружения взгляда. Совместно система предотвращения аварий и система обнаружения взгляда предоставляют возможность комплексных определений надлежащих реакций на опасные ситуации при вождении. Система обнаружения взгляда предоставляет информацию вектора взгляда, указывающую определение местоположения взгляда водителя, в систему предотвращения аварий. Из информации вектора взгляда система предотвращения аварий может определять знание водителем текущей обстановки при вождении. Система предотвращения аварий затем может предоставлять надлежащую реакцию (например, в форме оповещения или предупреждения) на потенциальную аварию транспортного средства на основе обстановки автомобиля и ранее определенного знания водителем обстановки транспортного средства.

Если риски, возникающие вследствие текущей обстановки транспортного средства автомобиля, являются низкими и определяется, что водитель имеет сведения по этим рискам, то система предотвращения аварий может фактически ничего не предпринимать. По мере того как риск аварии возрастает, система предотвращения аварий может предоставлять оповещение, которое варьируется по типу в зависимости от риска. Тип оповещения также зависит от осведомленности водителя об обстановке транспортного средства. В случаях, если определяется, что водитель не имеет знания относительно обстановки автомобиля, и существует высокий риск аварии, выбранный тип оповещения имеет аудио- и/или видеокомпонент, настроенный так, что он сообщает пользователю риска аварии транспортного средства, чтобы предотвращать аварию. Дополнительно, в некоторых вариантах осуществления система предотвращения аварий также может принимать на себя активное управление автомобилем, чтобы предотвращать аварию, в частности, в приведенном непосредственно выше случае, когда риск аварии является наивысшим, и определяется то, что водитель не осознает риск.

В конкретных вариантах осуществления изобретения система предотвращения аварий содержит датчики окружения автомобиля, выполненные с возможностью обнаруживать конкретные ближайшие объекты (например, транспортные средства), чтобы обнаруживать опасные ситуации при вождении. В некоторых вариантах осуществления датчики окружения автомобиля содержат датчики близости, чтобы определять то, есть или нет другой автомобиль непосредственно впереди автомобиля. Система предотвращения аварий в таком случае предупреждает или принимает меры в автомобиле против наезда сзади на находящийся впереди автомобиль. В других вариантах осуществления датчики близости используются для того, чтобы предупреждать или регулировать направление движения автомобиля, чтобы удерживать автомобиль на текущей полосе движения. В других вариантах осуществления датчики близости обнаруживают автомобили в ближайших полосах движения и указывают то, безопасно или нет для автомобиля поворачивать или менять полосу движения.

В других вариантах осуществления система предотвращения аварий дополняется блоком водительского опыта. Блок водительского опыта выполнен с возможностью собирать информацию водительского опыта и использовать эту информацию для того, чтобы определять уровень водительского опыта водителя. Уровень водительского опыта водителя используется для того, чтобы регулировать поведение системы предотвращения аварий. Если определено, что водитель имеет высокий уровень водительского опыта, то система предотвращения аварий будет отображать меньше оповещений и играть менее активную роль в коррекции вождения. Соответственно, если определено, что водитель имеет низкий уровень водительского опыта, то система предотвращения аварий будет отображать больше оповещений и играть более активную роль в коррекции вождения.

Преимущество одного варианта осуществления настоящего изобретения состоит в том, что он включает знание водителем текущей обстановки транспортного средства при определении того, какой тип реакции для предотвращения аварий предоставлять. Это приводит к лучше настроенным оповещениям, которые являются более эффективными при уменьшении частоты и серьезности автомобильных аварий. Дополнительно, лучше настроенные оповещения с большой вероятностью позволяют водителям считать оповещения полезными, а не раздражающими. Следовательно, водители должны в меньшей степени склоняться к тому, чтобы деактивировать системы предотвращения аварий, повышая степень их применения.

Признаки и преимущества, описанные в подробном описании, не являются инклюзивными, и, в частности, множество дополнительных признаков и преимуществ должно быть очевидным для специалистов в данной области техники с учетом чертежей и подробного описания. Более того, следует отметить, что язык, использованный в спецификации, был принципиально выбран с целью удобочитаемости и в учебных целях, и он не предназначен для того, чтобы задавать пределы или ограничивать предмет изучения изобретения.

Краткое описание чертежей

Фиг. 1-3 описывают один вариант осуществления системы обнаружения взгляда, которая предоставляет определение того, куда смотрит водитель, в систему предотвращения аварий.

Фиг. 4 иллюстрирует системную конфигурацию системы торможения для предотвращения столкновений (CMBS) в соответствии с одним вариантом осуществления.

Фиг. 5 иллюстрирует пример работы системы торможения для предотвращения столкновений в соответствии с одним вариантом осуществления.

Фиг. 6 является блок-схемой последовательности операций существующих систем торможения для предотвращения столкновений, в которых технология обнаружения взгляда не используется.

Фиг. 7 является блок-схемой последовательности операций системы торможения для предотвращения столкновений, работающей в сочетании с системой обнаружения взгляда в соответствии с одним вариантом осуществления.

Фиг. 8 иллюстрирует компоновку транспортного средства и схему для прогнозирующего HMI с использованием системы помощи при удержании полосы движения (LKAS) в соответствии с одним вариантом осуществления.

Фиг. 9 является блок-схемой последовательности операций существующих систем помощи при удержании полосы движения, в которых технология обнаружения взгляда не используется.

Фиг. 10 является блок-схемой последовательности операций системы помощи при удержании полосы движения, работающей в сочетании с системой обнаружения взгляда в соответствии с одним вариантом осуществления.

Фиг. 11 иллюстрирует компоновку транспортного средства и схему для прогнозирующего HMI с использованием системы индикации "мертвых" зон (BSI) в соответствии с одним вариантом осуществления.

Фиг. 12 иллюстрирует пример работы существующих систем индикации "мертвых" зон в соответствии с одним вариантом осуществления.

Фиг. 13-14 являются блок-схемами последовательности операций существующих систем индикации "мертвых" зон.

Фиг. 15-20 являются блок-схемами последовательности операций системы индикации "мертвых" зон, работающей в сочетании с системой обнаружения взгляда в соответствии с одним вариантом осуществления.

Фиг. 21 обобщает различные типы оповещений, которые могут быть использованы в системе индикации "мертвых" зон, работающей в сочетании с системой обнаружения взгляда в соответствии с одним вариантом осуществления.

Фиг. 22 иллюстрирует систему считывателя отпечатков пальцев, включенную в кнопку пуска/остановки двигателя в соответствии с одним вариантом осуществления.

Фиг. 23 является блок-схемой последовательности операций системы определения водительского опыта, определяющей уровень водительского опыта с использованием информации вектора взгляда в соответствии с одним вариантом осуществления.

Фиг. 24 иллюстрирует пример дополнительных факторов, которые могут быть рассмотрены при определении уровня водительского опыта в соответствии с одним вариантом осуществления.

Фиг. 25 является блок-схемой последовательности операций для примера использования уровня опыта водителя, чтобы определять то, отображается или нет полезная информация водителю, в соответствии с одним вариантом осуществления.

Фиг. 26 является блок-схемой последовательности операций для примера использования уровня опыта водителя, чтобы определять то, отображается или нет некоторая информация водителю, в соответствии с одним вариантом осуществления.

Чертежи показывают варианты осуществления только в целях иллюстрации. Специалисты в данной области техники должны легко распознавать из последующего описания то, что альтернативные варианты осуществления структур и способов, проиллюстрированных в данном документе, могут использоваться без отступления от принципов, описанных в данном документе.

Подробное описание изобретения

Признаком одного варианта осуществления является прогнозирующий человеко-машинный интерфейс (HMI) для предотвращения аварий. Этот человеко-машинный интерфейс содержит систему предотвращения аварий и систему обнаружения взгляда. Совместно система предотвращения аварий и система обнаружения взгляда предоставляют возможность комплексных определений надлежащих реакций на опасные ситуации при вождении.

Система обнаружения взгляда

Фиг. 1-3 описывают один вариант осуществления системы обнаружения взгляда, которая предоставляет определение того, куда смотрит водитель, в систему предотвращения аварий. Фиг. 1 иллюстрирует систему обнаружения взгляда в соответствии с одним вариантом осуществления. Система обнаружения взгляда содержит вычислительный блок 110 слежения за глазами (или электронный блок управления слежением за глазами (ECU)), инфракрасные (IR) средства 120 подсветки и камеру 120. Все эти элементы электрически соединяются между собой. ECU 110 слежения за глазами выполнен с возможностью управлять IR-средствами подсветки и камерой 120, чтобы захватывать данные взгляда. ECU 110 слежения за глазами дополнительно выполнен с возможностью выполнять вычисление по данным взгляда, принимаемым из камеры 120, чтобы определять вектор взгляда, указывающий местоположение взгляда водителя. Вектор взгляда может быть передан в другие части транспортного средства, а именно в систему предотвращения аварий, по CAN-шине 130 транспортного средства.

Патент (США) 7206435, который полностью включен в данный документ по ссылке, описывает систему и способ для обнаружения взгляда. Система обнаружения взгляда может быть сконструирована посредством ряда различных способов, и этот патент предоставляет один пример того, как эта система может быть сконструирована. В некоторых вариантах осуществления ECU 110 слежения за глазами дополнительно выполнен с возможностью коррелировать вектор взгляда с местоположениями внутри транспортного средства (например, что водитель смотрит на пассажира или в зеркало заднего вида). В одном варианте осуществления ECU 110 слежения за глазами конструируется с использованием процессора, имеющего устройство хранения и/или запоминающее устройство, допускающее сохранение компьютерных программных инструкций, которые при выполнении посредством процессора выполняют различные функции, описанные в данном документе. В некоторых вариантах осуществления ECU 110 слежения за глазами является частью электронного блока управления (ECU) транспортного средства. Фирменное техническое описание "Smart Eye Pro 5.0", которое полностью включено в данный документ по ссылке, также описывает устройство для обнаружения взгляда, которое может быть использовано в соответствии с другим вариантом осуществления изобретения.

IR-средства подсветки и камера 120 используются для того, чтобы создавать и принимать (соответственно) данные взгляда и предоставлять данные взгляда в ECU слежения за глазами. В примерном варианте осуществления по фиг. 1 эти IR-средства подсветки и камера 120 соединяются между собой, тем не менее в других вариантах осуществления они могут быть отдельными. В одном варианте осуществления камера 120 выполнена с возможностью работать в электромагнитном частотном IR-диапазоне. В некоторых вариантах осуществления используется несколько таких камер. ECU 110 слежения за глазами использует данные взгляда для того, чтобы определять вектор взгляда. В некотором варианте осуществления камера системы обнаружения взгляда может видеть через различные типы защитной оптики в различных условиях освещения, чтобы четко отслеживать положение глаз водителя. В некоторых вариантах осуществления другие типы систем используются для того, чтобы обнаруживать направление, которое использует водитель, и может быть использован, например, неинфракрасный свет.

Фиг. 2 иллюстрирует пример системы обнаружения взгляда при работе в транспортном средстве в соответствии с одним вариантом осуществления. В одном варианте осуществления IR-средства подсветки и камера(ы) 120 размещаются на приборной панели, рулевой колонке и/или рулевом колесе, хотя предусмотрено то, что другие положения также могут быть использованы. Фиг. 2 иллюстрирует линию визирования камеры и примерный вектор взгляда для конкретного варианта осуществления.

Фиг. 3 иллюстрирует пример того, как технология обнаружения взгляда функционирует в соответствии с одним вариантом осуществления. В одном варианте осуществления две концентрические окружности 310a и 310b используются для того, чтобы вычислять глазную центральную точку и начальную плоскость для вектора взгляда.

Система предотвращения аварий в сочетании с обнаружением взгляда

Система предотвращения аварий прогнозирующего человеко-машинного интерфейса использует информацию вектора взгляда из системы обнаружения взгляда, чтобы повышать комплексность своего процесса принятия решений. Информация вектора взгляда дает возможность системе предотвращения аварий настраивать свою реакцию в формах оповещений или активного управления автомобилем частично на основе определения того, имеет или нет водитель сведения по опасной обстановке при вождении. Система предотвращения аварий содержит различные виды датчиков близости (например, радар, расположенный в различных частях транспортных средств), которые обнаруживают окружающую обстановку транспортного средства и предоставляют базовую информацию, которая используется в сочетании с вектором взгляда водителя для того, чтобы определять то, следует или нет выдавать оповещения или активировать функции управления автомобилем. Транспортное средство, включающее в себя систему предотвращения аварий и систему обнаружения взгляда, упоминается ниже как "усовершенствованное транспортное средство".

Система предотвращения аварий может выдавать различные виды оповещений и активировать различные функции управления автомобилем в зависимости от типов опасной обстановки при вождении, на которые система предотвращения аварий сконфигурирована реагировать. Примеры опасной обстановки транспортного средства описаны ниже, чтобы иллюстрировать различные варианты осуществления и признаки системы предотвращения аварий. Каждый тип обстановки транспортного средства (или риск аварии транспортного средства) может использовать различные виды датчиков близости для того, чтобы предоставлять данные системы предотвращения аварий, которые она использует в качестве базиса для определения того, какой тип реакции следует предоставлять. Примеры опасной обстановки транспортного средства включают в себя аварии с лобовым столкновением, аварии при смене полосы движения и аварии при удержании полосы движения. Эти примеры, тем не менее, являются просто иллюстративными, и прогнозирующий HMI, описанный в данном документе, также может быть выполнен с возможностью реагировать на другую опасную обстановку без отступления от принципов, описанных в данном документе.

Система торможения для предотвращения столкновений

В одном варианте осуществления система предотвращения аварий содержит систему торможения для предотвращения столкновений (CMBS). Текущие CMBS выдают оповещение и в некоторых случаях тормозят транспортное средство в зависимости от расстояния между транспортным средством водителя и впереди идущим транспортным средством для транспортного средства водителя, а также разности скоростей между двумя транспортными средствами. В примерных вариантах осуществления CMBS использует информацию вектора взгляда, чтобы минимизировать оповещения, когда водитель уделяет внимание дороге, чтобы не допускать выдачу необязательных оповещений.

Фиг. 4 иллюстрирует системную конфигурацию системы торможения для предотвращения столкновений (CMBS) в соответствии с одним вариантом осуществления. CMBS включает в себя радарное устройство 420 и электронный преднатяжитель ремня безопасности (не показан). В одном варианте осуществления радарное устройство 420 является радаром диапазона миллиметровых волн. В варианте осуществления, проиллюстрированном на фиг. 4, радарное устройство 420 размещается спереди транспортного средства, хотя радар также может быть размещен в другом месте на транспортном средстве. Усовершенствованное транспортное средство дополнительно включает в себя вычислительное устройство 410 CMBS (или "ACC/CMBS ECU"), которое включает в себя процессор и устройство хранения и/или запоминающее устройство, допускающее сохранение компьютерных программных инструкций, которые при выполнении посредством процессора выполняют различные функции, описанные в данном документе. ACC/CMBS ECU 410 может быть включен в электронный блок управления (ECU) транспортного средства. Радарное устройство 420 электрически подключено к ACC/CMBS ECU 410 и передает внешнюю информацию положения и скорости транспортного средства в ACC/CMBS ECU.

Фиг. 5 иллюстрирует пример работы системы торможения для предотвращения столкновений в соответствии с одним вариантом осуществления. Как показано на фиг. 5, в одном варианте осуществления радар 420 обнаруживает транспортные средства впереди усовершенствованного транспортного средства и предоставляет информацию в ACC/CMBS ECU 410. ACC/CMBS ECU, в качестве части CMBS и систем предотвращения аварий, предоставляет аудио- и/или визуальное предупреждение водителю, если обнаруживается риск столкновения. Если два транспортных средства продолжают сближаться, CMBS может применять незначительное торможение к усовершенствованному транспортному средству и несильно повышает натяжение ремня безопасности с использованием электронного преднатяжителя ремня безопасности, чтобы предоставлять тактильное предупреждение водителю. Если транспортные средства сближаются даже в большей степени, например, в точке, в которой столкновение неизбежно или почти неизбежно, если действия не были предприняты водителем, то CMBS может активировать сильное торможение в усовершенствованном транспортном средстве и прочно сжимать ремень безопасности с использованием электронного преднатяжителя ремня безопасности, чтобы уменьшать повреждения, вызываемые посредством ударного воздействия.

Фиг. 6 является блок-схемой последовательности операций существующих систем торможения для предотвращения столкновений, в которых технология обнаружения взгляда не используется. Существующие системы обнаруживают то, находится или нет целевое транспортное средство впереди транспортного средства водителя 605, и определяют относительную скорость целевого транспортного средства 610 относительно транспортного средства водителя. Если целевое транспортное средство движется быстрее 615, то оповещение не выдается 625. Если целевое транспортное средство движется медленнее, но в пределах десяти миль в час (например) транспортного средства водителя 620, то оповещение не выдается 625. Если целевое транспортное средство движется более чем на десять миль в час медленнее, чем транспортное средство водителя 630, то существующие системы определяют расстояние до целевого транспортного средства 635 и формируют оповещение 645, если расстояние меньше порогового значения для выдачи оповещения 640. В противном случае 645 оповещения не предоставляются 625. Пороговое значение для выдачи оповещения может варьироваться в зависимости от скорости транспортного средства водителя или разности в скорости между двумя транспортными средствами.

Все оповещения, предоставляемые посредством системы, к примеру, системы, описанной на фиг. 6, являются независимыми от знания водителем обстановки. Здесь, обстановкой являются относительные положения и скорости автомобиля водителя и целевого транспортного средства впереди автомобиля водителя. Даже если водитель хорошо осведомлен о целевом транспортном средстве, то предупреждение будет предоставляться независимо от этого. Это может раздражать водителя, например, если водитель ускоряется, чтобы безопасно менять полосу движения. В этом примере водитель может иметь сведения о том, что он приближается (возможно, в опасной близости) к целевому транспортному средству, но с намерением более безопасной смены полосы движения. В этом примере необязательные предупреждения могут препятствовать возможностям водителя безопасно выполнять смену полосы движения. На основе опыта, к примеру, как указано выше, водитель в итоге игнорирует предупреждающие сообщения или полностью деактивирует предупреждающую систему, тем самым отрицая ее эффективность.

Фиг. 7 является блок-схемой последовательности операций системы торможения для предотвращения столкновений, работающей в сочетании с системой обнаружения взгляда в соответствии с одним вариантом осуществления. CMBS в усовершенствованном транспортном средстве обнаруживает то, находится или нет целевое транспортное средство впереди усовершенствованного транспортного средства 705, и определяет относительную скорость целевого транспортного средства 710 относительно усовершенствованного транспортного средства. Если целевое транспортное средство движется быстрее 715, то оповещение 725 не выдается. Если целевое транспортное средство движется медленнее 720, но в пределах десяти миль в час (например), усовершенствованного транспортного средства, то оповещение не выдается 725. Если целевое транспортное средство движется более чем на десять миль в час медленнее, чем усовершенствованное транспортное средство 730, то CMBS осуществляет связь с системой обнаружения взгляда, чтобы получать определение в отношении того, куда смотрит водитель 735. Если водитель не смотрит вперед на дорогу 740, то CMBS увеличивает значение порогового расстояния для выдачи оповещения (так, что оповещение предоставляется, когда целевое транспортное средство отдалено еще дальше). С другой стороны, если водитель смотрит на дорогу 745, то CMBS поддерживает неизмененным или снижает значение порогового расстояния для выдачи оповещения. Затем система CMBS ECU определяет расстояние до целевого транспортного средства 750 и формирует оповещение 765, если расстояние ниже порогового значения для выдачи оповещения 755. В противном случае 760 оповещение не предоставляется 725.

Посредством включения системы обнаружения взгляда в CMBS системы предотвращения аварий оповещения могут быть настроены согласно знанию водителем обстановки при вождении. Также рассмотрим вышеприведенный пример ускорения водителя для смены полосы движения. В этом случае, если водитель проверяет, насколько близко он находится к впереди идущему транспортному средству при ускорении, с тем чтобы менять полосу движения, оповещение не предоставляется. Посредством ограничения порогового значения, при котором оповещение выдается на основе осведомленности водителя, в целом предоставляется меньше оповещений, повышая эффективность каждого оповещения и стимулируя водителя считать систему предотвращения аварий ценным инструментом, а не раздражающим фактором.

Система помощи при удержании полосы движения

В одном варианте осуществления система предотвращения аварий содержит систему помощи при удержании полосы движения (LKAS). LKAS выдает звуковое и/или визуальное предупреждение, когда изображение камеры указывает, что транспортное средство водителя отклоняется от своей текущей транспортной полосы движения. В примерных вариантах осуществления LKAS использует информацию вектора взгляда, чтобы исключать предупреждения, когда водитель уделяет внимание дороге.

Фиг. 8 иллюстрирует компоновку транспортного средства и схему для прогнозирующего HMI с использованием системы помощи при удержании полосы движения (LKAS) в соответствии с одним вариантом осуществления. LKAS содержит LKAS ECU 810, содержащий процессор и устройство хранения и/или запоминающее устройство, допускающее сохранение компьютерных программных инструкций, которые при выполнении посредством процессора выполняют различные функции, описанные в данном документе. LKAS дополнительно содержит камеру 820, которая, в одном варианте осуществления, размещается в центре усовершенствованного транспортного средства около ветрового стекла. Предусмотрено то, что другие положения камеры и даже несколько камер могут быть использованы. LKAS подключается к шине 130 связи транспортного средства (CAN) и может быть частью ECU транспортного средства. В этом случае LKAS ECU 810 является частью ECU транспортного средства.

Фиг. 9 является блок-схемой последовательности операций существующих систем помощи при удержании полосы движения, в которых технология обнаружения взгляда не используется. В одном примерном варианте осуществления LKAS работает в случаях, когда транспортное средство водителя управляется на прямой дороге или на дороге с изгибом, имеющим радиус 230 метров или более, на скорости транспортного средства между 60 и 100 километров в час (км). Другие варианты осуществления могут работать в других рабочих режимах. Камера обнаруживает разделительные линии 910 полосы движения и определяет на основе расположения камеры относительно разделительных линий полосы движения то, находится или нет транспортное средство в пределах разделительных линий 920 полосы движения. Если транспортное средство находится за пределами разделительных линий 940 полосы движения, то оповещение выдается 960. В противном случае 930 оповещение не выдается 950.

Оповещения, предоставляемые посредством существующих систем, к примеру, системы, описанной на фиг. 9, являются независимыми от знания водителем обстановки. Здесь, обстановка включает в себя положение и ориентацию транспортного средства относительно расположения камеры и компоновки разделительных линий полосы движения. Даже если водитель намеренно медленно меняет полосу движения, то предупреждение предоставляется независимо от этого. В этом примере необязательные предупреждения могут раздражать водителя, приводя к тому, что он игнорирует предупреждения, предоставляемые посредством LKAS, или полностью деактивирует систему.

Фиг. 10 является блок-схемой последовательности операций системы помощи при удержании полосы движения, работающей в сочетании с системой обнаружения взгляда в соответствии с одним вариантом осуществления. В усовершенствованном транспортном средстве камера 820 обнаруживает разделительные линии 1005 полосы движения и определяет то, на основе расположения камеры относительно разделительных линий полосы движения, находится или нет транспортное средство в пределах разделительных линий 1010 полосы движения. Если транспортное средство находится за пределами разделительных линий полосы движения, система 1020 использует детектор взгляда, чтобы определять то, уделяет или нет водитель внимание дороге 1030. Если водитель смотрит вперед на дорогу 1040, то оповещение меньшей интенсивности выдается 1050. Если водитель не смотрит вперед на дорогу 1035, то оповещение 1045 большей интенсивности выдается. Если транспортное средство находится в пределах разделительных линий 1015 полосы движения, то оповещение не предоставляется 1025.

Интенсивность выдаваемого оповещения является относительной, и может предоставляться множество оповещений меньшей и большей интенсивности. Например, оповещение низкой интенсивности может быть только визуальным оповещением, тогда как оповещение высокой интенсивности содержит визуальное оповещение и аудиооповещение. В другом примере оповещением низкой интенсивности может быть вообще отсутствие оповещения, а оповещение высокой интенсивности содержит визуальное и/или аудиооповещение. В других примерах оповещения отличаются на основе громкости или местоположения аудиооповещения либо на основе визуального шаблона, яркости или местоположения визуального оповещения. Местоположение оповещения может быть использовано для того, чтобы привлекать внимание водителя к конкретному местоположению взгляда, например привлекать внимание к левой или правой стороне транспортного средства.

Посредством включения системы обнаружения взгляда в LKAS системы предотвращения аварий оповещения могут быть настроены согласно знанию водителем обстановки при вождении. Также рассмотрим вышеприведенный пример очень медленной смены полосы движения водителем. В этом случае, если водитель смотрит на дорогу, оповещение вообще не предоставляется, либо оповещение низкой интенсивности предоставляется. Посредством ограничения числа предоставляемых оповещений и/или интенсивности оповещения каждое оповещение становится более эффективным, стимулируя водителя считать систему предотвращения аварий ценным инструментом, а не раздражающим фактором.

Смена полосы движения и система индикации "мертвых" зон

В одном варианте осуществления система предотвращения аварий содержит систему индикации "мертвых" зон (BSI). BSI-система предоставляет визуальное или аудиопредупреждение, когда усовершенствованное транспортное средство почти перешло на полосу движения, которая уже занята посредством другого транспортного средства. В примерных вариантах осуществления BSI-система использует информацию вектора взгляда, чтобы ограничивать обстановки, в которых оповещение предоставляется водителю.

Фиг. 11 иллюстрирует компоновку транспортного средства и схему для прогнозирующего HMI с использованием системы индикации "мертвых" зон (BSI) в соответствии с одним вариантом осуществления. В одном варианте осуществления усовершенствованное транспортное средство включает в себя два радарных устройства, направленных влево 1120b и вправо 1120d позади транспортного средства, и два радарных устройства, направленных к положению непосредственно за транспортным средством водителя с левой 1120a и правой 1120c стороны. Радары 1120 подключаются к ECU 1110 индикации "мертвых" зон (BSI). BSI ECU 1110 может быть частью ECU транспортного средства, который подключается к другим датчикам транспортного средства и устройствам через шину 130 данных (CAN-шину транспортного средства). BSI ECU может включать в себя процессор, имеющий устройство хранения и/или запоминающее устройство, допускающее сохранение компьютерных программных инструкций, которые при выполнении посредством процессора выполняют различные функции, описанные в данном документе.

Фиг. 12 иллюстрирует пример работы существующих систем индикации "мертвых" зон в соответствии с одним вариантом осуществления. Фиг. 12 отображает две зоны 1240 оповещений, расположенные в "мертвой" зоне водителя (транспортное средство водителя упоминается как основное транспортное средство 1220). Фиг. 12 также иллюстрирует случаи, в которых оповещение 1210 инициируется и не инициируется посредством существующих BSI-систем. Эти случаи описываются более подробно на фиг. 13 и 14. Например, оповещения 1210 могут быть инициированы посредством вхождения других транспортных средств 1230 или стационарных объектов в зоны 1240 оповещений.

Фиг. 13-14 являются блок-схемами последовательности операций существующих систем индикации "мертвых" зон. В одной такой примерной BSI-системе, если другое "целевое" транспортное средство входит в зону 1305 оповещений, BSI ECU определяет направление, из которого цель приближается 1310. Если целевое транспортное средство приближается спереди 1315, то BSI-система определяет относительную скорость целевого транспортного средства 1325. Если скорость является аналогичной 1330 или превышает 1335 скорость транспортного средства водителя, то оповещение не формируется 1340. Если относительная скорость меньше, чем скорость транспортного средства водителя 1345, то BSI-система определяет то, активирует или нет водитель сигнал поворота своего транспортного средства в направлении целевого транспортного средства 1410. Если да 1420, оповещение типа 2 оповещения формируется 1450, как показано на фиг. 14. Если сигнал поворота не включен в направлении целевого транспортного средства 1430, то оповещение типа 1 оповещения может быть сформировано 1440, как также показано на фиг. 14.

Со ссылкой на фиг. 13 и 14, если целевое транспортное средство входит в зону оповещений со стороны зоны 1350 оповещений, то BSI-система определяет то, включен или нет сигнал поворота транспортного средства водителя в направлении целевого транспортного средства 1410. Если да 1420, оповещение типа 2 оповещения формируется 1450. Если сигнал поворота не включен в направлении целевого транспортного средства 1430, то оповещение типа 2 оповещения может быть сформировано 1440.

Со ссылкой на фиг. 13 и 14, если целевое транспортное средство входит в зону оповещений со стороны зоны оповещений 1320, то BSI-система определяет то, является целевой объект транспортным средством или стационарным объектом 1335. Если это стационарный объект, то оповещение не выдается (не показано). Если это целевое транспортное средство, то BSI ECU определяет относительную скорость целевого транспортного средства относительно транспортного средства водителя, и если скорости являются аналогичными 1360, то оповещение не формируется 1340, хотя в альтернативных вариантах осуществления, если скорость является аналогичной, процесс продолжается на этапе 1 на фиг. 14 и может приводить к формированию оповещения, чтобы предупреждать водителя о том, что транспортное средство вошло в "мертвую" зону водителя. Если скорость целевого транспортного средства ниже скорости транспортного средства водителя 1365, то BSI ECU определяет то, включен или нет сигнал поворота транспортного средства водителя в направлении целевого транспортного средства 1410. Если да 1420, оповещение типа 2 оповещения формируется 1450. Если сигнал поворота не включен в направлении целевого транспортного средства 1430, то оповещение типа 1 оповещения может быть сформировано 1440. В альтернативном варианте осуществления, если скорость целевого транспортного средства меньше скорости транспортного средства водителя, то оповещение не формируется. В одном примерном варианте осуществления оповещение является изображением 1460 индикатора, которое варьируется по интенсивности на основе типа оповещения, тип 1 или тип 2, а также на основе условий окружающего освещения (например, ночное время или дневное время).

Любое оповещение, предоставляемое посредством системы, к примеру, системы, описанной на фиг. 12-14, является независимым от знания водителем обстановки. Здесь, обстановка включает в себя присутствие транспортных средств или объектов в "мертвой" зоне водителя. Необязательные предупреждения могут раздражать водителя, приводя к тому, что он игнорирует предупреждения, предоставляемые посредством BSI-системы, или полностью деактивирует систему.

Фиг. 15-20 являются блок-схемами последовательности операций системы индикации "мертвых" зон, работающей в сочетании с системой обнаружения взгляда в соответствии с одним вариантом осуществления. В этом варианте осуществления BSI-система включает информацию вектора взгляда в свое определение в отношении того, предоставлять или нет оповещение, когда транспортное средство или объект входит в "мертвую" зону водителя. Со ссылкой на фиг. 15, если целевое транспортное средство входит в зону оповещений 1501, BSI ECU определяет направление, из которого целевое транспортное средство приближается 1502. Если целевое транспортное средство приближается к зоне оповещений спереди 1503, то BSI ECU определяет то, находится зона оповещений на водительской стороне или пассажирской стороне 1505.

Если целевое транспортное средство приближается к зоне оповещений спереди и с водительской стороны 1506, BSI ECU определяет относительную скорость целевого транспортного средства по сравнению с усовершенствованным транспортным средством 1517 (фиг. 16). Если скорость целевого транспортного средства является аналогичной 1518 или превышает 1519 скорость основного транспортного средства, то оповещение не выдается 1520. Если скорость целевого транспортного средства меньше скорости усовершенствованного транспортного средства 1521, то BSI ECU, с использованием вектора взгляда, определяет то, куда смотрит водитель 1522. Если водитель смотрит вперед на дорогу или на окно с водительской стороны 1523, то (в отношении #7 на фиг. 19) BSI ECU формирует оповещение 1552, например, тип 1 оповещения, если BSI ECU определяет то, что датчик рулевого управления обнаруживает левый поворот 1550. Если BSI ECU определяет то, что датчик рулевого управления не обнаруживает левый поворот, то BSI ECU формирует оповещение 1553, например, тип 2 оповещения, если BSI ECU определяет 1551, что сигнал левого поворота не включен, и формирует оповещение 1554, например, тип 3 оповещения, если BSI ECU определяет 1551, что сигнал левого поворота включен. Со ссылкой на фиг. 16, если водитель смотрит на пассажирскую область или центральную область 1524, то (в отношении #8 на фиг. 19) BSI ECU формирует оповещение 1552, например, тип 1 оповещения, если BSI ECU определяет то, что датчик рулевого управления обнаруживает левый поворот 1555. Если BSI ECU определяет то, что датчик рулевого управления не обнаруживает левый поворот, то BSI ECU формирует оповещение 1553, например, тип 2 оповещения, если BSI ECU определяет 1556, что сигнал левого поворота не включен, и формирует оповещение 1557, например, тип 4 оповещения, если BSI ECU определяет 1556, что сигнал левого поворота включен.

Если целевое транспортное средство приближается к области оповещений спереди и с пассажирской стороны 1507, BSI ECU определяет относительную скорость целевого транспортного средства по сравнению с усовершенствованным транспортным средством 1525 (фиг. 16). Если скорость целевого транспортного средства является аналогичной 1526 или превышает 1527 скорость основного транспортного средства, то оповещение не выдается 1520. Если скорость целевого транспортного средства меньше скорости усовершенствованного транспортного средства 1528, то BSI ECU с использованием технологии обнаружения взгляда определяет то, куда смотрит водитель 1529. Если водитель смотрит вперед на дорогу или на окно с пассажирской стороны 1530, то (в отношении #9 на фиг. 20) BSI ECU формирует оповещение 1560, например, тип 5 оповещения, если BSI ECU определяет 1558 то, что датчик рулевого управления обнаруживает правый поворот. Если BSI ECU определяет то, что датчик рулевого управления не обнаруживает правый поворот, то BSI ECU формирует оповещение 1553, например, тип 2 оповещения, если BSI ECU определяет 1559, что сигнал правого поворота не включен, и формирует оповещение 1554, например, тип 3 оповещения, если BSI ECU определяет 1559, что сигнал правого поворота включен. Со ссылкой на фиг. 16, если водитель смотрит на окно с водительской стороны или центральную область 1531, то (в отношении #10 на фиг. 20) BSI ECU формирует оповещение 1560, например, тип 5 оповещения, если BSI ECU определяет 1561, что датчик рулевого управления обнаруживает правый поворот. Если BSI ECU определяет то, что датчик рулевого управления не обнаруживает правый поворот, то BSI ECU формирует оповещение 1553, например, тип 2 оповещения, если BSI ECU определяет 1562, что сигнал правого поворота не включен, и формирует оповещение 1563, например, тип 6 оповещения, если BSI ECU определяет 1562, что сигнал правого поворота включен.

Если целевое транспортное средство приближается к области оповещений сзади 1508 и с водительской стороны 1510, то BSI ECU с использованием технологии обнаружения взгляда определяет (в отношении #3 на фиг. 17), куда смотрит водитель 1532. Если водитель смотрит вперед на дорогу или на окно с водительской стороны 1533, то (в отношении #7 на фиг. 19) BSI ECU формирует оповещение 1552, например, тип 1 оповещения, если BSI ECU определяет 1550, что датчик рулевого управления обнаруживает левый поворот. Если BSI ECU определяет то, что датчик рулевого управления не обнаруживает левый поворот, то BSI ECU формирует оповещение 1553, например, тип 2 оповещения, если BSI ECU определяет 1551, что сигнал левого поворота не включен, и формирует оповещение 1554, например, тип 3 оповещения, если BSI ECU определяет 1551, что сигнал левого поворота включен. Со ссылкой на фиг. 17, если водитель смотрит на пассажирскую область или центральную область 1534, то (в отношении #8 на фиг. 19) BSI ECU формирует оповещение 1552, например, тип 1 оповещения, если BSI ECU определяет 1555, что датчик рулевого управления обнаруживает левый поворот. Если BSI ECU определяет то, что датчик рулевого управления не обнаруживает левый поворот, то BSI ECU формирует оповещение 1553, например, тип 2 оповещения, если BSI ECU определяет 1556, что сигнал левого поворота не включен, и формирует оповещение 1557, например, тип 4 оповещения, если BSI ECU определяет 1556, что сигнал левого поворота включен.

Если целевое транспортное средство приближается к области оповещений сзади и с пассажирской стороны 15111, то BSI ECU с использованием технологии обнаружения взгляда определяет (в отношении #4 на фиг. 17), куда смотрит водитель 1535. Если водитель смотрит вперед на дорогу или на окно с пассажирской стороны 1536, то (в отношении #9 на фиг. 20) BSI ECU формирует оповещение 1560, например, тип 5 оповещения, если BSI ECU определяет 1558, что датчик рулевого управления обнаруживает правый поворот. Если BSI ECU определяет то, что датчик рулевого управления не обнаруживает правый поворот, то BSI ECU формирует оповещение 1553, например, тип 2 оповещения, если BSI ECU определяет 1559, что сигнал правого поворота не включен, и формирует оповещение 1554, например, тип 3 оповещения, если BSI ECU определяет 1559, что сигнал правого поворота включен. Со ссылкой на фиг. 17, если водитель смотрит на окно с водительской стороны или центральную область 1537, то (в отношении #10 на фиг. 20) BSI ECU формирует оповещение 1560, например, тип 5 оповещения, если BSI ECU определяет 1560, что датчик рулевого управления обнаруживает правый поворот. Если BSI ECU определяет то, что датчик рулевого управления не обнаруживает правый поворот, то BSI ECU формирует оповещение 1553, например, тип 2 оповещения, если BSI ECU определяет 1562, что сигнал правого поворота не включен, и формирует оповещение 1563, например, тип 6 оповещения, если BSI ECU определяет то, что сигнал правого поворота включен.

Если целевое транспортное средство приближается к области оповещений сбоку 1504 и с водительской стороны 1513, BSI ECU определяет 1538 (в отношении #5 на фиг. 18) то, является целевое транспортное средство фактически транспортным средством или стационарным объектом. Если это транспортное средство, то BSI ECU определяет относительную скорость целевого транспортного средства по сравнению с усовершенствованным транспортным средством. Если скорость целевого транспортного средства является аналогичной или превышает скорость основного транспортного средства 1540, то оповещение не выдается 1520, хотя в альтернативном варианте осуществления оповещения могут выдаваться в этом и аналогичных случаях в данном документе согласно оставшимся тестам, например, того, куда смотрит водитель. Если скорость целевого транспортного средства меньше скорости усовершенствованного транспортного средства 1539, то BSI ECU с использованием технологии обнаружения взгляда определяет то, куда смотрит водитель 1541. Если водитель смотрит вперед на дорогу или на окно с водительской стороны 1542, то (в отношении #7 на фиг. 19) BSI ECU формирует оповещение 1552, например, тип 1 оповещения, если BSI ECU определяет 1550, что датчик рулевого управления обнаруживает левый поворот. Если BSI ECU определяет то, что датчик рулевого управления не обнаруживает левый поворот, то BSI ECU формирует оповещение 1553, например, тип 2 оповещения, если BSI ECU определяет 1551, что сигнал левого поворота не включен, и формирует оповещение 1554, например, тип 3 оповещения, если BSI ECU определяет 1551, что сигнал левого поворота включен. Со ссылкой на фиг. 18, если водитель смотрит на пассажирскую область или центральную область 1543, то (в отношении #8 на фиг. 19) BSI ECU формирует оповещение 1552, например, тип 1 оповещения, если BSI ECU определяет 1555, что датчик рулевого управления обнаруживает левый поворот. Если BSI ECU определяет то, что датчик рулевого управления не обнаруживает левый поворот, то BSI ECU формирует оповещение 1553, например, тип 2 оповещения, если BSI ECU определяет 1556, что сигнал левого поворота не включен, и формирует оповещение 1557, например, тип 4 оповещения, если BSI ECU определяет 1556, что сигнал левого поворота включен.

Если целевое транспортное средство приближается к области оповещений сбоку 1504 и с пассажирской стороны 1516, BSI ECU определяет (в отношении #6 на фиг. 18) то, является целевое транспортное средство фактически транспортным средством или стационарным объектом 1544. Если это транспортное средство, то BSI ECU определяет относительную скорость целевого транспортного средства по сравнению с усовершенствованным транспортным средством. Если скорость целевого транспортного средства является аналогичной или превышает скорость основного транспортного средства 1546, то оповещение 1520 не выдается, хотя в альтернативном варианте осуществления оповещения могут выдаваться в этом и аналогичных случаях в данном документе согласно оставшимся тестам, например, того, куда смотрит водитель. Если скорость целевого транспортного средства меньше скорости усовершенствованного транспортного средства 1545, то BSI ECU с использованием технологии обнаружения взгляда определяет то, куда смотрит водитель 1547. Если водитель смотрит вперед на дорогу или на окно с пассажирской стороны 1548, то (в отношении #9 на фиг. 20) BSI ECU формирует оповещение 1560, например, тип 5 оповещения, если BSI ECU определяет 1558, что датчик рулевого управления обнаруживает правый поворот. Если BSI ECU определяет то, что датчик рулевого управления не обнаруживает правый поворот, то BSI ECU формирует оповещение 1553, например, тип 2 оповещения, если BSI ECU определяет 1559, что сигнал правого поворота не включен, и формирует оповещение 1554, например, тип 3 оповещения, если BSI ECU определяет 1559, что сигнал правого поворота включен. Со ссылкой на фиг. 18, если водитель смотрит на окно с водительской стороны или центральную область 1549, то (в отношении #10 на фиг. 19) BSI ECU формирует оповещение 1560, например, тип 5 оповещения, если BSI ECU определяет 1561, что датчик рулевого управления обнаруживает правый поворот. Если BSI ECU определяет то, что датчик рулевого управления не обнаруживает правый поворот, то BSI ECU формирует оповещение 1553, например, тип 2 оповещения, если BSI ECU определяет 1562, что сигнал правого поворота не включен, и формирует оповещение 1563, например, тип 6 оповещения, если BSI ECU определяет 1562, что сигнал правого поворота включен.

Фиг. 21 обобщает различные типы оповещений, которые могут быть использованы в системе индикации "мертвых" зон, работающей в сочетании с системой обнаружения взгляда в соответствии с одним вариантом осуществления. Наряду с отсутствием предоставления оповещения шесть оповещений на фиг. 21 указывают диапазон возможных реакций для BSI-системы на основе информации обстановки и информации вектора взгляда. Это является отличием от существующих систем, описанных выше, которые могут предоставлять только два различных типа оповещений (третьим считается отсутствие оповещения). Дополнительные оповещения различных типов используются для того, чтобы предоставлять комплексные реакции на внешнюю обстановку автомобиля на основе определенного местоположения взгляда водителя.

В зависимости от опасности, создаваемой для транспортного средства водителя, предоставляемое оповещение может варьироваться в нескольких измерениях. Например, оповещение может быть в аудио- или визуальной форме, оповещение может варьироваться по звуковой или визуальной интенсивности, местоположение аудио- или визуального оповещения может изменяться, и/или оповещение может иметь постоянную или периодическую, или апериодическую форму. Посредством перестановки этих различных переменных для оповещения множество различных типов оповещений возможно. Должно быть очевидным то, что множество других типов оповещений может быть использовано без отступления от рамок изобретения.

BSI-система использует эти различные типы оповещений, чтобы настраивать предоставляемое оповещение согласно обстановке транспортного средства и местоположению взгляда водителя. Например, типы 1 и 4 оповещений предоставляют оповещения с водительской стороны. Тем не менее, то, должны или нет предоставляться эти оповещения, зависит от того, знает или нет водитель внешнюю угрозу. Знание водителем внешней угрозы основано на том, определяется или нет взгляд водителя как смотрение в окно с водительской стороны.

BSI-система с использованием информации вектора взгляда может не только определять то, когда предоставлять оповещение, но также и то, когда не предоставлять оповещение. Таким образом, если водитель уделяет внимание угрозе, воспринимаемой посредством датчиков близости BSI, оповещение не предоставляется. Как результат, BSI-система позволяет сокращать число необязательных предупреждений, предоставляемых водителю.

Система водительского опыта

В некоторых вариантах осуществления человеко-машинный интерфейс дополнительно содержит систему водительского опыта. Система водительского опыта отслеживает вождение водителя, чтобы определять уровень опыта водителя. Уровень опыта водителя отражает навыки вождения водителя. На основе этого уровня опыта система водительского опыта может изменять то, какая информация представляется водителю. Если водитель является неопытным, HMI может предоставлять дополнительные оповещения, а также полезную информацию, чтобы помогать водителю. HMI-система также может блокировать некоторые информационно-развлекательные системы транспортного средства, чтобы способствовать фокусированию водителя на дороге. Напротив, если водитель является опытным, HMI может предоставлять меньше информации, может сокращать число и интенсивность оповещений и не блокирует информационно-развлекательные системы так, как в случае с неопытным водителем.

Фиг. 22 иллюстрирует систему считывателя отпечатков пальцев, включенную в кнопку 2210 пуска/остановки двигателя в соответствии с одним вариантом осуществления. Система водительского опыта принимает сигналы из системы считывателя отпечатков пальцев, чтобы идентифицировать водителя транспортного средства. Идентификационные данные водителя используются для того, чтобы следить за водителем и определять уровень водительского опыта (или показатель уровня опыта).

В одном варианте осуществления система 2210 считывателя отпечатков пальцев может содержать традиционный считыватель отпечатков пальцев, может быть использован, к примеру, DIGITAL PERSONA PRO, который предлагается на рынке компанией DigitalPersona, Inc, Редвуд-Сити, Калифорния. В альтернативных вариантах осуществления другие системы персональной идентификации могут быть использованы для того, чтобы определять идентификационные данные водителя, например, с использованием брелока для ключей или ввода водителем идентификатора. Система водительского опыта может включать в себя процессор, имеющий устройство хранения и/или запоминающее устройство, допускающее сохранение компьютерных программных инструкций, которые при исполнении посредством процессора выполняют различные функции, описанные в данном документе, и могут быть частью электронного блока управления (ECU) транспортного средства.

Фиг. 23 является блок-схемой последовательности операций работы системы водительского опыта, определяющей уровень водительского опыта с использованием информации вектора взгляда в соответствии с одним вариантом осуществления. Система водительского опыта идентифицирует водителя или в качестве известного водителя 2320, или в качестве неизвестного водителя 2315. Если водитель является ранее не известным водителем, система водительского опыта регистрирует водителя в базе данных 2325, которая может храниться локально в устройстве хранения или удаленно, например, на удаленном сервере с использованием беспроводной связи из транспортного средства. Система водительского опыта затем начинает запись данных 2335, чтобы создавать уровень опыта для водителя. Если водитель известен 2320, система водительского опыта извлекает 2330 информацию опыта водителя и уровня и начинает запись данных 2335, чтобы обновлять уровень опыта.

Примеры типа данных, записанных и используемых для того, чтобы создавать показатель уровня опыта, включают в себя время 2340 вождения, т.е. количество времени, которое водитель водит, условия 2345 вождения, к примеру, информацию трафика и прогноз 2350 погоды, который может сопоставляться со временем вождения, чтобы определять то, сколько времени водитель уже водит в различных условиях вождения. Данные условий вождения формируются из датчиков на транспортном средстве, например, стеклоочистителей, термометра, антиблокировочной системы тормозов, скорости, окружающих транспортных средств и их скорости на основе бортового радара. Данные состояния вождения также могут включать в себя информацию из внешних источников, например, из данных трафика и/или прогноза погоды третьей стороны, доступных через сети беспроводной связи, такие как сотовые сети, сети спутниковой связи. Данные вождения также включают в себя информацию взгляда 2355. Все эти данные комбинируются, чтобы обновлять 2360 уровень опыта водителя.

Фиг. 24 иллюстрирует пример дополнительных факторов, которые могут рассматриваться при определении уровня опыта водителя в соответствии с одним вариантом осуществления. Система водительского опыта также может использовать информацию вектора взгляда из системы обнаружения взгляда, чтобы определять уровень водительского опыта. В одном варианте осуществления информация вектора взгляда может быть использована для того, чтобы анализировать количество времени, в течение которого водитель смотрит по сторонам, в сравнении с использованием своего периферического зрения, что, в свою очередь, позволяет указывать величину опыта и навыков, которую имеет водитель. Эта информация может записываться и анализироваться, и включаться как часть (или весь компонент) показателя навыков и водительского опыта. Система обнаружения взгляда также может быть использована для того, чтобы определять количество времени, которое водитель тратит на смотрение в каждое из зеркал транспортного средства, а также время реакции водителя на соседние транспортные средства, если такие транспортные средства могут быть идентифицированы посредством бортовых радарных систем, как описано выше. На фиг. 24 движение глаз водителя-новичка показывает, что водитель фокусируется на элементах, которые не представляют такой важности для безопасной работы транспортного средства, как элементы, на которых фокусируется опытный водитель. Как показано на фиг. 24, глаза опытного водителя смотрят, например, на предстоящий поворот.

Фиг. 25 является блок-схемой последовательности операций примера использования уровня опыта водителя, чтобы определять то, отображается или нет полезная информация водителю, в соответствии с одним вариантом осуществления. В одном варианте осуществления полезная информация предоставляется через модуль HMI-помощи интерфейсного программного обеспечения транспортного средства 2505. В одном примерном варианте осуществления справочная информация может включать в себя справочные "всплывающие меню". Чтобы определять то, сколько полезной информации следует отображать, система водительского опыта сначала идентифицирует уровень опыта водителя 2510. Если уровень опыта является высоким 2515, то система водительского опыта определяет 2520 величину использования HMI-помощи этим конкретным водителем. Если уровень предыдущего использования этой системы является высоким 2525, то система не показывает справочные сообщения 2530, если уровень использования является низким 2535, то только минимальные справочные сообщения показываются 2540. Если уровень водительского опыта является низким 2545 и величина использования HMI-помощи 2550 является низкой 2565, то все сообщения показываются пользователю 2570, а если величина использования этой системы 2550 являться высокой 2555, то только минимальные справочные сообщения показываются 2560. В одном варианте осуществления показатель уровня опыта является детальным, чтобы идентифицировать больше различий между уровнем опыта водителей.

Фиг. 26 является блок-схемой последовательности операций примера использования уровня водительского опыта, чтобы определять то, отображается или нет некоторая информация водителю, в соответствии с одним вариантом осуществления. Система водительского опыта может блокировать вывод информации 2605, чтобы не допускать помех от информации, предоставляемой посредством HMI, информационно-развлекательных систем транспортного средства или предупреждений для привлечения внимания, фокусированию водителя при вождении. В одном варианте осуществления система водительского опыта использует уровень водительского опыта и информацию трафика 2610, чтобы определять то, блокировать или нет доступ или просмотр некоторой информации для водителя. Если водитель имеет высокий уровень опыта 2615, то информация не блокируется 2620. Если уровень водительского опыта является низким 2625, то система водительского опыта (или другой блок в транспортном средстве, например, в ECU) определяет условия трафика 2630. Если условие трафика не интенсивно 2635, то информация не блокируется 2640. Тем не менее, если условия трафика интенсивны 2645, то система водительского опыта идентифицирует погодные условия 2650. Если погодные условия хорошие 2655, то предусмотрены минимальные блокировки системы 2660. Если погодные условия плохие 2665, то больше информации блокируется от водителя 2670.

Предложенная система водительского опыта предоставляет возможность настройки пользователем функций транспортного средства, таких как, например, система предотвращения аварий или HMI, вследствие того факта, что система водительского опыта знает, кто водитель. На основе этих знаний и информации о водительском опыте, а также текущих условий вождения система водительского опыта позволяет расширять способность водителя выполнять задачи вождения. Посредством использования этой информации транспортное средство может уменьшать объем помощи, которую HMI предоставляет водителю, сокращать число предупреждений, предоставляемых посредством системы предотвращения аварий, уменьшать отображение менее важной информации и некоторых функций. Как результат, система водительского опыта позволяет сокращать число отвлечений, предоставляемых водителю.

Другие функции

Включение системы обнаружения взгляда в систему предотвращения аварий обеспечивает возможность наличия нескольких функций. В одном варианте осуществления система предотвращения аварий регулируется на основе измерения когнитивной нагрузки водителя. Известно, что по мере того как когнитивная нагрузка увеличивается, зрачки слегка расширяются в сравнении с ненагруженным состоянием. В одном варианте осуществления система обнаружения взгляда дополнительно выполнена с возможностью измерять расширение глаз водителя, чтобы отслеживать когнитивное состояние водителя. Чтобы устанавливать базовые данные, система обнаружения взгляда записывает размер расширения глаз водителя и сравнивает этот размер с размером, записанным во время других внешних действий. Например, система может считывать данные из датчика окружающего освещения и контролировать текущую рабочую задачу, чтобы начинать устанавливать базовые данные. После того как базовые данные накоплены для водителя, система обнаружения взгляда может сокращать несущественные предупреждения и блокировать комплексные функции, такие как информационно-развлекательные функции, к примеру, поиск музыки в IPOD, когда обнаруживаются периоды высокой когнитивной нагрузки.

В другом варианте осуществления после аварии транспортного средства система обнаружения взгляда дополнительно выполнена с возможностью определять то, находится или нет водитель в сознании. Система должна принимать сигнал столкновения из вспомогательной системы безопасности (SRS), указывающий то, что столкновение произошло. В ответ на прием сигнала столкновения система затем определяет то, открыты или нет глаза водителя. Если система определяет то, что водитель не находится в сознании, система инициирует автоматизированный телефонный вызов с предварительно записанным сообщением в службы экстренной помощи, например, 911. В этом варианте осуществления система обнаружения взгляда работает в сочетании с телефоном, подключенным к системе (через технологию Bluetooth или некоторую аналогичную технологию). В одном варианте осуществления система обнаружения взгляда дополнительно выполнена с возможностью включать информацию местоположения из навигационной системы в предварительно записанное сообщение.

В другом варианте осуществления система обнаружения взгляда может использовать информацию взгляда, чтобы изменять то, где HMI отображает информацию. Например, для оповещений система обнаружения взгляда может принудительно отображать оповещение там, куда смотрит водитель. Например, если водитель смотрит на устройство отображения аудиосистемы, оповещение о низком уровне топлива может перенаправляться так, что оно отображается на устройстве отображения аудиосистемы. Система обнаружения взгляда также может быть выполнена с возможностью изменять информацию, на которую смотрит водитель. Система может увеличивать размер текста и/или значков, на которые смотрит водитель, чтобы повышать их удобочитаемость. Система также может изменять яркость и/или контрастность текста и/или значков, на которые смотрит водитель. В одном варианте осуществления изменения являются незначительными, с тем чтобы не озадачивать или отвлекать водителя.

В другом варианте осуществления система обнаружения взгляда выполнена с возможностью регулировать положения зеркал транспортного средства на основе положения глаз водителя. С использованием информации вектора взгляда система может автоматически регулировать боковые зеркала заднего вида в положения, предлагаемые посредством ассоциации инженеров автомобилестроения (SAE). Система обнаружения взгляда должна реализовать алгоритм размещения зеркал на основе текущей формулы SAE для вычисления видимости зеркал. Предлагаемое положение зеркал может быть использовано в качестве начальной точки для точной регулировки водителем.

Дополнительные соображения

Ссылка в этом подробном описании на "один из вариантов осуществления" или "вариант осуществления" означает, что конкретный признак, структура или характеристика, описанная в связи с вариантом осуществления, включена, по меньшей мере, в один вариант осуществления. Таким образом, появление фразы "в одном варианте осуществления" или "вариант осуществления" в различных местах в этом подробном описании не обязательно всегда указывает один и тот же вариант осуществления.

Некоторые части нижеприведенного подробного описания представляются на основе алгоритмов и символьных представлений операций с битами данных в компьютерном запоминающем устройстве. Эти алгоритмические описания и представления являются средством, используемым специалистами в области обработки данных для того, чтобы наиболее эффективно передавать суть своей работы другим специалистам в данной области техники. Алгоритм представлен здесь и, в общем, задуман как непротиворечивая последовательность этапов (инструкций), приводящая к требуемому результату. Этапы - это то, что требует физической обработки физических величин. Обычно, хотя и не обязательно, эти величины принимают форму электрических, магнитных или оптических сигналов, допускающих хранение, передачу, комбинирование, сравнение и иную обработку. Иногда удобно, главным образом по причинам стандартного использования, упоминать эти сигналы как биты, значения, элементы, символы, знаки, термины, числа и т.п. Кроме того, также иногда удобно упоминать определенные компоновки этапов, требующих физическую обработку или преобразование физических величин либо представлений физических величин как модули или кодирующие устройства, без потери общности.

Тем не менее, все эти и аналогичные термины должны быть ассоциированы с надлежащими физическими величинами и являются просто удобными метками, применяемыми к данным величинам. Если прямо не указано иное, как очевидно из последующего пояснения, следует принимать во внимание, что по всему описанию пояснения, использующие такие термины, как "обработка" или "вычисление", или "расчет", или "определение", или "отображение", или "определение" и т.п., означают действие и процессы компьютерной системы или аналогичного электронного вычислительного устройства (к примеру, конкретной вычислительной машины), которое обрабатывает и преобразует данные, представленные в качестве физических (электронных) величин в запоминающих устройствах компьютерной системы или регистрах либо в других таких устройствах хранения, передачи или отображения информации.

Конкретные аспекты включают в себя этапы и инструкции процесса, описанные в данном документе в форме алгоритма. Следует отметить, что этапы и инструкции процесса могут быть осуществлены в программном обеспечении, микропрограммном обеспечении или аппаратных средствах и при осуществлении в программном обеспечении могут загружаться так, что они постоянно размещаются, а также управляются из различных платформ, используемых посредством множества операционных систем. Вариант осуществления также может заключаться в компьютерном программном продукте, который может выполняться в вычислительной системе.

Примерные варианты осуществления также относятся к устройству для выполнения операций в данном документе. Это устройство может быть специально сконструировано для данных целей, к примеру, как специальный компьютер в транспортном средстве или оно может содержать компьютер общего назначения, выборочно активируемый или реконфигурируемый посредством компьютерной программы, сохраненной в компьютере, который может находиться в транспортном средстве. Такая компьютерная программа может сохраняться на машиночитаемом носителе хранения данных, таком как, но не только, любой тип диска, включающий в себя гибкие диски, оптические диски, CD-ROM, магнитооптические диски, постоянные запоминающие устройства (ROM), оперативные запоминающие устройства (RAM), EPROM, EEPROM, магнитные или оптические карты, специализированные интегральные схемы (ASIC) или любой тип носителей, подходящих для хранения электронных инструкций, каждый из которых соединен с компьютерной системной шиной. Запоминающее устройство может включать в себя любое из вышеуказанных и/или других устройств, которые могут сохранять информацию. Кроме того, компьютеры, упоминаемые в подробном описании, могут включать в себя один процессор или могут быть архитектурами, использующими многопроцессорные конструкции для расширения вычислительных возможностей.

Алгоритмы и изображения, представленные в данном документе, по сути, не связаны ни с одним конкретным компьютером или другим устройством. Различные системы общего назначения также могут быть использованы для программ в соответствии с идеями в данном документе, или может быть удобным конструировать более специализированное устройство, чтобы осуществлять этапы способа. Структура для множества этих систем должна быть очевидной из описания. Помимо этого, примерные варианты осуществления не описываются со ссылкой на какой-либо конкретный язык программирования. Следует принимать во внимание, что множество языков программирования может быть использовано для того, чтобы реализовывать идеи, как описано в данном документе, и все нижеприведенные ссылки на конкретные языки предоставляются для раскрытия сущности реализации и оптимального режима.

Кроме того, язык, использованный в спецификации, был принципиально выбран с целью удобочитаемости и в учебных целях и он не предназначен, чтобы обозначать пределы или ограничивать изобретенный предмет изучения. Соответственно, раскрытие сущности имеет намерение быть иллюстративным, а не ограничивающим объем вариантов осуществления.

Хотя конкретные варианты осуществления и применения проиллюстрированы и описаны в данном документе, следует понимать, что варианты осуществления не ограничиваются точной конструкцией и компонентами, раскрытыми в данном документе, и что различные модификации, изменения и вариации могут быть сделаны в компоновке, работе и деталях способов и устройств без отступления от сущности и объема.