由于近幾年人工智能、芯片技術的發展，自動駕駛被資本市場越炒越熱。目前大部分車企正在朝著完全自動駕駛努力，大部分已經落地的無人駕駛技術仍然是L2與L3級。同時，汽車行業也逐漸在汽車上集成了輔助自動駕駛和智能助手等功能，讓駕駛變得更加輕松快捷，使人們將從枯燥的駕駛操作和乘車體驗中解脫出來，讓汽車座艙成為人們駕駛、休息、娛樂、工作的地方。

其中，汽車座艙的智能視覺監控系統 In-cabin Monitoring System 簡稱（IMS）是智能座艙中必不可少的功能。

智能視覺監控系統 In-cabin Monitoring System

汽車座艙智能視覺監控系統（IMS）包含駕駛員監控系統（DMS）、乘客監測系統（OMS），手勢識別、體征監測、遠程監控等功能。其中DMS和OMS即將成為智能座艙系統的必備功能，歐盟新車安全評鑒協會（Euro NCAP）此前發布未來智能汽車發展路線圖：歐洲市場的新車必須在2022年7月開始配備駕駛員監測系統（DMS）；從2022年開始搭載乘員監控系統(OMS)，尤其是兒童檢測的新車，將得到額外的系統安全評級分數。此外2024年起進入標配行列。

這一規定使得DMS和OMS一下子成為近幾年智能汽車的萬金油。

DMS 的核心功能包括疲勞監測 （打哈欠、閉眼次數和時長等）、危險行為監測（吃東西、打電話、抽煙、和后座聊天等）、駕駛員是否喪失行為能力、注意力、視野范圍監測、人臉識別包括身份識別、情感識別、特征識別、其他如事故、救援等。這些功能的核心訴求就是保證駕駛員的安全駕駛。

OMS是優惠活動大廳通過智能座艙對車內乘客的感知與識別乘客的行為是否安全。其中包括安全帶警示功能、判斷車內乘客是否已經安全坐好，是否有兒童或寵物單獨遺留，乘客是否系安全帶等。OMS是從監控乘客的角度來進一步提升乘坐汽車的安全性能。

下圖是Euro NCAP發布的歐盟五星安全認證車輛需要具備的DMS和OMS功能的要求：

DMS/OMS 核心技術

DMS和OMS系統包括攝像頭、芯片傳感器、深度學習識別算法以及車載信息娛樂系統。

智能座艙系統一般優惠活動大廳通過攝像頭采集駕駛員的面部表情、精神狀態、行為舉止上傳到圖像信息處理器，在圖像信息處理器中對采集的視頻進行解碼。優惠活動大廳通過深度學習算法的分析。得到目前駕駛員的狀態，一般深度學習算法都是集成于芯片系統，之后將分析的結果優惠活動大廳通過車載信息系統進行展示給駕駛員或者乘客。一般展示方式包括優惠活動大廳通過音頻、圖像、文字在儀表、中控屏、揚聲器等方式，也有優惠活動大廳通過安全帶震動（體感）、氣味（嗅覺）與用戶進行信息傳遞。

DMS和OMS中分析駕駛員或者乘客的精神狀態的核心算法一般是深度學習視覺檢測算法。其流程圖如下所示：

數據開源 DMS 駕駛員行為數據集

作為DMS和OMS核心算法—深度學習人臉檢測，需要大量實景數據訓練，由于車載環境的特殊性，普通的圖像識別的數據無法完全滿足車載環境的算法的訓練，因此需要專業的團隊收集、清洗、整理、標注車載環境的CV數據以作為訓練DMS/OMS的核心分析算法的數據。

近日，首次發布開源DMS駕駛員行為數據集。DMS_MD數據集針對性采集了19+種駕駛員的典型危險交互行為，分別標注了人臉區域、人頭區域及交互物品區域。在駕駛員軀體遮擋安全帶的情況，也針對安全帶區域特別做了標注；同時，面向疫情背景下的駕駛員面部遮擋場景，針對性采集了面部遮擋下駕駛員的行為數據，特別是疲勞駕駛數據。DMS_MD數據集采用單幀和連續幀結合的標注方式，是DMS領域目標檢測和行為檢測的高價值數據產品，也是DMS算法落地的試金石和加速器。數據詳情如下：

數據下載 https://magichub.com/datasets/driver-behaviors-dataset-for-dms/

更多開源數據歡迎訪問 MagicHub 開源社區 https://magichub.com/

榮獲 蓋世汽車 - 智能座艙優質供應商

作為全球領先AI數據解決方案，致力于為業界提供全領域一站式的AI數據產品，數據類型涵蓋語音、文本、圖像、音視頻多模態。

憑借過硬的產品技術、良好的市場反響以及企業的綜合發展潛力，在12月6日蓋世汽車舉辦的「2022智能座艙優質供應商」證書授予儀式中，成為DMS/OMS細分領域的「智能座艙DMS與OMS優質供應商」，并成功被蓋世汽車收入「2022蓋世汽車優質供應商推薦名錄」。

更多數據需求歡迎咨詢 business@magicdatatech.com 或致電 400-900-5251