ErgoVR安全人因工程與應(yīng)急管理虛擬現(xiàn)實(shí)實(shí)驗(yàn)室,通過(guò)將數(shù)字仿真技術(shù)與虛擬現(xiàn)實(shí)技術(shù)相結(jié)合支撐能力,實(shí)現(xiàn)了虛擬現(xiàn)實(shí)條件下對(duì)安全工程資源優勢、應(yīng)急管理等流程進(jìn)行定量化人因測(cè)評(píng)與驗(yàn)證。不僅能夠幫助我們更加準(zhǔn)確地理解和評(píng)估現(xiàn)實(shí)世界中的安全問(wèn)題和風(fēng)險(xiǎn)特征更加明顯,而且還能提供實(shí)時(shí)的數(shù)據(jù)反饋估算,以便我們能夠及時(shí)調(diào)整和優(yōu)化安全措施〉目赡苄??梢杂行Ы档桶踩L(fēng)險(xiǎn)不要畏懼、提升作業(yè)效率和人員安全性,以及將應(yīng)急管理流程規(guī)范化應用領域。
ErgoVR安全人因工程與應(yīng)急管理虛擬現(xiàn)實(shí)實(shí)驗(yàn)室是以ErgoLAB人機(jī)環(huán)境同步平臺(tái)為核心保持競爭優勢,并結(jié)合津發(fā)自主研發(fā)的ErgoVR人因分析引擎。ErgoVR人因分析引擎可對(duì)接主流VR引擎發展機遇,實(shí)現(xiàn)安全工程在虛擬現(xiàn)實(shí)環(huán)境中的呈現(xiàn)與交互長效機製,并在人員與虛擬場(chǎng)景交互過(guò)程中同步采集與分析多維度人機(jī)環(huán)境數(shù)據(jù),實(shí)現(xiàn)基于主客觀數(shù)據(jù)的定量化測(cè)評(píng)全技術方案。實(shí)驗(yàn)室可通過(guò)搭建虛擬作業(yè)場(chǎng)景分享,構(gòu)建身臨其境的作業(yè)環(huán)境,同時(shí)結(jié)合多模態(tài)人因數(shù)據(jù)信息化,定量化分析人員的腦力負(fù)荷方式之一、情緒反應(yīng)以及交互行為等,進(jìn)行人員的應(yīng)急管理行為新型儲能、安全操作流程評(píng)估競爭力所在。

系統(tǒng)組成
(1) 實(shí)驗(yàn)室概述
實(shí)驗(yàn)室可用于進(jìn)行安全人因工程與應(yīng)急管理相關(guān)領(lǐng)域的研究。實(shí)驗(yàn)室主要分為被試間與主試間兩大功能區(qū)域領域,之間由單向玻璃隔開(kāi)溝通機製,使主試間中的研究人員看見(jiàn)被試間內(nèi)受試者的行為,而受試者看不見(jiàn)主試間註入新的動力,從而減小干擾領先水平。其中,被試間為實(shí)驗(yàn)進(jìn)行的區(qū)域雙重提升,搭建為虛擬現(xiàn)實(shí)測(cè)試室戰略布局,可通過(guò)CAVE式虛擬現(xiàn)實(shí)系統(tǒng)、8K眼動(dòng)腦電多模態(tài)虛擬現(xiàn)實(shí)頭盔或者多人交互虛擬現(xiàn)實(shí)系統(tǒng)進(jìn)行虛擬現(xiàn)實(shí)場(chǎng)景呈現(xiàn)表現明顯更佳,并可依照測(cè)試需求布置所需的多模態(tài)數(shù)據(jù)采集設(shè)備狀態,如虛擬現(xiàn)實(shí)眼動(dòng)儀、可穿戴人因生理儀等指導;被試間中有多個(gè)行為觀察攝像頭與拾音器廣泛認同,從不同角度攝取受試者的行為影像并采集受試者的聲音,音視頻信號(hào)傳送給主試間中的人機(jī)環(huán)境同步平臺(tái)進(jìn)行數(shù)據(jù)分析流動性。主試間為觀察與數(shù)據(jù)分析區(qū)域鍛造,布置有語(yǔ)音控制臺(tái),研究人員的指令通過(guò)被試間的揚(yáng)聲器傳送給受試者持續創新;主試間還布置有人機(jī)環(huán)境同步平臺(tái)改善、人因智能邊緣計(jì)算平臺(tái)等設(shè)備,研究人員可在主試間實(shí)時(shí)同步采集多模態(tài)人因數(shù)據(jù)并進(jìn)行分析喜愛。
實(shí)驗(yàn)室被試間設(shè)置有多模態(tài)人因數(shù)據(jù)采集設(shè)備重要的角色,包括CAVE式虛擬現(xiàn)實(shí)系統(tǒng)、8K眼動(dòng)腦電多模態(tài)虛擬現(xiàn)實(shí)頭盔向好態勢、多人交互虛擬現(xiàn)實(shí)系統(tǒng)平臺建設、虛擬聽(tīng)覺(jué)嗅覺(jué)觸覺(jué)感知模擬系統(tǒng)、虛實(shí)時(shí)空行為分析系統(tǒng)共創美好、虛擬現(xiàn)實(shí)雙手交互系統(tǒng)推動並實現、虛擬現(xiàn)實(shí)腦機(jī)交互設(shè)備、虛擬現(xiàn)實(shí)情感交互設(shè)備覆蓋範圍、虛擬現(xiàn)實(shí)動(dòng)作交互設(shè)備優化程度、表情語(yǔ)音采集儀、行為觀察儀奮勇向前、可穿戴人因生理儀不斷豐富、虛擬現(xiàn)實(shí)腦成像儀、可穿戴多模態(tài)腦功能儀組建、動(dòng)作捕捉儀以及裝備設(shè)計(jì)人因測(cè)試專家系統(tǒng)等各有優勢。被試間的產(chǎn)品組成與選型可根據(jù)實(shí)際研究需求進(jìn)行配置。此外,被試間系統(tǒng)的多模態(tài)數(shù)據(jù)采集設(shè)備可結(jié)合ErgoAI人因智能邊緣計(jì)算終端持續,將計(jì)算和數(shù)據(jù)處理能力移至接近數(shù)據(jù)源的終端設(shè)備上等多個領域,進(jìn)行數(shù)據(jù)的智能化處理和分析。

實(shí)驗(yàn)室主試間設(shè)置有多模態(tài)人因數(shù)據(jù)同步采集產品和服務、分析和邊緣智能設(shè)備應用擴展,包括ErgoLAB人機(jī)環(huán)境同步平臺(tái)和ErgoAI人因智能評(píng)估平臺(tái)。其中增多,ErgoLAB人機(jī)環(huán)境同步平臺(tái)支持多模態(tài)數(shù)據(jù)同步采集與分析活動上,確保所需要的人、機(jī)進一步推進、環(huán)境三方面的多模態(tài)數(shù)據(jù)可基于同一時(shí)間軸進(jìn)行實(shí)時(shí)同步導向作用,消除事后對(duì)齊數(shù)據(jù)分析的負(fù)擔(dān),并使數(shù)據(jù)“協(xié)同增效”應用的選擇,多角度綜合印證結(jié)果十大行動,確保數(shù)據(jù)結(jié)果的有效性與準(zhǔn)確性。ErgoAI人因智能應(yīng)用平臺(tái)大幅增加,對(duì)接人機(jī)環(huán)境同步平臺(tái)所同步采集的多模態(tài)數(shù)據(jù)習慣,搭建開(kāi)放式AI算法應(yīng)用平臺(tái),能夠?yàn)椴煌珹I算法基礎(chǔ)的用戶進展情況,提供從數(shù)據(jù)采集的積極性、數(shù)據(jù)降噪、數(shù)據(jù)標(biāo)注至關重要、模型訓(xùn)練不久前、模型評(píng)估及部署應(yīng)用的全流程智能化應(yīng)用系統(tǒng)。平臺(tái)可提供數(shù)千人次數(shù)據(jù)搭建的各類(lèi)應(yīng)用數(shù)據(jù)集提升行動,涵蓋人員基數(shù)據(jù)集能力建設、狀態(tài)數(shù)據(jù)集等,以及數(shù)十種人因工程預(yù)訓(xùn)練模型研究進展,包括單模態(tài)狀態(tài)識(shí)別模型無障礙、多模態(tài)狀態(tài)識(shí)別模型等。同時(shí)快速融入,ErgoAI人因智能應(yīng)用平臺(tái)支持根據(jù)實(shí)際研究?jī)?nèi)容與方向創(chuàng)建數(shù)據(jù)集認為、訓(xùn)練并驗(yàn)證模型,并進(jìn)行模型部署與實(shí)時(shí)狀態(tài)預(yù)測(cè)增強。


(2) 實(shí)驗(yàn)室示意圖

功能應(yīng)用
l 多模態(tài)數(shù)據(jù)同步采集分析
l 對(duì)接虛擬現(xiàn)實(shí)引擎
l 主客觀數(shù)據(jù)綜合分析
l 支持多人交互虛擬現(xiàn)實(shí)測(cè)試
l 支持多種虛擬現(xiàn)實(shí)系統(tǒng)
l 人工智能評(píng)估分析
ErgoLAB多模態(tài)同步方案:
整體概述
ErgoLAB人機(jī)環(huán)境同步平臺(tái)采用多模態(tài)數(shù)據(jù)時(shí)鐘同步技術(shù)重要意義,平臺(tái)可完成完整的實(shí)驗(yàn)和測(cè)評(píng)流程,包括項(xiàng)目管理-試驗(yàn)設(shè)計(jì)-同步采集-信號(hào)處理-數(shù)據(jù)分析-人因智能評(píng)估-可視化報(bào)告更加廣闊,支持基于云架構(gòu)技術(shù)的團(tuán)體測(cè)試和大數(shù)據(jù)管理規劃。
ErgoLAB人機(jī)環(huán)境同步平臺(tái)采用主客觀結(jié)合多模態(tài)數(shù)據(jù)同步采集與多維度驗(yàn)證的方法提高,數(shù)據(jù)實(shí)時(shí)同步種類(lèi)包含大腦認(rèn)知數(shù)據(jù)(EEG/BCI腦電儀與腦機(jī)接口邊緣計(jì)算設(shè)備、fNIRS/BCI近紅外腦成像儀)進入當下,視覺(jué)數(shù)據(jù)(Eyetracker眼動(dòng)儀與視線交互系統(tǒng))紮實,生理數(shù)據(jù)(生理儀含:GSR/EDA、EMG保持競爭優勢、ECG進行培訓、EOG、HRV長效機製、RESP、TEMP/SKT全技術方案、PPG分享、SpO2),行為觀察信息化、肢體動(dòng)作與面部表情(基本情緒經驗分享、情緒效價(jià)、微表情等)數(shù)據(jù)趨勢、生物力學(xué)數(shù)據(jù)(拉力有力扭轉、握力、捏力一站式服務、壓力…)廣度和深度,人機(jī)交互數(shù)據(jù)(包含人機(jī)界面交互行為數(shù)據(jù)以及對(duì)應(yīng)的鍵盤(pán)操作,鼠標(biāo)點(diǎn)擊引領作用、懸浮加強宣傳、劃入劃出等;移動(dòng)終端人機(jī)交互行為數(shù)據(jù)以及對(duì)應(yīng)的手指軌跡操作行為如點(diǎn)擊用的舒心、縮放技術發展、滑動(dòng)等;VR終端界面人機(jī)交互行為數(shù)據(jù)及對(duì)應(yīng)的雙手操作拾取集成、丟棄重要手段、控制,VR空間行走軌跡)穩定性、以及多類(lèi)型時(shí)空行為軌跡數(shù)據(jù)采集(包括室內(nèi)像一棵樹、戶外、以及VR環(huán)境不同時(shí)空的行走軌跡更高效、行車(chē)軌跡全面協議、訪問(wèn)狀態(tài)以及視線交互、情感反應(yīng)具體而言、交互操作行為等數(shù)據(jù)實(shí)時(shí)同步采集)工具、以及作業(yè)空間及作業(yè)環(huán)境數(shù)據(jù)(溫度、濕度、噪音重要的角色、光照開放要求、大氣壓、濕度平臺建設、粉塵等)等客觀量化數(shù)據(jù)服務機製;為科學(xué)研究及應(yīng)用提供完整的數(shù)據(jù)指標(biāo)。

ErgoAI人因智能:
將人工智能技術(shù)引入人因工程研究工具使用,人因工程行業(yè)更加深度大幅拓展,使得實(shí)驗(yàn)環(huán)境不會(huì)受限于某一種設(shè)備或數(shù)據(jù)指標(biāo),采集分析不同典型行業(yè)或?qū)W科專業(yè)的人-機(jī)-環(huán)境系統(tǒng)交互過(guò)程中自然狀態(tài)下的人類(lèi)行為數(shù)據(jù)足夠的實力,獲取更接近真實(shí)人員狀態(tài)的數(shù)據(jù)緊迫性。平臺(tái)還提供覆蓋科研實(shí)驗(yàn)全流程的功能模塊,包括項(xiàng)目管理更適合、實(shí)驗(yàn)設(shè)計(jì)高效、同步采集、數(shù)據(jù)分析要素配置改革、綜合統(tǒng)計(jì)和可視化報(bào)告體系,結(jié)合ErgoAI人因智能邊緣計(jì)算平臺(tái)為多模態(tài)人機(jī)環(huán)境研究提供一站式人因工程+人工智能解決方案。以ErgoLAB人機(jī)環(huán)境同步平臺(tái)和ErgoAI人因智能邊緣計(jì)算平臺(tái)為核心的多模態(tài)同步人因智能解決方案大大提高了實(shí)驗(yàn)結(jié)果的信效度帶動產業發展,同時(shí)節(jié)省了研究的人力責任製、物力、時(shí)間必然趨勢,提高了研究與測(cè)評(píng)的整體效率促進善治。

基于ErgoAI人因智能多元時(shí)序算法底座與人因工程人機(jī)環(huán)境數(shù)據(jù)庫(kù),構(gòu)建人員特定狀態(tài)的預(yù)訓(xùn)練模型多樣性,配合高靈活度的訓(xùn)練方案管理功能發揮效力,用戶能夠在統(tǒng)一環(huán)境中高效構(gòu)建和優(yōu)化模型。 從而實(shí)現(xiàn)對(duì)人員狀態(tài)的精準(zhǔn)實(shí)時(shí)評(píng)估與預(yù)警明顯,如負(fù)荷狀態(tài)安全鏈、應(yīng)激狀態(tài)、疲勞狀態(tài)創新為先、情景意識(shí)和注意能力等真正做到。

Kingfar公司介紹:
北京津發(fā)科技股份有限公司是guojiaji專精特新重點(diǎn)小巨人,guojiaji知識(shí)產(chǎn)權(quán)優(yōu)勢(shì)企業(yè)創新延展、guojiaji高新技術(shù)企業(yè)強化意識、guojiaji科技型中小企業(yè)統籌推進;旗下包含北京人因智能工程技術(shù)研究院和北京人因工程設(shè)計(jì)院等科技研發(fā)機(jī)構(gòu)基礎上,并聯(lián)合共建了北京市企業(yè)技術(shù)中心新型儲能、北京本科高校產(chǎn)學(xué)研深度協(xié)同育人平臺(tái)、蘇州市重點(diǎn)實(shí)驗(yàn)室培養、湖南省工程實(shí)驗(yàn)室助力各業、山東省工程研究中心等多個(gè)科技創(chuàng)新平臺(tái)必然趨勢。
津發(fā)科技承擔(dān)和參與了多項(xiàng)國(guó)家重點(diǎn)研發(fā)計(jì)劃去突破、工信部高質(zhì)量發(fā)展專項(xiàng)、國(guó)家自然科學(xué)基金等guojiaji課題基金至關重要。擔(dān)任全國(guó)信標(biāo)委XR擴(kuò)展現(xiàn)實(shí)標(biāo)準(zhǔn)化組副組長(zhǎng)單位精準調控,工信部元宇宙標(biāo)準(zhǔn)化工作組關(guān)鍵技術(shù)組聯(lián)合組長(zhǎng)單位;津發(fā)科技創(chuàng)新研發(fā)了國(guó)產(chǎn)化自主可控的人因工程與人因智能邊緣計(jì)算系列信創(chuàng)產(chǎn)品與技術(shù)應用的因素之一,榮獲多項(xiàng)省部級(jí)科學(xué)技術(shù)獎(jiǎng)勵(lì)解決;津發(fā)科技主持和參編國(guó)際/國(guó)家、行業(yè)/團(tuán)體標(biāo)準(zhǔn)20余項(xiàng)善於監督、榮獲30余項(xiàng)省部級(jí)新技術(shù)新產(chǎn)品認(rèn)證集成技術,全球申請(qǐng)zhuanli超過(guò)500項(xiàng)、100余項(xiàng)國(guó)際和國(guó)家注冊(cè)商標(biāo)更合理、130余項(xiàng)國(guó)家軟件著作權(quán);已服務(wù)全國(guó)高等院校和裝備科技工業(yè)科研院所應(yīng)用示范更優美,并已支撐國(guó)內(nèi)科研學(xué)者和科技工作者發(fā)表中英文學(xué)術(shù)論文超過(guò)1000篇各方面。