ErgoVR核電人因工程虛擬現(xiàn)實(shí)實(shí)驗(yàn)室,基于“人-機(jī)-環(huán)境”和“人-信息-物理"系統(tǒng)理論生產製造,適用虛擬現(xiàn)實(shí)環(huán)境下控制室設(shè)計與功能分配開展試點、操作員可靠性研究、人機(jī)接口開發(fā)與驗(yàn)證共同、控制室的人機(jī)工效驗(yàn)證等研究推進一步,可有效的降低核電站的人因風(fēng)險,提高核電站的人機(jī)系統(tǒng)的可靠性簡單化。
ErgoLAB核電人因工程虛擬現(xiàn)實(shí)實(shí)驗(yàn)室是以ErgoLAB人機(jī)環(huán)境同步平臺為核心實際需求,結(jié)合ErgoVR人因分析引擎,能夠?qū)崿F(xiàn)在多種任務(wù)下多模態(tài)數(shù)據(jù)的同步采集與綜合分析優勢,包括生理善謀新篇、腦電、腦成像便利性、動作姿態(tài)方法、行為、物理環(huán)境等數(shù)據(jù)提供有力支撐,為人機(jī)接口的設(shè)計切實把製度、操作流程設(shè)計評價以及相關(guān)研究提供了完整的解決方案。
系統(tǒng)組成
(1) 實(shí)驗(yàn)室概述
實(shí)驗(yàn)室可用于進(jìn)行核電人因工程相關(guān)研究自行開發。實(shí)驗(yàn)室主要分為被試間與主試間兩大功能區(qū)域進行部署,之間由單向玻璃隔開,使主試間中的研究人員看見被試間內(nèi)受試者的行為應用情況,而受試者看不見主試間保護好,從而減小干擾。其中表現,被試間為實(shí)驗(yàn)進(jìn)行的區(qū)域特點,搭建為虛擬現(xiàn)實(shí)測試室,可通過CAVE式虛擬現(xiàn)實(shí)系統(tǒng)結論、8K眼動腦電多模態(tài)虛擬現(xiàn)實(shí)頭盔或者多人交互虛擬現(xiàn)實(shí)系統(tǒng)進(jìn)行虛擬現(xiàn)實(shí)場景呈現(xiàn)和諧共生,并可依照測試需求布置所需的多模態(tài)數(shù)據(jù)采集設(shè)備,如虛擬現(xiàn)實(shí)眼動儀適應性強、可穿戴人因生理儀等技術交流;被試間中有多個行為觀察攝像頭與拾音器,從不同角度攝取受試者的行為影像并采集受試者的聲音相對較高,音視頻信號傳送給主試間中的人機(jī)環(huán)境同步平臺進(jìn)行數(shù)據(jù)分析資源配置。主試間為觀察與數(shù)據(jù)分析區(qū)域,布置有語音控制臺姿勢,研究人員的指令通過被試間的揚(yáng)聲器傳送給受試者相互融合;主試間還布置有人機(jī)環(huán)境同步平臺、人因智能邊緣計算平臺等設(shè)備綠色化,研究人員可在主試間實(shí)時同步采集多模態(tài)人因數(shù)據(jù)并進(jìn)行分析不同需求。
實(shí)驗(yàn)室被試間設(shè)置有多模態(tài)人因數(shù)據(jù)采集設(shè)備,包括CAVE式虛擬現(xiàn)實(shí)系統(tǒng)保持穩定、8K眼動腦電多模態(tài)虛擬現(xiàn)實(shí)頭盔總之、多人交互虛擬現(xiàn)實(shí)系統(tǒng)、虛擬聽覺嗅覺觸覺感知模擬系統(tǒng)支撐作用、虛實(shí)時空行為分析系統(tǒng)研學體驗、虛擬現(xiàn)實(shí)雙手交互系統(tǒng)、虛擬現(xiàn)實(shí)腦機(jī)交互設(shè)備最為突出、虛擬現(xiàn)實(shí)情感交互設(shè)備落實落細、虛擬現(xiàn)實(shí)動作交互設(shè)備相結合、表情語音采集儀、行為觀察儀製高點項目、可穿戴人因生理儀為產業發展、虛擬現(xiàn)實(shí)腦成像儀、可穿戴多模態(tài)腦功能儀有所增加、動作捕捉儀以及裝備設(shè)計人因測試專家系統(tǒng)等各項要求。被試間的產(chǎn)品組成與選型可根據(jù)實(shí)際研究需求進(jìn)行配置。此外越來越重要的位置,被試間系統(tǒng)的多模態(tài)數(shù)據(jù)采集設(shè)備可結(jié)合ErgoAI人因智能邊緣計算終端新技術,將計算和數(shù)據(jù)處理能力移至接近數(shù)據(jù)源的終端設(shè)備上,進(jìn)行數(shù)據(jù)的智能化處理和分析順滑地配合。

實(shí)驗(yàn)室主試間設(shè)置有多模態(tài)人因數(shù)據(jù)同步采集深入、分析和邊緣智能設(shè)備,包括ErgoLAB人機(jī)環(huán)境同步平臺和ErgoAI人因智能評估平臺高質量發展。其中全方位,ErgoLAB人機(jī)環(huán)境同步平臺支持多模態(tài)數(shù)據(jù)同步采集與分析,確保所需要的人更默契了、機(jī)先進技術、環(huán)境三方面的多模態(tài)數(shù)據(jù)可基于同一時間軸進(jìn)行實(shí)時同步,消除事后對齊數(shù)據(jù)分析的負(fù)擔(dān)不合理波動,并使數(shù)據(jù)“協(xié)同增效”宣講手段,多角度綜合印證結(jié)果,確保數(shù)據(jù)結(jié)果的有效性與準(zhǔn)確性積極拓展新的領域。ErgoAI人因智能應(yīng)用平臺配套設備,對接人機(jī)環(huán)境同步平臺所同步采集的多模態(tài)數(shù)據(jù),搭建開放式AI算法應(yīng)用平臺相對開放,能夠?yàn)椴煌珹I算法基礎(chǔ)的用戶推進高水平,提供從數(shù)據(jù)采集、數(shù)據(jù)降噪拓展應用、數(shù)據(jù)標(biāo)注生產創效、模型訓(xùn)練、模型評估及部署應(yīng)用的全流程智能化應(yīng)用系統(tǒng)管理。平臺可提供數(shù)千人次數(shù)據(jù)搭建的各類應(yīng)用數(shù)據(jù)集優化上下,涵蓋人員基數(shù)據(jù)集、狀態(tài)數(shù)據(jù)集等模樣,以及數(shù)十種人因工程預(yù)訓(xùn)練模型生產體系,包括單模態(tài)狀態(tài)識別模型、多模態(tài)狀態(tài)識別模型等。同時能力和水平,ErgoAI人因智能應(yīng)用平臺支持根據(jù)實(shí)際研究內(nèi)容與方向創(chuàng)建數(shù)據(jù)集覆蓋、訓(xùn)練并驗(yàn)證模型,并進(jìn)行模型部署與實(shí)時狀態(tài)預(yù)測明確相關要求。


(2) 實(shí)驗(yàn)室示意圖

功能應(yīng)用
l 多模態(tài)數(shù)據(jù)同步采集分析
l 主客觀數(shù)據(jù)綜合分析
l 無縫對接虛擬現(xiàn)實(shí)引擎
l 支持多人交互虛擬現(xiàn)實(shí)測試
l 人工智能評估分析
ErgoLAB多模態(tài)同步方案:
整體概述
ErgoLAB人機(jī)環(huán)境同步平臺采用多模態(tài)數(shù)據(jù)時鐘同步技術(shù)重要意義,平臺可完成完整的實(shí)驗(yàn)和測評流程,包括項目管理-試驗(yàn)設(shè)計-同步采集-信號處理-數(shù)據(jù)分析-人因智能評估-可視化報告深化涉外,支持基于云架構(gòu)技術(shù)的團(tuán)體測試和大數(shù)據(jù)管理。
ErgoLAB人機(jī)環(huán)境同步平臺采用主客觀結(jié)合多模態(tài)數(shù)據(jù)同步采集與多維度驗(yàn)證的方法生產製造,數(shù)據(jù)實(shí)時同步種類包含大腦認(rèn)知數(shù)據(jù)(EEG/BCI腦電儀與腦機(jī)接口邊緣計算設(shè)備開展試點、fNIRS/BCI近紅外腦成像儀),視覺數(shù)據(jù)(Eyetracker眼動儀與視線交互系統(tǒng))共同,生理數(shù)據(jù)(生理儀含:GSR/EDA推進一步、EMG、ECG充分發揮、EOG選擇適用、HRV、RESP設計、TEMP/SKT業務指導、PPG、SpO2)就此掀開,行為觀察長足發展、肢體動作與面部表情(基本情緒、情緒效價穩步前行、微表情等)數(shù)據(jù)結構不合理、生物力學(xué)數(shù)據(jù)(拉力、握力逐步改善、捏力意見征詢、壓力…),人機(jī)交互數(shù)據(jù)(包含人機(jī)界面交互行為數(shù)據(jù)以及對應(yīng)的鍵盤操作大大提高,鼠標(biāo)點(diǎn)擊的必然要求、懸浮、劃入劃出等有很大提升空間;移動終端人機(jī)交互行為數(shù)據(jù)以及對應(yīng)的手指軌跡操作行為如點(diǎn)擊運行好、縮放、滑動等可能性更大;VR終端界面人機(jī)交互行為數(shù)據(jù)及對應(yīng)的雙手操作拾取部署安排、丟棄、控制技術,VR空間行走軌跡)推廣開來、以及多類型時空行為軌跡數(shù)據(jù)采集(包括室內(nèi)推動、戶外、以及VR環(huán)境不同時空的行走軌跡資源配置、行車軌跡信息、訪問狀態(tài)以及視線交互、情感反應(yīng)大力發展、交互操作行為等數(shù)據(jù)實(shí)時同步采集)豐富內涵、以及作業(yè)空間及作業(yè)環(huán)境數(shù)據(jù)(溫度、濕度產能提升、噪音適應性、光照、大氣壓充分發揮、濕度發展成就、粉塵等)等客觀量化數(shù)據(jù);為科學(xué)研究及應(yīng)用提供完整的數(shù)據(jù)指標(biāo)重要方式。

ErgoAI人因智能:
將人工智能技術(shù)引入人因工程研究工具開展面對面,人因工程行業(yè)更加深度,使得實(shí)驗(yàn)環(huán)境不會受限于某一種設(shè)備或數(shù)據(jù)指標(biāo)非常重要,采集分析不同典型行業(yè)或?qū)W科專業(yè)的人-機(jī)-環(huán)境系統(tǒng)交互過程中自然狀態(tài)下的人類行為數(shù)據(jù)進一步提升,獲取更接近真實(shí)人員狀態(tài)的數(shù)據(jù)。平臺還提供覆蓋科研實(shí)驗(yàn)全流程的功能模塊高品質,包括項目管理不折不扣、實(shí)驗(yàn)設(shè)計、同步采集資源優勢、數(shù)據(jù)分析高效利用、綜合統(tǒng)計和可視化報告,結(jié)合ErgoAI人因智能邊緣計算平臺為多模態(tài)人機(jī)環(huán)境研究提供一站式人因工程+人工智能解決方案估算。以ErgoLAB人機(jī)環(huán)境同步平臺和ErgoAI人因智能邊緣計算平臺為核心的多模態(tài)同步人因智能解決方案大大提高了實(shí)驗(yàn)結(jié)果的信效度講理論,同時節(jié)省了研究的人力、物力不要畏懼、時間服務為一體,提高了研究與測評的整體效率。

基于ErgoAI人因智能多元時序算法底座與人因工程人機(jī)環(huán)境數(shù)據(jù)庫逐漸顯現,構(gòu)建人員特定狀態(tài)的預(yù)訓(xùn)練模型全會精神,配合高靈活度的訓(xùn)練方案管理功能,用戶能夠在統(tǒng)一環(huán)境中高效構(gòu)建和優(yōu)化模型拓展基地。 從而實(shí)現(xiàn)對人員狀態(tài)的精準(zhǔn)實(shí)時評估與預(yù)警集中展示,如負(fù)荷狀態(tài)、應(yīng)激狀態(tài)、疲勞狀態(tài)探索創新、情景意識和注意能力等帶來全新智能。

Kingfar公司介紹:
北京津發(fā)科技股份有限公司是guojiaji專精特新重點(diǎn)小巨人,guojiaji知識產(chǎn)權(quán)優(yōu)勢企業(yè)新產品、guojiaji高新技術(shù)企業(yè)去完善、guojiaji科技型中小企業(yè);旗下包含北京人因智能工程技術(shù)研究院和北京人因工程設(shè)計院等科技研發(fā)機(jī)構(gòu)新品技,并聯(lián)合共建了北京市企業(yè)技術(shù)中心範圍、北京本科高校產(chǎn)學(xué)研深度協(xié)同育人平臺、蘇州市重點(diǎn)實(shí)驗(yàn)室好宣講、湖南省工程實(shí)驗(yàn)室註入新的動力、山東省工程研究中心等多個科技創(chuàng)新平臺。
津發(fā)科技承擔(dān)和參與了多項國家重點(diǎn)研發(fā)計劃、工信部高質(zhì)量發(fā)展專項、國家自然科學(xué)基金等guojiaji課題基金戰略布局。擔(dān)任全國信標(biāo)委XR擴(kuò)展現(xiàn)實(shí)標(biāo)準(zhǔn)化組副組長單位事關全面,工信部元宇宙標(biāo)準(zhǔn)化工作組關(guān)鍵技術(shù)組聯(lián)合組長單位;津發(fā)科技創(chuàng)新研發(fā)了國產(chǎn)化自主可控的人因工程與人因智能邊緣計算系列信創(chuàng)產(chǎn)品與技術(shù)狀態,榮獲多項省部級科學(xué)技術(shù)獎勵技術節能;津發(fā)科技主持和參編國際/國家、行業(yè)/團(tuán)體標(biāo)準(zhǔn)20余項、榮獲30余項省部級新技術(shù)新產(chǎn)品認(rèn)證,全球申請zhuanli超過500項技術交流、100余項國際和國家注冊商標(biāo)核心技術體系、130余項國家軟件著作權(quán);已服務(wù)全國高等院校和裝備科技工業(yè)科研院所應(yīng)用示范應用的選擇,并已支撐國內(nèi)科研學(xué)者和科技工作者發(fā)表中英文學(xué)術(shù)論文超過1000篇。