ErgoVR工業(yè)設(shè)計(jì)與人機(jī)交互虛擬現(xiàn)實(shí)實(shí)驗(yàn)室應用的因素之一，基于“人-機(jī)-環(huán)境”系統(tǒng)工程理論建設(shè)，適用于工業(yè)設(shè)計(jì)領(lǐng)域的科學(xué)研究以及高校實(shí)驗(yàn)教學(xué)等方面的工作預期。能夠滿足工業(yè)設(shè)計(jì)領(lǐng)域的多種研究需求開展試點，并能夠進(jìn)行理論驗(yàn)證、設(shè)計(jì)測(cè)評(píng)共同、虛擬樣機(jī)測(cè)評(píng)與產(chǎn)品測(cè)試等研究推進一步。
實(shí)驗(yàn)室可基于大型沉浸式CAVE虛擬現(xiàn)實(shí)系統(tǒng)、可穿戴虛擬現(xiàn)實(shí)系統(tǒng)及多人交互虛擬現(xiàn)實(shí)系統(tǒng)強大的功能。在系統(tǒng)中實際需求，用戶可以自定義創(chuàng)建虛擬環(huán)境，并且進(jìn)行多感知交互體驗(yàn)研究優勢，其中包含嗅覺模擬系統(tǒng)善謀新篇、觸覺模擬系統(tǒng)、聽覺模擬系統(tǒng)等多感知交互系統(tǒng)便利性。同時(shí)方法，結(jié)合津發(fā)自主研發(fā)的ErgoLAB人機(jī)環(huán)境同步云平臺(tái)，實(shí)現(xiàn)“以人為中心”的多模態(tài)數(shù)據(jù)同步采集與分析提供有力支撐，為科學(xué)研究和設(shè)計(jì)評(píng)價(jià)提供完整的數(shù)據(jù)指標(biāo)切實把製度。
系統(tǒng)組成
(1) 實(shí)驗(yàn)室概述
實(shí)驗(yàn)室可用于進(jìn)行工業(yè)設(shè)計(jì)與用戶體驗(yàn)相關(guān)領(lǐng)域的研究。實(shí)驗(yàn)室主要分為被試間與主試間兩大功能區(qū)域自行開發，之間由單向玻璃隔開進行部署，使主試間中的研究人員看見被試間內(nèi)受試者的行為責任，而受試者看不見主試間，從而減小干擾保護好。其中組建，被試間為實(shí)驗(yàn)進(jìn)行的區(qū)域，搭建為虛擬現(xiàn)實(shí)測(cè)試室特點，可通過CAVE式虛擬現(xiàn)實(shí)系統(tǒng)深刻變革、8K眼動(dòng)腦電多模態(tài)虛擬現(xiàn)實(shí)頭盔或者多人交互虛擬現(xiàn)實(shí)系統(tǒng)進(jìn)行虛擬現(xiàn)實(shí)場(chǎng)景呈現(xiàn)，并可依照測(cè)試需求布置所需的多模態(tài)數(shù)據(jù)采集設(shè)備和諧共生，如虛擬現(xiàn)實(shí)眼動(dòng)儀質生產力、可穿戴人因生理儀等；被試間中有多個(gè)行為觀察攝像頭與拾音器技術交流，從不同角度攝取受試者的行為影像并采集受試者的聲音先進的解決方案，音視頻信號(hào)傳送給主試間中的人機(jī)環(huán)境同步平臺(tái)進(jìn)行數(shù)據(jù)分析。主試間為觀察與數(shù)據(jù)分析區(qū)域在此基礎上，布置有語音控制臺(tái)助力各行，研究人員的指令通過被試間的揚(yáng)聲器傳送給受試者姿勢；主試間還布置有人機(jī)環(huán)境同步平臺(tái)相互融合、人因智能邊緣計(jì)算平臺(tái)等設(shè)備，研究人員可在主試間實(shí)時(shí)同步采集多模態(tài)人因數(shù)據(jù)并進(jìn)行分析綠色化。
實(shí)驗(yàn)室被試間設(shè)置有虛擬現(xiàn)實(shí)顯示交互系統(tǒng)和多模態(tài)人因數(shù)據(jù)采集設(shè)備不同需求，包括CAVE式虛擬現(xiàn)實(shí)系統(tǒng)、8K眼動(dòng)腦電多模態(tài)虛擬現(xiàn)實(shí)頭盔保持穩定、多人交互虛擬現(xiàn)實(shí)系統(tǒng)總之、虛擬聽覺嗅覺觸覺感知模擬系統(tǒng)、虛實(shí)時(shí)空行為分析系統(tǒng)支撐作用、虛擬現(xiàn)實(shí)雙手交互系統(tǒng)研學體驗、虛擬現(xiàn)實(shí)腦機(jī)交互設(shè)備、虛擬現(xiàn)實(shí)情感交互設(shè)備最為突出、虛擬現(xiàn)實(shí)動(dòng)作交互設(shè)備落實落細、表情語音采集儀、行為觀察儀高效化、可穿戴人因生理儀製高點項目、虛擬現(xiàn)實(shí)腦成像儀、可穿戴多模態(tài)腦功能儀範圍和領域、動(dòng)作捕捉儀以及工業(yè)設(shè)計(jì)人因測(cè)試專家系統(tǒng)等有所增加。被試間的產(chǎn)品組成與選型可根據(jù)實(shí)際研究需求進(jìn)行配置。此外更高要求，被試間系統(tǒng)的多模態(tài)數(shù)據(jù)采集設(shè)備可結(jié)合ErgoAI人因智能邊緣計(jì)算終端越來越重要的位置，將計(jì)算和數(shù)據(jù)處理能力移至接近數(shù)據(jù)源的終端設(shè)備上新技術，進(jìn)行數(shù)據(jù)的智能化處理和分析。
實(shí)驗(yàn)室主試間設(shè)置有多模態(tài)人因數(shù)據(jù)同步采集順滑地配合、分析和邊緣智能設(shè)備聽得懂，包括ErgoLAB人機(jī)環(huán)境同步平臺(tái)和ErgoAI人因智能評(píng)估平臺(tái)。其中高質量發展，ErgoLAB人機(jī)環(huán)境同步平臺(tái)支持多模態(tài)數(shù)據(jù)同步采集與分析全方位，確保所需要的人、機(jī)影響力範圍、環(huán)境三方面的多模態(tài)數(shù)據(jù)可基于同一時(shí)間軸進(jìn)行實(shí)時(shí)同步大局，消除事后對(duì)齊數(shù)據(jù)分析的負(fù)擔(dān)，并使數(shù)據(jù)“協(xié)同增效”邁出了重要的一步，多角度綜合印證結(jié)果有序推進，確保數(shù)據(jù)結(jié)果的有效性與準(zhǔn)確性。ErgoAI人因智能應(yīng)用平臺(tái)積極拓展新的領域，對(duì)接人機(jī)環(huán)境同步平臺(tái)所同步采集的多模態(tài)數(shù)據(jù)配套設備，搭建開放式AI算法應(yīng)用平臺(tái)，能夠?yàn)椴煌珹I算法基礎(chǔ)的用戶相對開放，提供從數(shù)據(jù)采集推進高水平、數(shù)據(jù)降噪、數(shù)據(jù)標(biāo)注拓展應用、模型訓(xùn)練生產創效、模型評(píng)估及部署應(yīng)用的全流程智能化應(yīng)用系統(tǒng)。平臺(tái)可提供數(shù)千人次數(shù)據(jù)搭建的各類應(yīng)用數(shù)據(jù)集管理，涵蓋人員基數(shù)據(jù)集優化上下、狀態(tài)數(shù)據(jù)集等，以及數(shù)十種人因工程預(yù)訓(xùn)練模型模樣，包括單模態(tài)狀態(tài)識(shí)別模型生產體系、多模態(tài)狀態(tài)識(shí)別模型等。同時(shí)很重要，ErgoAI人因智能應(yīng)用平臺(tái)支持根據(jù)實(shí)際研究內(nèi)容與方向創(chuàng)建數(shù)據(jù)集能力和水平、訓(xùn)練并驗(yàn)證模型，并進(jìn)行模型部署與實(shí)時(shí)狀態(tài)預(yù)測(cè)服務效率。
(2) 實(shí)驗(yàn)室示意圖
功能應(yīng)用
l 人機(jī)環(huán)境多模態(tài)數(shù)據(jù)同步采集
l 兼容多種虛擬現(xiàn)實(shí)場(chǎng)景
l 對(duì)接主流VR引擎
l 基于三維物體的AOI及SOI興趣區(qū)測(cè)評(píng)與分析
ErgoLAB多模態(tài)同步方案：
整體概述
ErgoLAB人機(jī)環(huán)境同步平臺(tái)采用多模態(tài)數(shù)據(jù)時(shí)鐘同步技術(shù)明確相關要求，平臺(tái)可完成完整的實(shí)驗(yàn)和測(cè)評(píng)流程，包括項(xiàng)目管理-試驗(yàn)設(shè)計(jì)-同步采集-信號(hào)處理-數(shù)據(jù)分析-人因智能評(píng)估-可視化報(bào)告統籌發展，支持基于云架構(gòu)技術(shù)的團(tuán)體測(cè)試和大數(shù)據(jù)管理深化涉外。
ErgoLAB人機(jī)環(huán)境同步平臺(tái)采用主客觀結(jié)合多模態(tài)數(shù)據(jù)同步采集與多維度驗(yàn)證的方法，數(shù)據(jù)實(shí)時(shí)同步種類包含大腦認(rèn)知數(shù)據(jù)（EEG/BCI腦電儀與腦機(jī)接口邊緣計(jì)算設(shè)備生產製造、fNIRS/BCI近紅外腦成像儀）開展試點，視覺數(shù)據(jù)（Eyetracker眼動(dòng)儀與視線交互系統(tǒng)）攜手共進，生理數(shù)據(jù)（生理儀含：GSR/EDA、EMG推進一步、ECG經過、EOG、HRV力度、RESP明確了方向、TEMP/SKT、PPG業務指導、SpO2）改進措施，行為觀察、肢體動(dòng)作與面部表情（基本情緒長足發展、情緒效價(jià)今年、微表情等）數(shù)據(jù)、生物力學(xué)數(shù)據(jù)（拉力結構不合理、握力動手能力、捏力、壓力…）意見征詢，人機(jī)交互數(shù)據(jù)（包含人機(jī)界面交互行為數(shù)據(jù)以及對(duì)應(yīng)的鍵盤操作提升，鼠標(biāo)點(diǎn)擊、懸浮示範、劃入劃出等應用前景；移動(dòng)終端人機(jī)交互行為數(shù)據(jù)以及對(duì)應(yīng)的手指軌跡操作行為如點(diǎn)擊有很大提升空間、縮放運行好、滑動(dòng)等；VR終端界面人機(jī)交互行為數(shù)據(jù)及對(duì)應(yīng)的雙手操作拾取可能性更大、丟棄部署安排、控制，VR空間行走軌跡）技術、以及多類型時(shí)空行為軌跡數(shù)據(jù)采集(包括室內(nèi)推廣開來、戶外、以及VR環(huán)境不同時(shí)空的行走軌跡相對較高、行車軌跡資源配置、訪問狀態(tài)以及視線交互、情感反應(yīng)相關、交互操作行為等數(shù)據(jù)實(shí)時(shí)同步采集)大力發展、以及作業(yè)空間及作業(yè)環(huán)境數(shù)據(jù)（溫度、濕度生產效率、噪音產能提升、光照適應性、大氣壓、濕度通過活化、粉塵等）等客觀量化數(shù)據(jù)落地生根；為科學(xué)研究及應(yīng)用提供完整的數(shù)據(jù)指標(biāo)。
ErgoAI人因智能：
將人工智能技術(shù)引入人因工程研究工具重要方式，人因工程行業(yè)更加深度開展面對面，使得實(shí)驗(yàn)環(huán)境不會(huì)受限于某一種設(shè)備或數(shù)據(jù)指標(biāo)，采集分析不同典型行業(yè)或?qū)W科專業(yè)的人-機(jī)-環(huán)境系統(tǒng)交互過程中自然狀態(tài)下的人類行為數(shù)據(jù)非常重要，獲取更接近真實(shí)人員狀態(tài)的數(shù)據(jù)自動化。平臺(tái)還提供覆蓋科研實(shí)驗(yàn)全流程的功能模塊，包括項(xiàng)目管理高品質、實(shí)驗(yàn)設(shè)計(jì)不折不扣、同步采集、數(shù)據(jù)分析資源優勢、綜合統(tǒng)計(jì)和可視化報(bào)告高效利用，結(jié)合ErgoAI人因智能邊緣計(jì)算平臺(tái)為多模態(tài)人機(jī)環(huán)境研究提供一站式人因工程+人工智能解決方案。以ErgoLAB人機(jī)環(huán)境同步平臺(tái)和ErgoAI人因智能邊緣計(jì)算平臺(tái)為核心的多模態(tài)同步人因智能解決方案大大提高了實(shí)驗(yàn)結(jié)果的信效度估算，同時(shí)節(jié)省了研究的人力講理論、物力、時(shí)間不要畏懼，提高了研究與測(cè)評(píng)的整體效率服務為一體。
基于ErgoAI人因智能多元時(shí)序算法底座與人因工程人機(jī)環(huán)境數(shù)據(jù)庫，構(gòu)建人員特定狀態(tài)的預(yù)訓(xùn)練模型逐漸顯現，配合高靈活度的訓(xùn)練方案管理功能全會精神，用戶能夠在統(tǒng)一環(huán)境中高效構(gòu)建和優(yōu)化模型。 從而實(shí)現(xiàn)對(duì)人員狀態(tài)的精準(zhǔn)實(shí)時(shí)評(píng)估與預(yù)警拓展基地，如負(fù)荷狀態(tài)集中展示、應(yīng)激狀態(tài)、疲勞狀態(tài)體系流動性、情景意識(shí)和注意能力等探索創新。
Kingfar公司介紹：
北京津發(fā)科技股份有限公司是guojiaji專精特新重點(diǎn)小巨人，guojiaji知識(shí)產(chǎn)權(quán)優(yōu)勢(shì)企業(yè)實現了超越、guojiaji高新技術(shù)企業(yè)新產品、guojiaji科技型中小企業(yè)；旗下包含北京人因智能工程技術(shù)研究院和北京人因工程設(shè)計(jì)院等科技研發(fā)機(jī)構(gòu)橋梁作用，并聯(lián)合共建了北京市企業(yè)技術(shù)中心長遠所需、北京本科高校產(chǎn)學(xué)研深度協(xié)同育人平臺(tái)、蘇州市重點(diǎn)實(shí)驗(yàn)室、湖南省工程實(shí)驗(yàn)室生產創效、山東省工程研究中心等多個(gè)科技創(chuàng)新平臺(tái)結構。
津發(fā)科技承擔(dān)和參與了多項(xiàng)國家重點(diǎn)研發(fā)計(jì)劃、工信部高質(zhì)量發(fā)展專項(xiàng)、國家自然科學(xué)基金等guojiaji課題基金雙重提升。擔(dān)任全國信標(biāo)委XR擴(kuò)展現(xiàn)實(shí)標(biāo)準(zhǔn)化組副組長單位，工信部元宇宙標(biāo)準(zhǔn)化工作組關(guān)鍵技術(shù)組聯(lián)合組長單位事關全面；津發(fā)科技創(chuàng)新研發(fā)了國產(chǎn)化自主可控的人因工程與人因智能邊緣計(jì)算系列信創(chuàng)產(chǎn)品與技術(shù)表現明顯更佳，榮獲多項(xiàng)省部級(jí)科學(xué)技術(shù)獎(jiǎng)勵(lì)；津發(fā)科技主持和參編國際/國家技術節能、行業(yè)/團(tuán)體標(biāo)準(zhǔn)20余項(xiàng)指導、榮獲30余項(xiàng)省部級(jí)新技術(shù)新產(chǎn)品認(rèn)證，全球申請(qǐng)zhuanli超過500項(xiàng)國際要求、100余項(xiàng)國際和國家注冊(cè)商標(biāo)流動性、130余項(xiàng)國家軟件著作權(quán)；已服務(wù)全國高等院校和裝備科技工業(yè)科研院所應(yīng)用示范競爭激烈，并已支撐國內(nèi)科研學(xué)者和科技工作者發(fā)表中英文學(xué)術(shù)論文超過1000篇持續創新。
