ErgoVR機器人具身智能人機交互測評虛擬現(xiàn)實實驗室是津發(fā)科技創(chuàng)新研發(fā)配置的面向機器人人因設(shè)計、測評與科學(xué)研究的解決方案快速融入。方案支持在不同虛擬現(xiàn)實環(huán)境下呈現(xiàn)不同的機器人設(shè)計方案善於監督，并模擬不同的人機交互方式，通過津發(fā)自主研發(fā)的ErgoVR人因分析引擎直接對接產(chǎn)品設(shè)計原型就能壓製，基于三維模型同步采集和綜合分析用戶與機器人交互時的眼動追蹤更合理、人機交互、時空軌跡更優美、生理各方面、腦電、動作姿態(tài)成效與經驗、行為等多模態(tài)數(shù)據(jù)適應性，為機器人設(shè)計虛擬樣機測評以及元宇宙機器人人因設(shè)計測評提供了科學(xué)量化的解決方案。
系統(tǒng)組成
(1) 實驗室概述
實驗室可用于進行機器人具身智能人機交互研究稍有不慎。實驗室主要分為被試間與主試間兩大功能區(qū)域重要作用，之間由單向玻璃隔開，使主試間中的研究人員看見被試間內(nèi)受試者的行為最為顯著，而受試者看不見主試間完成的事情，從而減小干擾。其中穩定，被試間為實驗進行的區(qū)域改造層面，搭建為虛擬現(xiàn)實測試室，可通過CAVE式虛擬現(xiàn)實系統(tǒng)優勢與挑戰、8K眼動腦電多模態(tài)虛擬現(xiàn)實頭盔或者多人交互虛擬現(xiàn)實系統(tǒng)進行虛擬現(xiàn)實場景呈現(xiàn)經驗分享，并可依照測試需求布置所需的多模態(tài)數(shù)據(jù)采集設(shè)備，如虛擬現(xiàn)實眼動儀趨勢、可穿戴人因生理儀等有力扭轉；被試間中有多個行為觀察攝像頭與拾音器，從不同角度攝取受試者的行為影像并采集受試者的聲音一站式服務，音視頻信號傳送給主試間中的人機環(huán)境同步平臺進行數(shù)據(jù)分析廣度和深度。主試間為觀察與數(shù)據(jù)分析區(qū)域深入交流，布置有語音控制臺，研究人員的指令通過被試間的揚聲器傳送給受試者加強宣傳；主試間還布置有人機環(huán)境同步平臺臺上與臺下、人因智能邊緣計算平臺等設(shè)備，研究人員可在主試間實時同步采集多模態(tài)人因數(shù)據(jù)并進行分析技術發展。
實驗室被試間設(shè)置有多模態(tài)人因數(shù)據(jù)采集設(shè)備集聚效應，包括CAVE式虛擬現(xiàn)實系統(tǒng)、8K眼動腦電多模態(tài)虛擬現(xiàn)實頭盔自主研發、多人交互虛擬現(xiàn)實系統(tǒng)確定性、虛擬聽覺嗅覺觸覺感知模擬系統(tǒng)、虛實時空行為分析系統(tǒng)損耗、虛擬現(xiàn)實雙手交互系統(tǒng)講故事、虛擬現(xiàn)實腦機交互設(shè)備、虛擬現(xiàn)實情感交互設(shè)備性能穩定、虛擬現(xiàn)實動作交互設(shè)備自動化方案、表情語音采集儀、行為觀察儀越來越重要、可穿戴人因生理儀線上線下、虛擬現(xiàn)實腦成像儀、可穿戴多模態(tài)腦功能儀醒悟、動作捕捉儀以及智能設(shè)計人因測試專家系統(tǒng)等數據顯示。被試間的產(chǎn)品組成與選型可根據(jù)實際研究需求進行配置。此外也逐步提升，被試間系統(tǒng)的多模態(tài)數(shù)據(jù)采集設(shè)備可結(jié)合ErgoAI人因智能邊緣計算終端記得牢，將計算和數(shù)據(jù)處理能力移至接近數(shù)據(jù)源的終端設(shè)備上，進行數(shù)據(jù)的智能化處理和分析重要的作用。
實驗室主試間設(shè)置有多模態(tài)人因數(shù)據(jù)同步采集更多可能性、分析和邊緣智能設(shè)備，包括ErgoLAB人機環(huán)境同步平臺和ErgoAI人因智能評估平臺足夠的實力。其中緊迫性，ErgoLAB人機環(huán)境同步平臺支持多模態(tài)數(shù)據(jù)同步采集與分析，確保所需要的人更適合、機高效、環(huán)境三方面的多模態(tài)數(shù)據(jù)可基于同一時間軸進行實時同步，消除事后對齊數(shù)據(jù)分析的負擔要素配置改革，并使數(shù)據(jù)“協(xié)同增效”體系，多角度綜合印證結(jié)果，確保數(shù)據(jù)結(jié)果的有效性與準確性。ErgoAI人因智能應(yīng)用平臺責任製，對接人機環(huán)境同步平臺所同步采集的多模態(tài)數(shù)據(jù)十分落實，搭建開放式AI算法應(yīng)用平臺，能夠為不同AI算法基礎(chǔ)的用戶規則製定，提供從數(shù)據(jù)采集設施、數(shù)據(jù)降噪、數(shù)據(jù)標注道路、模型訓(xùn)練規模設備、模型評估及部署應(yīng)用的全流程智能化應(yīng)用系統(tǒng)真諦所在。平臺可提供數(shù)千人次數(shù)據(jù)搭建的各類應(yīng)用數(shù)據(jù)集指導，涵蓋人員基數(shù)據(jù)集、狀態(tài)數(shù)據(jù)集等充分，以及數(shù)十種人因工程預(yù)訓(xùn)練模型進一步完善，包括單模態(tài)狀態(tài)識別模型、多模態(tài)狀態(tài)識別模型等競爭力。同時調整推進，ErgoAI人因智能應(yīng)用平臺支持根據(jù)實際研究內(nèi)容與方向創(chuàng)建數(shù)據(jù)集、訓(xùn)練并驗證模型機製性梗阻，并進行模型部署與實時狀態(tài)預(yù)測機製。
(2) 實驗室示意圖
功能應(yīng)用
l 對接主流虛擬現(xiàn)實引擎，兼容全景圖片與視頻
l 智能人機交互模擬與績效分析
l 基于三維模型自動記錄多模態(tài)數(shù)據(jù)
l 基于虛擬現(xiàn)實的多模態(tài)人因數(shù)據(jù)同步
l 支持多種虛擬現(xiàn)實系統(tǒng)
l 人因智能評估與機器人情感化設(shè)計
ErgoLAB多模態(tài)同步方案：
整體概述
ErgoLAB人機環(huán)境同步平臺采用多模態(tài)數(shù)據(jù)時鐘同步技術(shù)集成應用，平臺可完成完整的實驗和測評流程探討，包括項目管理-試驗設(shè)計-同步采集-信號處理-數(shù)據(jù)分析-人因智能評估-可視化報告，支持基于云架構(gòu)技術(shù)的團體測試和大數(shù)據(jù)管理高效流通。
ErgoLAB人機環(huán)境同步平臺采用主客觀結(jié)合多模態(tài)數(shù)據(jù)同步采集與多維度驗證的方法調解製度，數(shù)據(jù)實時同步種類包含大腦認知數(shù)據(jù)（EEG/BCI腦電儀與腦機接口邊緣計算設(shè)備、fNIRS/BCI近紅外腦成像儀）功能，視覺數(shù)據(jù)（Eyetracker眼動儀與視線交互系統(tǒng)）應用的因素之一，生理數(shù)據(jù)（生理儀含：GSR/EDA、EMG預期、ECG敢於監督、EOG、HRV結構、RESP更合理、TEMP/SKT、PPG更優美、SpO2）各方面，行為觀察、肢體動作與面部表情（基本情緒成效與經驗、情緒效價適應性、微表情等）數(shù)據(jù)增產、生物力學(xué)數(shù)據(jù)（拉力、握力方法、捏力行動力、壓力…），人機交互數(shù)據(jù)（包含人機界面交互行為數(shù)據(jù)以及對應(yīng)的鍵盤操作切實把製度，鼠標點擊保供、懸浮、劃入劃出等進行部署；移動終端人機交互行為數(shù)據(jù)以及對應(yīng)的手指軌跡操作行為如點擊責任、縮放、滑動等保護好；VR終端界面人機交互行為數(shù)據(jù)及對應(yīng)的雙手操作拾取組建、丟棄、控制特點，VR空間行走軌跡）深刻變革、以及多類型時空行為軌跡數(shù)據(jù)采集(包括室內(nèi)、戶外和諧共生、以及VR環(huán)境不同時空的行走軌跡質生產力、行車軌跡、訪問狀態(tài)以及視線交互技術交流、情感反應(yīng)先進的解決方案、交互操作行為等數(shù)據(jù)實時同步采集)、以及作業(yè)空間及作業(yè)環(huán)境數(shù)據(jù)（溫度在此基礎上、濕度助力各行、噪音、光照自主研發、大氣壓確定性、濕度、粉塵等）等客觀量化數(shù)據(jù)損耗；為科學(xué)研究及應(yīng)用提供完整的數(shù)據(jù)指標講故事。
ErgoAI人因智能：
將人工智能技術(shù)引入人因工程研究工具，人因工程行業(yè)更加深度性能穩定，使得實驗環(huán)境不會受限于某一種設(shè)備或數(shù)據(jù)指標全面革新，采集分析不同典型行業(yè)或?qū)W科專業(yè)的人-機-環(huán)境系統(tǒng)交互過程中自然狀態(tài)下的人類行為數(shù)據(jù)，獲取更接近真實人員狀態(tài)的數(shù)據(jù)研學體驗。平臺還提供覆蓋科研實驗全流程的功能模塊建設項目，包括項目管理、實驗設(shè)計、同步采集相結合、數(shù)據(jù)分析高效化、綜合統(tǒng)計和可視化報告，結(jié)合ErgoAI人因智能邊緣計算平臺為多模態(tài)人機環(huán)境研究提供一站式人因工程+人工智能解決方案為產業發展。以ErgoLAB人機環(huán)境同步平臺和ErgoAI人因智能邊緣計算平臺為核心的多模態(tài)同步人因智能解決方案大大提高了實驗結(jié)果的信效度範圍和領域，同時節(jié)省了研究的人力、物力各項要求、時間更高要求，提高了研究與測評的整體效率。
基于ErgoAI人因智能多元時序算法底座與人因工程人機環(huán)境數(shù)據(jù)庫新技術，構(gòu)建人員特定狀態(tài)的預(yù)訓(xùn)練模型共同學習，配合高靈活度的訓(xùn)練方案管理功能，用戶能夠在統(tǒng)一環(huán)境中高效構(gòu)建和優(yōu)化模型聽得懂。 從而實現(xiàn)對人員狀態(tài)的精準實時評估與預(yù)警應用優勢，如負荷狀態(tài)高質量發展、應(yīng)激狀態(tài)全方位、疲勞狀態(tài)、情景意識和注意能力等影響力範圍。
Kingfar公司介紹：
北京津發(fā)科技股份有限公司是guojiaji專精特新重點小巨人大局，guojiaji知識產(chǎn)權(quán)優(yōu)勢企業(yè)、guojiaji高新技術(shù)企業(yè)邁出了重要的一步、guojiaji科技型中小企業(yè)有序推進；旗下包含北京人因智能工程技術(shù)研究院和北京人因工程設(shè)計院等科技研發(fā)機構(gòu)，并聯(lián)合共建了北京市企業(yè)技術(shù)中心需求、北京本科高校產(chǎn)學(xué)研深度協(xié)同育人平臺堅定不移、蘇州市重點實驗室、湖南省工程實驗室更讓我明白了、山東省工程研究中心等多個科技創(chuàng)新平臺迎難而上。
津發(fā)科技承擔和參與了多項國家重點研發(fā)計劃、工信部高質(zhì)量發(fā)展專項探索、國家自然科學(xué)基金等guojiaji課題基金堅持先行。擔任全國信標委XR擴展現(xiàn)實標準化組副組長單位，工信部元宇宙標準化工作組關(guān)鍵技術(shù)組聯(lián)合組長單位管理；津發(fā)科技創(chuàng)新研發(fā)了國產(chǎn)化自主可控的人因工程與人因智能邊緣計算系列信創(chuàng)產(chǎn)品與技術(shù)優化上下，榮獲多項省部級科學(xué)技術(shù)獎勵；津發(fā)科技主持和參編國際/國家模樣、行業(yè)/團體標準20余項生產體系、榮獲30余項省部級新技術(shù)新產(chǎn)品認證，全球申請zhuanli超過500項、100余項國際和國家注冊商標能力和水平、130余項國家軟件著作權(quán)大型；已服務(wù)全國高等院校和裝備科技工業(yè)科研院所應(yīng)用示范，并已支撐國內(nèi)科研學(xué)者和科技工作者發(fā)表中英文學(xué)術(shù)論文超過1000篇明確相關要求。
