国产av一二三区|日本不卡动作网站|黄色天天久久影片|99草成人免费在线视频|AV三级片成人电影在线|成年人aV不卡免费播放|日韩无码成人一级片视频|人人看人人玩开心色AV|人妻系列在线观看|亚洲av无码一区二区三区在线播放

網(wǎng)易首頁 > 網(wǎng)易號 > 正文 申請入駐

00后清華團隊打造機器人“眼睛”,可實時輸出百余項生理情緒參數(shù)

0
分享至

想象一下這樣的生活片段:你拿起手機 30 秒,屏幕立刻跳出提醒,“當前心率 78,壓力中等,建議深呼吸”;家里的智能攝像頭靜靜看著午睡的寶寶,突然通過 App 提醒你:“寶寶心率偏快,呼吸略顯急促,建議進屋查看”;養(yǎng)老院里,巡檢機器人通過一次擦身而過的對視,便能感知到老人今天情緒低落,且血氧飽和度略低于往常......

這些曾經(jīng)只存在于科幻電影中的“讀心術(shù)”,正由一家名為微面科技(FacePhys)的公司變成現(xiàn)實。這家聚焦 AI 機器視覺核心技術(shù)研發(fā)與產(chǎn)業(yè)化的初創(chuàng)公司,憑借自主可控的遠程光電容積描記技術(shù)(rPPG),打造了一個可端側(cè)推理人體生理、情緒狀態(tài)的智能攝像頭系統(tǒng),讓機器不僅能看見世界,更能洞察人類的生理與情感。

微面科技核心團隊來自清華大學(xué)。創(chuàng)始人唐健凱是清華大學(xué)新雅書院和計算機系在讀博士生,長期深耕機器視覺與生理計算方向,曾在 Science Advances 等頂級期刊和會議發(fā)表 20 余項研究成果,谷歌學(xué)術(shù)引用超 1,600 次;聯(lián)合創(chuàng)始人張藝儒就讀于清華大學(xué)計算機系碩士,研究方向為人機交互與遠程生理感知,曾在 UbiComp、CHI 等頂會發(fā)表相關(guān)成果;聯(lián)合創(chuàng)始人張銘宇出身清華軟件學(xué)院,具備深厚的工程落地與產(chǎn)品化經(jīng)驗,統(tǒng)籌技術(shù)從實驗室走向量產(chǎn)的全鏈路交付。


圖 | 創(chuàng)始團隊(來源:受訪者提供)

實時監(jiān)控百余項生理與情緒參數(shù)

故事始于 2022 年的暑假。彼時,正在清華讀大三的唐健凱參與了與華盛頓大學(xué)的聯(lián)合項目,第一次接觸到“通過自拍測心率”的課題。

“一開始其實挺心虛的,這事對誰來說可能都有點奇怪”,唐健凱回憶道,“那時候的技術(shù)在實驗室里很完美,但一到現(xiàn)實環(huán)境,人稍作移動、光照環(huán)境一變,監(jiān)測精度就會大幅下降?!?/p>

唐健凱所說的技術(shù),正是遠程光電容積描記技術(shù),這是一種通過普通攝像頭,在不接觸人體的情況下,遠程監(jiān)測心率、呼吸和血氧等生理參數(shù)的技術(shù)。

具體來說,人體每次心跳引起的血液流動會造成皮膚組織的微血管中血量的周期性變化,進而導(dǎo)致皮膚吸收和反射光具有周期性規(guī)律,具體表現(xiàn)為皮膚表面顏色的周期性變化,盡管人眼無法分辨這一微小變化,但是通過攝像頭可以捕捉,通過分析該信號可以獲取脈搏率、呼吸率和血氧飽和度等生理指標。

“所以,本質(zhì)上來講,我們測的是皮膚微小顏色變化的速度?!碧平P補充道。

在那個暑假快結(jié)束的時候,唐健凱及團隊成員利用攝像頭成功捕捉到了心跳。在后續(xù)研發(fā)中,他們建成了全球首個基于手持手機采集的多模態(tài)生理數(shù)據(jù)庫,并將整套處理流程標準化開源為 rPPG-Toolbox,供全球研究者使用。

也正是在這次實踐中,通過完整搭建攝像頭采集、算法實現(xiàn)與測試的全套系統(tǒng),唐健凱驗證了原理的可行性,并下定決心將其做成產(chǎn)品?!霸硗?,剩下的就是用 AI 和更多數(shù)據(jù)去消除噪聲?!?/p>

rPPG 通過普通攝像頭捕捉面部皮膚微弱顏色變化來提取心率、呼吸等信號時,信號強度極弱,僅占總背景的 0.1%–1%,極易被環(huán)境噪聲淹沒,包括運動偽影、光影干擾、膚色差異等。

比如當受試者說話、頭部晃動或手持設(shè)備拍攝時,皮膚像素在圖像中的位置會發(fā)生偏移,產(chǎn)生巨大的非生理性信號波動;環(huán)境光線的明暗變化、陰影遮擋或車內(nèi)快速移動產(chǎn)生的動態(tài)光源,會直接改變相機捕捉到的顏色數(shù)值。

為了解決該問題,唐健凱及團隊采集了不同膚色、不同生理狀態(tài)、不同場景下的海量數(shù)據(jù),通過 AI 算法和底層優(yōu)化讓算法學(xué)會在復(fù)雜環(huán)境中提取有效信號,最終實現(xiàn)了心率監(jiān)測誤差< 0.7BPM 的醫(yī)療級精度、響應(yīng)速度低至<10ms,建立起堅實的技術(shù)壁壘。

如今,微面科技僅憑一顆攝像頭,即可實時輸出 100 余項生理與情緒參數(shù),還能連續(xù)監(jiān)測眼動軌跡,實現(xiàn)視線追蹤、注視分析等功能。更重要的是,微面科技實現(xiàn)了端側(cè)本地化部署,無需將視頻傳到云端,在毫秒級響應(yīng)的同時,從底層規(guī)避了隱私泄露的風險。


(來源:受訪者提供)

“其中,心率、血氧飽和度以及情緒識別功能已經(jīng)較為成熟,可以通過攝像頭捕捉表情和心率變異性的指征來判斷用戶的情緒狀態(tài),甚至能初步識別抑郁傾向?!?/p>

唐健凱解釋道,心率變異性是指連續(xù)心跳間隔的時間變化,是評估自主神經(jīng)系統(tǒng)功能的非侵入性指標。近年來,心率變異性相關(guān)指標被應(yīng)用于個體抑郁的檢測和評估中。研究發(fā)現(xiàn),抑郁與心率變異性呈負相關(guān),即抑郁或長期壓力患者的心率變異性通常偏低。

做機器人的“眼睛”

目前,微面科技的 rPPG 技術(shù),已在嬰兒健康監(jiān)測、康養(yǎng)機器人、智能座艙、醫(yī)院臨床驗證等領(lǐng)域落地。

比如,在嬰兒健康檢測上,通過紅外補光實現(xiàn)夜間零干擾監(jiān)測,能實時捕捉寶寶的心率、呼吸、睡眠狀態(tài),甚至哭鬧行為,一旦出現(xiàn)生理指標異常,便會第一時間向家長的手機推送告警。據(jù)悉,團隊還做了專項算法優(yōu)化,即使寶寶輕微移動,MAR 算法也能有效去除運動偽影,保證監(jiān)測精度。

在汽車上,可以通過智能攝像頭實時監(jiān)測駕駛員和乘客的健康狀態(tài),提前預(yù)警疲勞駕駛和情緒變化,以及監(jiān)控車內(nèi)嬰幼兒健康,提升行車安全。據(jù)唐健凱透露,該技術(shù)已獲得車企認可,計劃于下一代“健康汽車”集成此功能,實現(xiàn)車內(nèi)健康數(shù)據(jù)的實時匯報。

在醫(yī)療康養(yǎng)領(lǐng)域,微面科技正與安貞醫(yī)院展開深度產(chǎn)學(xué)研合作,共同完成了上千人規(guī)模的臨床隊列驗證,數(shù)據(jù)覆蓋多病種、多年齡層,為算法的醫(yī)療級精度提供了有力的臨床支撐。唐健凱透露,“雙方共同研發(fā)的‘健康鏡’兼顧算法與硬件一體化設(shè)計,將傳統(tǒng)的復(fù)雜束縛式醫(yī)療監(jiān)測優(yōu)化為非接觸的快速篩查方式,得到了臨床專家與患者群體的一致認可,具備廣泛的社會價值與推廣前景?!?/p>


(來源:受訪者提供)

除了深耕垂直場景,微面科技還將目光投向了極具想象力的機器人賽道。在唐健凱看來,rPPG 技術(shù)可以成為機器人的“眼睛”——一套能讓機器真正“看見”生理與情感的感知系統(tǒng)。

他解釋道,無論是服務(wù)機器人、康養(yǎng)陪護機器人,還是正在規(guī)模落地的人形機器人,都迫切需要具備對使用者生理狀態(tài)與情緒意圖的實時感知能力。微面科技的 rPPG 視覺感知模塊,則可作為標準化感知組件嵌入各類機器人平臺,賦予機器人“讀懂人”的能力。

目前,該公司已完成數(shù)百萬美元的融資,用于加速核心算法迭代、拓展行業(yè)應(yīng)用場景,并推進機器人感知模塊的規(guī)?;虡I(yè)部署。

創(chuàng)業(yè)的路上并非一帆風順,唐健凱團隊也曾經(jīng)歷過商業(yè)模式的試錯。2024 年,他們曾參考海外模式推出健康平臺,試圖通過線上醫(yī)療問診抽成實現(xiàn)商業(yè)化,卻忽略了中國醫(yī)療體系的特點——國內(nèi)線下問診效率高,線上輕問診的需求遠不如海外,這次嘗試并未取得預(yù)期效果。

之后,團隊調(diào)整方向,深耕非接觸生理情緒感知領(lǐng)域,陸續(xù)推出了基于瀏覽器的網(wǎng)頁版實時監(jiān)測系統(tǒng)以及面向個人用戶的 APP,并完成了 C01、KY01 型號智能攝像頭及 FINDINGS 科研級采集主機的研發(fā)工作。

如今,微面科技已構(gòu)建起覆蓋云端 API/SDK、整組模式、插件模式的集成方案:云端 API/SDK 方案實現(xiàn)零硬件改動、2 周快速對接,采用 SaaS 訂閱制;整組模式提供深度定制,完整攝像頭模組交付,算法固化于芯片,低延遲低功耗,適配旗艦級規(guī)模量產(chǎn);插件模式可串聯(lián)現(xiàn)有攝像頭,不改變原有架構(gòu),實現(xiàn)快速部署升級。

談及未來,唐健凱的愿景清晰而堅定:讓千萬臺機器更有“情商”,讓機器人不僅看到世界,更能讀懂人的生理與情感。

運營/排版:何晨龍

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點推薦
發(fā)現(xiàn)朋友孩子是唐氏兒,我該開口嗎?網(wǎng)友:關(guān)系再好都不會說

發(fā)現(xiàn)朋友孩子是唐氏兒,我該開口嗎?網(wǎng)友:關(guān)系再好都不會說

帶你感受人間冷暖
2026-04-13 00:05:12
“我怕我畢業(yè)走了他會挨餓”,山東高中生連續(xù)3年給校門口智力缺陷老人送烤腸,臨近畢業(yè)拜托附近女攤主幫送,攤主:很感動,不會收他的錢

“我怕我畢業(yè)走了他會挨餓”,山東高中生連續(xù)3年給校門口智力缺陷老人送烤腸,臨近畢業(yè)拜托附近女攤主幫送,攤主:很感動,不會收他的錢

瀟湘晨報
2026-04-12 21:18:21
小米汽車市場危機,開始公開化

小米汽車市場危機,開始公開化

浙江車網(wǎng)
2026-04-13 09:15:19
大收費時代開幕

大收費時代開幕

美第奇效應(yīng)
2026-04-13 08:10:05
超5萬美軍登陸伊朗為謠言,視頻實為2023年美軍在加州舉行飛行表演時的畫面

超5萬美軍登陸伊朗為謠言,視頻實為2023年美軍在加州舉行飛行表演時的畫面

界面新聞
2026-04-13 13:38:45
匈牙利蒂薩黨在國會選舉中獲勝

匈牙利蒂薩黨在國會選舉中獲勝

環(huán)球網(wǎng)資訊
2026-04-13 06:59:05
歐爾班下臺:匈牙利反華總理揚言審查中資,中國千億投資遭遇危險

歐爾班下臺:匈牙利反華總理揚言審查中資,中國千億投資遭遇危險

影像溫度
2026-04-13 10:37:17
比亞迪副總裁周亞琳(女,1977年生),年薪1013.5萬元,打破“天花板”

比亞迪副總裁周亞琳(女,1977年生),年薪1013.5萬元,打破“天花板”

深圳晚報
2026-04-13 08:24:07
“他摟著我腰,親我臉頰”:若我接受潛規(guī)則,他就在判決時偏向我

“他摟著我腰,親我臉頰”:若我接受潛規(guī)則,他就在判決時偏向我

漢史趣聞
2026-04-12 16:39:57
不知悔改!47歲女作家拒道歉+繼續(xù)侮辱全紅嬋:縱容隊友被霸凌

不知悔改!47歲女作家拒道歉+繼續(xù)侮辱全紅嬋:縱容隊友被霸凌

念洲
2026-04-13 08:50:12
NBA季后賽對陣出爐:湖人vs火箭 掘金vs森林狼 東部不如西部激烈

NBA季后賽對陣出爐:湖人vs火箭 掘金vs森林狼 東部不如西部激烈

醉臥浮生
2026-04-13 11:09:12
NBA首輪對陣全出爐:湖人vs火箭 掘金vs森林狼 東部無焦點對決

NBA首輪對陣全出爐:湖人vs火箭 掘金vs森林狼 東部無焦點對決

醉臥浮生
2026-04-13 11:04:31
人生不止一個回合!箱包女王破產(chǎn)后賣包子重啟人生

人生不止一個回合!箱包女王破產(chǎn)后賣包子重啟人生

大象新聞
2026-04-13 09:21:09
難以相信!她已經(jīng)61歲了,看起來竟然像三四十歲的樣子!

難以相信!她已經(jīng)61歲了,看起來竟然像三四十歲的樣子!

手工制作阿殲
2026-04-13 03:15:24
越鬧越大!奧迪加油站逃單后續(xù),不到一天就落網(wǎng),司機身份被公開

越鬧越大!奧迪加油站逃單后續(xù),不到一天就落網(wǎng),司機身份被公開

云舟史策
2026-04-13 07:19:48
匈牙利“變天”:歐爾班16年執(zhí)政終結(jié),馬扎爾反腐大勝開啟新時代

匈牙利“變天”:歐爾班16年執(zhí)政終結(jié),馬扎爾反腐大勝開啟新時代

民間胡扯老哥
2026-04-13 06:02:52
絕了!嚴月霞身姿碾壓鄭麗文,中國女保鏢這才是真正的大女主!

絕了!嚴月霞身姿碾壓鄭麗文,中國女保鏢這才是真正的大女主!

TVB的四小花
2026-04-13 00:26:19
基因可怕?。?個月4位至親相繼離世,浙江網(wǎng)友發(fā)帖哭訴引發(fā)熱議

基因可怕??!3個月4位至親相繼離世,浙江網(wǎng)友發(fā)帖哭訴引發(fā)熱議

火山詩話
2026-04-12 17:45:19
福建一61歲男子搭乘航班從成都飛福州時意外身亡,因術(shù)后登機家屬曾簽免責聲明,希望航司公司推進善后工作;成都航空:事情還在調(diào)查中

福建一61歲男子搭乘航班從成都飛福州時意外身亡,因術(shù)后登機家屬曾簽免責聲明,希望航司公司推進善后工作;成都航空:事情還在調(diào)查中

大風新聞
2026-04-13 08:28:08
看了一天!終于理清特朗普老婆和愛潑斯坦的瓜!

看了一天!終于理清特朗普老婆和愛潑斯坦的瓜!

啃金融
2026-04-10 22:47:23
2026-04-13 13:52:49
DeepTech深科技 incentive-icons
DeepTech深科技
麻省理工科技評論獨家合作
16572文章數(shù) 514868關(guān)注度
往期回顧 全部

科技要聞

傳榮耀與字節(jié)跳動接洽“豆包手機”合作

頭條要聞

毛焦爾:匈牙利將再次成為歐盟和北約國家的堅定盟友

頭條要聞

毛焦爾:匈牙利將再次成為歐盟和北約國家的堅定盟友

體育要聞

一支球隊不夠爛,也是一種悲哀

娛樂要聞

賈玲減重后現(xiàn)身馮鞏生日宴 身材未反彈

財經(jīng)要聞

封鎖,還是收費站?

汽車要聞

不止命名更純粹 領(lǐng)克10/10+要做純電操控新王

態(tài)度原創(chuàng)

游戲
時尚
本地
教育
軍事航空

杰洛特來東瀛!《巫師》新衍生作官宣 和服葉奈法超美

這些才是普通人借鑒的穿搭!上短下長、上窄下寬,顯瘦又舒適

本地新聞

12噸巧克力有難,全網(wǎng)化身超級偵探添亂

教育要聞

發(fā)音不準或引發(fā)的自信危機與應(yīng)對措施

軍事要聞

美國副總統(tǒng)萬斯:美伊談判未能達成協(xié)議

無障礙瀏覽 進入關(guān)懷版