sponsored links

新人新語 | 王鶴:在燕園探索具身人工智慧

編者按

2021年秋,前沿計算研究中心又迎來了一位年輕的新體制助理教授:王鶴。他於同年剛剛於斯坦福大學獲得博士學位,還未畢業即選定了回國加盟北京大學任職。

新人新語 | 王鶴:在燕園探索具身人工智慧

王鶴,北京大學前沿計算研究中心助理教授,博士生導師。他於2014年在清華大學微納電子學系獲得工學學士學位,於2021年在斯坦福大學電子工程系獲得博士學位,導師為美國兩院院士 Leonidas J. Guibas 教授。他於2021年9月加入北京大學,並創立具身感知與互動實驗室(Embodied Perception and InteraCtion Lab,簡稱 EPIC Lab)。他的研究圍繞三維視覺、機器人學和機器學習,在 CVPR、ICCV、ECCV、NeurIPS 等國際頂級會議上發表10餘篇論文。他的工作開闢了類別級物體六維位姿估計這一子領域,六次獲得 CVPR/ICCV oral,並獲得2019年 Eurographics 最佳論文提名獎。他目前擔任 CVPR 2022 和 WACV 2022 領域主席以及諸多頂級會議和刊物的審稿人。

可以談什麼是具身人工智慧?

王鶴:具身人工智慧(Embodied AI)是當前人工智慧領域裡發展的前沿方向,是一條致力於通向通用人工智慧(artificial general intelligence)的研究道路。

從語義上來說,Embodied 指具體的、具象的、有形的,而在這裡對智慧體我們翻譯為具身,更著重於身體(body)這個屬性,字面意思就是具有身體的。總的來說,Embodied AI 研究的就是可觸碰、可互動、生活在現實世界中的智慧體,很大意義上就是擁有物理身體和智慧的機器人,這也就是為什麼具身智慧是人工智慧和機器人的交叉領域。聽起來具身人工智慧是對智慧機器人取了一個新的名字,然而研究具身化的智慧其實是人工智慧研究重大的、正規化(paradigm)級別的變革,具有深遠的意義。

我們可以先看看目前主流的、在深度學習時代廣泛採用的學習正規化:先是資料採集,然後是資料標註,最後是監督性訓練。這樣的正規化嚴重依賴人類對學習資料的挑選,在資料充足、標註難度低、不需要互動的一些問題上已經取得很好的效果,比如人臉識別、機器翻譯等等,然而這樣的智慧屬於典型的弱人工智慧,目前還看不清如何通向強人工智慧或者說是通用人工智慧。

反觀具身智慧,他立足於對人類嬰兒認知的研究成果——智慧的產生源於智慧體與真實環境的感知和物理互動,從目的上就是要挑戰通用智慧。可以想見,作為典型的強人工智慧體,我們人類在成長過程中比較少的依賴當前深度學習中採用的監督學習正規化,而一些關鍵性的技能的發展,如行走、使用工具、學習新的技能,都更依賴於身體力行的嘗試。

作為身在北大前沿計算研究中心、以推進計算與智慧前沿領域發展為目標的青年學者,我的學術理想正是賦予智慧體或者機器人與環境自主地互動、從互動中學習並衍生出通用智慧的能力,以期發展出可以更好地滿足人類多種多樣需求的強人工智慧體,如家用機器人。同時,具身智慧有很強的跨學科的特點,也能發揮我本科在物理和電子工程領域的一些積累。

新人新語 | 王鶴:在燕園探索具身人工智慧

可以談談你具體的研究問題嗎?

王鶴:我當前的研究主要圍繞發展可泛化的機器人視覺(robotic vision)系統和基於視覺的機器人物體操控(object manipulation)。具體來說,通用智慧體需要感知和接觸人類日常生活中各式各樣的物體,包含大量的未見過的物體,需要很強的泛化性。在博士期間,我發表在 CVPR 2019 oral 的關於歸一化物體座標空間(Normalized Object Coordinate Space, NOCS)的工作開闢了類別級物體六維位姿估計(category-level 6D object pose estimation)的這一位姿估計的子領域,主要解決的問題就是如何把位姿估計(亦即估計物體的中心位姿和三維朝向)從只能感知幾個已知物體的例項級推廣和發展到能估計一類物體中各種各樣的、包括大量訓練中沒有見過的物體例項的類別級。作為機器人視覺中的重要課題,位姿估計與機械手抓取等有密切聯絡,而我的這項工作將位姿估計的泛化性大幅提升,向通用機器人視覺系統邁進了重要的一步。

新人新語 | 王鶴:在燕園探索具身人工智慧

在北大,我著力於進一步拓展機器人視覺和操控的可泛化性。舉例說明,如何學習可泛化到類別的物體操控策略,又或者如何實現超越類別級、對全新物體的感知和操控。另外,我對如何減少深度學習任務中對監督的依賴也很感興趣,我認為這也是真正加速智慧發展的一個重要手段。

你在教學上有什麼規劃?

王鶴:明年春季學期我將開設計算機視覺導論課程,主要面向中高年級本科生。在當今深度學習風靡的時代,如何面向本科生上好計算機視覺這門課,我有一定的思考。

計算機視覺作為人工智慧中最重要的研究和應用領域之一,具有相對久的發展歷史,有著眾多經典的方法和問題解決思路。然而,隨著近年來深度學習的興起,在很多工上深度學習都取得了更好的結果,在研究中漸漸有系統地替代傳統視覺方法的趨勢。值得注意的一點是,單純使用深度神經網路對資料進行監督性訓練帶來的紅利已經消失了,深度神經網路已經成為了常用的手段,因此進一步發展計算機視覺更依賴於對任務本身的理解,如對特徵、對約束、對各種相關變數之間相互依賴的探索,而這些在傳統計算機視覺中都有深入的研究。

因此,我認為應當平衡地介紹計算機視覺的傳統方法和基於深度學習的方法,系統地介紹計算機視覺中基本的概念,突出計算機視覺傳統方法中的精華,並輔以深度學習方法、展現效果最優的工作,以期學生們能夠紮實基礎、拓寬口徑、與前沿研究和工業實踐能夠完成對接。並且,基於我個人的科研,我將會有選擇的介紹除了對圖片以外的各種資料載體的視覺方法,希望能夠展現計算機視覺領域的全貌。

可以談談你到中心工作的體驗嗎?

王鶴:前沿計算研究中心給了我一個非常溫暖和自由的工作環境。這裡有豐富的學術交流活動,支援並鼓勵我們邀請國際上活躍的學者來做報告,從我個人的研究領域來講,報告的質量和數量都與美國頂尖名校相當。更加難能可貴的是,中心也是學生的家園。在科研和學術以外,中心還為圖靈班學生、中心研究生和所有在這裡做科研的學生及訪問學者提供了豐富的文娛活動,營造了其樂融融的氛圍,在我眼中甚至超越了我博士期間的體驗。很高興能在這裡和這麼多優秀和有天分的學生一起工作,並向其他傑出的學者學習。

新人新語 | 王鶴:在燕園探索具身人工智慧

分類: 汽車
時間: 2021-11-29

相關文章

對未來交通的探索 R汽車RYZR概念車官圖

對未來交通的探索 R汽車RYZR概念車官圖
[太平洋汽車網 新車頻道]日前,上汽設計倫敦前瞻設計中心為慶祝其成立三週年,為R汽車設計了一款名為RYZR的概念車.這一前瞻的設計理念,帶來了上汽對未來交通最新的探索和嘗試,在完全自動駕駛的時代,人們 ...

比亞迪全新概念車亮相,外觀很前衛科幻,續航可達1千公里

比亞迪全新概念車亮相,外觀很前衛科幻,續航可達1千公里
近幾個月來,比亞迪的新能源車型月銷量保持著近乎萬輛的增幅,8月份,新能源車型銷量達到了60508輛,超越了奇瑞燃油車和新能源車型57908輛的銷量總和.而隨著全新的比亞迪海豚車型在8月底的上市,比亞迪 ...

直擊天津車展|車裡也能當客廳?智己Airo概念車亮相

直擊天津車展|車裡也能當客廳?智己Airo概念車亮相
在本次天津車展上,智己汽車帶來了與Heatherwick Studio合作設計的純電動概念車Airo.據官方透露,這款車不僅僅只是一臺汽車,更是一個生活空間,削弱了汽車原本作為交通工具的屬性. 據車叔 ...

Micro LED量產有望 康佳已完成小批次試產

Micro LED量產有望 康佳已完成小批次試產
Micro LED一直被認為是最具潛力的下一代顯示技術,它不僅擁有OLED的所有優勢,同時還擁有極其出色的使用壽命,不會出現燒屏的問題.不過,Micro LED的量產卻面臨較大的生產難度和極低的良品率 ...

硬科技投向標|5G訊息有望10月下旬全國試商用 三星電子2025年量產2nm晶片
<科創板日報>(上海,王夢雅)訊,本週,硬科技領域週報包括:5G訊息有望10月下旬全國試商用 數字人民幣錢包已加入5G訊息入口:北方華創:預計前三季度淨利同比增長82%-117%:京東方A ...

智慧座艙域和自動駕駛域“領跑”,汽車域控制器處在量產“前夜”| 中國汽車報

智慧座艙域和自動駕駛域“領跑”,汽車域控制器處在量產“前夜”| 中國汽車報
東軟睿馳釋出兩款新一代標準化域控制器,諾博科技宣佈智慧座艙域控制器現投入量產,均勝電子計劃2023年量產自動駕駛域控制器--最近一段時間,汽車域控制器領域好不熱鬧.在其背後,一場由汽車"新四 ...

上汽半年兩度參投Momenta 車企搶奪“獨角獸”備戰高階自動駕駛量產

上汽半年兩度參投Momenta 車企搶奪“獨角獸”備戰高階自動駕駛量產
經濟觀察網 記者 濮振宇 繼今年3月領投了Momenta的C輪融資後,9月15日,上汽集團宣佈繼續追加對這家自動駕駛初創公司的投資,雙方宣佈將深化在智慧駕駛核心技術領域的戰略合作,共同開發全棧智駕演算 ...

新車|首臺量產車下線,預售27萬元起,領克09值不值得買?

新車|首臺量產車下線,預售27萬元起,領克09值不值得買?
文:懂車帝原創 許博 [懂車帝原創 產品] 9月19日,領克SUV家族全新旗艦車型--領克09首臺量產車正式下線,同時新車正式開啟了預售.新車共推出6款配置車型,其中,MHEV車型的預售價為27萬-3 ...

特斯拉的電池路線部署,自建生產基地,加速大圓柱電池量產

特斯拉的電池路線部署,自建生產基地,加速大圓柱電池量產
新能源汽車巨頭-特斯拉在全球擁有4個汽車生產基地,年產量規劃超過200萬輛純電動車,其中上海的超級工廠產能今年將達45萬輛.高產能意味著需要大量的動力電池,而特斯拉在全球的動力電池的供應商集中於幾家, ...

全國首例特斯拉退一賠三;蔚來ET7準備量產;小鵬新SUV諜照曝光;

全國首例特斯拉退一賠三;蔚來ET7準備量產;小鵬新SUV諜照曝光;
01.賣二手車靠不靠譜?全國首例特斯拉退一賠三 近日,有特斯拉車主在社交平臺發文,長達兩年之久的"特斯拉買賣合同糾紛案"終於塵埃落地,二審判決,駁回特斯拉上訴,維持原判,退一賠三. ...

嫦娥五號樣品填補了月球研究30~10億年前空白,晶片製造關鍵材料實現國產化量產 | 一週科技導讀

嫦娥五號樣品填補了月球研究30~10億年前空白,晶片製造關鍵材料實現國產化量產 | 一週科技導讀
來源:科技日報.環球科學.科研圈.新華社.中國科學報.央視新聞.BioArt等 植物免疫抑制新通路被發現 來源:Cell 9月30日,發表於<細胞>(Cell)的一項研究,揭示了水稻鈣離子 ...

新車 | 軸距加長,國產寶馬“X5L”最新諜照曝光,或明年4月量產

新車 | 軸距加長,國產寶馬“X5L”最新諜照曝光,或明年4月量產
文:懂車帝原創 高帥鵬 [懂車帝原創 產品] 從今年8月國內諜照首次曝光後,寶馬X5國產計劃逐漸浮出水面.從我們獲取的最新圖片來看,新車造型預計將延續大部分進口車型設計.同時,此前訊息顯示,國產寶馬X ...

鐳射雷達量產車競賽,小鵬P5已率先撞線?

鐳射雷達量產車競賽,小鵬P5已率先撞線?
9月15日,小鵬汽車第三款車型P5正式上市,共計六款車型六種顏色,售價為15.79-22.39萬元,軸距為2768mm,支援城市NGP,定位於G3之上P7之下,將會承擔起小鵬汽車銷量的擔當角色. P6 ...

首款可交付的量產電動皮卡,竟然不是特斯拉

首款可交付的量產電動皮卡,竟然不是特斯拉
Rivian在這場比賽中擊敗了特斯拉.福特和通用汽車等公司,成為撞線第一家,這也為下一步的IPO計劃做好了充分的輿論基礎. 文丨AutoR智駕 王碩奇 Rivian這個名字或許對於國內消費者來說還比較 ...

大眾5.3億加速電芯量產
大眾|動力電池文章來源自:高工鋰電網 2021-09-17 17:44:29 閱讀:69 摘要大眾集團投資7000萬歐元(約合人民幣5.3億元)在薩爾茨吉特建設的研發中心投入使用,主要負責大眾電動汽車 ...

脈砥微電子完成天使輪融資,推動晶片產品設計、流片以及量產程序

脈砥微電子完成天使輪融資,推動晶片產品設計、流片以及量產程序
商道創投網9月20日官方獲悉:近日,脈砥微電子(杭州)有限公司宣佈完成天使輪千萬級融資.領投方是由圖靈創投和策源創投共同組成,華興Alpha擔任本次財務顧問.據瞭解,本輪募集的資金將會主要用於對晶片技 ...

中國股市:A股5大未來有望翻十倍的“船舶行業”龍頭(股名單)

中國股市:A股5大未來有望翻十倍的“船舶行業”龍頭(股名單)
"船舶"行業趨勢發展方向 受外圍影響,前期很多船隻因貿易停滯,不得不進行拆解,以減少維護費用和停泊費用,後因貿易恢復,航運業迎來了爆發式增長,運價已經翻了幾番,但是受制於造船週期的 ...

半導體版圖變局!三星高調宣佈2025年投入2奈米量產 劍指趕超臺積電先進製程 效能與電力效率全面提升
FX168財經報社(香港)訊 韓國三星在舉行晶圓代工論壇期間高調宣佈,2025年投入2奈米量產,再度確認將匯入新一代環繞閘極技術(GAA)電晶體架構,搶在臺積電前宣佈2025年投入2奈米制程的晶片量產 ...

TCL科技:t4柔性AMOLED產線一期已量產出貨,二期和三期的裝置已陸續搬入
TCL科技(000100)在投資者互動平臺表示,t4柔性AMOLED產線一期已量產出貨,獲得多家品牌客戶高度認可,二期和三期的裝置已陸續搬入.曲面屏和柔性摺疊屏完成品牌廠商產品交付和上量,正在匯入全球 ...

三星QD OLED面板11月量產,電視2022年初發布

三星QD OLED面板11月量產,電視2022年初發布
三星的QD事業正在逐漸明朗.據上下游產業鏈資訊,三星顯示(SDC)的QD OLED面板將於第四季度,最快11月實現量產:基於QD OLED面板的電視機將於2022年CES釋出,上市時間預計在上半年.該 ...