日前,2022聯(lián)想創(chuàng)新開(kāi)放日在聯(lián)想集團(tuán)北京全球總部開(kāi)幕,集中展示了聯(lián)想在個(gè)人計(jì)算設(shè)備領(lǐng)域的核心技術(shù)、產(chǎn)品、服務(wù)及解決方案。創(chuàng)新開(kāi)放日期間,聯(lián)想公開(kāi)展示了約180項(xiàng)技術(shù),涵蓋個(gè)人電腦、智能手機(jī)、商用辦公、智能生態(tài)、VR/AR等領(lǐng)域。
同時(shí),聯(lián)想還舉辦了第26期擎智沙龍活動(dòng),在“聯(lián)想2022超智能電腦創(chuàng)新論壇、技術(shù)論壇”的現(xiàn)場(chǎng),多家媒體近距離感受聯(lián)想最具前沿的創(chuàng)新技術(shù)與產(chǎn)品?;顒?dòng)現(xiàn)場(chǎng),聯(lián)想與ATL、京東方、商湯科技等多家合作伙伴共同分享創(chuàng)新技術(shù)的探索與應(yīng)用,全面呈現(xiàn)聯(lián)想引領(lǐng)行業(yè)智能化變革成果。
Smarter PC的安全攻守之道
關(guān)于Smarter PC的安全攻守之道,紐創(chuàng)信高級(jí)安全專(zhuān)家王宇軒和聯(lián)想全球安全實(shí)驗(yàn)室韓春玲博士進(jìn)行了相關(guān)分享。
王宇軒進(jìn)行了《硬件視覺(jué)的IoT安全》主題分享。據(jù)他介紹,IoT硬件的攻擊手段,比較常見(jiàn)的包括:故障注入、側(cè)信道、短接等等。
所謂故障注入,就是通過(guò)注入一些物理故障,比如說(shuō)電壓、電磁、時(shí)鐘、激光等,導(dǎo)致處理器芯片出現(xiàn)運(yùn)行錯(cuò)誤,改變代碼的執(zhí)行過(guò)程。故障注入的發(fā)生主要和物理環(huán)境相關(guān),其防御主要從硬件和軟件兩方面來(lái)考慮,做好防御可以讓CPU芯片變得更安全。
側(cè)信道本質(zhì)是一個(gè)共享對(duì)象,硬件上的指標(biāo)包括功耗等。在做密碼算法進(jìn)行密碼判斷的時(shí)候,如果算法實(shí)現(xiàn)的不好,就會(huì)導(dǎo)致判斷密碼正確,例如通過(guò)密碼消耗的功耗,去反推出大概的密碼。關(guān)于側(cè)信道的防御,即使密碼校驗(yàn)錯(cuò)誤中也加入死循環(huán)去等待,這樣攻擊者就無(wú)法分辨出密碼信息。
此外還有短接,短接其實(shí)是對(duì)PCB上的信息的利用,是一種類(lèi)似廠商的維護(hù)功能性的東西。但是如果被攻擊者獲取了,就會(huì)被加以利用。因此這種防御方式就是保護(hù)好PCB、保護(hù)好所設(shè)計(jì)的電路。
關(guān)于IoT硬件的這些攻擊和防御方式,王宇軒表示,當(dāng)今的硬件基本都是通用的,而軟件是硬件上的靈魂,因此硬件的利用手段其實(shí)還是通過(guò)軟件來(lái)進(jìn)行控制的。在進(jìn)行安全研究時(shí),要對(duì)軟硬件二者進(jìn)行結(jié)合。
韓春玲分享的主題是《數(shù)據(jù)安全與隱私保護(hù)》。她表示,隨著大數(shù)據(jù)和人工智能時(shí)代的到來(lái),數(shù)據(jù)安全和隱私保護(hù)對(duì)于個(gè)人和企業(yè)都越來(lái)越重要。聯(lián)想集團(tuán)有完善的組織體系、完備的數(shù)據(jù)管控流程,以及在數(shù)據(jù)安全保護(hù)方面的核心技術(shù)、完善的數(shù)據(jù)安全和隱私保護(hù)人才庫(kù)、知識(shí)庫(kù)和工具庫(kù)等。聯(lián)想中國(guó)還成立了數(shù)據(jù)安全和隱私保護(hù)的委員會(huì),旨在推動(dòng)全集團(tuán)的數(shù)據(jù)安全和隱私保護(hù)發(fā)展。
如何保護(hù)數(shù)據(jù)安全用戶(hù)的敏感數(shù)據(jù)?韓春玲介紹,從數(shù)據(jù)全生命周期出發(fā),包括采集、傳輸、存儲(chǔ)、處理、交換、銷(xiāo)毀等等。每一個(gè)階段都涉及不同的技術(shù),比如在傳輸階段,有加密傳輸、通道加密、完整性保護(hù);數(shù)據(jù)處理階段有身份認(rèn)證、權(quán)限控制、賬號(hào)安全等。隱私方面,聯(lián)想圍繞多個(gè)方向展開(kāi)了研究,比如基于大數(shù)據(jù)隱私保護(hù)、數(shù)據(jù)區(qū)域標(biāo)識(shí)化、匿名化、差分隱私等。
從數(shù)據(jù)安全和隱私保護(hù)方面,該如何對(duì)聯(lián)想用戶(hù)負(fù)責(zé)?韓春玲介紹,主要分為三個(gè)維度:第一,遵守法律法規(guī)。涉及到的法律法規(guī)包括數(shù)據(jù)安全法、個(gè)人信息保護(hù)法、網(wǎng)絡(luò)安全法、數(shù)據(jù)出境安全評(píng)估辦法等,還包括國(guó)外CCPA、GDPR等。第二,從技術(shù)角度看數(shù)據(jù)安全和隱私保護(hù)需要做哪些工作,從全生命周期采集、存儲(chǔ)、處理、傳輸、交換以及涉及到的核心技術(shù),包括數(shù)據(jù)隔離、身份認(rèn)證、加密傳輸、通道安全等等。第三,隱私方面,包括差分隱私、隱私保護(hù)的機(jī)器學(xué)習(xí)、數(shù)據(jù)安全解決方案等,聯(lián)想集團(tuán)也都進(jìn)行了相關(guān)研究。
關(guān)于數(shù)據(jù)安全和隱私保護(hù)的體系框架,韓春玲總結(jié)為五個(gè)維度:第一,理念和法律法規(guī);第二,管理制度;第三,核心技術(shù);第四,策略;第五,根據(jù)數(shù)據(jù)在不同平臺(tái)、不同應(yīng)用上的流向,全面保護(hù)數(shù)據(jù)安全和隱私。
那么,聯(lián)想設(shè)備是如何保護(hù)用戶(hù)數(shù)據(jù)安全的?韓春玲認(rèn)為,從數(shù)據(jù)全生命周期出發(fā),從數(shù)據(jù)采集、存儲(chǔ)、傳輸、處理、交換、銷(xiāo)毀,每一個(gè)階段都涉及到眾多核心技術(shù)保護(hù)用戶(hù)的敏感數(shù)據(jù)。如果從設(shè)備上出發(fā),從打開(kāi)電腦按下開(kāi)機(jī)鍵的那一刻起就有核心技術(shù)去保護(hù)數(shù)據(jù)的安全,無(wú)論從硬件、系統(tǒng),再到文件、應(yīng)用、網(wǎng)絡(luò)、云端,這樣每一個(gè)節(jié)點(diǎn)都有非常完備的方法保護(hù)用戶(hù)的數(shù)據(jù)安全。
她強(qiáng)調(diào),聯(lián)想在數(shù)據(jù)安全和隱私保護(hù)的理念是“Security by Design & Privacy by Design”,聯(lián)想始終將數(shù)據(jù)安全和隱私保護(hù)根植于產(chǎn)品的設(shè)計(jì)當(dāng)中。
基于聯(lián)想U(xiǎn)DS構(gòu)建現(xiàn)代化企業(yè)應(yīng)用
Thoughtworks首席咨詢(xún)師、架構(gòu)師陳鋒分享了如何在UDS上構(gòu)建企業(yè)應(yīng)用。他表示,微前端架構(gòu)已經(jīng)是業(yè)內(nèi)比較主流的實(shí)踐,有多個(gè)異構(gòu)前端應(yīng)用的時(shí)候,通過(guò)微前端架構(gòu)能快速實(shí)現(xiàn)集成,并且讓其交互過(guò)程中沒(méi)有任何Delay。“在UDS上,已經(jīng)有了微前端架構(gòu)的支撐,所以制作微前端架構(gòu)應(yīng)用的時(shí)候就顯得很輕松”, 陳鋒補(bǔ)充說(shuō),“也正是因?yàn)橛蠻DS的線(xiàn)程,微前端架構(gòu)的實(shí)現(xiàn),我們?cè)诮桓段⑶岸说臅r(shí)候,是一個(gè)輕松的選擇,這就為我們奠定了技術(shù)架構(gòu)選型的確定性、可行性。”
陳鋒指出了自動(dòng)化CI Pipeline的必要性。他介紹說(shuō),既要做迭代管理、內(nèi)容管理,又要去完成編碼,同時(shí)還要保證編碼質(zhì)量,覆蓋必要的自動(dòng)化測(cè)試。因此,開(kāi)發(fā)過(guò)程中,為了保證交付最高質(zhì)量的產(chǎn)品或軟件,需要盡早地完成功能測(cè)試,同時(shí)進(jìn)行安全檢查。只有這樣做,才能夠最終交付一個(gè)令客戶(hù)滿(mǎn)意的、可靠的、穩(wěn)定的產(chǎn)品。
由于UDS有Scaffold的功能,只需要點(diǎn)擊一下,大約兩分鐘時(shí)間可以完成上述所有工作。“以往的情況下,我們的實(shí)踐ThoughtWorks需要準(zhǔn)備好現(xiàn)有的云原生的機(jī)制,在云上設(shè)置好。而在UDS上,這些應(yīng)用級(jí)別的支持居然已經(jīng)直接存在了,當(dāng)我們?nèi)?gòu)建這些應(yīng)用的時(shí)候,就變得更加快捷”,陳鋒說(shuō)道,“我們?cè)赨DS上交付過(guò)了可能超過(guò)二十多個(gè)服務(wù)或應(yīng)用,它大概幫助我們節(jié)省了80%的時(shí)間。”
基于和聯(lián)想的多年合作,以及在UDS完成很多應(yīng)用和解決方案的經(jīng)驗(yàn),陳鋒總結(jié)了以下幾點(diǎn)感悟:
第一,UDS是開(kāi)放的平臺(tái),支持各種部署和使用。一個(gè)現(xiàn)有的應(yīng)用可以很輕松地移植在UDS上使用,基于這個(gè)方式能夠得到快速的發(fā)布方法。
第二,UDS不僅是一個(gè)平臺(tái),更像是一個(gè)生態(tài)環(huán)境,不僅有云平臺(tái)的支持,幫助快速構(gòu)建應(yīng)用;同時(shí)也提供很多設(shè)備端的支持,在設(shè)備端進(jìn)行互操作的時(shí)候,UDS的現(xiàn)有基礎(chǔ)設(shè)施可以幫助構(gòu)建,這其實(shí)是一個(gè)端到端的構(gòu)建生態(tài),已經(jīng)超出平臺(tái)的價(jià)值。
第三,這是一個(gè)持續(xù)演進(jìn)的生態(tài)環(huán)境,響應(yīng)開(kāi)發(fā)者需求的時(shí)候,UDS也會(huì)持續(xù)進(jìn)化,也讓用戶(hù)更有信心在UDS上構(gòu)建更多的數(shù)據(jù)智能服務(wù)。
超寫(xiě)實(shí)數(shù)字人制作與驅(qū)動(dòng)
聯(lián)想研發(fā)總監(jiān)李洪偉認(rèn)為,火爆的超寫(xiě)實(shí)虛擬人面臨四大挑戰(zhàn):第一,形象設(shè)計(jì)、IP的工作;第二,模型制作復(fù)雜;第三,把虛擬人帶到現(xiàn)實(shí)中有兩種模式,一種是實(shí)時(shí)驅(qū)動(dòng),一種是AI驅(qū)動(dòng),靠語(yǔ)音識(shí)別自主與人交互;第四,高性能渲染。
為什么超寫(xiě)實(shí)數(shù)字人獲得了現(xiàn)在的突破?李洪偉分析了游戲引擎Apex(支持了Meta Human的體系)的特點(diǎn):第一,有影視級(jí)的制作技術(shù),所有的細(xì)節(jié)都可以照顧到;第二,有在線(xiàn)可用的簡(jiǎn)單定制工具;第三,制作出來(lái)的東西可以在終端驅(qū)動(dòng),不管做直播在手機(jī)上呈現(xiàn),還是在游戲里需要復(fù)雜渲染的;第四,動(dòng)捕技術(shù)。隨著機(jī)器學(xué)習(xí)的介入,動(dòng)捕技術(shù)成本快速下降。
不過(guò),有了一個(gè)制作精細(xì)的數(shù)字人,下一步還要進(jìn)行動(dòng)態(tài)驅(qū)動(dòng)。李洪偉介紹了兩種驅(qū)動(dòng)模式:一種是離線(xiàn),要花時(shí)間制作成動(dòng)畫(huà);另一種是實(shí)時(shí)身體動(dòng)捕。
但是實(shí)時(shí)動(dòng)捕充滿(mǎn)了挑戰(zhàn),面部與身體采用的是不同的動(dòng)捕技術(shù)。對(duì)面部的動(dòng)捕采用Blendshape(混合變形),基本邏輯是把人臉表征成Blendshape,再驅(qū)動(dòng)內(nèi)部Control rig,再驅(qū)動(dòng)骨骼,最后實(shí)現(xiàn)渲染;身體捕捉精細(xì)度要求低得多,但要把身體骨架關(guān)鍵點(diǎn)捕捉到,能夠驅(qū)動(dòng)起來(lái)。
實(shí)現(xiàn)動(dòng)捕之后,在渲染端呈現(xiàn)出的時(shí)候這個(gè)過(guò)程是散的,浮點(diǎn)數(shù)要反過(guò)來(lái)做擴(kuò)展,先擴(kuò)展到中間綁定的Control vague,大約100個(gè);人臉表征有700多個(gè);在人臉表情變化中,用Blendshape表征其實(shí)并不全,真正用的是254個(gè);再加上眼睛渲染的系數(shù)。這些組合起來(lái),再配上矯正表情,才能實(shí)現(xiàn)一個(gè)真實(shí)的人臉,每一幀都要做預(yù)測(cè)、控制和計(jì)算。
類(lèi)似于人臉用52個(gè)浮點(diǎn)數(shù)表征Blendshape,身體用骨骼的旋轉(zhuǎn)表征。對(duì)身體進(jìn)行動(dòng)捕有三種:第一,傳感器。穿戴上慣性傳感器之后,它就能計(jì)算出身體這個(gè)部位背后關(guān)節(jié)的運(yùn)動(dòng)。傳感器需要在主機(jī)里面演變做這樣的計(jì)算,所以演員會(huì)需要穿戴這些東西,跟關(guān)節(jié)進(jìn)行對(duì)應(yīng)。第二,光場(chǎng)捕捉,基本是對(duì)人拍照,光場(chǎng)不能受限。第三,可以理解為前兩者的結(jié)合,基于計(jì)算機(jī)視覺(jué)、神經(jīng)網(wǎng)絡(luò)做機(jī)器學(xué)習(xí),戴著人體的關(guān)鍵關(guān)節(jié)推算出來(lái)。
李洪偉介紹,從定位來(lái)講,虛擬人可以分成兩類(lèi):第一種是功能型虛擬人(服務(wù)型虛擬人);第二種是身份型虛擬人,有自己的身份,或是個(gè)人的虛擬化身。
對(duì)于虛擬人的前景,李洪偉表示,近兩年很多領(lǐng)域已經(jīng)開(kāi)始采納虛擬人的方案,包括傳媒、文旅、金融、醫(yī)療、教育等。在抖音、快手可以看到很多虛擬主播,金融行業(yè)引入很多虛擬客服、虛擬經(jīng)理、虛擬引導(dǎo)員,這些都是功能型虛擬人目前的應(yīng)用領(lǐng)域。
而身份型虛擬人占比更大,根據(jù)中銀證券的預(yù)測(cè),2030年國(guó)內(nèi)市場(chǎng)將達(dá)到2700多億的市場(chǎng)規(guī)模,其中虛擬IP比虛擬化身將占據(jù)更大的應(yīng)用市場(chǎng)。
寫(xiě)在最后
在2022聯(lián)想創(chuàng)新開(kāi)放日期間,持續(xù)三天的技術(shù)講座,主題內(nèi)容圍繞超智能電腦相關(guān)技術(shù)展開(kāi),重點(diǎn)聚焦:PC核心技術(shù)、用戶(hù)場(chǎng)景打造智能體驗(yàn)、構(gòu)建超智能電腦生態(tài)提供服務(wù)及解決方案。
數(shù)字化技術(shù)為人們提供了更好認(rèn)知并適應(yīng)物理世界的新方法。隨著數(shù)字化的不斷演進(jìn)和發(fā)展,智能化為其下一步發(fā)展帶來(lái)更大想象空間。此次的聯(lián)想創(chuàng)新開(kāi)放日,展示了聯(lián)想用智能化技術(shù)帶動(dòng)數(shù)字化的發(fā)展,從人們的生活、工作、娛樂(lè)、學(xué)習(xí)等需求出發(fā),全方位滿(mǎn)足用戶(hù)需求的能力。