HarmonyOS應用框架如何解決多設備交互問題？
隨著全場景多設備生活方式的不斷深入，用戶擁有的設備越來越多，除了我們每天帶在身上的手機、手腕上的智能手表、口袋里面的無線耳機、背包里面的PC和Pad、另外家里還有智能電視、智能冰箱等設備，這些年，汽車也在逐步地變成一臺跑在道路上的電子設備，如果這些設備都是彼此孤立的，那體驗一定是很差的。
因此，要想讓萬物互聯(lián)，就需要新的交互模式，而新的交互模式在開發(fā)時，需要應用框架加持，HarmonyOS應用框架就解決了新時代的交互問題。接下來我們以用戶交互為起點，來介紹HarmonyOS應用框架是如何解決多設備交互問題的。
一、萬物互聯(lián)時代的基本交互模型
如圖1所示，縱觀人機交互歷史，有以下幾個關鍵時間點：
- 1868年，打字機的出現(xiàn)解決了人機交互中文字輸入的問題
- 1964年，鼠標的出現(xiàn)解決了人機交互中圖形界面交互的問題
- 2007年，多指手勢的出現(xiàn)解決了觸摸屏的交互問題
圖1 人機交互模式圖
這三個歷史時間點可以說是人機交互史上的分水嶺，它們提供了新的交互方式解決了新類型設備的交互問題。但是，這三種交互方式解決的都是單機交互的問題，而萬物互聯(lián)時代面臨的是多設備交互的復雜問題。
基于人機交互多年的研究分析，我們發(fā)現(xiàn)，在多設備的交互場景上，用戶使用設備的場景可以分為兩大類，一類是用戶同時使用多個設備，另一類是相繼使用多個設備(如圖2所示)。
圖2 多設備交互模型圖
1.同時使用(Simultaneous)
當我們在同時使用多個設備時，除了并發(fā)性之外，交互模型還有兩個重要的特點就是：協(xié)作性和互補性。協(xié)作性是指多個設備彼此交互協(xié)調(diào)完成一項任務?；パa性是指利用設備的本身形態(tài)差異，設備之間互相取長補短，完成一項任務。
例如，當我們在家里找不到電視遙控的時候，手機可以變身成遙控器，這就是一種設備能力的互補。
2.相繼使用(Sequential)
而當我們相繼使用多個設備時，連續(xù)性和一致性就非常重要了。連續(xù)性是指，當我從一個設備轉(zhuǎn)向另外一個設備的時候，我剛剛操作的狀態(tài)應當是繼續(xù)保留沒有被中斷的。例如：將手機上播放的視頻轉(zhuǎn)到PAD上后能夠繼續(xù)播放。而一致性是指，當我們在使用手表、手機、大屏等不同設備時，它們操作方式和基礎視覺元素應當是一致的。例如：多指手勢、控件的樣式。當然，一致不代表一樣，每種設備由于其屏幕尺寸和形態(tài)不一樣，視覺元素還需要有針對性地進行一些自適應。
為了滿足上述兩種交互模型，HarmonyOS構建的分布式應用框架中提供了兩種基礎功能，分別是：多端協(xié)同與跨端遷移。
接下來我們將介紹HarmonyOS的上述兩個能力是如何解決多設備交互問題的。
二、HarmonyOS如何解決多設備交互問題?
首先我們來介紹HarmonyOS分布式應用框架，該框架可以分為5層(如圖3所示)。
圖3 分布式應用框架整體架構視圖
Layer1是底層軟件，包括內(nèi)核、驅(qū)動和還有軟總線，這一層與開發(fā)者距離相對較遠。
Layer2是基礎能力平臺，它包含了很多分布式環(huán)境下的基礎服務，例如：分布式任務調(diào)度、分布式數(shù)據(jù)管理、分布式硬件管理以及分布式文件管理等。
Layer3是應用框架的核心服務，大體可以分為兩塊：一塊是全局包管理，一塊是分布式運行管理。與傳統(tǒng)的操作系統(tǒng)不同，HarmonyOS上的包管理，需要處理整個超級終端上所有設備的包信息，因此我們稱之為全局包管理。而對于分布式運行管理，將在下文重點介紹，其中包含了協(xié)同和遷移框架。
Layer4是開發(fā)者所使用的編程接口層。盡管系統(tǒng)底層的實現(xiàn)非常復雜，但是我們在第四層為開發(fā)者提供了簡潔的接口。
Layer5是開發(fā)應用的用戶程序?qū)?，這一層與開發(fā)者聯(lián)系密切。
接下來我們將重點為大家介紹Layer3中實現(xiàn)多設備交互模型的兩個框架，分別是多端協(xié)同框架和跨端遷移框架。
1.多端協(xié)同框架
多端協(xié)同框架就是為用戶同時使用多個設備的場景而準備的。例如：手機側(cè)應用做游戲手柄，智慧屏側(cè)應用做游戲顯示，為用戶組成一個全新的游戲體驗;又如：平板側(cè)應用做答題板，智慧屏側(cè)應用做直播，為用戶組成一個全新的上網(wǎng)課體驗。
要實現(xiàn)這樣的業(yè)務，就要借助多端協(xié)同框架(如圖4所示)。
圖4 多端協(xié)同
多端協(xié)同是一種實現(xiàn)用戶應用程序流轉(zhuǎn)的技術方案，指多端上的不同F(xiàn)A/PA同時運行、或者交替運行實現(xiàn)完整的業(yè)務;或者多端上的相同F(xiàn)A/PA同時運行實現(xiàn)完整的業(yè)務。多個設備作為一個整體為用戶提供比單設備更加高效、沉浸的體驗。
說明：FA：Feature Ability，有UI界面， PA：Particle Ability，無UI界面。
當我們的業(yè)務需要跨越多個設備時，有兩個基本的能力需要保證：
一是能夠建立跨設備的連接通路，并且實時感知連接狀態(tài)的變化。這一點通過IAbilityConnection來完成，它依賴分布式管理服務和軟總線來進行底層連接的管理。
二是能夠在連接通道上傳遞狀態(tài)和數(shù)據(jù)，以進行業(yè)務的協(xié)同。這一點可以通過HarmonyOS的IDL實現(xiàn)。這些傳遞的數(shù)據(jù)既包含了系統(tǒng)需要傳遞的數(shù)據(jù)，也包含了應用程序進行需要傳遞的數(shù)據(jù)。
有了這兩個能力，開發(fā)者便可以完成不同設備之間業(yè)務邏輯的協(xié)同，以及設備之間硬件能力互補的功能。
2.跨端遷移框架
跨端遷移是用來為用戶相繼使用多個設備而準備的，它是我們常用的一個場景。例如，當你通過手機觀看視頻時，覺得體驗不夠好，你想切換到屏幕更大、音效更好的PAD上繼續(xù)觀看，在HarmonyOS之外的系統(tǒng)上，你只能先解鎖PAD，找到那個應用，然后再找到播放歷史，如果運氣好，你的播放進度已經(jīng)被同步過去了，但很可能，由于網(wǎng)絡同步的延遲，你還得先找到剛剛觀看的位置，然后再繼續(xù)觀看。
而關注HarmonyOS系統(tǒng)的朋友們一定會知道，在今年HarmonyOS 2發(fā)布會上，我們發(fā)布了全新的服務中心。在這個服務中心當中，你可以跨設備的管理整個超級終端上的任務列表，這使得你可以直接在手機上的任務中心，一步將任務拖動到PAD上就可以了。
要完成這一點，就要借助跨端遷移框架(如圖5所示)
圖5 跨端遷移
跨端遷移是一種實現(xiàn)用戶應用程序流轉(zhuǎn)的技術方案，是將設備1端運行的FA遷移到設備2端上，通過IAbilityContinuation實現(xiàn)業(yè)務遷移。完成遷移后， 設備2端的FA繼續(xù)任務，而設備1端應用退出。當用戶將任務從一臺設備拖動到另外一臺設備上時，應用程序會收到來自系統(tǒng)的調(diào)用，此時應用程序可以將自己需要保存的狀態(tài)告知系統(tǒng)，系統(tǒng)會借助于分布式任務管理將數(shù)據(jù)傳遞到目標端，然后拆包數(shù)據(jù)并恢復應用狀態(tài)。在這種情況下，用戶感受到的就是將任務從一個設備遷移到了另外一個設備。
遷移和協(xié)同需要開發(fā)者的支持，但這類新的特性往往并不能在短時間內(nèi)獲得完全地普及， 當應用沒有適配遷移框架時，系統(tǒng)要如何完成跨段遷移任務?
①跨端遷移與窗口管理
為了保證用戶體驗的一致性，當應用沒有適配遷移框架的時候，系統(tǒng)會通過分布式窗口管理的能力完成跨端遷移任務。如圖6所示，當用戶跨設備拖動任務時，HarmonyOS系統(tǒng)會將任務窗口遷移到一個Virtual Window(虛擬窗口)上渲染，然后將渲染的結(jié)果通過軟總線傳遞到ProxyWindow(遠端的代理窗口)上，由此達到跨設備顯示的效果。
圖6 分布式窗口管理圖
②分布式硬件平臺與自動跟隨
我們知道，應用在運行過程中，很多時候都會利用一些硬件設備。例如：Camera、麥克風或傳感器。而當我們將一個應用從一個設備遷移到另外一個設備之后，不只是把用戶界面和應用狀態(tài)轉(zhuǎn)移過去就可以了，如果轉(zhuǎn)移之后聲音還留在原來的設備上播放，那就比較奇怪了。因此，在HarmonyOS中，這些硬件是如何管理的呢?
為了使得應用遷移的流程更加具有一致性，我們在硬件層面系統(tǒng)中做了兩件事情(如圖7所示)：
圖7 分布式硬件平臺與自動跟隨
第一件事是“硬件資源池化”。即：HarmonyOS系統(tǒng)會將超級終端上所有設備的硬件進行全局的編號和虛擬化，這使得任何一個設備上的軟件都可以使用所有超級終端設備內(nèi)的硬件。
第二件事是“自動跟隨”。應用程序使用的其實是一個虛擬的句柄，它并非與某個特性硬件相綁定，當我們在將某個軟件實體從一個設備遷移到另外一個設備時，系統(tǒng)中的遷移決策模塊會自動將硬件也一起切換到目標設備上，使得整個用戶體驗是一致的。
經(jīng)過上述介紹，我相信大家已經(jīng)理解HarmonyOS應用框架是如何解決多設備交互問題的。
作為新一代的智能終端操作系統(tǒng)，HarmonyOS非常歡迎廣大開發(fā)者加入我們，成為整個鴻蒙生態(tài)的一員，讓我們一起，為全球幾十億用戶共筑全新的商業(yè)生態(tài)以及無限可能。
