一、问题背景:从GUI到LUI的范式转型与现有方案短板
传统移动与物联网操作系统长期遵循“用户主动打开应用、手动串联功能”的GUI交互模式。应用间存在数据与能力壁垒,完成跨应用复合任务时,用户需要多次切换程序、重复录入参数,链路冗长效率低下。以出行规划为例,用户需分别打开航旅、地图、日历、天气四款应用,手动复制行程信息,耗时普遍超过3分钟。随着万物互联产业成熟与端侧大模型落地,操作系统交互范式正向自然语言驱动的LUI(语言交互)演进,核心诉求是让系统自主理解模糊自然指令、自动串联分散能力、跨终端完成闭环任务。
现有AI调度方案普遍存在四类短板:能力耦合严重,调度逻辑与业务代码强绑定,新增Skill需重构调度流程;单设备局限,缺乏原生分布式调度能力,跨端任务依赖第三方中间件;编排规则固化,仅支持线性串行调用,无法自适应分支、并行、重试、抢占式复杂任务流;安全管控缺失,跨应用Skill调用缺少权限、参数校验、日志审计机制。
二、鸿蒙智能体框架HMAF核心概念
鸿蒙智能体框架(HMAF,Ark Agentic Framework)是HarmonyOS 6.0及以上版本推出的原生AI协同底座。它通过Agent(智能体)与Skill(技能)二元核心模型,构建统一的能力调度体系,实现“一句话触发全域服务”的技术目标。
Agent是具备自主决策、任务规划、多能力编排的调度实体,分为系统超级智能体(小艺)和领域垂直智能体(办公Agent、家居Agent等)。Agent不承载具体业务逻辑,仅负责意图解析、任务拆分、Skill调度、结果聚合与异常重试,是场景的“调度中枢”。
Skill是应用或硬件的最小原子化可调用能力单元。开发者通过声明式配置将业务功能封装为标准化Skill,对外输出统一入参、出参、约束契约。单个应用可输出多组Skill包,Skill无独立运行入口,仅由Agent调度执行。
底层依托鸿蒙分布式软总线,打通手机、PC、平板、智慧屏、IoT设备算力与通道,实现Skill跨设备远程调用、负载均衡、状态同步,是多终端复杂场景落地的底层支撑。
三、HMAF三层整体架构
HMAF智能体调度架构分为三层:交互感知层负责多模态输入(语音/文本/手势/传感器触发);调度决策层是Agent核心引擎,包含意图解析引擎、DAG任务规划调度器、Skill匹配路由中心、多Agent通信模块、冲突消解与异常容错模块;能力供给层为Skill执行池,包括本地Skill(本机应用封装能力)、远端Skill(软总线跨终端硬件/应用能力)、云端Skill(大模型推理、第三方平台开放能力)。
调度全链路分为五大标准阶段:意图解析→任务拆解规划→Skill匹配路由→多技能组合执行→结果聚合反馈。
四、阶段一:意图解析与结构化任务生成
用户输入自然语言模糊指令后,系统端侧轻量化语义大模型完成意图识别、实体抽取、参数补全,输出标准化AgentRequest结构体,消除自然语言歧义。代码示例如下:
- // 引入HMAF意图解析核心套件
- import { IntentEngine, IntentEntity, AgentRequest } from '@kit.AgentKit';
- // 初始化意图引擎,注册支持领域:出行、办公、家居
- const intentEngine = IntentEngine.create({
- supportDomains: ["travel", "office", "smartHome"],
- autoCompleteParam: true,
- localModelPriority: true
- });
- // 用户原始输入
- const userInput: string = "下周三去上海出差,帮我订机票、酒店,同步日程并推送当地天气";
- // 执行意图解析
- const parseResult: AgentRequest = await intentEngine.resolve(userInput);
- console.info("识别主意图:", parseResult.intent);
- console.info("抽取实体参数:", parseResult.params);
- /* 输出结构化参数
- {
- intent: "travel_business_plan",
- params: {
- travelDate: "2026-07-15",
- destination: "上海",
- serviceList: ["flight_book", "hotel_book", "calendar_sync", "weather_query"]
- }
- }
- */
复制代码
解析完成后,调度器基于参数列表生成DAG任务拓扑图,区分串行依赖任务(先查天气再订酒店)、并行无依赖任务(订机票+同步日程),定义任务优先级、超时阈值、失败重试策略。
五、阶段二:Skill注册、匹配与路由调度
Skill标准化声明通过skill.json声明文件对外暴露能力契约,包含意图映射、入参约束、权限范围、执行设备类型。系统启动时自动扫描全设备已注册Skill,存入全局路由注册表。示例声明如下:
- // flight_skill.json 机票预订Skill声明示例
- {
- "skillId": "com.travel.flight.book",
- "bindIntent": "flight_book",
- "inputParams": [
- {"name": "departDate", "type": "string", "required": true},
- {"name": "destination", "type": "string", "required": true}
- ],
- "supportDevice": ["phone", "pc"],
- "timeout": 8000,
- "retryCount": 2,
- "permission": ["ohos.permission.AGENT_CALL_TRAVEL"]
- }
复制代码
应用侧ArkTS实现Skill执行回调,使用completeArkTSScriptInApp返回执行结果,保证调度链路闭环:
- async onInvoke(request: AgentRequest): Promise<AgentResponse> {
- try {
- const flightData = await this.queryFlightApi(request.params);
- return { code: 0, data: flightData, msg: "机票查询成功" };
- } catch (err) {
- return { code: err.code, msg: "机票查询失败", suggestion: "请核对出行日期或切换网络后重试" };
- } finally {
- this.completeArkTSScriptInApp();
- }
- }
复制代码
Skill匹配路由采用三层逻辑:语义精确匹配基于bindIntent字段精准匹配主任务所需Skill;参数兼容性校验校验Skill入参是否覆盖当前任务实体;分布式负载择优通过软总线实时采集各设备CPU、内存、电量、网络延迟,自动调度至负载最低设备执行。
六、阶段三:多Skill动态组合编排(核心调度逻辑)
HMAF调度器内置DAG有向无环图编排引擎,支持四类Skill组合模式:串行依赖组合(前序Skill输出作为后序输入)、并行无依赖组合(多Skill独立执行后统一聚合)、分支条件组合(根据前序返回值切换后续能力分支)、抢占式优先级组合(高紧急度Skill中断低优先级任务)。
DAG任务编排代码实现示例:
- import { TaskPlan, TaskNode, TaskRelation } from '@kit.AgentScheduler';
- const travelPlan = new TaskPlan();
- const nodeWeather = new TaskNode("weather_query", "com.weather.skill");
- const nodeFlight = new TaskNode("flight_book", "com.travel.flight");
- const nodeHotel = new TaskNode("hotel_book", "com.travel.hotel");
- const nodeCalendar = new TaskNode("calendar_sync", "com.calendar.skill");
- travelPlan.addRelation(new TaskRelation(nodeWeather, nodeHotel, "serial"));
- travelPlan.addRelation(new TaskRelation(nodeFlight, nodeCalendar, "parallel"));
- const planResult = await travelPlan.run();
- const finalOutput = this.aggregateSkillResult(planResult.nodeList);
复制代码
调度过程内置容错机制:单个Skill超时或异常时,调度器自动触发重试;重试失败则隔离故障节点,保留其余正常Skill结果,并向用户推送可执行修复建议。
七、阶段四:跨Agent协同与分布式Skill调度
复杂行业场景无法依靠单一领域Agent完成,HMAF提供A2AClient多智能体通信组件,实现Agent之间互相下发子任务、共享Skill执行数据。例如智慧办公场景中,PC文档Agent提取会议纪要,通过A2A调用手机AI Agent执行PPT生成Skill:
- import { A2AClient, AgentMessage } from '@kit.AgentKit';
- const a2aClient = new A2AClient();
- const msg: AgentMessage = {
- fromAgentId: "pc_doc_agent",
- toAgentId: "mobile_ai_agent",
- action: "generate_ppt",
- payload: { meetingText: extractMeetingContent, templateStyle: "business" }
- };
- const pptResult = await a2aClient.sendAndWait(msg, 12000);
复制代码
分布式调度底层由软总线完成设备发现、通道加密、数据序列化,开发者无需处理设备寻址、网络传输细节。
八、阶段五:结果聚合、反馈与自迭代优化
所有Skill执行完成后,聚合引擎统一整理多源返回数据,通过语义模型转换为自然语言回复推送用户。同时调度器采集本次任务全链路日志(Skill耗时、失败节点、用户参数修改记录),上传至端侧轻量学习模块,持续优化后续Skill匹配优先级与任务编排路径,实现调度逻辑自适应迭代。
九、消费级场景实战:一站式出行规划智能体
用户一句话完成出差全流程:查询目的地天气、预订往返机票、匹配周边酒店、同步日程日历、暴雨自动预约接送机。调度流程如下:语音输入触发系统超级Agent,意图引擎识别travel_business_plan;DAG调度器生成拓扑:并行执行机票预订、日程同步;串行执行天气查询→酒店筛选;增加条件分支:天气=暴雨则调用网约车Skill;Skill路由自动分配算力:机票、日历Skill在手机执行,天气、酒店Skill调度至PC;任意Skill失败触发分级容错;聚合所有数据生成出差简报同步至日历。落地收益:原人工操作18步耗时3分20秒,智能体调度后仅1步语音输入,总执行时长2.6秒,操作步骤缩减94%。
十、工业场景实战:鸿蒙智慧水厂运维调度
水厂包含水质监测、水泵控制、视频巡检、数字孪生四套异构系统。方案封装四类垂直Skill包:水质数据采集、水泵远程调控、摄像头图像识别、数字孪生渲染;搭建水厂运维领域Agent作为调度核心,基于传感器数据自动触发复合任务;调度规则:水质超标时并行执行调取实时监控画面+调节水泵阀门+推送告警;分布式调度:高负载数字孪生Skill自动调度至中控工作站,轻量监测Skill在运维平板本地运行。落地指标:设备故障处置响应时长缩短67%,运维效率提升30%。
十一、家居场景实战:睡眠自动化协同
用户指令“我要睡觉”,串联灯光调光、窗帘关闭、手机静音、温湿度调节四类IoT Skill。采用串行渐变编排,灯光分3档缓慢调暗,每步Skill间隔1.5秒;所有IoT Skill通过软总线本地局域网调度,无云端延迟,单场景执行≤2秒,设备联动成功率99.7%。
十二、工程实践感悟与关键结论
Skill设计遵循“最小原子、单一职责”原则,一个Skill仅承载单一原子操作,复杂业务通过Agent多Skill组合实现。分布式调度必须做好算力分层规划,高算力消耗Skill需在声明文件中标记支持设备类型,避免移动端卡顿。复杂场景需平衡端侧本地调度与云端补充:轻量化隐私敏感任务完全走端侧,海量数据检索和复杂大模型推理采用端云协同。异常流程设计要优先级等同于正常调度逻辑,提前定义完整重试、降级、隔离、用户反问修复链路。
核心技术结论:Skill原子化解耦是调度灵活度的核心根基,DAG动态编排适配绝大多数复杂复合场景,分布式软总线是跨端调度不可替代底层支撑,分级容错加端侧自学习构建高可靠调度闭环,安全沙箱与权限契约规避跨应用能力调用风险。未来演进方向包括基于强化学习的自主生成DAG任务流以及跨生态Skill互通标准的完善。 |