EN

Kaiming Yang 杨铠铭

M.Sc. student @ NUS · Research Intern @ Huawei Singapore

我目前在新加坡国立大学攻读计算机工程硕士,并在 Showlab 开展研究,由 Prof. Mike Zheng Shou 指导。目前,我也在华为新加坡担任 Research Intern,由 Dr. Weijia Wu 指导,研究可控视频生成与世界模型。

我希望让 AI 成为能够参与真实工作与生活的智能系统。贯穿我研究的核心问题是:AI 如何将对世界的理解与想象,转化为可靠、有用的交互?我关注智能体如何适应动态环境、通过反思修正行为,以及视觉生成如何连接可执行的行动。我的研究贯穿多模态理解与生成,并以世界模型和空间智能连接感知、预测与行动。

研究兴趣

数字智能体主动式智能体智能体世界建模空间智能视频生成
  • 01
    理解、适应与反思

    让智能体在变化的环境中主动协助,并通过反馈调整决策与行动。

  • 02
    从视觉到行动

    将感知与视觉想象连接到可执行、可验证的行为。

  • 03
    空间、预测与控制

    以三维空间状态为基础,探索可控视频生成与动作驱动的世界模型。

“Stay hungry, Stay foolish”

教育经历

01

专业经历

02

华为新加坡

2012 实验室 · 多模态模型实验室

Research Intern

关注空间智能,围绕相机控制视频生成(Camera-controlled Video Generation)、Geometry-aware World Models 和 Agentic World Models 开展研究,探索动作、三维空间状态与视觉生成之间的联系。

Camera ControlGeometry-aware World ModelsAgentic World Models

用友网络科技股份有限公司

模型运营部

研发实习生

参与企业 BI 平台研发,将业务数据整理成可复用的看板和可视化报表,并开发日期组件、数据接口与导出功能,帮助用户更方便地查看和分析业务数据。

Software EngineeringData VisualizationBI Dashboards

论文与项目

03
论文ICML 2026 FoGen Workshop · Spotlight

Dream.exe

Can Video Generation Models Dream Executable Robot Manipulation?

Rui Zhao*, Kaiming Yang*, Jifeng Zhu, Siyang Chen, Ziqi Wang, Weijia Wu, Kevin Qinghong Lin, Heng Wang, Mike Zheng Shou

* 同等贡献(共同第一作者)

Video GenerationEmbodied AIPhysical Reasoning

看起来逼真的机器人操作视频,能否转化为真正可执行的动作?Dream.exe 将生成视频中的运动恢复为机器人轨迹,并在物理仿真中执行,用物理合理性与任务完成情况检验视频模型对现实世界的理解。它覆盖 101 个操作任务与 8 个模型,关注视觉质量之外的一个关键问题:生成的未来能否付诸行动。

论文ACL 2025 REALM Workshop

WorldGUI

An Interactive Benchmark for Desktop GUI Automation from Any Starting Point

Henry Hengyuan Zhao, Kaiming Yang, Wendi Yu, Difei Gao, Mike Zheng Shou

Computer-use AgentsGUI BenchmarkDynamic EnvironmentsSelf-reflection

真实的软件任务往往从进行到一半的工作流开始,而不是整齐的初始界面。WorldGUI 通过 10 款应用、611 个任务实例中的多样起始状态,考察 GUI 智能体能否理解当前进度、调整规划并继续执行。配套的 Plan-Act-Critic 框架将反思贯穿规划与行动,帮助智能体发现错误并修正后续行为。

项目

CriticGUI

Evaluating Multimodal LLMs as GUI Critic Models

Multimodal UnderstandingCritic EvaluationState AwarenessFailure Analysis

多模态大模型能否成为可靠的 GUI Critic?CriticGUI 关注模型对界面状态与变化的理解,能否结合分层指令、动作代码、前后截图及操作视频,判断当前步骤是否达成目标,并解释成功或失败的原因。基准将 Critic 的判断与解释能力独立于动作生成进行评估,考察反馈是否真正建立在状态感知与指令理解之上。

项目

nl2spec++

From language to temporal reasoning and formal specifications

LLM ReasoningTemporal LogicFormal Specifications

自然语言中的时序约束往往分散在多句话里,也未必被直接说出。nl2spec++ 通过共享实体连接跨句关系,推理隐含的先后与依赖关系,再将结果转化为可解析的线性时序逻辑(LTL)规约,让文字描述中的约束更明确、更便于后续验证。

其他项目与合作

04

Other projects & collaborations

论文ICML 2026

AdaHC

Accelerating Multi-Token Prediction with Adaptive Head Chunking with Pipeline Parallelism

Yan Wang, Chang Si, Kaiming Yang, Zhipeng Zhang, Weijian Liu, Man Yuan, Mingzhen Li, Yong Li, Weile Jia

ML SystemsMulti-token PredictionPipeline Parallelism

关注多 Token 预测在大模型训练中的计算开销,通过自适应预测头分块与流水线并行,探索如何让额外的预测能力更高效地融入训练过程。

论文arXiv 2026

Libra

Taming Attention Workload Skew in Long-Context LLM Training with Bounded Sequence Pool

Yan Wang, Xiulong Yuan, Kaiming Yang, et al.

ML SystemsLong-context TrainingLoad Balancing

长上下文训练中的注意力计算可能在设备间分配不均。Libra 通过有界序列池重新组织工作负载,关注如何减少这种不均衡,让分布式训练更充分地利用计算资源。

荣誉与专利

05
研究之外的一点我好奇心、动手创造,还有喜欢的音乐。
AI 画笔下,我的一方天地。
好奇心是起点

探索值得追问的问题,做出真正有用的东西。

我热爱研究中那些尚无答案的问题,也享受把想法变成真正运行起来的系统。好奇心让我不断追问,内在的驱动力则让我持续学习、实验,并把事情做下去。

一路相伴的音乐

研究之外,音乐一直是生活里重要的一部分。我很喜欢林俊杰,他的歌常常陪伴我的日常。