ADAPT: Physics-Aware Diffusion-based World Models for Adaptive Predictive Transferable HVAC Control
건물이 계절과 지역을 바꿔도 안정적으로 작동하는 냉난방 AI, 물리 법칙을 함께 학습시켜 만들었다
건물 냉난방(HVAC)은 전 세계 에너지 소비와 이산화탄소 배출의 약 3분의 1을 차지하는데, 벽이나 바닥이 열을 저장했다가 늦게 내놓는 '열 관성' 때문에 제어가 어렵고 계절이나 지역이 바뀌면 기존 AI 제어기의 성능이 크게 떨어진다. 연구진은 확산 모델(diffusion model)이라는 생성 AI에 건물의 열평형 방정식을 결합한 ADAPT라는 예측 모델을 만들어, 실내 온도가 앞으로 어떻게 변할지 미리 예측하고 이를 강화학습 제어기에 알려주도록 했다. 그 결과 같은 조건에서는 기존 최고 성능 대비 에너지 소비 7.3%, 재실자 불쾌감 30.2%를 줄였고, 학습에 없던 계절이나 기후 지역으로 옮겨도 성능 저하가 거의 없었다.
무엇을 했나
- 실내 온도·습도 등 제한된 센서 정보만으로 건물의 숨겨진 열 저장 상태를 예측하는 '실내 환경 세계모델(IEWM)'을 확산 모델로 구현했다.
- 직전 냉난방 동작을 계속 유지했을 때 온도가 어떻게 흘러갈지 '기준선'으로 미리 예측해, 지금 내린 제어 결정이 나중에 어떤 효과를 낼지 강화학습이 더 잘 판단하도록 도왔다.
- 벽·창문 간 열 교환, 실외와의 열 교환, 태양복사, 재실자 발열, 냉난방 장치의 열 교환을 나타내는 다중 구역 열평형 방정식을 학습 가능한 형태로 만들어 예측 결과가 물리 법칙에서 크게 벗어나지 않도록 규제했다.
- 실제 건물 데이터 기반 시뮬레이터인 SemiBuildingSim과 오픈소스 시뮬레이터 Sinergym에서 실험한 결과, 같은 계절·같은 지역(IID) 조건에서는 에너지 7.3%, 불쾌감 30.2% 감소를 기록했다.
- 여름↔겨울 계절 전환, 스톡홀름↔애리조나 기후 지역 전환처럼 학습 때 보지 못한 조건(OOD)에서도 성능 저하가 미미해 기존 방법들보다 훨씬 안정적이었다.

| Algorithm | Energy (kWh) ↓ Abs PMV ↓ | PPD (%) ↓ | Action Fluctuation ↓ |
|---|---|---|---|
| MPC | 251.00 ± 9.79 | 0.56 ± 0.06 16.20 ± 1.08 | 9.94 ± 1.13 |
| A2C | 247.28 ± 3.21 | 0.48 ± 0.03 13.05 ± 1.46 | 6.02 ± 1.03 |
| PPO | 236.52 ± 2.90 | 0.46 ± 0.04 12.62 ± 0.75 | 4.94 ± 1.46 |
| DQN | 248.41 ± 3.89 | 0.50 ± 0.05 13.02 ± 0.77 | 6.59 ± 0.55 |
| BDQ | 241.87 ± 2.73 | 0.45 ± 0.05 11.40 ± 1.28 | 5.40 ± 0.46 |
| TransformerRL | 233.97 ± 4.36 | 0.42 ± 0.03 11.72 ± 1.62 | 4.66 ± 0.65 |

| Hyperparameter | Value |
|---|---|
| Planning horizon 𝐻 | 6 |
| Number of candidate sequences 𝑁 | 16 |
| Number of elite samples 𝐾 | 4 |
| Planning iterations 𝑀 | 3 |
| Discount factor 𝛾 | 0.98 |
| Hyper-parameter | Value | Hyper-parameter | Value |
|---|---|---|---|
| Optimizer | Adam | Learning rate | 2×10−3 |
| Discount factor 𝛾 | 0.99 | Replay buffer size | 5×105 |
| Batch size | 64 | Exploration 𝜀 | 1.0 → 0.04 |
| Target update interval | 1000 steps | TD(𝜆) parameter | 0.8 |
| Bootstrap horizon 𝐻 | 3 | Forecaster horizon 𝐻fore | 3 |
| Network architecture | (512, 512) | Forecaster History step 𝑇 | 6 |
| Parameter | DQN | BDQ | A2C | PPO | TransformerRL |
|---|---|---|---|---|---|
| Learning rate | 2×10−3 | 2×10−3 | 8×10−4 | 10−3 | 10−3 |
| Discount factor 𝛾 | 0.99 | 0.99 | 0.98 | 0.98 | 0.98 |
| Batch size | 64 | 64 | 40 | 1200 | 1200 |
| Network hidden dim | 256 | 512 | 256 | 256 | 256 |
| GAE 𝜆 | – | – | 0.9 | 0.8 | 0.8 |
| PPO Clip 𝜀 | – | – | – | 0.2 | 0.2 |
| Entropy coef. | – | – | 0 | 0.01 | 0.01 |
| Parameter | MBVE | MBPO | DreamerV3 |
|---|---|---|---|
| Rollout / Imagination horizon | 8 | 8 | 8 |
| Transitions / Starts per iter. | 256 | 1024 | 256 |
| Blend / Return 𝜆 | 1.0 | – | 0.95 |
| Warmup (iters) | 3 | 3 | 3 |
왜 중요한가
건물 냉난방 제어는 센서를 많이 달기 어렵고 계절마다 데이터를 새로 모으기도 힘든 현실적 제약이 있는데, 이 연구는 적은 데이터로도 다양한 기후와 계절에 두루 통하는 제어 방식을 제시했다는 점에서 실제 건물 운영에 적용 가능성이 크다. 에너지 절감과 재실자 쾌적함을 동시에 개선하면서도 물리적으로 타당한 예측을 하기 때문에, 건물 탈탄소화와 UN 지속가능발전목표(도시·기후 관련) 달성에도 기여할 수 있다.
이 논문의 용어
- 확산 모델(diffusion model) · 무작위 노이즈에서 시작해 점차 노이즈를 걷어내며 원하는 데이터를 생성하는 생성형 AI 기법
- 열 관성(thermal inertia) · 벽, 바닥, 가구 등이 열을 저장했다가 시간이 지난 뒤 서서히 방출해 냉난방 효과가 즉시 나타나지 않는 현상
- 부분관측 마르코프 결정과정(POMDP) · 시스템의 완전한 내부 상태를 알 수 없고 일부 센서 정보만으로 판단해야 하는 의사결정 문제 형식
- OOD(out-of-distribution, 분포 밖) · 모델이 학습할 때 보지 못한 계절이나 기후처럼 훈련 데이터와 다른 새로운 조건
- 강화학습(reinforcement learning) · 시행착오를 통해 보상을 최대화하는 행동 방식을 스스로 학습하는 AI 기법
본문에 싣지 못한 그림
- Figure 1
- Figure 2
- Figure 3
- Figure 1: Overall framework of ADAPT. The training process of ADAPT is divided into two phases. Phase I: Physics-aware Diffusion IEWM Training. Phase II: Online RL Policy Learning. IEWM is frozen during phase II. 3.3 Physics-aware Thermal Regularization The conditional diffusion IEWM can effectively model offline trajec- tories. However, vanilla data-driven learning may exploit domain- specific st
- Figure 1: Overall framework of ADAPT. The training process of ADAPT is divided into two phases. Phase I: Physics-aware Diffusion IEWM Training. Phase II: Online RL Policy Learning. IEWM is frozen during phase II. 3.3 Physics-aware Thermal Regularization The conditional diffusion IEWM can effectively model offline trajec- tories. However, vanilla data-driven learning may exploit domain- specific st
- Figure 7
- Figure 8
- Figure 9
- Figure 10
- Figure 11
논문 원문 초록 (영문)
Buildings account for roughly one-third of global energy consumption and CO$_2$ emissions. Optimizing indoor climate systems plays a critical role for urban climate mitigation aligned with UN Sustainable Development Goals 11 and 13. However, indoor delayed thermodynamic responses and partial observability severely hinder existing methods, which are primarily limited by implicit thermal inertia, occupancy dynamic prediction, and cumulative prediction errors, especially for out-of-distribution environments. In practice, these challenges are further exacerbated by the high cost and privacy burden of dense indoor sensing, forcing operators to collect only limited data in a single operating regime while expecting controllers to generalize reliably across unseen seasons and climate regions. To address this problem, we propose ADAPT, a physics-aware conditional diffusion indoor environmental world model for HVAC control. The model predicts a short-horizon held-action thermal baseline to capture the latent thermal inertia of the buildings. The diffusion backbone utilizes the robustness of generative models, while a learnable multi-zone heat-balance regularizer constrains generated trajectories to satisfy transferable building thermodynamics without requiring known building geometry or manually calibrated thermal parameters. A credit assignment is then design for the downstream reinforcement learning. Extensive experiments on SemibuildingSim and Sinergym demonstrate that ADAPT reduces HVAC energy consumption by 7.3\% and occupant discomfort by 30.2\% compared with state-of-the-art baselines under IID control. Under OOD control scenarios spanning unseen seasons and climate regions, ADAPT maintains robust performance with only marginal degradation relative to its IID performance, substantially outperforming existing methods in transfer robustness.
arXiv에서 원문 보기최신 논문
- Specification-delta-driven data governance: an empirical study of the {\guillemotleft}spec-delta{\guillemotright} as the unit of change in lakehouse data platforms데이터 플랫폼 변경도 코드처럼 '설계도 조각'을 붙여서 검토하면 어떨까: 실험 설계 논문
- Are LLMs becoming similarly creative? Evidence from three years of models최신 AI 챗봇일수록 서로 비슷한 답을 내놓는다는 3년치 조사 결과
- Auditing Cross-Lingual Fairness in Language Model WatermarkingAI 생성 텍스트를 잡아내는 워터마크 기술이 영어 아닌 언어에서는 훨씬 부실하게 작동하고, 그 격차는 개별 언어가 아니라 언어 계열 단위로 나타난다
- TESTNAV: Pareto-Guided Search for Compositional Robustness TestingAI 모델을 여러 손상이 겹친 입력으로 시험할 때, 굳이 다 테스트하지 않고도 '진짜 위험한 실패'만 골라내는 탐색법
- Optimal Skill Selection for LLM Agents with Provable Bicriteria GuaranteesAI 에이전트에게 어떤 '스킬 문서'를 몇 개나 줘야 잘 작동하는지, 수학적으로 최적해를 보장하며 골라주는 방법
- Reliable Financial Named Entity Recognition under Domain Shift금융 AI가 서류체 문장에서 배운 자신감은 트위터로 가면 거짓말이 된다
- FlashPrefill V2: Block-Sparse Prefill Attention for Long-Context LLM Serving논문 속 시연이 아니라 실제 서비스에 넣을 수 있는 희소 어텐션 만들기
- Robust Incomplete Multimodal Sentiment Analysis via Iterative Proxy Correction텍스트가 빠지거나 망가져도, AI가 그 자리를 대신할 '가짜 텍스트'를 한 번에 만들지 않고 여러 번 고쳐가며 감정을 더 정확히 읽어낸다
METAL LAB 최신 기사
그림 출처: Xu Yang et al., arXiv:2608.19804, CC BY 4.0