건물이 계절과 지역을 바꿔도 안정적으로 작동하는 냉난방 AI, 물리 법칙을 함께 학습시켜 만들었다
건물이 계절과 지역을 바꿔도 안정적으로 작동하는 냉난방 AI, 물리 법칙을 함께 학습시켜 만들었다
건물 냉난방(HVAC)은 전 세계 에너지 소비와 이산화탄소 배출의 약 3분의 1을 차지하는데, 벽이나 바닥이 열을 저장했다가 늦게 내놓는 '열 관성' 때문에 제어가 어렵고 계절이나 지역이 바뀌면 기존 AI 제어기의 성능이 크게 떨어진다. 연구진은 확산 모델(diffusion model)이라는 생성 AI에 건물의 열평형 방정식을 결합한 ADAPT라는 예측 모델을 만들어, 실내 온도가 앞으로 어떻게 변할지 미리 예측하고 이를 강화학습 제어기에 알려주도록 했다. 그 결과 같은 조건에서는 기존 최고 성능 대비 에너지 소비 7.3%, 재실자 불쾌감 30.2%를 줄였고, 학습에 없던 계절이나 기후 지역으로 옮겨도 성능 저하가 거의 없었다.
METAL MEDIA 해설 도표
건물이 계절과 지역을 바꿔도 안정적으로 작동하는 냉난방 AI, 물리 법칙을 함께 학습시켜 만들었다
- 01실내 온도·습도 등 제한된 센서 정보만으로 건물의 숨겨진 열 저장 상태를 예측하는 '실내 환경 세계모델(IEWM)'을 확산 모델로 구현했다.
- 02직전 냉난방 동작을 계속 유지했을 때 온도가 어떻게 흘러갈지 '기준선'으로 미리 예측해, 지금 내린 제어 결정이 나중에 어떤 효과를 낼지 강화학습이 더 잘 판단하도록 도왔다.
- 03벽·창문 간 열 교환, 실외와의 열 교환, 태양복사, 재실자 발열, 냉난방 장치의 열 교환을 나타내는 다중 구역 열평형 방정식을 학습 가능한 형태로 만들어 예측 결과가 물리 법칙에서 크게 벗어나지 않도록 규제했다.
- 04실제 건물 데이터 기반 시뮬레이터인 SemiBuildingSim과 오픈소스 시뮬레이터 Sinergym에서 실험한 결과, 같은 계절·같은 지역(IID) 조건에서는 에너지 7.3%, 불쾌감 30.2% 감소를 기록했다.
- 05여름↔겨울 계절 전환, 스톡홀름↔애리조나 기후 지역 전환처럼 학습 때 보지 못한 조건(OOD)에서도 성능 저하가 미미해 기존 방법들보다 훨씬 안정적이었다.
무엇을 했나
- 실내 온도·습도 등 제한된 센서 정보만으로 건물의 숨겨진 열 저장 상태를 예측하는 '실내 환경 세계모델(IEWM)'을 확산 모델로 구현했다.
- 직전 냉난방 동작을 계속 유지했을 때 온도가 어떻게 흘러갈지 '기준선'으로 미리 예측해, 지금 내린 제어 결정이 나중에 어떤 효과를 낼지 강화학습이 더 잘 판단하도록 도왔다.
- 벽·창문 간 열 교환, 실외와의 열 교환, 태양복사, 재실자 발열, 냉난방 장치의 열 교환을 나타내는 다중 구역 열평형 방정식을 학습 가능한 형태로 만들어 예측 결과가 물리 법칙에서 크게 벗어나지 않도록 규제했다.
- 실제 건물 데이터 기반 시뮬레이터인 SemiBuildingSim과 오픈소스 시뮬레이터 Sinergym에서 실험한 결과, 같은 계절·같은 지역(IID) 조건에서는 에너지 7.3%, 불쾌감 30.2% 감소를 기록했다.
- 여름↔겨울 계절 전환, 스톡홀름↔애리조나 기후 지역 전환처럼 학습 때 보지 못한 조건(OOD)에서도 성능 저하가 미미해 기존 방법들보다 훨씬 안정적이었다.
| Algorithm | Energy (kWh) ↓ Abs PMV ↓ | PPD (%) ↓ | Action Fluctuation ↓ |
|---|---|---|---|
| MPC | 251.00 ± 9.79 | 0.56 ± 0.06 16.20 ± 1.08 | 9.94 ± 1.13 |
| A2C | 247.28 ± 3.21 | 0.48 ± 0.03 13.05 ± 1.46 | 6.02 ± 1.03 |
| PPO | 236.52 ± 2.90 | 0.46 ± 0.04 12.62 ± 0.75 | 4.94 ± 1.46 |
| DQN | 248.41 ± 3.89 | 0.50 ± 0.05 13.02 ± 0.77 | 6.59 ± 0.55 |
| BDQ | 241.87 ± 2.73 | 0.45 ± 0.05 11.40 ± 1.28 | 5.40 ± 0.46 |
| TransformerRL | 233.97 ± 4.36 | 0.42 ± 0.03 11.72 ± 1.62 | 4.66 ± 0.65 |
| Hyperparameter | Value |
|---|---|
| Planning horizon 𝐻 | 6 |
| Number of candidate sequences 𝑁 | 16 |
| Number of elite samples 𝐾 | 4 |
| Planning iterations 𝑀 | 3 |
| Discount factor 𝛾 | 0.98 |
| Hyper-parameter | Value | Hyper-parameter | Value |
|---|---|---|---|
| Optimizer | Adam | Learning rate | 2×10−3 |
| Discount factor 𝛾 | 0.99 | Replay buffer size | 5×105 |
| Batch size | 64 | Exploration 𝜀 | 1.0 → 0.04 |
| Target update interval | 1000 steps | TD(𝜆) parameter | 0.8 |
| Bootstrap horizon 𝐻 | 3 | Forecaster horizon 𝐻fore | 3 |
| Network architecture | (512, 512) | Forecaster History step 𝑇 | 6 |
| Parameter | DQN | BDQ | A2C | PPO | TransformerRL |
|---|---|---|---|---|---|
| Learning rate | 2×10−3 | 2×10−3 | 8×10−4 | 10−3 | 10−3 |
| Discount factor 𝛾 | 0.99 | 0.99 | 0.98 | 0.98 | 0.98 |
| Batch size | 64 | 64 | 40 | 1200 | 1200 |
| Network hidden dim | 256 | 512 | 256 | 256 | 256 |
| GAE 𝜆 | – | – | 0.9 | 0.8 | 0.8 |
| PPO Clip 𝜀 | – | – | – | 0.2 | 0.2 |
| Entropy coef. | – | – | 0 | 0.01 | 0.01 |
| Parameter | MBVE | MBPO | DreamerV3 |
|---|---|---|---|
| Rollout / Imagination horizon | 8 | 8 | 8 |
| Transitions / Starts per iter. | 256 | 1024 | 256 |
| Blend / Return 𝜆 | 1.0 | – | 0.95 |
| Warmup (iters) | 3 | 3 | 3 |
왜 중요한가
건물 냉난방 제어는 센서를 많이 달기 어렵고 계절마다 데이터를 새로 모으기도 힘든 현실적 제약이 있는데, 이 연구는 적은 데이터로도 다양한 기후와 계절에 두루 통하는 제어 방식을 제시했다는 점에서 실제 건물 운영에 적용 가능성이 크다. 에너지 절감과 재실자 쾌적함을 동시에 개선하면서도 물리적으로 타당한 예측을 하기 때문에, 건물 탈탄소화와 UN 지속가능발전목표(도시·기후 관련) 달성에도 기여할 수 있다.
이 논문의 용어
- 확산 모델(diffusion model) · 무작위 노이즈에서 시작해 점차 노이즈를 걷어내며 원하는 데이터를 생성하는 생성형 AI 기법
- 열 관성(thermal inertia) · 벽, 바닥, 가구 등이 열을 저장했다가 시간이 지난 뒤 서서히 방출해 냉난방 효과가 즉시 나타나지 않는 현상
- 부분관측 마르코프 결정과정(POMDP) · 시스템의 완전한 내부 상태를 알 수 없고 일부 센서 정보만으로 판단해야 하는 의사결정 문제 형식
- OOD(out-of-distribution, 분포 밖) · 모델이 학습할 때 보지 못한 계절이나 기후처럼 훈련 데이터와 다른 새로운 조건
- 강화학습(reinforcement learning) · 시행착오를 통해 보상을 최대화하는 행동 방식을 스스로 학습하는 AI 기법
본문에 싣지 못한 그림
- Figure 1
- Figure 2
- Figure 3
- Figure 1: Overall framework of ADAPT. The training process of ADAPT is divided into two phases. Phase I: Physics-aware Diffusion IEWM Training. Phase II: Online RL Policy Learning. IEWM is frozen during phase II. 3.3 Physics-aware Thermal Regularization The conditional diffusion IEWM can effectively model offline trajec- tories. However, vanilla data-driven learning may exploit domain- specific st
- Figure 1: Overall framework of ADAPT. The training process of ADAPT is divided into two phases. Phase I: Physics-aware Diffusion IEWM Training. Phase II: Online RL Policy Learning. IEWM is frozen during phase II. 3.3 Physics-aware Thermal Regularization The conditional diffusion IEWM can effectively model offline trajec- tories. However, vanilla data-driven learning may exploit domain- specific st
- Figure 7
- Figure 8
- Figure 9
- Figure 10
- Figure 11
최신 논문
- AI 코딩 에이전트에게 과학 소프트웨어 수리를 시켜보니, 절반도 제대로 못 고쳤다AI 코딩 에이전트에게 과학 소프트웨어 수리를 시켜보니, 절반도 제대로 못 고쳤다
- 논문 속 시연이 아니라 실제 서비스에 넣을 수 있는 희소 어텐션 만들기논문 속 시연이 아니라 실제 서비스에 넣을 수 있는 희소 어텐션 만들기
- 고객상담 AI 상담원이 규정을 '한 번의 행동'이 아니라 '전체 절차'로 지키게 만드는 방법고객상담 AI 상담원이 규정을 '한 번의 행동'이 아니라 '전체 절차'로 지키게 만드는 방법
- 로봇 팔에게 사람의 시연 없이 새 일 시키기, 말 잘하는 AI가 대신 가르친다로봇 팔에게 사람의 시연 없이 새 일 시키기, 말 잘하는 AI가 대신 가르친다
- 에이전트 학습용 환경을 새로 만드는 대신, 기존 환경에 '패치 부품'을 씌워 그 에이전트의 약점에 맞게 바꾸는 방법에이전트 학습용 환경을 새로 만드는 대신, 기존 환경에 '패치 부품'을 씌워 그 에이전트의 약점에 맞게 바꾸는 방법
- AI 모델을 '소유'하지 못한 조직은 안전 통제도 절반밖에 못 한다AI 모델을 '소유'하지 못한 조직은 안전 통제도 절반밖에 못 한다
- AI가 선생님 모델을 따라 배우다가, 정답에 다가가는 '좋은 생각'까지 억누르는 문제를 잡아낸다AI가 선생님 모델을 따라 배우다가, 정답에 다가가는 '좋은 생각'까지 억누르는 문제를 잡아낸다
- AI가 특정 사람 말투를 흉내내도록 시켜봤더니, 결국 AI 자신의 말투에서 못 벗어난다AI가 특정 사람 말투를 흉내내도록 시켜봤더니, 결국 AI 자신의 말투에서 못 벗어난다
METAL MEDIA 최신 기사
그림 출처: Xu Yang et al., arXiv:2608.19804, CC BY 4.0