반응표면분석: 실험 몇 번으로 가장 좋은 조건 찾기
반응 온도와 시간을 바꿔 가며 수율이 가장 높은 조건을 찾고 싶습니다. 모든 조합을 다 해 볼 수는 없습니다. 실험 몇 번으로 결과의 「모양」을 추정하고, 그 모양을 따라 꼭대기로 다가가는 방법을 직접 움직여 봅니다.
한 줄 답. 반응표면분석은 조건(온도, 시간)에 따라 결과(수율)가 매끈한 면(반응표면)을 이룬다고 보고, 실험한 몇 점으로 그 면을 식으로 근사해 가장 좋은 자리를 찾는 방법입니다. 좋은 자리에서 멀 때는 평면(1차 모형)을 맞춰 가장 가파르게 오르는 쪽으로 옮기고, 꼭대기 근처에서는 곡률을 담는 2차 모형 y = b₀ + b₁x₁ + b₂x₂ + b₁₁x₁² + b₂₂x₂² + b₁₂x₁x₂ 을 맞춰 기울기가 0 인 자리(정상점)를 풉니다.
숨은 진짜 수율의 등고선귀퉁이 점중심점오르는 쪽(한 걸음)지나온 길
가로는 온도(°C), 세로는 반응 시간(분)입니다. 옅은 회색 선은 숨은 진짜 수율의 등고선(30 ~ 80%, 10%p 간격, 안쪽일수록 높다)이고, 실제 실험에서는 보이지 않는 것입니다. 검은 네모의 귀퉁이 넷과 보라 중심점이 이번 실험 다섯 번입니다. 실험마다 수율이 표준편차 1%p 만큼 흔들립니다(고정 시드 난수기라 늘 같은 값). 주황 화살표는 맞춘 평면에서 가장 가파르게 오르는 쪽으로 한 걸음입니다. 「한 걸음 옮기기」를 누르면 화살표 끝에서 다섯 번을 새로 실험합니다. 이 쪽의 숫자와 자료는 모두 지어낸 것입니다.
1. 무엇을 하나
결과에 영향을 주는 조건(요인)이 온도 x₁ 과 시간 x₂ 둘이고, 결과(반응)는 수율 y 입니다. 조건마다 결과가 하나씩 정해지니, 지도 위의 높이처럼 조건 위에 면이 하나 생깁니다. 이것이 반응표면입니다. 위 그림의 등고선은 이 면을 위에서 내려다본 지도입니다.
우리는 이 면의 식을 모릅니다. 대신 몇 점에서 실험하고, 그 근처의 면을 간단한 식(평면, 2차 곡면)으로 근사합니다. 이 근사는 실험한 근처에서만 믿습니다. 그래서 한 번에 끝내지 않고 두 단계로 갑니다.
| 단계 | 어디서 | 맞추는 식 | 실험하는 점 | 하는 일 |
|---|---|---|---|---|
| 1단계 | 좋은 자리에서 멀 때 | 평면(1차 모형) | 귀퉁이 넷 + 가운데 | 가장 가파르게 오르는 쪽으로 옮긴다 |
| 2단계 | 꼭대기 근처(곡률이 보일 때) | 2차 모형 | 귀퉁이 넷 + 축 점 넷 + 가운데 | 정상점을 풀고 확인 실험을 한다 |
계산은 코드 단위로 합니다. x₁ = (온도 − 가운데 온도) ÷ 반폭 처럼 바꿔, 실험 자리의 가운데를 0, 귀퉁이를 ±1 로 둡니다. 단위가 다른 두 조건(°C 와 분)을 같은 척도에 놓기 위해서입니다. 귀퉁이 넷은 2×2 요인 설계의 네 칸과 같습니다.
2. 1단계: 평면을 맞추고 최대 경사 상승법(steepest ascent)
다섯 점에 평면 ŷ = b₀ + b₁x₁ + b₂x₂ 을 최소제곱으로 맞춥니다. 이 설계에서는 답이 간단합니다. b₁ 은 「오른쪽 두 귀퉁이의 합 − 왼쪽 두 귀퉁이의 합」 ÷ 4, b₂ 는 「위 두 귀퉁이의 합 − 아래 두 귀퉁이의 합」 ÷ 4, b₀ 는 다섯 점의 평균입니다.
평면에서 가장 빨리 오르는 쪽은 기울기 (b₁, b₂) 의 방향입니다. b₁ 과 b₂ 는 평면을 x₁, x₂ 로 편미분한 값이기 때문입니다. 이 쪽으로 옮겨 가는 것이 가장 가파르게 오르는 길(최대 경사 상승법, steepest ascent)입니다. 경사하강법이 기울기의 반대쪽으로 내려가는 것과 같은 생각을 거꾸로 씁니다. 위 실험은 코드 단위로 3 만큼씩 옮깁니다. 실제로는 이 길 위의 몇 점에서 실험해 수율이 떨어지기 시작하는 곳에서 멈추고, 거기서 새로 요인 실험을 합니다. 위 실험은 단순하게 한 걸음마다 새로 실험합니다.
해 볼 것. ① 처음 자리(110 °C, 25 분)의 수율은 귀퉁이 27, 35.1, 23.9, 39.2, 가운데 29.8 이고, 맞춘 평면은 ŷ = 31 + 5.85x₁ + 0.25x₂ 입니다. b₁ 이 훨씬 커서 화살표가 거의 온도 쪽(+30 °C, +0.6 분)을 가리킵니다. 곡률 검사 값은 −1.5 입니다. ② 「한 걸음 옮기기」를 누르면 140 °C, 25.6 분으로 가고, 평면은 ŷ = 45 + 2.78x₁ + 6.22x₂ 로 이번에는 시간 쪽이 더 가파릅니다. 곡률 검사 값은 1.62 입니다. ③ 한 번 더 누르면 곡률 검사 값이 5.4 로 3 을 넘습니다. ④ 한 번 더 누르면 159.4 °C, 53.9 분, 곡률 검사 값 6.53 입니다. 지나온 자리들의 숨은 수율은 31, 47, 70, 86% 입니다. ⑤ 더 옮기면 꼭대기를 지나쳐 수율이 도로 떨어집니다. 걸음이 크면 지나칩니다.
3. 2단계: 곡률이 보이면 2차 모형으로
평면에는 꼭대기가 없습니다. 늘 한쪽으로 오릅니다. 그래서 꼭대기 근처에서는 평면이 맞지 않습니다. 이것을 알려 주는 것이 중심점(center point)입니다. 면이 평면이면 귀퉁이 넷의 평균은 가운데 높이와 정확히 같습니다. 면이 위로 볼록하게 휘어 있으면(곡률, curvature) 가운데가 귀퉁이 평균보다 높습니다.
곡률 검사 값 = 중심점의 값 − 귀퉁이 넷의 평균
흔들림이 표준편차 σ = 1 이면 이 값은 표준편차 √(1 + 1/4) ≈ 1.12 만큼 흔들립니다(가운데 한 번과 귀퉁이 넷의 평균의 차이). 위 실험은 그 세 배쯤인 ±3 을 넘으면 곡률이 있다고 봅니다. 실제로는 중심점을 여러 번 되풀이해 흔들림의 크기를 자료에서 재고 비교합니다.
곡률이 보이면 식에 제곱항과 곱항을 더합니다.
y = b₀ + b₁x₁ + b₂x₂ + b₁₁x₁² + b₂₂x₂² + b₁₂x₁x₂
y: 결과(반응). 여기서는 수율.x₁,x₂: 두 조건(요인)인 온도와 시간. 코드 단위라 가운데가 0, 귀퉁이가 ±1 입니다.b₀…b₁₂: 맞출 계수. 항마다의 뜻은 아래 표에 있습니다.
| 항 | 뜻 |
|---|---|
| b₀ | 가운데의 높이 |
| b₁x₁, b₂x₂ | 기울기. 평면과 같다 |
| b₁₁x₁², b₂₂x₂² | 곡률. 음수면 그 방향으로 위로 볼록하다(꼭대기 모양) |
| b₁₂x₁x₂ | 비틀림. 한 조건의 기울기가 다른 조건에 따라 달라진다. 요인 설계의 교호작용과 같은 것 |
이 식은 x 에 대해서는 2차지만 계수 b 에 대해서는 일차식입니다. x₁², x₂², x₁x₂ 를 새 열로 넣으면 보통의 회귀와 똑같이 최소제곱으로 맞춥니다. 이 쪽의 스크립트는 정규방정식(6 × 6)을 가우스 소거로 직접 풉니다.
4. 점이 더 필요하다: 중심합성계획
계수가 6 개이니 점이 적어도 6 개 있어야 합니다. 그런데 점 수만의 문제가 아닙니다. 곡률을 보려면 조건마다 높이가 적어도 셋은 있어야 합니다(두 점으로는 직선밖에 못 긋습니다). 귀퉁이 넷과 가운데로는 이것이 안 됩니다. 귀퉁이에서는 x₁² = x₂² = 1, 가운데에서는 둘 다 0 이라 x₁² 열과 x₂² 열이 똑같습니다. 중심점은 b₁₁ + b₂₂ 의 합만 알려 주고(곡률 검사 값이 바로 −(b₁₁ + b₂₂) 의 추정값), 둘을 가르지 못합니다.
중심합성계획(central composite design, CCD)은 여기에 축 위의 점(축점, axial point) 넷을 더합니다. 한 조건만 가운데에서 ±α 만큼 옮긴 점 (±α, 0), (0, ±α) 입니다. 조건마다 높이가 다섯(−α, −1, 0, 1, α)이 되어 제곱항을 따로 구할 수 있습니다.
- 점의 수: 귀퉁이 2^k + 축 점 2k + 가운데. 조건 둘이고 가운데를 한 번 하면 4 + 4 + 1 = 9 점, 계수 6 개를 맞추고 남는 자유도가 3 입니다.
- α = √2 ≈ 1.414: 조건 둘에서 이렇게 두면 귀퉁이(가운데에서 거리 √2)와 축 점이 모두 같은 원 위에 놓여, 가운데에서 같은 거리의 예측이 같은 만큼 흔들립니다(회전 가능 설계, rotatable).
- 이어서 쌓는다: 1단계에서 한 귀퉁이와 가운데를 그대로 두고 축 점만 더하면 됩니다.
귀퉁이·가운데축 점맞춘 2차 식의 등고선실험한 범위정상점
「꼭대기 근처」는 가운데가 165 °C, 55 분(위 실험에서 도착한 자리 근처), 「비탈」은 125 °C, 40 분입니다. 반폭은 온도 15 °C, 시간 10 분이고 축 점은 코드 단위 ±1.414 입니다. 초록 등고선은 2%p 간격이고 실험한 범위(점선 네모) 안에서만 그립니다. 「귀퉁이 + 가운데」는 같은 실험값에서 축 점 넷을 뺀 것입니다.
해 볼 것. ① 꼭대기 근처의 9점으로 맞춘 식은 ŷ = 87.8 + 1.9x₁ + 3.16x₂ − 9.73x₁² − 6.83x₂² + 9.02x₁x₂ 입니다. 정상점은 169.4 °C, 59.3 분이고 꼭대기이며, 맞춘 식이 예측한 수율은 88.8% 입니다. 그 자리의 확인 실험은 90% 입니다. ② 「귀퉁이 + 가운데(5점)」를 누르면 식을 풀 수 없다고 나옵니다. ③ 「비탈」을 누르면 식이 ŷ = 45.4 + 14.71x₁ + 0.44x₂ + 1.04x₁² − 2.91x₂² + 4.23x₁x₂ 이고, 정상점은 D = −29.98 인 안장점이며 81.3 °C, 19.6 분으로 그림 밖입니다. b₁ = 14.71 로 기울기가 아직 크니, 이 자리는 1단계(오르기)를 더 해야 하는 곳입니다.
5. 식이 만들어지는 과정: 정상점 풀기
꼭대기에서는 어느 쪽으로 조금 움직여도 높이가 그대로입니다. 곧 두 방향의 기울기(편미분)가 모두 0 입니다. 위 실험의 「꼭대기 근처」 9점으로 맞춘 식에서 이 자리를 한 단계씩 풀어 봅니다.
「다음」을 누르면 한 단계씩 넘어갑니다. 식이 한 줄씩 붙고(주황 바탕이 이번에 붙은 줄), 그림에 직선이 하나씩 더해지고, 아래에 까닭이 나옵니다.
- 맞춘 식.
ŷ = 87.8 + 1.9x₁ + 3.16x₂ − 9.73x₁² − 6.83x₂² + 9.02x₁x₂. - x₁ 로 편미분해 0 으로. x₂ 는 상수로 봅니다. x₁² 은 2x₁ 이 되고 x₁x₂ 는 x₂ 가 됩니다.
∂ŷ/∂x₁ = 1.9 − 19.46x₁ + 9.02x₂ = 0. 까닭: 이 직선 위에서는 x₁ 쪽으로 조금 움직여도 높이가 변하지 않습니다. 등고선이 가로로 눕는 자리들입니다. - x₂ 로 편미분해 0 으로.
∂ŷ/∂x₂ = 3.16 + 9.02x₁ − 13.66x₂ = 0. 등고선이 세로로 서는 자리들입니다. - 두 식을 같이 풀기. 일차식 둘이라 바로 풀립니다.
D = 4b₁₁b₂₂ − b₁₂² = 4 × (−9.73) × (−6.83) − 9.02² ≈ 184.46,x₁ = (b₁₂b₂ − 2b₂₂b₁) ÷ D ≈ 54.44 ÷ 184.46 ≈ 0.30,x₂ = (b₁₂b₁ − 2b₁₁b₂) ÷ D ≈ 78.6 ÷ 184.46 ≈ 0.43. 원래 단위로는165 + 15 × 0.30 ≈ 169.4 °C,55 + 10 × 0.43 ≈ 59.3 분입니다. 이 자리에서 맞춘 식의 값은 88.8% 입니다.
숨은 진짜 꼭대기는 170 °C, 60 분, 90% 입니다(이 쪽이 지어낸 것이라 알 수 있습니다). 실험 9 번으로 1 °C, 1 분 안쪽까지 다가갔습니다. 다만 2차 식이 예측한 88.8% 는 진짜 90% 보다 조금 낮습니다. 숨은 면이 2차 식이 아니기 때문입니다. 그래서 찾은 자리에서는 확인 실험을 합니다.
6. 꼭대기인가, 골짜기인가, 말안장인가
기울기가 0 인 자리가 늘 꼭대기는 아닙니다. 2차 식의 두 번 미분을 모은 행렬(헤세 행렬) H = [[2b₁₁, b₁₂], [b₁₂, 2b₂₂]] 의 행렬식이 위의 D 입니다. D 와 b₁₁ 의 부호로 모양을 가릅니다.
| 조건 | 모양 | 등고선 |
|---|---|---|
| D > 0, b₁₁ < 0 | 꼭대기(가장 높은 점) | 닫힌 타원, 안쪽이 높다 |
| D > 0, b₁₁ > 0 | 골짜기(가장 낮은 점) | 닫힌 타원, 안쪽이 낮다 |
| D < 0 | 말안장 모양(안장점) | X 자로 엇갈린다. 한쪽으로는 오르고 다른 쪽으로는 내린다 |
| D = 0 근처 | 능선(길게 뻗은 마루) | 나란히 길게 뻗는다. 정상점이 하나로 정해지지 않는다 |
안장점이나 골짜기가 나오면, 또는 정상점이 실험한 범위 밖이면 그 자리를 답으로 쓰지 않습니다. 실험 ②의 「비탈」이 그런 경우입니다. 그쪽으로 자리를 옮겨 다시 실험합니다. 조건이 셋 이상이면 행렬의 고윳값의 부호로 가르고, 책에서는 이것을 정준분석(canonical analysis)이라고 부릅니다.
7. 언제 무엇을 쓰나
| 선택지 | 좋은 점 | 나쁜 점 | 쓰는 경우 |
|---|---|---|---|
| 평면 + 최대 경사 상승법(귀퉁이 + 가운데) | 점이 적다(조건 둘이면 5). 중심점으로 곡률까지 본다 | 꼭대기를 풀 수 없다. 꼭대기 근처에서 맞지 않는다 | 처음, 좋은 자리에서 멀 때 |
| 중심합성계획(축 점이 범위 밖, α = 1.414) | 2차 모형을 맞춘다. 1단계의 점을 그대로 쓰고 축 점만 더한다 | 축 점이 원래 범위 밖으로 나간다. 조건마다 높이가 다섯 | 꼭대기 근처이고 범위 밖도 실험할 수 있을 때 |
| 면 중심 중심합성계획(α = 1) | 모든 점이 범위 안이다. 조건마다 높이가 셋 | 회전 가능하지 않다 | 장치나 안전 때문에 범위의 끝을 넘을 수 없을 때 |
| 박스-벤켄 설계(Box-Behnken) | 모든 조건이 동시에 끝값인 귀퉁이를 피한다. 높이가 셋 | 조건이 셋 이상일 때 쓴다. 1단계의 요인 실험을 이어 쓰기 어렵다 | 극단 조합이 위험하거나 비쌀 때 |
| 한 번에 하나씩(OFAT) | 쉽다. 따로 계산이 필요 없다 | 언덕이 비스듬하면 꼭대기를 놓친다. 비틀림(b₁₂)을 못 본다 | 조건들이 서로 상관없다는 것을 알 때만 |
8. 틀리기 쉬운 점
- 실험한 범위 밖으로 넓히지 않는다. 맞춘 식은 실험한 근처의 근사입니다. 실험 ②의 「비탈」에서 식이 가리킨 정상점은 81.3 °C, 19.6 분, 실험하지 않은 곳이고 꼭대기도 아닙니다. 범위 밖의 답은 「그쪽으로 가서 다시 실험하라」는 뜻으로만 읽습니다.
- 찾은 자리에서 확인 실험을 한다. 예측(88.8%)과 확인 실험(90%)이 흔들림 안에서 맞는지 봅니다. 크게 다르면 식이 그 자리를 잘 나타내지 못하는 것입니다.
- 한 번에 한 조건씩 바꾸면 꼭대기를 놓칠 수 있다. 처음 자리(110 °C, 25 분)에서 시간을 25 분에 묶고 온도만 바꾸면 144 °C 가 가장 좋고, 그 온도에 묶고 시간만 바꾸면 48 분이 가장 좋습니다. 숨은 수율은 69.5% 로, 꼭대기(170 °C, 60 분, 90%)와 멉니다(흔들림 없이 1 °C, 1 분 간격으로 계산한 값). 언덕이 비스듬히 누워 있어(b₁₂ 가 크다) 한 조건씩 따라가면 지그재그가 되고, 여러 바퀴를 돌아야 다가갑니다.
- 가장 가파른 쪽은 척도에 달렸다. 방향 (b₁, b₂) 는 코드 단위에서 정한 것입니다. 반폭을 바꾸면(온도 ±10 °C 대신 ±20 °C) 같은 면에서도 화살표의 방향이 달라집니다. 반폭은 「이만큼 바꾸면 결과가 비슷한 만큼 바뀐다」고 보는 크기로 정합니다.
- 곡률 검사가 조용해도 평면이 맞는다는 증명은 아니다. 곡률 검사 값은 −(b₁₁ + b₂₂) 의 추정값이라, 한 방향으로는 볼록하고 다른 방향으로는 오목해 둘이 상쇄되면(말안장) 0 근처가 나올 수 있습니다.
어디에 쓰나
- 공정의 조건 찾기. 반응 온도, 시간, 압력, 농도를 바꿔 수율이나 순도가 가장 좋은 조건을 찾습니다.
- 배합 정하기. 식품이나 재료에서 두세 가지 성분의 양을 바꿔 맛이나 강도가 가장 좋은 자리를 찾습니다.
- 설정값 맞추기. 기계나 프로그램의 설정 두세 개를 몇 번 바꿔 돌려 보고 결과가 가장 좋은 자리를 찾는 일도 같은 생각입니다. 돌려 보는 값이 싸면 더 많은 점을 해 보는 다른 방법을 쓰기도 합니다.
자주 묻는 것
최대 경사 상승법은 경사하강법과 같은 것인가요?
같은 생각을 거꾸로 씁니다. 경사하강법은 가장 가파르게 내려가고, 여기서는 가장 가파르게 오릅니다. 다른 점은 기울기를 얻는 법입니다. 경사하강법은 식을 미분해 기울기를 바로 얻지만, 실험에서는 식을 모르니 실험 다섯 번으로 평면을 맞춰 기울기를 추정합니다. 실험 한 번에 돈과 시간이 들고 값이 흔들리니 걸음 수가 적습니다.
중심점은 왜 여러 번 하나요?
같은 조건을 되풀이하면 실험의 흔들림이 얼마나 되는지 자료에서 잴 수 있습니다. 그 크기에 비교해 곡률 검사 값이 큰지, 2차 모형이 잘 맞는지 판정합니다. 이 쪽의 실험은 단순하게 하려고 중심점을 한 번만 하고, 흔들림의 크기(표준편차 1)를 안다고 둡니다.
조건이 셋 이상이면 어떻게 하나요?
방법은 같습니다. 조건이 k 개면 2차 모형의 계수가 (k + 1)(k + 2) ÷ 2 개라 k = 3 이면 10 개입니다. 중심합성계획은 귀퉁이 2^k, 축 점 2k, 중심점을 더해 k = 3 에서 가운데를 한 번만 하면 8 + 6 + 1 = 15 점입니다. 정상점은 편미분 k 개를 0 으로 둔 일차 연립방정식을 풀어 얻습니다.
낱말
| 여기서 쓴 말 | 책에서 부르는 말 |
|---|---|
| 조건 | 요인, 인자(factor), 독립변수 |
| 결과 | 반응(response), 반응변수 |
| 조건 위에 결과가 이루는 면 | 반응표면(response surface) |
| 면을 어림해 가장 좋은 자리를 찾는 방법 | 반응표면분석, 반응표면방법론(response surface methodology, RSM) |
| 가운데 0, 귀퉁이 ±1 로 바꾼 눈금 | 코드 단위(coded units), 코딩 변수 |
| 평면 식 | 1차 모형(first-order model) |
| 가장 가파르게 오르는 길 | 최대 경사 상승법(steepest ascent). 내려갈 때는 최대 경사 하강법(steepest descent) |
| 가운데 점 | 중심점(center point) |
| 면이 휜 정도 | 곡률(curvature) |
| 제곱항과 곱항을 넣은 식 | 2차 모형(second-order model) |
| 귀퉁이 + 축 점 + 가운데 | 중심합성계획(central composite design, CCD) |
| 축 위의 점 | 축점(axial point, star point) |
| 가운데에서 같은 거리면 예측이 같은 만큼 흔들림 | 회전 가능(rotatable) 설계 |
| 기울기가 0 인 자리 | 정상점(stationary point) |
| 말안장 모양 | 안장점(saddle point) |
| 두 번 미분을 모은 행렬 | 헤세 행렬(Hessian) |
| 한 번에 하나씩 바꾸기 | one-factor-at-a-time(OFAT) |
| 찾은 자리에서 다시 해 보기 | 확인 실험(confirmation run) |
출처
- NIST/SEMATECH e-Handbook of Statistical Methods, 5.3.3.6 Response surface designs.