일부실시법과 교락법: 조합의 절반만 실험하기
요인이 일곱 개이고 수준이 둘씩이면 조합이 128개입니다. 다 해 볼 수 없을 때 절반이나 그보다 적게만 하는 방법이 있습니다. 대신 무엇을 잃는지, 정육면체의 꼭짓점 여덟 개를 직접 골라 가며 봅니다.
한 줄 답. 일부실시법(부분 요인 설계, fractional factorial design)은 모든 조합 가운데 잘 고른 일부만 시험합니다. 요인 셋(A, B, C)의 8 조합 가운데 C 의 부호를 A × B 로 정한 넷만 하면(C = AB, 곧 I = ABC), A 는 BC 와, B 는 AC 와, C 는 AB 와 서로 가를 수 없게 겹칩니다(별칭, alias). 「A 의 효과」로 구한 숫자는 사실 A + BC 입니다. 그래서 교호작용이 작다고 믿을 수 있을 때만 씁니다. 교락법은 같은 생각을 다르게 씁니다. 8 조합을 이틀에 나눠 해야 할 때, 가장 덜 궁금한 ABC 를 날의 차이와 일부러 겹치게 두어 나머지 효과를 지킵니다.
| 효과 | 8번으로(참값) | 고른 점으로 | 겹친 것 |
|---|
단추로 시험할 꼭짓점을 고르세요. 진한 점이 시험한 조합, 흐린 고리가 시험하지 않은 조합입니다. 오른쪽으로 가면 A 가, 위로 가면 B 가, 비스듬히 안쪽으로 가면 C 가 높은 수준(+)입니다. 점 옆의 이름은 높은 수준인 요인을 소문자로 적은 것이고((1) 은 셋 다 낮음), 숫자는 지어낸 결과값입니다. 표의 효과는 모두 「+ 쪽 평균 − − 쪽 평균」이고, 주황 칸은 참값과 다르게 나온 것입니다. 이 쪽의 숫자와 자료는 모두 지어낸 것입니다.
1. 왜 절반만 하나
요인이 k 개이고 수준이 둘씩이면 조합은 2ᵏ 개입니다. 요인 셋이면 8, 다섯이면 32, 일곱이면 128 입니다. 한 번에 하루가 걸리거나 시제품 하나가 비싼 실험이라면 128번은 못 합니다.
게다가 128번으로 구하는 효과 127개 가운데 주효과는 7개, 두 요인의 교호작용은 21개이고, 나머지 99개는 셋 이상이 얽힌 교호작용입니다. 셋 이상이 얽힌 교호작용은 대개 작다고 봅니다. 다 하면 횟수의 대부분을 작다고 믿는 것을 재는 데 쓰는 셈입니다. 그래서 잘 고른 일부만 합니다.
정육면체로 보기
요인 셋(A, B, C)의 8 조합은 정육면체의 꼭짓점 여덟 개입니다. 위 실험에서 오른쪽으로 가면 A 가, 위로 가면 B 가, 안쪽으로 가면 C 가 높은 수준입니다. 꼭짓점의 이름은 높은 수준인 요인을 소문자로 적습니다. abc 는 셋 다 높고 (1) 은 셋 다 낮습니다. 대비표(table of contrasts)와 「+ 쪽 평균 − − 쪽 평균」으로 효과를 내는 방법은 요인 설계와 교호작용에서 이어받습니다. 정육면체에서 A 의 효과는 오른쪽 면 넷의 평균 − 왼쪽 면 넷의 평균입니다.
이 쪽의 약속. 교호작용도 주효과처럼 「+ 쪽 평균 − − 쪽 평균」으로 적습니다. 앞 쪽의 「차이의 차이」의 반입니다(앞 쪽 3절에서 「책에 따라 반으로 적는다」고 한 방식). 이렇게 적어야 겹친 두 효과가 A + BC 처럼 그냥 더해집니다.
2. 절반 고르기: C = AB 로 정하면 I = ABC
A 와 B 는 네 조합(−−, +−, −+, ++)을 다 하고, C 의 부호만 「A 의 부호 × B 의 부호」로 정해 봅시다(C = AB). 그러면 네 번만 하고, 고른 꼭짓점은 a, b, c, abc 입니다. 이것을 2³⁻¹ 설계라고 적습니다. 요인 셋의 2³ 조합 가운데 절반(2⁻¹)만 한다는 뜻입니다.
고른 넷은 서로 모서리로 이어지지 않고, 정육면체의 여섯 면에 둘씩 들어갑니다. 그래서 A, B, C 마다 + 둘과 − 둘이 있어 세 주효과의 숫자가 다 나옵니다. 대가는 별칭입니다. C 의 부호를 A × B 로 정했으니 고른 넷에서 C 열과 AB 열은 똑같습니다. 같은 열로 구한 숫자는 같으니, 그 숫자가 C 때문인지 AB 때문인지 자료는 말해 주지 못합니다. 이렇게 서로 가를 수 없게 겹친 짝을 별칭(alias)이라고 부릅니다.
| 구하려던 것 | 실제로 나오는 숫자 |
|---|---|
| A | A + BC |
| B | B + AC |
| C | C + AB |
| ABC | 고른 넷에서 늘 + 라 구할 수 없음(평균과 겹침) |
이 짝을 모두 정하는 식 I = ABC 를 정의 대비(defining relation)라고 부릅니다. 이 식이 어떻게 나오고 왜 A 의 짝이 BC 인지는 4절에서 단계별로 봅니다. 나머지 넷 (1), ab, ac, bc 를 골라도 절반입니다. 그때는 I = −ABC 이고, A 로 구한 숫자는 A − BC 입니다.
해 볼 것. ① 「8번 모두」: 참값은 A 6, B 4, C 2 입니다. 이 지어낸 자료는 교호작용 BC 가 4 이고 나머지 교호작용은 0 입니다. ② 「절반(I = ABC)」: 고른 넷의 값은 a 22, b 16, c 14, abc 28 입니다. A 는 (22 + 28) ÷ 2 − (16 + 14) ÷ 2 = 25 − 15 = 10 으로, 참값 6 이 아니라 6 + 4 입니다. B 4 와 C 2 는 맞는데, 겹친 짝 AC 와 AB 가 이 자료에서 0 이라서 그렇습니다. ③ 「나쁜 절반」: (1), a, b, ab 넷이 모두 앞면(C 가 낮음)입니다. C 는 늘 − 라 구할 수 없고, B 는 4 − 4 = 0 으로 아무 효과가 없는 것처럼 나옵니다.
3. 별칭을 숫자로 보기
절반으로 구한 「A 의 효과」가 BC 에 얼마나 끌려가는지 봅니다. 막대로 자료에 넣은 BC 교호작용의 크기를 바꾸면 여덟 꼭짓점의 값이 바뀝니다. A 6, B 4, C 2 는 그대로 둡니다.
8번으로 구한 A(참값)A + BC 의 자리
막대를 끌거나 숫자를 고쳐 보세요(−8 ~ 8). 초록 고리는 8번으로 구한 A, 주황 점은 절반 a, b, c, abc 로 구한 A 이고, 둘 사이의 주황 막대가 틀린 만큼입니다.
해 볼 것. ① 처음(BC 4)에는 절반으로 구한 A 가 10 입니다. ② BC 를 0 으로 하면 6 으로 참값과 같습니다. ③ −6 으로 하면 0 이 됩니다. 넷의 값은 17, 21, 19, 23 이고 (17 + 23) ÷ 2 − (21 + 19) ÷ 2 = 0 입니다. A 가 아무 일도 안 하는 것처럼 보이지만 참 효과는 6 이고, BC −6 이 그만큼 지웠습니다. ④ 8 로 하면 14 입니다. 주황 점은 늘 점선 위에 있고, 8번으로 구한 A 는 BC 를 어떻게 바꿔도 6 입니다.
4. 식이 만들어지는 과정: I = ABC 에서 A = BC 까지
고른 넷의 대비표를 열 여덟 개(I, A, B, C, AB, AC, BC, ABC)로 펼쳐 놓고, 식 한 줄마다 어느 열과 어느 열이 똑같아지는지 봅니다.
「다음」을 누르면 한 단계씩 넘어갑니다. 식이 한 줄씩 붙고(주황 바탕이 이번에 붙은 줄), 대비표에서 똑같아지는 열에 주황 테두리가 생기고, 아래에 까닭이 나옵니다. 초록 칸이 +, 회색 칸이 − 입니다.
- 넷을 고르는 규칙
C = AB. C 의 부호를 A 의 부호 × B 의 부호로 정했으니, 고른 넷에서 C 열과 AB 열은 같습니다. 이 규칙을 책에서는 생성자(generator)라고 부릅니다. - 양쪽에 C 를 곱한다. 부호를 자기 자신과 곱하면 (+)(+) = +, (−)(−) = + 라서 늘 + 입니다. 모든 칸이 + 인 열을 I 라고 적으니
C × C = I, 식은I = ABC가 됩니다. 고른 넷에서 ABC 열은 늘 + 입니다. 그래서 ABC 의 효과는 구할 수 없습니다(평균과 겹침). - 양쪽에 A 를 곱한다.
A × I = A(늘 + 인 열을 곱해도 그대로),A × ABC = (A × A) × BC = BC. 그래서A = BC. - 나머지 짝. B 를 곱하면
B = AC, C 를 곱하면C = AB. 짝은 늘 「그 효과 × 정의 대비의 글자」로 구합니다. 요인이 많아도 같습니다. 요인 넷을 8번에 하려고D = ABC로 고르면I = ABCD이고, A 를 곱하면A = BCD, AB 를 곱하면AB = CD입니다.
해 볼 것. ① 「다음」을 두 번 눌러 ③ 단계에서 A 열과 BC 열이 똑같이 (+, −, −, +) 인지 보세요. ② 마지막 단계에서 A 열로 구한 값이 (22 + 28) ÷ 2 − (16 + 14) ÷ 2 = 10 = 6 + 4 인지 보세요. ③ 같은 식을 1절 실험의 「나쁜 절반」에 써 봅니다. 그 넷은 「C 가 늘 −」이니 I = −C 입니다. 양쪽에 B 를 곱하면 B = −BC, 그래서 B 로 구한 값은 B − BC = 4 − 4 = 0 입니다.
5. 무엇을 포기하나: 해상도
일부실시법으로 구한 숫자는 늘 겹친 짝과의 합입니다. 그 숫자를 한 효과로 읽어도 되는 것은 짝이 작다고 믿을 수 있을 때뿐입니다. 믿는 근거는 두 가지입니다. 큰 효과는 대개 몇 개뿐이고(효과 희소성), 교호작용은 얽힌 요인이 많을수록 대개 작습니다. 자료가 이것을 확인해 주지는 않습니다.
어떤 효과끼리 겹치는지는 정의 대비에서 가장 짧은 글자 묶음의 글자 수로 정해지고, 이 수를 해상도(resolution)라고 부릅니다. 로마 숫자로 적습니다. I = ABC 는 글자가 셋이라 해상도 III 입니다.
| 해상도 | 정의 대비의 예 | 지켜 주는 것 | 겹치는 것 | 예 |
|---|---|---|---|---|
| III | I = ABC | 주효과끼리는 겹치지 않는다 | 주효과 ↔ 두 요인의 교호작용(A = BC) | 요인 3개 4번(2³⁻¹), 요인 7개 8번(2⁷⁻⁴) |
| IV | I = ABCD | 주효과가 두 요인의 교호작용과도 겹치지 않는다 | 두 요인의 교호작용끼리(AB = CD), 주효과 ↔ 세 요인 | 요인 4개 8번(2⁴⁻¹) |
| V | I = ABCDE | 주효과와 두 요인의 교호작용이 모두 서로 겹치지 않는다 | 두 요인 ↔ 세 요인, 주효과 ↔ 네 요인 | 요인 5개 16번(2⁵⁻¹) |
해상도가 높을수록 지켜 주는 것이 많고, 그만큼 횟수가 듭니다. 위 실험의 2³⁻¹ 은 해상도 III 이라 A 가 BC 에 물들었습니다.
6. 교락법: 8번을 이틀에 나눠야 할 때
이번에는 8번을 다 할 수 있는데 하루에 넷밖에 못 한다고 합시다. 날이 바뀌면 재료나 기온이 바뀌어 결과가 통째로 오르내릴 수 있습니다. 이런 묶음을 블록이라고 합니다.
아무렇게나 나누면 위험합니다. 예를 들어 첫날에 C 가 낮은 넷, 둘째 날에 C 가 높은 넷을 하면 C 의 효과와 날의 차이가 겹쳐 가를 수 없습니다. 교락법은 겹칠 것을 일부러 고릅니다. 가장 덜 궁금한 ABC 의 부호로 나눕니다.
| 날 | ABC 의 부호 | 시험할 넷 |
|---|---|---|
| 첫날 | + | a, b, c, abc |
| 둘째 날 | − | (1), ab, ac, bc |
A, B, C, AB, AC, BC 의 열은 날마다 + 둘과 − 둘을 가집니다. 그래서 「+ 쪽 평균 − − 쪽 평균」을 내는 동안 날의 차이가 지워지고, 주효과와 두 요인의 교호작용은 날의 차이에 물들지 않습니다. ABC 하나만 날과 겹칩니다. 1절 실험의 자료에서 둘째 날 결과가 통째로 5 높았다고 해 봅시다(지어낸 것). 8번으로 구한 A 6, B 4, C 2, BC 4, AB 0, AC 0 은 그대로이고, ABC 만 0 에서 −5 로 바뀝니다. 이 −5 는 날의 차이이지 ABC 가 아닙니다.
첫날의 넷은 2절에서 고른 절반과 같은 넷입니다. 블록이 넷이면 효과 둘을 블록에 내주는데, 그 둘의 곱(예: AB × AC = BC)도 같이 블록과 겹칩니다. 고르는 계산은 일부실시법과 같습니다.
교란과 다릅니다. 이 사이트의 교란은 관찰한 자료에서 제3의 변수가 원인과 결과에 같이 얽혀 효과를 잘못 보게 만드는 것이고, 막아야 할 문제입니다. 교락법의 교락은 요인 실험에서 실험하는 사람이 고른 효과를 블록과 일부러 겹치게 두는 기법입니다. 무엇이 무엇과 겹치는지 미리 알고, 가장 덜 궁금한 것을 내줍니다. 영어로는 둘 다 confounding 이라 더 헷갈립니다.
7. 같은 생각의 두 쓰임
일부실시법과 교락법은 둘 다 8 조합을 ABC 의 부호로 가릅니다. 다른 것은 겹친 것을 어떻게 하느냐입니다. 일부실시법은 겹친 것을 버리고 실험 수를 줄이고, 교락법은 겹친 것을 블록에 내줍니다.
| 일부실시법(I = ABC) | 교락법(블록 = ABC) | |
|---|---|---|
| ABC 가 + 인 넷 | 이것만 한다 | 첫날에 한다 |
| ABC 가 − 인 넷 | 하지 않는다(실험 수가 절반) | 둘째 날에 한다 |
| 겹치는 것 | 효과끼리 짝지어 겹친다(A = BC, B = AC, C = AB) | ABC 하나만 날과 겹친다 |
| 잃는 것 | 교호작용이 작다는 믿음이 틀리면 주효과가 틀린다 | ABC 를 모른다 |
8. 언제 무엇을 쓰나
| 선택지 | 좋은 점 | 나쁜 점 | 쓰는 경우 |
|---|---|---|---|
| 모든 조합(완전 요인 설계, 2ᵏ) | 모든 주효과와 교호작용을 따로 구한다 | 요인이 하나 늘 때마다 횟수가 두 배 | 요인이 서넛 이하이고 한 번이 싸다 |
| 일부실시법, 해상도 V | 주효과와 두 요인의 교호작용을 모두 가른다 | 횟수가 그만큼 크게 줄지는 않는다(요인 5개에 16번) | 두 요인의 교호작용까지 알고 싶다 |
| 일부실시법, 해상도 IV | 주효과가 두 요인의 교호작용에 물들지 않는다 | 두 요인의 교호작용끼리는 가르지 못한다 | 중요한 요인을 고르되 교호작용이 걱정된다 |
| 일부실시법, 해상도 III | 가장 적은 횟수(요인 7개에 8번) | 주효과가 두 요인의 교호작용과 겹친다 | 요인이 많고 대부분 효과가 없을 것 같을 때 처음 걸러 보기(선별 실험) |
| 교락법(블록 나눔) | 모든 조합을 하면서 날·재료 묶음의 차이를 걸러 낸다 | 블록과 겹친 효과(보통 가장 높은 교호작용)는 잃는다 | 하루, 한 묶음에 다 못 한다 |
9. 틀리기 쉬운 점
- 겹친 효과는 분석으로 가를 수 없다. 고른 조합에서 두 열이 똑같으니 어떤 계산도 둘을 가르지 못합니다. 별칭은 조합을 고를 때 정해지고, 다른 조합을 더 시험해야만 풀립니다.
- 효과가 크게 나오면 다른 절반을 더 한다(접어 올리기, fold-over). 위 실험에서 절반으로 구한 A 는 10 이었습니다. 남은 넷 (1), ab, ac, bc 를 더 하면 거기서 구한 A 는 A − BC = 2 입니다. 더해서 반으로 나누면
A = (10 + 2) ÷ 2 = 6, 빼서 반으로 나누면BC = (10 − 2) ÷ 2 = 4. 두 번에 나눠 했으니 그 사이의 차이는 ABC 와 겹칩니다. 6절의 교락법과 같은 모양입니다. - 절반을 아무렇게나 고르면 주효과끼리 겹친다. A 와 B 를 늘 같이 올리고 내린 넷(
I = AB)을 고르면A = B라서, 위 자료에서 A 로 구한 값과 B 로 구한 값이 둘 다 10(= 6 + 4)입니다. 「나쁜 절반」처럼 한 요인을 한쪽에 묶으면 그 요인은 아예 못 구합니다. 생성자를 먼저 적고 별칭 짝을 계산한 뒤 고릅니다. - 「효과 없음」도 믿을 수 없다. A + BC 가 0 이면 A 와 BC 가 서로 지웠을 수 있습니다(3절의 BC −6).
- 4번으로는 우연을 따질 수 없다. 2³⁻¹ 의 4번은 평균 하나와 효과 셋에 자유도를 다 써서, 효과가 우연보다 큰지 분산분석으로 따질 나머지가 없습니다. 같은 조합을 되풀이하거나 횟수를 늘립니다(표본 크기).
자주 묻는 것
교락법의 교락과 관찰 연구의 교란은 같은 것인가요?
아닙니다. 교란은 제3의 변수가 원인과 결과에 같이 얽혀 효과를 잘못 보게 만드는 문제이고, 막아야 할 것입니다. 교락법은 요인 실험에서 가장 덜 궁금한 효과를 블록과 일부러 겹치게 두는 기법입니다. 무엇이 무엇과 겹치는지 미리 알고 고릅니다. 영어로는 둘 다 confounding 이라 더 헷갈립니다.
겹친 효과를 분석 프로그램으로 가를 수 있나요?
없습니다. 고른 조합에서 두 효과의 부호 열이 똑같아서 어떤 계산도 둘을 가르지 못합니다. 별칭은 시험할 조합을 고를 때 정해집니다. 가르려면 다른 조합을 더 시험해야 합니다. 절반 실험이라면 남은 절반을 더 하는 접어 올리기(fold-over)가 흔한 방법입니다.
절반 실험에서 어떤 효과가 크게 나오면 어떻게 하나요?
그 숫자는 겹친 짝과의 합입니다. I = ABC 라면 A 로 구한 값은 A + BC 입니다. 교호작용이 작다고 믿을 근거가 없으면 다른 절반을 더 시험합니다. 두 절반에서 구한 값을 더해 반으로 나누면 A, 빼서 반으로 나누면 BC 가 나옵니다.
낱말
| 여기서 쓴 말 | 책에서 부르는 말 |
|---|---|
| 조합의 일부만 시험하는 실험 | 일부실시법, 부분 요인 설계(fractional factorial design). 2ᵏ⁻ᵖ 설계 |
| 조합의 절반 | 반실시, 절반 실시(half fraction). 2ᵏ⁻¹ |
| 서로 가를 수 없게 겹침 | 별칭, 별명(alias, aliasing). 교락(confounding)이라고도 한다 |
| 겹치는 짝을 정하는 식 | 정의 대비(defining relation, defining contrast). 예: I = ABC |
| 넷을 고르는 규칙 | 생성자(generator). 예: C = AB |
| 모든 칸이 + 인 열 | 항등 열(identity), I |
| 정의 대비의 가장 짧은 글자 수 | 해상도(resolution). III, IV, V 처럼 로마 숫자로 적는다 |
| 효과를 블록과 일부러 겹치게 두기 | 교락법(confounding in blocks) |
| 결과를 통째로 흔드는 것으로 묶은 집단 | 블록(block) |
| 남은 절반을 더 하기 | 접어 올리기(fold-over) |
| 큰 효과는 몇 개뿐이라는 믿음 | 효과 희소성 원리(sparsity of effects principle) |
| 많은 요인 가운데 중요한 것을 걸러 내는 실험 | 선별 실험(screening experiment) |
| 부호 표 | 대비표(table of contrasts), 설계 행렬(design matrix) |
| 꼭짓점의 이름 (1), a, b, ab, … | 표준 차례(standard order, Yates order) |
관련 쪽: 요인 설계와 교호작용, 블록 설계, 교란, 분산분석, 표본 크기.
출처
- NIST/SEMATECH e-Handbook of Statistical Methods, 5.3.3.4 Fractional factorial designs.