📈 경제학

Headteacher experience, management quality and pupils’ learning in Sub-Saharan African schools: evidence from PASEC 2019

14개 사하라 이남 아프리카 국가의 2019년 PASEC 데이터를 분석한 이 연구는, 유연한 머신러닝 모델이 학생 학습 예측에 있어 선형 회귀 모델보다 더 나은 성능을 보이지 않는 반면, 오직 교장의 교수 경력과 공립학교의 경우 경영 품질만이 학생 점수와 강력하게 연관되어 있으며, 사립학교에서는 어떠한 거버넌스 지표도 보정 후에도 유의미하게 살아남지 못한다는 것을 밝혀냈다.

원저자: Kouassi Sylvain Assienin, Christian K. N’da, Auguste K. Kouakou

게시일 2026-11-03

📖 4 분 읽기☕ 가벼운 읽기

CC BY 4.0

원저자: Kouassi Sylvain Assienin, Christian K. N’da, Auguste K. Kouakou

원본 논문은 CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/) 라이선스로 제공됩니다. ✨ 이것은 아래 논문에 대한 AI 생성 설명입니다. 저자가 작성하거나 승인한 것이 아닙니다. 기술적 정확성을 위해서는 원본 논문을 참조하세요. 전체 면책 조항 읽기

인간 발달의 지형에서 교육은 근본적인 기둥으로 자리 잡고 있지만, 사하라 이남 아프리카의 많은 지역에서는 학교 교육의 약속이 종종 실현되지 못한 채 남아 있습니다. 아이들은 교실에 등록되어 있지만, 너무나 많은 아이가 간단한 글을 읽거나 수학 문제를 풀 수 있는 기초적인 기술을 습득하지 못한 채 학교를 떠납니다. 출석과 학습 사이의 이러한 격차는 이 지역의 중대한 과제가 되었습니다. 수년간 정책 입안자들은 이 망가진 시스템을 고치기 위해 어디에 노력을 집중해야 하는지를 두고 논쟁해 왔습니다. 어떤 이들은 많은 국가가 이미 국가 예산의 상당 부분을 교육에 지출하고 있다는 점을 들어 더 많은 자금이 정답이라고 주장합니다. 다른 이들은 자원의 양보다 그 자원이 어떻게 관리되는지가 더 중요하다고 제안합니다. 학교 자체가 바로 그 관리가 이루어지는 장소이며, 교장은 그 책임을 맡은 사람입니다. 이 연구를 이끄는 질문은 단순하지만 답하기 어렵습니다. 즉, 학교 지도자의 어떤 구체적인 행동이 실제로 아이들의 학습을 더 잘 돕는가 하는 것입니다.

답을 찾기 위해 연구팀은 PASEC 2019라고 알려진 방대한 데이터 세트에 주목했습니다. 이 조사는 사하라 이남 아프리카의 14개 불어 사용국 전역의 25,000명 이상의 학생을 대상으로 실시되었으며, 읽기와 수학 성취도를 측정했습니다. 연구진은 단순히 시험 점수만을 살펴본 것이 아니라, 학교 운영 방식에 관한 16가지의 서로 다른 지표를 포함하여 학교에 대한 상세한 정보를 수집했습니다. 이 지표들은 행정 관리의 질부터 교사 회의의 빈도, 학교와 학부모 간의 관계의 성격에 이르기까지 모든 것을 다루었습니다. 목표는 이러한 요인들 중 어떤 것이 실제로 높은 학생 성적과 연결되어 있는지를 확인하는 것이었으며, 동시에 같은 학교의 학생들은 동일한 환경을 공유한다는 점을 신중하게 고려했습니다. 결과의 신뢰성을 확보하기 위해 연구팀은 학교를 별개의 집단으로 취급하는 고급 통계 방법을 사용하여, 단순히 학생 수가 많다는 이유로 잘못된 결론을 내리는 것을 방지했습니다. 또한, 복잡한 컴퓨터 모델이 단순한 선형 관계만큼 데이터를 잘 설명할 수 있는지 확인하기 위해 자신들의 결과를 복잡한 컴퓨터 모델과 비교했습니다.

연구는 명확하고 다소 놀라운 결과를 도출했습니다. 검토된 많은 요인을 보정하는 엄격한 테스트를 거친 후, 모든 학교에서 더 나은 학습 결과와 견고하게 연결된 것으로 나타난 단 하나의 거버넌스 지표는 바로 교장의 교실 수업 경력 연수였습니다. 이 결과는 학교가 공립이든 사립이든 상관없이 유효했으며, 모든 수준의 학생 성취도에서 양(+)의 상관관계를 보였습니다. 교실 경험이 풍정 풍부한 교장은 학생들의 높은 점수와 일관되게 연관되어 있었습니다. 공립학교의 경우, 전반적인 학교 관리의 질이 두 번째 기여 요인으로 나타났으나 확실성은 다소 떨어졌습니다. 그러나 사립학교에서는 어떤 거버넌스 지표도 엄격한 테스트를 통과하지 못했는데, 이는 성공을 이끄는 요인이 다르거나 혹은 데이터가 이를 감지할 만큼 정밀하지 않음을 시사합니다.

연구진은 이러한 요인들과 학습 사이의 관계가 단순한 것인지, 아니면 학생의 기존 성취도에 따라 달라지는지도 조사했습니다. 그들은 교장의 교수 경험이 주는 이점이 하위권, 중위권, 상위권 학생 모두에게 존재한다는 것을 발견했습니다. 이 연결 고리는 중위권 근처에서 가장 강력했습니다. 이는 경험 많은 리더들이 어려움을 겪는 학생이나 우수한 학생뿐만 아니라 모든 학생을 돕는다는 것을 시사합니다. 반면, 교장이 조직하는 회의의 빈도나 우수 학생에게 보상을 주는 방식과 같은 흔한 관행들은 엄격한 통계적 보정을 적용했을 때 학습과의 신뢰할 만한 연결 고리를 보여주지 못했습니다. 사실, 이러한 요인 중 일부는 연구진이 거짓 알람을 피하기 위해 필요한 엄격한 보정을 적용하기 전에는 유의미해 보였으나, 분석을 강화하자 사라져 버렸습니다.

이 연구의 가장 중요한 발견은 아마도 무엇을 배제했느냐일 것입니다. 연구진은 복잡한 비선형 패턴이 단순한 선형 관계보다 학생의 성공을 더 잘 설명할 수 있는지 테스트했습니다. 그들은 숨겨진 패턴을 찾는 데 탁ual한 능력이 있다고 칭송받는 정교한 머신러닝 도구를 사용하였고, 이를 표준 통계 모델과 비교했습니다. 결과는 한 번도 본 적 없는 학교들을 대상으로 테스트했을 때, 복잡한 모델이 단순한 모델보다 더 나은 성능을 보이지 않았다는 것이었습니다. 실제로 단순한 모델이 종종 더 정확했습니다. 이는 학교 거버넌스와 학생 학습 사이의 관계가 컴퓨터를 통해 답을 찾아야 할 정도로 얽히고설킨 숨겨진 상호작용의 그물망이 아니라, 단순하고 직접적인 선형적 연관성의 집합임을 의미합니다. 데이터에 따르면 관찰된 요인들은 모든 학교의 학생 점수 차이의 약 31%, 공립학교에서는 약 25%를 설명하지만, 결과가 불확실하여 결론을 내리기 어려운 사립학교에서는 7% 미만입니다.

이러한 발견의 함의는 구체적이며 증거에 기반하고 있습니다. 이 연구는 학교 지도자를 선발하거나 교육할 때, 학생 학습과 가장 신뢰할 만하게 연관된 단 하나의 요인인 풍부한 교실 수업 경험을 가진 이들에게 우선순위를 두어야 함을 시사합니다. 또한 공립학교에서 일반적인 관리의 질을 개선하는 것의 잠재적 가치를 지적하지만, 이 증거는 경험의 사례보다는 약간 덜 확실합니다. 반대로, 본 연구는 학부모와의 접촉 빈도를 개선의 주요 목표로 삼는 것에 대해 조언하는데, 이는 학교가 학부모와 얼마나 자주 접촉하는지와 학생들이 얼마나 잘 배우는지 사이의 일관된 연결 고리가 없음을 데이터가 보여주었기 때문입니다. 연구진은 이러한 결과가 상관관계를 보여주는 것이지 인과관계를 보여주는 것은 아니며, 이러한 요인들을 변화시키는 것이 학습을 직접적으로 개선할 것임을 확증하기 위해서는 더 표적화된 연구가 필요하다고 경고합니다. 그럼에도 불구하고, 이 작업은 아프리카 교육이라는 복잡한 세계에서 무엇이 중요한지에 대한 명확하고 데이터에 기반한 지도를 제공하며, 학교를 이끄는 사람의 교실 경험이 갖는 지속적인 가치를 강조합니다.

기술 요약: 사하라 이남 아프리카 학교의 교장 경력, 관리 품질 및 학생 학습

문제 및 배경
사하라 이남 아프리카 전역에서 교육에 대한 상당한 공공 투자(GDP의 평균 5%)에도 불구하고, 학습 성과는 여전히 매우 낮으며, 10세 아동의 89%가 간단한 텍스트를 읽지 못하는 실정이다. 과제는 '접근성'에서 '학습 없는 등록'으로 전환되었다. 학교 거버넌스가 개선을 위한 저비용 레버로 장려되고 있으나, 기존의 증거들은 종종 표본 내 예측에 의존하거나, 학교 내 학생들의 계층적 클러스터링을 무시하거나, 공립과 사립 부문을 분리하지 못하는 한계를 보인다. 또한, PASEC 데이터를 활용한 기존의 계량 경제 연구들은 비선형성과 상호작용을 포착할 수 있는 방법론을 거의 활용하지 않았으며, 광범위한 거버넌스 지표를 평가할 때 다중 가설 검정(multiple hypothesis testing)을 엄격하게 수행하지 않았다.

방법론
본 연구는 14개 불어 사용 사하라 이남 아프리카 국가의 25,850명의 학생을 대상으로 하는 2019년 PASEC 조사를 활용한다. 분석은 16개의 거버넌스 지표(교장 및 교사 설문조사에서 도출됨)와 연속적인 학습 점수(읽기 및 수학의 가능값 평균) 간의 관계를 다룬다.

연구의 방법론적 틀은 세 가지 핵심 요소로 차별화된다:

학교 수준의 검증: 계층적 데이터에서 흔히 발생하는 낙관적인 오차 추정을 피하기 위해, 저자들은 "학교 분할(school-split)" 검증 전략을 채택한다. 전체 샘플의 20%를 테스트 세트로 떼어놓고 나머지 80%를 훈련 세트로 구성한다. 이는 모델이 단순히 보이지 않는 학생이 아니라, 보이지 않는 '학교'에 대해서도 평가되도록 보장한다.
추론 및 교정: 본 연구는 부분 연관성(partial association) 추정을 위해 최소제곱법(OLS)과 이중 머신러닝(Double Machine Learning, DML)을 결합한다. DML은 학교 단위로 그룹화된 교차 적합(cross-fitting)을 사용하여 잠재 함수(nuisance functions)를 추정하는 LightGBM을 활용하며, 이를 통해 타겟 파라미터에 대한 유효한 추론을 유지하면서 교란 변수를 유연하게 통제한다. 결정적으로, 본 연구는 16개의 동시 테스트에 대해 가족 오류율(family-wise error rate)을 제어하기 위해 Holm의 절차를 적용하며, "강건한(robust)" 연관성을 OLS와 DML 모두에서 유의미하고 조정된 p-값이 10% 미만인 경우로 정의한다.
모델 비교 및 이질성: 저자들은 보유한 테스트 세트(held-out test set)를 바탕으로 선형 모델(OLS, 중앙값 분위 회귀)과 유연한 비선형 모델(일반화 가법 모델, XGBoost, Random Forest, Extra Trees)의 예측 정확도를 비교한다. 또한, 분위 회귀와 펜널티 스플라인 가법 모델(GAM)을 사용하여 연관성이 점수 분포에 따라 달라지는지, 혹은 비선형적 함수 형태를 보이는지 조사한다.

주요 결과
분석은 거버넌스와 학습 간의 관계에 관한 세 가지 주요 결과를 도출한다:

예측 성능: 유연한 비선형 모델(트리 기반 앙상블 및 GAM)은 보이지 않는 학교에 대해 선형 모델보다 우수한 성능을 보이지 않았다. 통합 샘플에서 OLS와 중앙값 분위 회귀는 테스트 $R^2$ 30.6%를 달성한 반면, 트리 기반 모델은 24.4%에서 26.2% 사이를 기록했다. 사립 학교의 경우, 어떤 모델도 보유 데이터에 대해 7% 이상의 분산을 설명하지 못했다. 이는 관찰된 공변량들 사이의 비선형성과 상호작용이 선형 명세 이상의 유의미한 예측 정보를 담고 있지 않음을 시사한다.
강건한 거버넌스 지표: 다중 테스트를 위한 Holm 교정을 적용한 결과:
- 전체 학교: **교장의 교수 경력(years of teaching)**만이 학습과 강건하고 양(+)의 연관성을 보였다(+관찰 범위 전체에 걸쳐 34.3점).
- 공립 학교: 교장의 교수 경력이 여전히 강건하게 나타났다(+62.9점). 학교 관리의 질(Quality of school management) 또한 학습과 연관이 있었으나, 유의 수준 10%에서만 유효했다(+10.0점).
- 사립 학교: 어떤 거버넌스 지표도 다중 테스트 교정을 통과하지 못했다. 여기서 나타난 유의미한 결과의 부재는 효과가 전혀 없다는 증거라기보다, 작은 샘플 크기(훈련 학교 179개)와 넓은 신뢰 구간에 기인한다.
이질성: 교장의 교수 경력과 학습 간의 연관성은 점수 분포의 모든 십분위수에서 양(+)의 방향을 보였으며, 중앙값 근처에서 정점을 찍었다. 두 모델 모두에서 십분위수 간 기울치의 동일성이 기각되었는데, 이는 경험의 영향이 학생의 성취 수준에 따라 달라짐을 의미한다. 반면, 교직 경력(seniority in the post)은 교수 경력을 통제했을 때 학습과 강건한 연관성을 보이지 않았다.

의의 및 기여
본 논문은 사하라 이남 아프리카의 교육 생산 함수 문헌에 세 가지 구체적인 기여를 한다:

방법론적 엄밀성: 본 연구는 클러스터링된 추론과 다중 테스트 교정을 사용하여, 보유된 학교에 대해 유연한 모델과 선형 모델을 평가한 최초의 연구이다. 이는 이전 연구들이 학교 클러스터링을 무시하거나 가설 검정의 "포킹 경로의 정원(garden of forking paths)" 문제를 해결하지 못한 점을 보완한다.
리더십에 대한 정교한 이해: 본 연구는 학생 학습과 강건하게 연관된 것이 교장의 '행정직 경력'이 아니라 '교실 수업 경험'임을 명확히 한다. 이는 전문적 신뢰성이 교수 경험에서 기인한다는 변혁적 리더십 이론을 뒷받침한다.
거버넌스의 경험적 한계: 연구 결과는 학교 거버넌스가 중요하긴 하지만, 그 메커니즘은 매우 제한적임을 시사한다. 통합 샘플에서는 교수 경험만이 강건한 예측 변수였다. 사립 학교의 경우, 어떤 거버넌스 지표도 강건한 연관성을 지지하지 못해 정책적 확장에 주의가 필요함을 보여준다.

한계 및 주의사항
저자들은 데이터의 횡단적 특성과 관찰되지 않은 교란 변수로 인해, 추정치가 인과적 효과가 아닌 **조건부 연관성(conditional associations)**을 나타낸다고 명시적으로 밝힌다. 또한 공립 학교의 관리 품질에 대한 10% 유의 수준은 민감한 수치이며, 5% 수준에서는 교수 경험만이 유의미하게 남는다고 언급한다. 아울러, 본 연구는 가능값의 평균을 관찰된 것으로 취급하며 가중치를 활용하지 않았기에 표준 오차가 과소 추정될 수 있다. 사립 학교에 대한 결과는 통계적 검정력의 제한을 받는다. 따라서 저자들은 자신의 발견을 특정 개입을 확장하기 위한 결정적 인과 증거라기보다는, 정책 논의(특히 교수 경험이 있는 교장 선발 관련)에 정보를 제공하기 위한 근거로 제시한다.

유사한 논문