📄 social_science

Self Reported Practical Innovation and Its Associations with Critical Thinking Problem Solving and Teamwork among Indonesian Biology Undergraduates

인도네시아 생물학 전공 학부생들을 대상으로 한 이 연구는 자기 보고식 실천적 혁신이 비판적 사고 및 팀워크와는 강한 상관관계가 있으나 문제 해결과는 상관관계가 없음을 밝히며, 이러한 구성 개념들을 구분하고 단일한 미검증 고차 사고 기능 총점 대신 검증된 개별 점수를 사용하는 것의 중요성을 강조한다.

원저자: Luthpi Safahi, Gunawan Suryoputro, Samsul Maarif, Zulherman Zulherman

게시일 2026-09-29

📖 4 분 읽기☕ 가벼운 읽기

CC BY 4.0

원저자: Luthpi Safahi, Gunawan Suryoputro, Samsul Maarif, Zulherman Zulherman

원본 논문은 CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/) 라이선스로 제공됩니다. ✨ 이것은 아래 논문에 대한 AI 생성 설명입니다. 저자가 작성하거나 승인한 것이 아닙니다. 기술적 정확성을 위해서는 원본 논문을 참조하세요. 전체 면책 조항 읽기

현대적인 교실에서 교육자들은 단순히 사실을 암기하는 것을 넘어선 기술에 점점 더 집중하고 있습니다. 그들은 학생들이 비판적으로 사고하고, 복잡한 문제를 해결하며, 집단 내에서 효과적으로 협력하고, 새롭고 실용적인 아이디어를 구상하는 법을 배우기를 원합니다. 미시적인 과정과 거대한 환경 시스템을 연결해야 하는 생물학 분야에서 이러한 능력은 필수적입니다. 연구자들은 이러한 능력을 "고차원적 사고 기술"이라고 부릅니다. 하지만 이를 측정하는 것은 까다롭습니다. 종종 학교와 연구들은 이 서로 다른 기술들을 마치 모두 같은 것인 양 하나의 점수로 결합해 버립니다. 이러한 접근 방식은 어떤 학생이 협동 능력은 뛰어나지만 특정 문제 해결에는 어려움을 겪을 수 있거나, 혹은 그 반대일 수 있다는 사실을 숨길 수 있습니다. 이러한 기술들이 실제 학생들 사이에서 실제로 어떻게 서로 연관되어 있는지 이해하는 것은 더 나은 수업과 평가를 설계하는 데 매우 중요합니다.

인도네시아의 무하마디아 프로페서 함카 대학교(Universitas Muhammadiyah Prof Dr Hamka)의 연구팀은 최근 생물학 전공 학부생들 사이에서 이러한 기술들이 어떻게 중첩되는지 조사했습니다. 그들은 특히 "실용적 혁신"이라고 부르는 특정 능력, 즉 생물학적 지식을 취하여 실행 가능한 해결책이나 개선안으로 전환할 수 있는 역량에 주목했습니다. 이를 이해하기 위해, 그들은 학생들이 네 가지 영역, 즉 비판적 사고, 문제 해결, 팀워크, 그리고 실용적 혁신에 대해 스스로 평가한 능력을 살펴보았습니다. 이 연구는 생물학 개념, 실험실 실험, 그리고 그룹 프로젝트에 대한 경험을 담은 113개의 문항이 포함된 상세한 설문지를 완료한 100명의 생물학 전공 학생들을 대상으로 진행되었습니다. 연구진은 학생들이 한 영역에서 자신감을 느낀다면 다른 영역에서도 자신감을 느끼는지, 그리고 이러한 자신감의 느낌이 실제로 하나의 패키지처럼 함께 움직이는지, 아니면 별개의 특성으로서 존재하는지를 알고 싶었습니다.

연구진은 먼저 학생들이 질문에 어떻게 답했는지 주의 깊게 확인했습니다. 그들은 문제 해결에 관한 질문 중 일부가 인내심을 잃거나 어려운 과업을 피하는 것과 같은 나쁜 습관을 묘사하는 부정적인 방식으로 표현되어 있다는 점을 발견했습니다. 점수가 타당하게 나오도록 하기 위해, 팀은 이 특정 질문들의 점수 산정 방식을 뒤집어, 높은 숫자가 항상 더 나은 문제 해결 능력을 의미하도록 만들었습니다. 이 작은 조정은 매우 중요한 결과를 가져왔습니다. 이 수정을 거치기 전에는 문제 해결 능력이 실용적 혁신과 강력하게 연결되어 있는 것으로 나타났습니다. 수정을 거친 후, 그 강력했던 연결 고리는 중간 수준으로 약화되었습니다. 실용적 혁신에 대해 높게 평가한 학생들은 팀워크와 비판적 사고에서도 높게 평가하는 학생들이었지만, 그들의 자기 보고식 문제 해결 능력은 동일한 패턴을 따르지 않았습니다.

연구진이 수치를 살펴보았을 때, 학생들은 팀워크에 대해 가장 자신감을 느꼈으며, 실용적 혁신과 비판적 사고가 그 뒤를 바짝 쫓았습니다. 문제 해결 능력은 다른 기술들에 비해 낮게 평가되었습니다. 팀으로 일하는 것에 능숙하다고 느끼는 학생들은 혁신적인 생물학적 해결책을 제시할 수 있다고 느끼는 학생들이기도 했습니다. 마찬가지로, 비판적 사고에 능하다고 느끼는 학생들은 실용적 혁신에도 강점이 있다고 느꼈습니다. 이 두 가지 기술, 즉 팀워크와 비판적 사고는 학생들의 자기 보고식 혁신 능력 변량의 85%를 설명할 정도로 밀접하게 연결되어 있었습니다. 그러나 연구진이 팀워크와 비판적 사고를 고려했을 때, 학생들의 자기 보고식 문제 해결 능력은 전체 그림에 아주 미미한 수준의 고유한 가치만을 더했습니다. 그것은 마치 혁신 능력이라는 것이 학생이 비판적으로 사고하고 타인과 협력하는 능력이 얼마나 뛰어난지에 의해 이미 상당 부분 설명되는 것과 같았습니다.

연구는 또한 질문이 어떻게 작성되었는지가 엄청나게 중요하다는 것을 보여주었습니다. 문제 해결에 관한 질문 세트는 다른 질문들에 비해 일관성이 떨어졌습니다. 점수 방향을 수정한 후에도, 이 질문들에 대한 답변들은 팀워크나 비판적 사고에 대한 답변만큼 긴밀하게 뭉쳐 있지 않았습니다. 이는 문제 해결 질문들이 아마도 합리적인 전략과 좌절이나 회피 같은 정서적 반응을 혼합하여 측정하는 등, 여러 가지 다른 것들을 섞어서 측정하고 있을 가능성을 시사합니다. 이 때문에 연구진은 이 모든 기술들을 하나의 커다란 "고차원적 사고" 점수로 묶어서 취급하는 것은 오해의 소지가 있다고 결론지었습니다. 대신, 그들은 교육자와 연구자들이 각 기술을 개별적으로 살펴봐야 한다고 주장했습니다.

이 연구는 우리가 학생의 능력을 측정하는 방식에 대한 핵심적인 교훈을 강조합니다. 이 연구는 팀워크가 혁신을 일으킨다는 것을 증명하거나, 이 학생들이 실제로 다른 이들보다 현실 세계의 문제를 더 잘 해결한다는 것을 보여준 것이 아닙니다. 단지 이 학생들이 자신의 기술을 어떻게 인식하고 있으며, 그 인식들이 어떻게 연결되어 있는지를 보여주었을 뿐입니다. 연구 결과는 학생들이 협력하고 비판적으로 사고하는 데 능숙하다고 느낄 때, 실용적인 혁신을 창조할 수도 있다고 느낀다는 점을 시사합니다. 그러나 그들의 문제 해결 능력에 대한 느낌은 더 복잡하고 덜 균일한, 별개의 이야기인 듯 보였습니다. 연구진은 향-후 연구들이 자기 보고식 느낌이 아닌 실제 수행 능력을 살펴봐야 하며, 여러 기술이 자주 함께 나타난다고 해서 그것들을 동일한 것으로 취급해서는 안 된다고 강조했습니다. 이러한 기술들을 별개로 유지함으로써, 교육자들은 학생들이 어디에서 도움이 필요한지 더 잘 이해할 수 있고, 과학의 미래를 위해 요구되는 구체적인 능력들을 어떻게 육성할 수 있을지 알 수 있습니다.

기술 요약: 인도네시아 생물학 전공 대학생들의 자기 보고식 실용적 혁신과 비판적 사고, 문제 해결 및 팀워크 간의 연관성

문제 제로 (Problem Statement)
교육 평가에서 고차원적 사고 기술(HOTS)과 협업 역량은 흔히 단일한 복합 점수로 통합되어 산출된다. 이러한 관행은 비판적 사고, 문제 해결, 팀워크, 실용적 혁신과 같은 특정 영역 간의 구별된 측정 패턴과 연관성을 모호하게 만들 위험이 있다. 또한, 평가 연구들은 척도의 점수 극성(방향성)이나 문항 세트의 구조적 일관성을 엄격하게 검토하지 않은 채 신뢰도만을 보고하는 경우가 많다. 학생들이 복잡한 체계와 증거 기반 추론을 다루어야 하는 생물학 교육의 맥락에서, 이러한 영역들의 자기 보고 점수가 단일한 잠재 특성을 나타내는지, 아니면 서로 공존하며 연관된 별개의 역량인지를 구분할 필요가 있다. 특히, 생물학적 맥락화된 자기 보고 도구 내에서 "실용적 혁신"과 다른 HOTS 영역 간의 경험적 관계를 이해함에 있어, 잠재적인 점수 산출 아티팩트(scoring artifacts)를 고려할 때 발생하는 구체적인 공백이 존재한다.

연구 방법론 (Methodology)
본 연구는 인도네시아의 다양한 국립 및 사립 기관에 재학 중인 100명의 생물학 전공 대학생을 대상으로 한 탐색적, 횡단적 이차 분석을 수행하였다. 데이터 소스는 생물학적 맥락(예: 실험실 실험, 생태적 결과, 생물학적 데이터)에 맞춤화된 113개의 리커트 척도 문항(1~5점 척도)으로 구성된 구조화된 온라인 설문지이다. 도구는 다음 네 가지 영역으로 구성되었다:

비판적 사고 (Critical Thinking): 40개 문항 (CT1–CT40)
문제 해결 (Problem Solving): 21개 문항 (PSS1–PSS21)
팀워크 (Teamwork): 26개 문항 (TS1–TS26)
실용적 혁신 (Practical Innovation): 26개 문항 (PIS1–PIS26)

주요 분석 절차:

점수 산출 민감도 (Scoring Sensitivity): 중요한 방법론적 단계로, PSS14–PSS21 문항에 대한 역채점(reverse-scoring)을 실시하였다. 이 문항들은 부적응적 정서 및 회피 반응(예: 분노, 철회)을 기술하고 있다. 높은 값이 일관되게 더 효과적인 문제 해결을 나타내도록 응답자 수준에서 역채점( $6 - \text{응답}$ )을 수행하였다.
기술 및 신뢰도 진단 (Descriptive and Reliability Diagnostics): 문항 평균 점수, 표준 편차 및 신뢰 구간을 계산하였다. 내부 일관성은 Cronbach's alpha와 단일 요인 McDonald's omega를 사용하여 평가하였으며, 평균 문항 간 상관관계와 수정된 문항-전체 상관관계를 함께 검토하였다.
연관성 모델링 (Associative Modeling): 네 가지 영역 평균 간의 Pearson 및 Spearman 상관관계를 계산하였다. 실용적 혁신을 종속 변수로 하고, 비판적 사고, 문제 해결, 팀워크를 동시에 예측 변수로 하는 다중 선형 회귀 모델을 구축하였다.
강건성 검정 (Robustness Checks): 적절한 크기의 표본 크기( $N=100$ )에서 발생할 수 있는 분산 문제를 처리하기 위해 HC3 이분산 강건 표준 오차를 활용하여 회귀 분석을 수행하였다. 모델 진단에는 잔차 검사, Breusch–Pagan 검정 및 Ramsey RESET 검정이 포함되었다. 민감도 분석은 모든 문항에 대해 동일한 응답을 제공한 5명의 응답자를 제외하고 수행되었다.

주요 결과 (Key Results)

점수 분포: 팀워크가 가장 높은 평균 점수( $M=3.898$ )를 보였고, 실용적 혁신( $M=3.811$ ), 비판적 사고( $M=3.799$ ), 문제 해결( $M=3.495$ )이 그 뒤를 이었다.
내부 일관성: 비판적 사고, 팀워크, 실용적 혁신은 매우 높은 내부 일관성( $\alpha$ 및 $\omega$ 범위 .967 ~ .973)을 나타냈다. 반면, 문제 해결 척도는 역채점 후 더 낮고 덜 일관된 일관성을 보였다( $\alpha = .815, \omega = .727$ ), 평균 문항 간 상관관계는 .190으로 하락하였다.
점수 방향의 영향: 문제 해결 문항의 역채점은 결과를 실질적으로 변화시켰다. 원시 점수(raw scoring) 방식에서는 문제 해결이 실용적 혁신과 강한 상관관계( $r = .614$ )를 보였고, 유의미한 양의 회귀 계수( $\beta = .128, p = .014$ )를 가졌다. 역채점 후에는 상관관계가 약화되었고( $r = .468$ ), 고유 회귀 계수는 유의미하지 않은 음수( $\beta = -.048, p = .269$ )가 되었다.
실용적 혁신과의 연관성:
- 영차 상관관계 (Zero-order correlations): 실용적 혁신은 팀워크( $r = .879$ ) 및 비판적 사고( $r = .863$ )와 강하게 상관되어 있었으며, 문제 해결과는 중간 정도의 상관관계( $r = .468$ )를 보였다.
- 회귀 모델: HC3-강건 세 가지 예측 변수 모델에서, 팀워크( $\beta = .550, p < .001$ )와 비판적 사고( $\beta = .450, p < .001$ )는 실용적 혁신과 유의미한 양의 연관성을 유지하였다. 문제 해결은 고유한 연관성을 유지하지 못했다( $\beta = -.048, p = .269$ ).
- 모델 적합도: 전체 모델은 실용적 혁신의 분산을 85.0% 설명하였다( $R^2 = .850$ ).

주요 기여 (Key Contributions)

점수 산출의 방법론적 엄밀성: 본 연구는 점수 방향(극성)이 사소한 기술적 문제가 아니라 통계적 결론을 역전시키거나 무효화할 수 있는 실질적인 요소임을 입증한다. 부적응적 문항을 역채점하지 않았다면, 문제 해결이 실용적 혁신의 고유한 예측 변수라는 잘못된 결론에 도달했을 것이다.
구성 개념 수준의 보고 (Construct-Level Reporting): 본 분석은 이러한 영역들을 단일한 "HOTS" 총점으로 통합하는 것에 반대한다. 각 영역은 서로 다른 심리측정적 특성(예: 문제 해결 척도의 이질성)과 구별되는 연관성 패턴을 보이므로, 별도로 보고되어야 한다.
역량의 차별화: 연구 결과는 자기 보고된 실용적 혁신이 이 표본에서 팀워크 및 비판적 사고와 강하게 공존하지만, 방향성이 교정된 특정 문제 해결 척도와는 고유한 선형 연관성을 공유하지 않음을 명확히 한다.
이차 분석의 투명성: 본 논문은 문항 수준의 진단, 점수 규칙에 대한 민감도 분석, 자기 보고 데이터의 한계를 명시적으로 보고함으로써 아카이브된 데이터셋에 대한 투명한 감사를 제공한다.

의의 및 주장 (Significance and Claims)
본 논문은 자신의 기여를 도구의 타당도 검증이나 인과 기제 규명이 아닌 진단적 및 관계적 측면으로 설정한다.

결과의 성격: 결과는 특정 자발적 표본 내에서의 자기 보고 점수 간의 동시적 연관성을 기술한다. 저자들은 이러한 결과가 인과적 영향력, 입증된 역량, 또는 검증된 고차원적 잠재 구조를 입증하는 것이 아님을 명시적으로 밝힌다.
교육적 시사점: 본 연구는 평가 관행이 이질적인 역량들을 단일 점수로 통합하는 것을 피해야 한다고 제언한다. 대신, 특정 강점(예: 팀워크)과 약점(예: 문제 해결 문항의 구조적 일관성)에 대한 정보를 보존하기 위해 구성 개념 수준의 보고가 선호된다.
한계 인정: 저자들은 횡단적 설계, 적은 표본 크기, 측정 불변성 검증의 부재, 그리고 자기 보고에 대한 의존(공통 방법 분산의 영향을 받을 수 있음)이 연구 결과의 일반화 가능성을 제한한다는 점을 언급하였다. 높은 $R^2$ 값은 설명력이 아닌 관련 자기 지각의 동시 측정에 기인한다.
향후 방향: 본 논문은 더 큰 표본에서 요인 구조를 검증하고, 측정 불변성을 확립하며, 자기 보고 점수를 (자기 지각에만 의존하는 대신) 실제 실험 설계나 혁신 제품과 같은 실제 수행 기준과 연결하는 후속 연구를 촉구한다.

기술 요약: 인도네시아 생물학 전공 대학생들의 자기 보고식 실용적 혁신과 비판적 사고, 문제 해결 및 팀워크 간의 연관성

유사한 논문