최근 국제개발협력(ODA) 환경은 기후변화, 국지적 분쟁, 신종 감염병 등 복잡한 정치·경제적 변동성으로 인해 전례 없는 불확실성에 직면해 있다. 국별협력사업 역시 점차 대형화되고 다년도화되는 추세 속에서, 기획 단계에서 사전에 완결된 계획을 현장에 단순 이행하고 통제하는 전통적인 결과 중심 성과관리(RBM)의 한계가 명확해지고 있다. 이에 따라 사업 수행 과정 중 지속적으로 상황을 진단하고 환경 변화에 맞추어 유연하게 궤도를 수정하는 복잡성 이론 기반의 '적응적 관리(Adaptive Management)'와 '형성적 평가(Formative Evaluation)'의 필요성이 국제개발협력계의 핵심 의제로 대두되었다.
해외 주요 공여기관들은 이미 중간평가를 단순한 실적 점검이 아닌 전략적 궤도 수정을 위한 핵심 도구로 적극 활용하고 있다. 세계은행(World Bank)은 중간점검(MTR)을 프로젝트의 지속, 구조조정, 취소 여부를 결정하는 전략적 변곡점으로 삼고 있으며, 문제 사업으로 식별될 경우 1년 이내에 공식적인 후속 조치를 강제하는 '12개월 룰(Proactivity Rule)'을 통해 강력한 책무성을 확보하고 있다. 또한 독일국제협력공사(GIZ)는 효과성, 영향, 지속가능성 중 하나라도 미흡할 경우 전체 사업을 실패로 간주하는 강력한 '녹아웃(Knock-out)' 기준을 보유하고 있으나, 사업 중간 시점에서는 실증적 장기 성과 도출 및 데이터 확보의 한계를 인정하여 현재 달성 성과의 '개연성(Plausibility)' 진단과 사업 개선을 돕는 학습 중심으로 제도를 매우 유연하게 운영하고 있다.
반면 한국국제협력단(KOICA)의 현행 사업 관리 및 평가체계는 그간 종료평가 및 사후평가 중심으로 운영되어 왔으며, 사업 수행 과정에서의 중간 점검과 전략적 환류 기능은 상대적으로 제한적으로 활용되어 온 측면이 있다. 최근 10년간 평가가 실시된 전체 사업 중 약 4%는 독립적인 중간 평가가 시행되었며 나머지 사업에 대해서는 연차점검으로 대체하여 점검한 것으로 확인된다. 그럼에도 불구하고 일부 대형 사업에서는 사업 지연, 환경 변화 대응의 어려움, 사업 관리 리스크 등의 문제가 지속적으로 확인되고 있으며, 이는 복합적인 사업 환경과 제도적인 운영 여건 속에서 사업 수행 과정에 대한 적시적 점검 및 관리 체계 강화의 필요성을 시사한다.
현재 규정상 중간평가를 갈음하고 있는 연차점검 제도는 예산 집행률 및 공정률 중심의 사후 기록과 행정적 현황 파악에 집중되어 있다. 내부 직원을 대상으로 한 실증적 설문조사 결과, 응답자의 절반 이상(51.2%)이 현행 연차점검 체계에 과도한 업무 부담을 호소하고 있음에도 불구하고, 산출물 및 데이터 품질 부족 등의 이유로 도출된 결과가 사업계획 변경이나 구조조정 같은 실질적 성과관리 개선으로 이어지지 않아 조직적 피로감이 누적되어 있는 것으로 나타났다.
반면 응답자의 56.6%는 위기 사업의 조기 정상화와 후속사업 타당성 검토를 위한 전략적 수단으로서 중간평가의 도입에 찬성하였다. 특히 이들은 모든 사업에 대한 무분별한 일괄 적용을 우려하며 문제 발생 사업 중심의 선별적 적용을 강하게 요구하였고, 사업 현장에 대한 이해도가 높은 내부 인력 주도하에 전문성을 갖춘 외부 전문가가 부분적으로 참여하는 '혼합형 평가단' 방식을 가장 현실적이고 이상적인 대안으로 꼽았다.
이러한 실증적 진단 결과를 바탕으로, 본 연구는 중간평가의 패러다임을 단순 이행 점검에서 형성적 의사결정 지원으로 전환하기 위한 3대 핵심 설계 원칙을 수립하였다. 첫째, 행정 부담의 폭증을 방지하기 위해 선택과 집중을 통한 '선별적 도입(Trigger-based)'을 원칙으로 삼는다. 사업계획 변경 심의 과정에서 집행 장기 지연이 확인되거나, 연차점검 중 성과 논리체계의 결함이나 데이터 수집 부재가 포착된 사업, 또는 후속사업 타당성 검토가 공식 요청된 사업 등 명확한 위기 징후나 의사결정 수요가 발생한 경우에 한정하여 평가를 가동한다. 둘째, 내·외부 전문성을 전략적으로 결합한 '혼합형 평가단'을 운영한다. 부서 간 이해상충을 방지하기 위해 독립된 평가실이 프로세스 전반을 주관하되, 현장 사정에 정통한 내부 평가자가 총괄을 맡고 사회과학 방법론 및 성과 검증 전문성을 갖춘 외부 전문가가 필수적으로 참여하여 진단의 현장 수용성과 객관성을 동시에 담보한다. 셋째, 평가 결과와 의사결정 간의 '제도적 구속력(Binding Force)'을 확보한다. 도출된 권고 사항이 단순한 보고서 사장으로 끝나지 않도록, 사업계획 변경 심의위원회 자동 상정 및 차년도 예산 배정과 같은 공식 의사결정 채널에 의무적으로 연계되도록 제도를 설계하였다.
상기 원칙을 실무 현장에 즉각적으로 적용할 수 있도록, 본 연구는 평가 유형을 목적에 따라 체계화하고 과학적 진단 도구를 결합한 모듈형 가이드라인을 개발하였다. 진단의 목적에 따라 위기 사업의 근본 원인을 규명하고 정상화 방안을 도출하는 '유형 1: 문제사업 대응'과, 선행사업의 성과를 검증하여 후속 사업 추진의 적격성을 판단하는 '유형 2: 후속사업 타당성 검토'로 평가를 이원화하여 운영한다. 진단의 정밀성을 극대화하기 위해 전체 공정률을 단순 비교하는 피상적 방식에서 탈피하고, 전체 사업 일정에 결정적 영향을 미치는 '핵심경로(Critical Path)' 상의 병목 구간을 집중적으로 분석한다. 이와 더불어 사업 기획 시 논리모형(PDM)에 설정된 성과 전제 조건인 '가정(Assumptions)' 항목을 현재 시점에서 원점 재검토하여, 치명적 가정의 붕괴로 인한 논리적 단절 여부를 엄밀히 검증한다. 특히 평가자의 정성적 자의성이 개입하는 것을 원천 차단하기 위해, 핵심경로 병목 심각도, 예산 집행 적정성, 데이터 품질, PDM 가정 유효성, 선결과제 이행 여부 등의 핵심 진단 영역을 100점 만점의 '스코어카드(Scorecard)'로 정량화하였다. 도출된 종합 점수에 따라 유형 1에서는 '정상(Green)', '조건부 조정(Yellow)', '구조조정 및 중단(Red)'의 명시적인 신호등 판정을 부여한다. 나아가 핵심경로 상의 치명적 단절이나 예산 집행률 80% 이하 등의 치명적 결함에 대해서는 총점과 무관하게 '킬러 문항(Knock-out)'을 적용, 즉시 강력한 구조조정 조치를 발동하게 함으로써 실행력 있는 권고안을 도출하도록 강제하였다. 유형 2 역시 선행사업의 성과 입증 수준과 수원국의 주인의식(Ownership)을 계량화하여 무분별한 관성적 연장 관행을 차단하고 '적격', '조건부 연계', '독립 종료'로 명확한 판정을 내리도록 규정하였다.
본 연구를 통해 수립된 새로운 중간평가 체계와 실무 가이드라인이 KOICA 사업 현장에 성공적으로 안착하여 실질적인 원조 효과성 제고로 이어지기 위해서는 명확한 정책적 뒷받침이 수반되어야 한다. 가장 먼저, 평가 권고사항에 대하여 경영진과 사업부서가 구체적인 이행 계획과 타임라인을 의무적으로 제출하도록 하는 '관리적 대응(Management Response)' 제도를 전사적으로 내재화해야 한다. 나아가 평가실 및 감사 부서가 이를 분기별로 추적하고 모니터링하여 평가 보고서의 사문화를 근본적으로 차단해야 한다. 아울러 '문책과 감사' 중심의 기존 성과관리 패러다임에서 벗어나, 사업의 실패 요인을 조기에 식별하고 정상화를 지원하는 '학습과 궤도 수정' 중심의 유연한 조직문화 혁신이 동반되어야 한다. 불가피하게 발생하는 사업 중간의 뼈아픈 구조조정이나 조기 종료(Cancellation) 결정을 담당자에 대한 방어적 문책 사유로 삼는 문화를 타파하고, 이를 매몰 비용을 최소화하기 위한 적극적이고 전략적인 적응적 관리의 일환으로 수용해야 한다. 궁극적으로 중간평가를 통해 과학적으로 식별된 수원국 측의 인허가 지연, 법제도 미비, 분담금 미납 등의 외부 통제 불가능 변수들은 단순 실무 차원의 해결을 넘어, 고위급 정책 대화(Policy Dialogue)의 외교적 레버리지로 적극 연계하여 활용되어야 할 것이다.
해외 주요 공여기관들은 이미 중간평가를 단순한 실적 점검이 아닌 전략적 궤도 수정을 위한 핵심 도구로 적극 활용하고 있다. 세계은행(World Bank)은 중간점검(MTR)을 프로젝트의 지속, 구조조정, 취소 여부를 결정하는 전략적 변곡점으로 삼고 있으며, 문제 사업으로 식별될 경우 1년 이내에 공식적인 후속 조치를 강제하는 '12개월 룰(Proactivity Rule)'을 통해 강력한 책무성을 확보하고 있다. 또한 독일국제협력공사(GIZ)는 효과성, 영향, 지속가능성 중 하나라도 미흡할 경우 전체 사업을 실패로 간주하는 강력한 '녹아웃(Knock-out)' 기준을 보유하고 있으나, 사업 중간 시점에서는 실증적 장기 성과 도출 및 데이터 확보의 한계를 인정하여 현재 달성 성과의 '개연성(Plausibility)' 진단과 사업 개선을 돕는 학습 중심으로 제도를 매우 유연하게 운영하고 있다.
반면 한국국제협력단(KOICA)의 현행 사업 관리 및 평가체계는 그간 종료평가 및 사후평가 중심으로 운영되어 왔으며, 사업 수행 과정에서의 중간 점검과 전략적 환류 기능은 상대적으로 제한적으로 활용되어 온 측면이 있다. 최근 10년간 평가가 실시된 전체 사업 중 약 4%는 독립적인 중간 평가가 시행되었며 나머지 사업에 대해서는 연차점검으로 대체하여 점검한 것으로 확인된다. 그럼에도 불구하고 일부 대형 사업에서는 사업 지연, 환경 변화 대응의 어려움, 사업 관리 리스크 등의 문제가 지속적으로 확인되고 있으며, 이는 복합적인 사업 환경과 제도적인 운영 여건 속에서 사업 수행 과정에 대한 적시적 점검 및 관리 체계 강화의 필요성을 시사한다.
현재 규정상 중간평가를 갈음하고 있는 연차점검 제도는 예산 집행률 및 공정률 중심의 사후 기록과 행정적 현황 파악에 집중되어 있다. 내부 직원을 대상으로 한 실증적 설문조사 결과, 응답자의 절반 이상(51.2%)이 현행 연차점검 체계에 과도한 업무 부담을 호소하고 있음에도 불구하고, 산출물 및 데이터 품질 부족 등의 이유로 도출된 결과가 사업계획 변경이나 구조조정 같은 실질적 성과관리 개선으로 이어지지 않아 조직적 피로감이 누적되어 있는 것으로 나타났다.
반면 응답자의 56.6%는 위기 사업의 조기 정상화와 후속사업 타당성 검토를 위한 전략적 수단으로서 중간평가의 도입에 찬성하였다. 특히 이들은 모든 사업에 대한 무분별한 일괄 적용을 우려하며 문제 발생 사업 중심의 선별적 적용을 강하게 요구하였고, 사업 현장에 대한 이해도가 높은 내부 인력 주도하에 전문성을 갖춘 외부 전문가가 부분적으로 참여하는 '혼합형 평가단' 방식을 가장 현실적이고 이상적인 대안으로 꼽았다.
이러한 실증적 진단 결과를 바탕으로, 본 연구는 중간평가의 패러다임을 단순 이행 점검에서 형성적 의사결정 지원으로 전환하기 위한 3대 핵심 설계 원칙을 수립하였다. 첫째, 행정 부담의 폭증을 방지하기 위해 선택과 집중을 통한 '선별적 도입(Trigger-based)'을 원칙으로 삼는다. 사업계획 변경 심의 과정에서 집행 장기 지연이 확인되거나, 연차점검 중 성과 논리체계의 결함이나 데이터 수집 부재가 포착된 사업, 또는 후속사업 타당성 검토가 공식 요청된 사업 등 명확한 위기 징후나 의사결정 수요가 발생한 경우에 한정하여 평가를 가동한다. 둘째, 내·외부 전문성을 전략적으로 결합한 '혼합형 평가단'을 운영한다. 부서 간 이해상충을 방지하기 위해 독립된 평가실이 프로세스 전반을 주관하되, 현장 사정에 정통한 내부 평가자가 총괄을 맡고 사회과학 방법론 및 성과 검증 전문성을 갖춘 외부 전문가가 필수적으로 참여하여 진단의 현장 수용성과 객관성을 동시에 담보한다. 셋째, 평가 결과와 의사결정 간의 '제도적 구속력(Binding Force)'을 확보한다. 도출된 권고 사항이 단순한 보고서 사장으로 끝나지 않도록, 사업계획 변경 심의위원회 자동 상정 및 차년도 예산 배정과 같은 공식 의사결정 채널에 의무적으로 연계되도록 제도를 설계하였다.
상기 원칙을 실무 현장에 즉각적으로 적용할 수 있도록, 본 연구는 평가 유형을 목적에 따라 체계화하고 과학적 진단 도구를 결합한 모듈형 가이드라인을 개발하였다. 진단의 목적에 따라 위기 사업의 근본 원인을 규명하고 정상화 방안을 도출하는 '유형 1: 문제사업 대응'과, 선행사업의 성과를 검증하여 후속 사업 추진의 적격성을 판단하는 '유형 2: 후속사업 타당성 검토'로 평가를 이원화하여 운영한다. 진단의 정밀성을 극대화하기 위해 전체 공정률을 단순 비교하는 피상적 방식에서 탈피하고, 전체 사업 일정에 결정적 영향을 미치는 '핵심경로(Critical Path)' 상의 병목 구간을 집중적으로 분석한다. 이와 더불어 사업 기획 시 논리모형(PDM)에 설정된 성과 전제 조건인 '가정(Assumptions)' 항목을 현재 시점에서 원점 재검토하여, 치명적 가정의 붕괴로 인한 논리적 단절 여부를 엄밀히 검증한다. 특히 평가자의 정성적 자의성이 개입하는 것을 원천 차단하기 위해, 핵심경로 병목 심각도, 예산 집행 적정성, 데이터 품질, PDM 가정 유효성, 선결과제 이행 여부 등의 핵심 진단 영역을 100점 만점의 '스코어카드(Scorecard)'로 정량화하였다. 도출된 종합 점수에 따라 유형 1에서는 '정상(Green)', '조건부 조정(Yellow)', '구조조정 및 중단(Red)'의 명시적인 신호등 판정을 부여한다. 나아가 핵심경로 상의 치명적 단절이나 예산 집행률 80% 이하 등의 치명적 결함에 대해서는 총점과 무관하게 '킬러 문항(Knock-out)'을 적용, 즉시 강력한 구조조정 조치를 발동하게 함으로써 실행력 있는 권고안을 도출하도록 강제하였다. 유형 2 역시 선행사업의 성과 입증 수준과 수원국의 주인의식(Ownership)을 계량화하여 무분별한 관성적 연장 관행을 차단하고 '적격', '조건부 연계', '독립 종료'로 명확한 판정을 내리도록 규정하였다.
본 연구를 통해 수립된 새로운 중간평가 체계와 실무 가이드라인이 KOICA 사업 현장에 성공적으로 안착하여 실질적인 원조 효과성 제고로 이어지기 위해서는 명확한 정책적 뒷받침이 수반되어야 한다. 가장 먼저, 평가 권고사항에 대하여 경영진과 사업부서가 구체적인 이행 계획과 타임라인을 의무적으로 제출하도록 하는 '관리적 대응(Management Response)' 제도를 전사적으로 내재화해야 한다. 나아가 평가실 및 감사 부서가 이를 분기별로 추적하고 모니터링하여 평가 보고서의 사문화를 근본적으로 차단해야 한다. 아울러 '문책과 감사' 중심의 기존 성과관리 패러다임에서 벗어나, 사업의 실패 요인을 조기에 식별하고 정상화를 지원하는 '학습과 궤도 수정' 중심의 유연한 조직문화 혁신이 동반되어야 한다. 불가피하게 발생하는 사업 중간의 뼈아픈 구조조정이나 조기 종료(Cancellation) 결정을 담당자에 대한 방어적 문책 사유로 삼는 문화를 타파하고, 이를 매몰 비용을 최소화하기 위한 적극적이고 전략적인 적응적 관리의 일환으로 수용해야 한다. 궁극적으로 중간평가를 통해 과학적으로 식별된 수원국 측의 인허가 지연, 법제도 미비, 분담금 미납 등의 외부 통제 불가능 변수들은 단순 실무 차원의 해결을 넘어, 고위급 정책 대화(Policy Dialogue)의 외교적 레버리지로 적극 연계하여 활용되어야 할 것이다.