성과평가와 DEA(Data Envelopment Analysis) 1. 성과측정과평가의중요성 조직의성과에대한합리적인측정및평가의중요성은아무리강조해도지나치지않을것입니다. 특히과학기술의혁신적발달로인한전반적인변화의물결에적극적으로대응하기위해서는한정된자원을가장효율적으로활용하여야하며, 이는올바른성과측정 / 평가에의해서뒷받침되어야만가능합니다. 합리적이고효율적인성과측정 / 평가를위해모든조직이최선의노력을경주하는이유입니다. 2. 성과측정 / 평가를위한주요방법들의한계 Hussain 과 Brightman 은성과측정과주요성과측정방법의한계에관하여다음과같이 정리하고있습니다. 1 조직을관찰하는방법에는여러가지가있으며각방법은 좋은 성과를정의하는기준들에관하여각기다른관점을제공하고있다. 이상적인성과측정시스템은어떤조직이업무를얼마나잘수행하는지에대한정확한평가를제공할뿐만아니라, 조직운영이어떻게개선될수있는지에대한정보를제공할수있어야한다. 투입 ( 자원 ) 이어떻게산출 ( 제품또는서비스 ) 에연계되는지등에대한정보는결과를가져오는동인을찾아내는데유용하다. 조직의성과에대한측정기준으로가장널리활용되고있는재무적비율들은어떤조직의전반적재무성과에대한정보는제공하지만, 성과가개선될수있는정도나성과를개선시키기위해중점을두어야할분야에관하여실체적인정보를제공함에있어서는매우부족하다. 개선을달성하기위해서는, 현실적이고달성가능한개선목표가도출되어야하며, 관리자들이그목표를향해노력할수있도록충분한정보를제공해야만한다. Performance pyramid, results and determinants matrix, BSC 와같은프레임웍들이성과의재무적요소와비재무적요소모두를고려하고는있지만, 효율성을향상시키거나극대화하기위해자원이어느부문에, 얼마나더투입되어야하는지또는감소되어야하는지에대한정보는거의제공하지못하고있다. 이러한문제점들을극복하기위해 DEA 가활용되고있습니다. 1 Hussain, Asia, and Jennifer R Brightman. 2000. White Paper- Frontier Analyst in depth. Banxia Software Ltd. 1
3. DEA(Data Envelopment Analysis) 와 Frontier Analyst DEA(Data Envelopment Analysis) 는 25 년이넘는오랜역사를가지고있으며, 활용의용이성, 결과에대한높은설득력, 저렴한관련솔루션의존재등으로각급조직의성과평가를위하여국내, 외적으로많이활용되고있습니다. 특히호주정부의 Steering Committee for the Review of Commonwealth/State Service Provision 에서는이미 1997 년에 DEA 는주요효율성동인에대한이해의증진과좋은업무추진방법의예를도출해냄으로써정부서비스제공의성과를향상시키는데유용하다 라고강조하고이의활용을위해많은노력을기울이고있기도합니다 2. 우리나라에서도이미지난 2000 년에금융감독원에서은행의성과평가와상시감시를위한 DEA 기법의활용을제안하였습니다. 3 가. 개요 DEA(Data Envelopment Analysis, 자료포괄분석 ) 은 1978년 Charnes, Cooper, Rhodes에의해처음으로제안되었으며, OR/M (Operations Research/Management, 운용과학 / 경영 ) 에서가장널리활용되는방법중하나입니다. Bouyssou가 DEA는 OR에있어서최근의성공스토리의하나라고말해도지나치지않을것이다 라고주장하고있는것에서도경영과학분야에 DEA가끼친높은영향도를확인할수있습니다. DEA 의가장큰특징은 과제중심적접근 과 중요한과제에초점 을맞추어 DMU(Decision Making Units, 의사결정단위 ) 의성과를평가한다는점입니다. DMU 는성과평가의대상인정부기관 지방자치단체 공기업및동하위조직, 공장, 금융기관지점, 상점, 학교, 병원등제품과서비스생산및제공단위를의미한다. DMU 의수에는제한이없으나, 분석의예를살펴보면, 15 개 ~ 10,000 개의 DMU 들이분석되었다. DEA 분석은비교가가능한 DMU들의상대적효율성평가를위한일종의 LP(Linear Programming, 선형계획 ) 방법입니다. DMU들의성과에대한보유자료를이용하여 EES(Empirical Efficient Surface) 을도출합니다. EES 상에위치하는 DMU는효율적인 DMU가되며, 그렇지않은경우에는비효율적인 DMU가됩니다. 이렇게함으로써, 비교대상그룹에서관찰된베스트프랙티스를기준으로각조직의상대적인효율성이계산됩니다. 2 Steering Committee for the Review of Commonwealth/State Service Provision 1997, Data Envelopment Analysis: A technique for measuring the efficiency of government service delivery, AGPS, Canberra. 3 금융감독원, 2000, 새로운상시감시수단으로서의 DEA 기법, 금융감독정보제 2000-13 호. pp. 8-24. 2
통상적으로효율성은산출물을투입물로나누어측정합니다 ( 효율성 = 산출물 / 투입물 ). 그러나이러한단순한효율성측정방식은다양한자원, 활동, 환경요소등과관련된여러투입물과산출물이존재하는상황에서는부적합합니다. 나. DEA 의효율성계산 DEA 는이런문제점을극복하고유사한성격의 DMU 들의상대적효율성을측정하기위해 활용하는 다요소생산성분석모델 입니다. 이때다음식에의해여러투입과산출요소 간의효율성점수를산출합니다. [ 효율성 = 산출물의가중평균합 / 투입물의가중평균합 ] 이때효율성을몇가지로구분할수있습니다 4. 가장일반적인효율성은 기술적효율성 (technical efficiency) 입니다. 기술적효율성은직원의서비스나기계와같은실제적 투입 을베스트프랙티스에견주어 산출 로전환하는정도를말합니다. 다시말해, 현재의기술수준하에서베스트프랙티스수준에서생산하는조직은 100 % 의기술적효율을달성하고있는것이됩니다. 반면베스트프랙티스수준을달성하지못하는조직의기술적효율성은베스트프랙티스에대한상대적비율로표시됩니다. 관리관행이나운용규모등이기술적효율성에영향을미칩니다. 즉기술적효율성은가격이나비용등과같은요소가아니라기술적관계에기초하여계산됩니다. 다음으로 분배적효율성 (allocative efficiency) 이있습니다. 분배적효율성은, 어떤조직의기술적효율성은이미완전하게달성되고있다는가정하에, 특정산출수준과일련의투입가격아래에서생산비용을최소화할수있도록투입이결정되는가에관련된개념입니다. 어떤조직이비용을최소화하는비율로투입을사용하고있다면 100% 의분배적효율성을달성하고있는것이됩니다. 기술적관점에서는베스트프랙티스수준에서운영되고있는조직이라하더라도분배적으로는비효율적일수있습니다. 이는주어진투입의상대적가격수준에서비용을최소화하는비율로투입을사용하고있지못할수있기때문입니다. 마지막으로 비용효율성 (cost efficiency) 가있습니다. 비용효율성은기술적효율성과분배적효율성의조합을말합니다. 기술적효율성과분배적효율성을모두달성한경우에만비용효율적일수있습니다. 비용효율성은기술적효율성점수와분배적효율성점수를곱하여계산됩니다. 4 Steering Committee for the Review of Commonwealth/State Service Provision 1997, Data Envelopment Analysis: A technique for measuring the efficiency of government service delivery, AGPS, Canberra. pp. 10-18. 3
이를그림으로나타내면다음과같습니다. A 점은기술적효율선에나타나는수준의산출을위해필요한것보다더많은투입을사용하기때문에기술적으로비효율적입니다. B 점은기술적으로는효율적이지만비용효율적이지는않습니다. 왜냐하면같은수준의산출이 C 점에서와같이보다적은비용으로가능하기때문입니다. 노동 비용효율선 B 기술적효율선 ( 투입최소화 ) ( 베스트프랙티스 ) A A A C 분배적효율선 ( 비용최소화 ) ( 예산선 ) 자본 자료 : Steering Committee for the Review of Commonwealth/State Service Provision 1997 다. DEA 의특장점 DEA 는위에서살펴본바와같이다양한효율성점수를제공할뿐만아니라비효율적 DMU 가모범으로삼아야할 DMU( 참조 DMU) 를제시함으로써, 보다실제적인성과관리가 가능하도록지원합니다. 이외에 DEA는다음과같은장점을가지고있습니다. 여러투입요소와산출요소를다룰수있다. 투입과산출에대한함수적관계의가정을필요로하지않는다. DMU들이동료나동료그룹과직접적으로비교된다. 투입과산출요소들이각기다른측정단위를가질수있다. 비효율적 DMU의효율성점수와함께비효율적부문을자동점검한다. 비효율적 DMU의경제적비효율성을기술적비효율성과분배적비효율성으로분석할수있는방법을제공한다. 나아가비효율적부문의개선의가능성정도를자동으로도출해준다. 4
라. DEA 활용의예 Frontier Analyst 를이용한 DEA 분석결과의일부를화면을통하여살펴보면다음과같습 니다. 아래그림에서는직원당여신에서는수원지점이가장효율적으로나타났으며, 직원당수신 에서는서울지점이가장효율적인것으로나타났습니다. 춘천지점은어떤한분야에서는수원이나서울지점보다더좋은실적을내고있으나, 두부 문다에서는그렇지못합니다. 그결과, 위 3 개지점이효율곡선 (efficient frontier)- 베스 트프랙티스의모임 - 을형성합니다. 한편인천지점은원점으로부터효율곡선으로이어지는선상에위치합니다. 이위치가인천 지점의상대적효율성을나타냅니다. 인천지점의현재점수는 78.32% 이며, 선을따라효율 곡선에도달하면효율적이되는것입니다. 다음단계로비효율적으로운영되고있는인천지점의개선가능부문과개선가능정도를살펴 보면, 아래표에서볼수있는바와같이현재인력은 3 명인데약 0.65 명정도의인력잉여 상태에있는반면, 수신은현재보다 9.65% 증가시킬수있는것으로나타났습니다. 5
위내용을그래프로보면다음과같습니다. 이를은행전체적으로보면, 아래그림에서볼수있는바와같이베스트프랙티스지점의 실적에비추어볼때직원수는현재약 70% 의잉여가있는상황인반면, 수신과여신은각 각 22.6% 와 7.8% 정도개선의여지가있는것으로나타났습니다. 이외에도 Returns to Scale, Weighting, Filtering, Efficiency Plot, Improvement Analysis 등보다세밀하고종합적인분석을가능하게하는여러방법이있습니다. 분석대상조직의 환경, 규모, 특수성등을반영한더욱구체적이고세밀한분석이가능합니다. 6
마. 기타 Frontier Analyst는효율성점수, 잠재개선상세내용, 효용곡선도, 참조집단횟수, 참조기여외에상관관계탐색, 보고서, 웹출판등여러가지기능을제공합니다. 이런기능들은자료에대한즉각적인통찰력을제공하여중요한부문에관심을집중할수있게해주며, 또한여러가지보고서는경영진회의의자료로활용할수도있습니다. 3. 결론 DEA는이미보유하고있는자료를이용하여여러가지분석을해볼수있으며, 그결과로제공되는정보가매우유용하기때문에조직의성과분석및평가에의활용이점증하고있습니다. 즉분석을위해새로운자료의획득이나외부기관으로부터의컨설팅등이필요하지않으며이미보유하고있는자료를활용하여베스트프랙티스를찾아내며각 DMU 들의효율성과효과성을검토할뿐만아니라개선부문과개선가능정도등을과학적, 정량적으로도출해줍니다. 특히 DEA 전용솔루션인 Frontier Analyst는부담없는가격에기타여러가지편리한기능을추가로제공하고있습니다. DEA와 Frontier Analyst가조직성과의측정 / 평가에적극적으로활용되어자원의최적활용을통한생산성과경쟁력제고에크게기여할것으로기대합니다. DEA 와 Frontier Analyst 에관한문의 : [ 주 ] 디시전사이언스전화 : 02-707-1070 팩스 : 02-707-1071 e-mail: serve@expertchoice.co.kr 7