가지고 있다. 이와 더불어, 텍스트 마이닝과 같은 분야에서도 영화 관련 온라인 리뷰를 분석하고자 하는 시도가 지속적으로 이뤄지고 있다. 이들 연구는 각 리뷰의 감정분류를 통해, 긍정/중립/부정을 구분하는 특징을 찾아내거나, 텍스트 마이닝 알고리즘의 성능을 비교하는 연구

Transcription

1 온라인 리뷰 마이닝을 통한 영화 흥행성과 예측 Predicting movie revenue by online review mining 연세대학교 정보대학원 디지털서비스연구실 요 약 온라인 리뷰는 네트워크 기술의 발전을 통해 그 영향력이 확대되고 있다. 특히, 사전 정보로 통해 소비가 결정되는 영화는 온라인 리뷰가 소비자들의 영화 결정에도 중요한 영향을 미치고 있다. 이에 본 연구는 영화관련 온라인 리뷰를 영화 소비 후 소비자들의 평가 정보라 가정하고, 이를 활용한 영화 흥행성과 예측모형을 제시하고자 한다. 선행 연구를 통하여 영화관련 온라인 리뷰에 감독, 배우, 스토리, 효과 등의 독립적인 속성 및 종합적인 평가가 있음을 확인하였으며, 본 연구에서는 각 속성을 2 개 이상 평가하고 있는 복합형 리뷰 10 가지를 추가하여 총 15 가지로 온라인 리뷰 분류하였다 년부터 2013 년까지 개봉한 한국영화 중 상업영화 209 개의 개봉 첫 주 온라인 리뷰를 온라인 리뷰 마이닝을 진행하고, 최종적으로 리뷰 마이닝 결과를 판별분석을 통한 영화 흥행성적 예측모형을 제시한다. 판별분석을 실시한 결과, 온라인 리뷰로부터 도출된 감독, 배우, 효과 및 스토리 관련 평가와 개봉 첫 주 전체 온라인 리뷰 수가 유의미하게 변별하였다. 키워드: 온라인 리뷰, 온라인 리뷰 마이닝, 판별분석, 예측모형 Ⅰ. 서론 최근 온라인 리뷰를 통해 제품이나 서비스에 대한 소비자들의 만족 정도(Wallace et al. 1993)와 불만족 요소를 찾아낼 수 있어(Litman and Kohl 1989), 고객 확장 및 관리를 위한 필수적인 요소로 사용되고 있다(Eugene and Mary 1993). 이와 같이, 온라인 리뷰는 Word-of-Mouth 를 생성할 수 있는 중요채널로 인식되고 있다(Min and Lee 2005). 특히, 영화와 같은 경험재에서는 사전 정보 습득 및 평가정보가 영화 관람 결정에 중요한 영향을 미친다. 다시 말해, 영화를 관람하기 전 관객들은 영화의 속성 및 주위 정보에 의존해서 영화를 선택하려는 경향이 있으며(De Vany and Walls 1996), 영화 관람 후의 온라인 리뷰는 관람 전 관객의 영화 선택에 영향을 미칠 수 있다(Vapnik 1995). 우리나라의 경우, 한국영화진흥원에서 1,530 명을 대상으로 조사한 결과, 전체 51.1%가 인터넷을 통해 영화 정보를 얻고 있으며, 이들 중 70.1% 포털 사이트를 활용하고 있다. 즉, 한국 영화 소비자들의 대부분은 인터넷을 통해 관람 영화를 찾고 있으며, 동시에 온라인 리뷰에도 노출되고 있다. 이러한 추세에 따라 많은 연구들은 온라인 영화 리뷰가 영화 흥행성과에 미치는 영향에 대하여 연구가 진행되고 있다. 과거에 영화 흥행 성적 관련연구에서는 감독 및 출연배우의 영향, 제작비, 상영 스크린 수 등의 제품 속성을 중심으로 이뤄졌으나, 현재는 이러한 제품 속성 이외에도 온라인 리뷰의 영향력을 반영하는 시도가 이뤄지고 있다. 하지만, 이러한 연구들은 온라인 리뷰의 수와 리뷰의 평점 만을 활용하는 한계를 1

2 가지고 있다. 이와 더불어, 텍스트 마이닝과 같은 분야에서도 영화 관련 온라인 리뷰를 분석하고자 하는 시도가 지속적으로 이뤄지고 있다. 이들 연구는 각 리뷰의 감정분류를 통해, 긍정/중립/부정을 구분하는 특징을 찾아내거나, 텍스트 마이닝 알고리즘의 성능을 비교하는 연구가 주로 이루어지고 있는 실정이다. 이렇듯 수명주기가 짧은 영화의 흥행을 예측하는 것은 불확실이 높으며, 모형화하기에도 쉽지 않다(Addi and Wlliams 2010). 하지만 영화 성과를 예측하는 것은 영화 제작사, 배급사 등 이해당사자들의 수익과 직결되는 문제이며, 개봉 초기 정보를 활용한 예측 또한 매우 의미 있는 일이 될 것이다. 이에 본 연구는 개봉 첫 주 동안 작성된 온라인 리뷰를 통한 영화 흥행성과 예측모형을 개발하고자 한다. 이를 위해, 감정분류 이외의 온라인 리뷰의 분류 기준을 마련하고, 온라인 리뷰 마이닝 방법을 적용하였다. Ⅱ. 이론적 배경 2.1 영화 관련 정보와 흥행 영화의 흥행요인에 대한 연구는 크게 영화 제품의 속성과 비평가나 광고, 구전 등 정보를 제공하는 정보 제공자에 대한 연구로 구분된다(Eliashberg and Shugan 1997). 제품 속성에 관련해서는 제작비와 장르, 감독 및 배우 파워가 영화의 흥행 수익에 중요 요인이며(Li et al. 2006), 등장인물, 스토리, 연기속성이 중요 흥행요인임이 밝혀졌다(박동권 2007). Wallace et al.(1993)은 1950 년대 영화 1687 개를 대상으로 출연 배우를 중심으로 연구를 수행하였으며, 영화 수익과 스타파워간에 상관관계가 있음을 확인하였다. 비평(전문가들에 의한 비평)의 경우, 과거 인터넷이 발전되기 전에는 흥행에 중요요인 이었으나(Reddy et al. 1998; 강문수 외 2012), 온라인 발전에 따라 그 영향력이 감소함을 확인하였다(De Vany and Walls 1996; Hatzivassiloglou and McKeown 1997). 이와 더불어, 전문가들에 의한 비평이 영화 흥행과 부정적인 관계가 있다고 주장하는 연구도 있다. 영화관련 전문가들의 비평은 상업성보다는 예술성을 더 높게 평가하는 경향이 있기 때문에, 전문가들의 비평이 좋을수록 영화 수익이 나쁘다고 주장하고 있다(Liu 2006; 성영신 외 2002). 영화 광고와 관련해서, Lehmann and Weinberg(2000)는 광고를 많이 한 영화일수록 인지도와 기대감이 높아지고, 이로 인해 흥행성적이 높다고 주장하고 있다. 하지만, 광고 등을 통한 사전정보를 획득한 소비자에게 영화가 주관적 기대수치를 만족시키지 못할 경우에는 그 실망 정도가 그렇지 않은 관람객에 비해 높게 나타난다(Bowman et al. 2001). 실망 정도가 큰 소비자들은 영화 관람 후 부정적 의견을 주는 정보 제공자가 될 가능성이 높다. 온라인 리뷰는 온라인 환경을 통해 소비자들이 제품이나 서비스에 대해 직접 경험한 정보를 교환하는 커뮤니케이션 활동으로(박승현 and 장정헌 2012), 영화와 같이, 관람하기 전에는 그 속성을 평가하기 어려운 제품이나 서비스에서는 온라인 리뷰의 영향력이 더 크게 나타난다(De Vany and Walls 1996). 또한, 온라인 리뷰에서 영화에 대한 평가는 주관적으로 이뤄지지만, 실제 소비자들은 온라인 리뷰의 평가 정보를 더욱 신뢰하는 경향이 있다(Eliashberg and Shugan 1997). 전문가 비평과 일반 영화관람객이 작성한 온라인 리뷰를 비교하는 연구도 있다. Holbrook(1999)은 전문가 비평과 온라인 리뷰 간에는 유의미한 차이가 존재하며, 이 둘의 영향력은 서로간 반비례의 관계가 있다고 주장하였다. Litman and Kohl(1989)은 개봉 전에는 전문가 비평의 영향력이 강하나, 영화가 개봉한 이후에는 일반인에 의한 구전효과가 영화 선택에 강하게 영향을 미친다고 했다. 즉, 온라인 리뷰를 통해 영화의 품질이나 특성에 대한 평가를 제시하는 경우가 증가함에 따라, 소비자에 의한 온라인 리뷰가 영화 흥행에 직접적인 영향을 미치고 있다(이성직 and 김한준 2009). 실제로 2000 년대부터 전문가들에 의한 비평보다는 2

3 온라인 리뷰가 흥행성과에 주요한 영향을 주고 있는 것으로 분석되고 있다(Bo pang et al. 2002; Dellarocas 2003). 하지만 기존 연구들에서의 영화 리뷰는 관객들의 평가(Valence)와 리뷰의 양(Volume)에 집중되었으며, 각 리뷰가 어떠한 특징을 가지고 쓰여졌는지에 대한 고려가 부족하다. 이에 본 연구는 리뷰의 특징을 온라인 리뷰 마이닝을 통해 분류하고, 이를 활용하여 영화 흥행성과 예측모형을 개발하였다. 더 나아가 어떠한 온라인 리뷰가 영화 흥행과 관련성이 있는지 알아보고자 한다. 2.2 영화 온라인 리뷰 분류 기존의 온라인 리뷰에서의 감정분류 관련 연구는 관련 지식을 바탕으로 이루어졌으며(Linton and Petrovich 1988), 언어적 추론을 사용하여 의미 있는 단어나 구의 분류에 초점을 맞추고 있다(Bo pang et al. 2002; Dellarocas 2003). Li et al.(2006)은 11 개 분류 기준을 제시하고 분석하여, 각 분류 기준 별 주요 감정 키워드를 요약했다. Bo pang et al.(2002)은 긍정적인 리뷰 1300 개, 부정적인 리뷰 750 개를 대상으로 기계학습방법(Machine learning method)들의 성능을 비교하고 있다. Neelamegham and Jain(1999)은 리뷰에 작성된 속성을 크게 3 가지로 구분하고 있다. 첫 번째, 핵심적 속성은 영화의 내용과 직접적으로 연관된 속성으로 스토리, 연기, 출연배우를 포함한다. 두 번째 주변적 속성은 배경, 의상, 배경음악, 특수효과 등을 포함한다. 마지막 정서적 자극은 영화를 본 후 소비자가 느낀 감정을 의미한다. 예를 들어, 감동과 슬픔, 재미 등이 이에 해당된다. 마지막으로, Li et al.(2006)은 영화 속성 요소와 인물요소로 온라인 리뷰의 속성을 분류하고 있다. 영화 속성 요소로는 각본, 캐릭터, 시각효과, 음향효과, 특수효과 등 영화의 내용과 직접적으로 연관된 속성들을 포함하며, 인물요소는 영화 제작에 관련된 사람들에 관련된 속성으로, 제작자, 감독, 작가, 배우 등을 포함하고 있다. 최종적으로 이 연구에서는 온라인 리뷰 내에서 속성과 감성 간의 조합을 분류할 수 있는 알고리즘을 제시하고 있다. 이와 같이, 대부분의 온라인 리뷰 마이닝 연구들은 긍정/중립/부정 리뷰를 분류하는 것에 집중하고 있는 반면, 일반 관객들이 영화의 어떤 요소에 주목하여 영화 리뷰를 작성하는 지에 대한 체계적인 지식이 부족한 상황이다(Dellarocas 2003). 이와 달리, 특정 영화의 리뷰를 내용분석하고, 온라인 리뷰 간의 차이를 알아보고자 하는 연구들도 존재한다. 박승현 송현주(2010)는 박쥐(2009) 의 리뷰 300 개를 내용 분석하여, 감독, 배우, 스토리, 대중성, 성정성, 시각적 스타일 등 총 11 개의 분류 기준을 제시하고 비교하였다. 박승현 장정헌(2012)은 애니메이션 영화인 마당을 나온 암탉(2011) 의 전문가의 비평과 소비자가 작성한 온라인 리뷰를 비교했다. 이들은 영화의 품질, 연출력, 연기력, 스토리, 시각적 스타일로 분류 기준을 만들고, 연구를 수행하였다. 오은희 전범수(2008)는 전문가 비평과 온라인 리뷰에서 장르, 제작 국가, 배우, 감독, 수상 이력 등의 평가가 이뤄지고 있음을 확인했으며, 특히, 소비자들은 유명 배우의 출연과 수상이력이 있을수록 평가를 좋게 하는 경향이 있다고 주장했다. 이렇듯 온라인 리뷰에 작성된 속성에 대하여 분류한 기준들은 각 연구 별로 차이가 있지만, 공통적으로 감독과 배우, 스토리 속성을 제시하고 있다. 또한, 기존 연구에서는 각 리뷰 별 속성을 하나씩 가지고 있다고 가정하고 진행하였다. 하지만 실제 온라인 리뷰는 140 글자 내외로 작성될 수 있으며, 기존 연구에서의 가정과 달리, 한 리뷰에 여러 속성을 가지고 작성 될 수 있다. 이에 본 연구에서는 이러한 문제를 해결하고자, 복합형 리뷰 라는 분류 기준을 제시하고 연구를 진행하였다. 3

4 Ⅲ. 연구 방법 3.1 연구 절차 본 연구는 네이버 영화(Naver Movie) 에 작성된 일반관객들의 온라인 리뷰를 온라인 리뷰 마이닝을 통해 분석하고, 이를 통한 영화 흥행성과 예측모형을 제시한다. 전체 연구에 대한 절차는 다음 <그림 1>과 같이 총 네 단계로 진행되었다. 먼저, 본 연구에서는 네이버 영화 에서 일반 관객들이 작성한 온라인 리뷰를 수집하기 위한 Crawler 를 개발하고, 각 영화에 대한 온라인 리뷰를 수집하였다(1). 다음 온라인 리뷰 마이닝 단계에서는 수집된 리뷰 데이터를 두 분류로 구분하여 진행하였다(2, 4). 첫 번째는 단어 중심의 분류 사전을 만들기 위한 학습용 데이터로써 수립된 온라인 리뷰 분류 기준을 근거하여 분류되고, 서포트 벡터 머신(Support Vector Machine)을 통한 학습이 이뤄졌다(5). 학습용 데이터를 통해 구축된 분류 사전에 의해 다른 온라인 리뷰들의 분류가 진행했으며(6), 이를 통해 영화 별 리뷰 분류 결과가 도출되었다(7). 하지만, 1 차 학습용 데이터에 의한 분류 사전의 다양성이 적어 분류의 정확도가 떨어질 수 있다(이동주 외 2011). 이에 본 연구에서는 준지도 학습(Semi-supervised learning) 방식을 적용하여 분류사전의 다양성을 확충하고, 이를 통해 다시 온라인 리뷰 마이닝을 진행하였다(9). 각 영화 별 작성된 온라인 리뷰를 분류한 결과를 통해 영화 별 최종 흥행성과 예측모형을 개발하기 위해서, 앞서 진행한 온라인 리뷰 마이닝 결과들을 데이터 전처리(Data preprocessing)을 통해 변수화 하였다(10). 데이터 전처리 후 다음 단계에서는 K 겹 교차 검증(K-fold Cross Validation) 방법을 적용한 판별함수 예측모형들을 도출하고, 검증하였다(11, 12). 최종적으로 최적 영화 흥행성과 예측모형을 제시한다(13). <그림 1> 온라인 리뷰 마이닝을 통한 연구 절차 4

5 3.2 온라인 리뷰 분류 기준 각 온라인 리뷰는 R = r 1, r 2,, r n 과 같은 단어들의 조합이며, 이러한 온라인 리뷰들은 기존연구들에서 감독, 배우, 스토리 등으로 공통적으로 구분하고 있다(Dellarocas 2003; Addi and Wlliams 2010; 김광수 2000)박형현 and 박찬수 2001). 따라서 본 연구에서도 감독, 배우, 스토리 관련 분류를 동일하게 사용한다. 감독 과 관련된 온라인 리뷰는 감독의 연출력, 명성, 수상 이력 등 감독에 관련하여 직접적으로 평가하고 있는 리뷰로 정의한다. 예를 들어, 이 감독의 영화는 나의 기대를 져버리지 않는다. 역시 디테일이 살아있는 연출력! 과 같은 리뷰들이 이에 해당한다. 배우 로 분류되는 온라인 리뷰들은 출연 배우의 명성 및 연기력 등을 언급하거나, 출연 배우의 기존 출연 작품들과의 비교가 이뤄진 리뷰로 정의한다. 배우 로 분류되는 온라인 리뷰들로는 A 의 연기력이 감동을 더한다. B 의 연기가 이 영화를 가득 채운다. 등이 있다. 스토리 로 분류된 온라인 리뷰는 해당 영화의 이야기 전개 및 시나리오 등 영화의 소재를 언급하는 것으로 정의하며, 이 영화의 스토리가 너무 좋아! 대사 한마디 한마디가 내 심장을 파고 드는구나! 등이 이에 해당된다. Neelamegham and Jain(1999)은 영화의 주변적 속성으로서 배경음악 및 특수효과 등의 시각효과 등이 있으며, 온라인 리뷰의 3 가지 구성 요소 중 하나라고 했다. 따라서 본 연구에서는 이러한 주변적 속성을 언급하는 온라인 리뷰를 효과 로 분류한다. 효과 로 분류되는 온라인 리뷰에는 마지막 장면에서의 음악 제목이 뭐야? 너무 좋아! 컴퓨터 그래픽이 너무 실감난다. 등이 포함된다. 영화 관련 온라인 리뷰에는 영화의 속성에 대한 언급 없이, 단순히 추천만이 이뤄지고 있는 리뷰도 존재한다. 예를 들어, 강추! 후회 안 함 등이 있으며, 본 연구에서는 이러한 온라인 리뷰를 전반적 평가 로 분류한다(김광수 2000). 기존 연구들에서는 각 온라인 리뷰에는 한 가지 속성을 포함한다고 가정하고 연구가 이뤄졌다(Dellarocas 2003; 김광수 2000). 하지만 본 연구에서 수집한 온라인 리뷰 사이트에서는 한 명의 사용자가 140 자 내로 리뷰를 작성할 수 있으며, 각 리뷰에 2 가지 이상의 속성을 언급할 수 있다. 따라서 본 연구에서는 복합형 리뷰 라는 범주를 추가하였으며, 감독, 배우, 스토리, 효과 를 동시에 평가하고 있는 리뷰를 다음 <표 1>과 같이 10 가지 경우로 나누었다. <표 1> 복합형 리뷰 분류 기준 정의 복합형 리뷰 영화 속성 복합형_1 감독 + 배우 + 스토리 복합형_2 감독 + 배우 + 효과 복합형_3 감독 + 스토리 + 효과 복합형_4 배우 + 스토리 + 효과 복합형_5 감독 + 배우 복합형_6 감독 + 스토리 복합형_7 감독 + 효과 복합형_8 배우 + 스토리 복합형_9 배우 + 효과 복합형_10 스토리 + 효과 5

6 3.3 온라인 리뷰 데이터 수집 앞서 정의한 분류기준에 의해 영화 별 온라인 리뷰에 대한 온라인 리뷰 마이닝을 수행했다. 따라서 영화 별 소비자가 작성한 온라인 리뷰를 수집했다. 한국 영화진흥위원회에서는 2010 년부터 2013 년 3 분기까지 한국에서 개봉한 영화는 총 2,150 개이며, 그 중 한국에서 제작된 상업영화는 총 209 개가 개봉되었다. 본 연구에서는 이들 상업 영화의 온라인 리뷰를 활용하여 연구를 수행하였다1. 해당 영화들의 개봉 첫 주 동안 작성된 리뷰는 총 466,651 개가 작성되었다. 기존 영화 리뷰를 활용한 연구들에서는 감성분석(Sentiment analysis)등을 활용하여 리뷰를 작성한 소비자의 감성 정도를 측정하였지만(Linton and Petrovich 1988; 김광수 2000), 본 연구에서는 각 리뷰의 감성 정도를 소비자가 직접 입력한 별점으로 대체하고 진행하였다. 네이버 영화 의 경우, 소비자가 1~10 점까지의 별점을 줄 수 있으며, 1~3 점은 부정적 의견, 4~7 점은 중립적 의견, 8~10 점은 긍정적 의견이라고 가정할 수 있다(Kennedy and Inkpen 2006). 그러나 부정적 의견과 중립적 의견의 리뷰들은 영화 속성 이외에 정치, 사회상황 등 영화 외적 요소를 가지고 작성되는 경우가 많았으며, 영화 관람 전 선입견을 가지고 작성된 리뷰가 많았다. 그러므로 본 연구에서는 8 점 이상 긍정적 의견의 리뷰들을 중심으로 연구를 진행했다. 다음 <표 1>은 본 연구가 수행하는 데이터의 인구통계학적 특징을 요약한 것이다. 각 영화의 스크린 수와 관람객 수는 한국영화진흥위원회의 영화관입장권 통합전산망( 수집하였다. <표 2> 개봉 첫 주 데이터의 인구통계적 특성 (단위: 개, 명) 총합 평균 표준편차 긍정 리뷰 307, 상영관 수 90, 관람객 수* 356,229,743 1,697,022 2,261,933 * 관람객 수는 최종 관람객 총 수를 의미한다. Ⅳ. 영화 리뷰 마이닝 본 장에서는 영화 온라인 리뷰 마이닝의 결과를 설명한다. 영화 리뷰 마이닝을 진행하기에 앞서, 온라인 리뷰 수집기로 수집된 중 2,500 개의 리뷰에 대한 내용 분석하였고, 이를 학습데이터로 사용하였다. 온라인 리뷰 마이닝은 서포트 벡터 머신 분류기를 활용하였으며, TF-IDF 값을 단어 별 가중치로 사용하였다 차 학습 데이터 온라인 리뷰 마이닝을 수행하기 위한 학습 데이터를 만들기 위하여, 2010 년 이전까지 관람객 수가 가장 많은 한국영화 5 개(왕의 남자, 괴물, 과속스캔들, 국가대표, 해운대)의 8 점 이상인 영화 리뷰를 내용분석하였다. 분석 결과의 객관성을 더하기 위해 연구자들이 개별적으로 온라인 리뷰를 분류한 후, 모두 동일하게 분류한 리뷰만을 사용하였다. 1 차 학습 데이터는 영화당 500 개씩, 총 2500 개의 리뷰로 이루어졌으며, 결과는 <표 3>와 같이 분류되었다 개 영화 중 2010 년에 개봉한 영화는 53 편이며, 2011 년은 57 편, 2012 년은 62 편, 2013 년은 37 편을 대상으로 연구하였다. 6

7 4.2 온라인 리뷰 분류 기법 리뷰의 분류를 수행하기 위하여 Java 로 구현되어 있는 MALLET Package 를 사용하였으며, 분류기로는 서포트 벡터 머신 분류기를 사용하였다. 서포트 벡터 머신은 Vapnik(1995)가 제안한 통계학적 학습 이론에 기반을 둔 기법으로 집단으로 구분된 학습 데이터를 분류할 때 기준이 되는 경계면을 찾아낸다. 이를 이용하여 분류기에 입력되는 다른 데이터가 어느 분류 기준에 속하는지 구분한다. 이 연구에서는 먼저 서포트 벡터 머신 분류기에 학습데이터를 입력하면 분류기가 분류기준과 그곳에 해당하는 단어가 무엇인지 학습하게 되고, 그 후 분석 대상이 되는 리뷰를 입력하면 어떤 기준에 적합한 리뷰인지 분류기에 의해 결정된다. 그 외의 분류 기법으로는 최대 엔트로피(Maximum Entropy)나 의사결정 나무(Decision tree), 신경망, 나이브 베이지안(Naïve Bayesian) 등 여러 가지 기법이 있으나, 불균형 데이터 집합을 분류할 경우 상대적인 차이점을 고려하지 않아 다수의 집합은 정확한 분류가 가능하지만, 소수의 집합은 무시되어 정확한 분류가 어렵다(강현철 외 2010). 서포트 벡터 머신은 불균형 데이터 집합에 대해 상대적으로 높은 성능을 보이기 때문에 본 연구에 적합하다고 판단하였다(박승현 and 정완규 2009). 텍스트 마이닝을 위한 서포트 벡터 머신은 영어를 기본으로 만들어진 분류 기법이기 때문에 한글을 분석할 경우 형태소 분석기를 사용하여 리뷰의 형태를 바꾸어 주어야 한다. 본 연구에서는 온라인 리뷰를 분류하기 전 선행작업으로 형태소 분석을 진행하였다. 온라인 리뷰에서 흔히 존재하는 띄어쓰기 오류에 상대적으로 덜 민감한 한글 형태소 분석기인 꼬꼬마 형태소 분석기(KKMA, Kind Korean Morpheme Analyzer)를 사용하여 리뷰를 분석, 1 차 학습 데이터와 분류 대상이 되는 모든 리뷰를 단어 단위로 나누었다(Prag and Casavant 1994). 이 과정에서 문법적 오류가 심하거나 오타, 관용적 표현의 사용 등의 이유로 형태소 분석기가 분석하지 못하는 리뷰 19,197 개가 제외되었다. 4.3 특징 단어 목록 1 차적으로 본 연구에서는 내용분석을 통해 분류된 2,500 개의 리뷰에 의한 1 차 학습데이터와 서포트 벡터 머신 분류기를 이용하여 1 차 분류 사전을 구축하고, 이를 활용하여 모든 리뷰를 자동 분류하였다. 하지만, 1 차 학습 데이터를 통해 구축된 분류 사전에 포함된 단어는 제한적이다. 이러한 문제를 해결하기 위하여, 준지도 학습(Semi-supervised Learning)방법을 적용하여 2 차 분류 사전을 구축하였다. 준지도 학습은 1 차 분석결과로 나온 영화 중 21 개를 임의로 추출하였다2. 그 뒤 1 차 학습 데이터와 임의로 선정된 영화의 리뷰를 포함한 총 58,737 개의 리뷰를 2 차 학습 데이터로 사용하여, 모든 리뷰를 다시 한번 분류하였다. 2 차 학습 데이터에 대한 리뷰는 다음 <표 4>와 같다. <표 4> 2 차 학습용 데이터 (단위: 개) 분류 리뷰 수 분류 리뷰 수 분류 리뷰 수 분류 리뷰 수 감독 3541 복합형_4 182 전반적평가 복합형_ 배우 4753 복합형_5 488 복합형_1 65 복합형_9 310 스토리 5283 복합형_6 24 복합형_2 15 복합형_ 효과 3479 복합형_7 47 복합형_3 4 총 합 맨발의 꿈, 설국열차, 반가운 살인자, 두여자, 더 테러 라이브, 두 개의 달, 풍산개, 특수본, R2B_리턴투베이스, 7 번방의 선물, 화이트 저주의 멜로디, 더 웹툰-예고살인, 시라노 연애조작단, 무서운 이야기 2, 꿈은 이루어진다, 적과의 동침, 댄싱퀸, 라스트 갓파더, 조선명탐정- 각시투구꽃의 비밀, 네버엔딩 스토리, 하모니 7

8 분석 결과, 감독 분류에서는 감독, 작품, 연출, 표현력 등 감독 및 감독의 연출력에 관련된 단어가 주를 이루고 있다. 배우 분류의 경우 배우, 연기력, 아역, 캐스팅 등 배우의 특징을 나타내는 단어뿐 아니라 대박이라는 단어가 특징 단어로 도출되었다. 이는 하정우 대박 멋지십니다!!, 송강호 연기 대박임 웃기고 재미있슴~ 등 영화 전체적인 배우들의 평가 외에도 특정 배우에 대한 평가가 이루어지고 있기 때문이다. 스토리 분류의 경우 감동, 장면, 마지막, 풍자 등 특정 장면에 대한 평가와 스토리, 시나리오, 전개 등 전반적인 스토리에 대한 평가에 관련된 단어들이 포함된 것을 확인 수 있다. 효과 분류는 그래픽이나 CG, 음악, 실감 등 시각적, 청각적 요소와 관련된 단어가 포함 되었다. 특히, 우리나라의 CG 가 이 정도라니~! 와 같이, 국내 그래픽 기술에 대한 평 가가 상당수 등장했다. 전체 온라인 리뷰 중 가장 많은 수를 차지하고 있는 전반적 평가 는 최고, 대박, 후회, 완전 등 단순한 내용을 포함하고 있다. 복합형 <표 3> 1 차 학습용 데이터 분류 결과 (단위: 개) 왕의 남자 (2005) 괴물 (2006) 과속 스캔들 (2008) 국가대표 (2009) 해운대 (2009) 감독 배우 스토리 효과 전반적 평가 감독 + 배우 + 스토리 감독 + 배우 + 효과 감독 + 스토리 + 효과 배우 + 스토리 + 효과 감독 + 배우 감독 + 스토리 감독 + 효과 배우 + 스토리 배우 + 효과 스토리 + 효과 Total ,500 합계 본 연구에서 추가한 복합형 리뷰 는 감독, 배우, 스토리, 효과 중 리뷰에 두 개 이상의 단일 분류 기준이 동일 리뷰에 작성된 것으로, 배우들의 연기, 영화의 완성도, 스토리, 모두 만점을 줘도 아깝지 않다, 감독의 열정과 배우들의 노련미와 엄청난 그래픽 등의 리뷰가 이에 해당된다. 각 복합형 리뷰 를 구성하는 단어도 마찬가지로 감독, 배우, 스토리, 효과를 구성하는 단어가 조합된 형태로 구성되어 있다. <표 5>는 각 분류 기준 별 TF-IDF 가중치3 값이 높은 상위 10 개의 단어를 정리한 것이다(Jo et al. 2004). 3 문서 내부의 단어 간 상대적 중요도를 평가하기 위해 고안된 값이다. TF(Term Frequency) 값은 한 문서에서 특정 단어가 출현한 빈도이며, IDF(Inverse Document Frequency)값은 전체 문서 집합의 수를 특정 단어가 출현한 문서의 수로 나눈 값이다. 즉, TF-IDF 값은 TF 와 IDF 를 곱한 값이다. 8

9 감독 배우 스토리 효과 전반적평가 복합형_1 복합형_2 복합형_3 복합형_4 복합형_5 복합형_6 복합형_7 복합형_8 복합형_9 복합형_10 <표 5> 분류 기준 별 분류 사전 예시 감독, 작품, 연출, 짜임새, 표현력, 디테일, 연출력, 구성, 전개, 신인 연기, 감동, 배우, 대박, 연기력, 아역, 캐스팅, 주연, 조연, 멋 가슴, 장면, 때, 마지막, 최고, 시나리오, 스토리, 전개, 풍자, 압권 우리나라, 그래픽, 괴물, 한국, CG, 음악, 실감, 효과, 장면, 리얼 영화, 최고, 감독, 10 점, 대박, 후회, 한국, 완전, 강추, 한국영화 연기, 배우, 연출, 내용, 스토리, 최고, 감독, 구성, 삼박자, 시나리오 연기, 연출, 영상, 감독, 최고, 배우, 효과, 연기력, 연출력, 그래픽 영화, 감동, 음악, 연출 연기, 스토리, 배우, 음악, 최고, 연기력, 감동, 내용, 역할, 각본 감독, 배우, 연기, 아역, 최고, 작품, 연기력, 연기자, 디테일, 연출력, 감독, 스토리, 연출, 최고, 전개, 실제, 감동, 속, 짜임새, 시나리오 노래, 그래픽, 감독, 작품, 구성, 한국, 음악, 표현력, 영상, 재난 감동, 최고, 재미, 내용, 연기력, 짜임새, 스토리, 완벽, 캐스팅, 기대 노래, 연기력, 감동, 그래픽, CG, 영상, 음악, 배경, 영상미, 노력 감동, 내용, 음악, 조화, 배경, 기대, 영상미, 그래픽, 재난, 기대이상 4.4 온라인 리뷰 마이닝 결과 1 차, 2 차 학습 데이터를 통해 특징 단어 목록을 도출하여, 분류 사전을 구축하였다. 이를 활용하여 본 연구의 분석 대상인 307,385 개의 리뷰에 대한 마이닝을 진행하였다. 그 중 형태소 분석기가 분석하지 못하는 리뷰를 제외한 288,188 개의 리뷰를 다음 < 표 6 >과 같이 분류하였다. <표 6> 온라인 리뷰 마이닝 결과 (단위: 개) 분류 리뷰 평균 Std. 분류 리뷰 평균 Std. 감독 32, 복합형_ 배우 25, 복합형_5 1, 스토리 9, 복합형_ 효과 15, 복합형_ 전반적 평가 179, , 복합형_8 12, 복합형_ 복합형_9 1, 복합형_ 복합형_10 9, 복합형_ 복합형 리뷰_3(감독 + 스토리 + 효과) 의 경우, 학습 데이터 중 4 개의 리뷰만이 이에 해당되었다. 즉, 복합형 리뷰_3 의 분류 사전에 포함된 단어의 수가 적으며, 최종적으로 온라인 리뷰 마이닝을 통해 분류되는 리뷰가 없었다. 9

10 Ⅴ. 분석결과 및 예측모형 본 장에서는 위에서 진행한 온라인 리뷰 마이닝 결과를 활용한 예측모형에 대하여 설명한다. SAS 9.2 를 활용하여 판별분석을 수행하였으며, 10 겹 교차 검증법으로 도출된 예측모형의 타당성을 검증하였다. 5.1 데이터 전처리 종속변수의 범주화 2010 년부터 2013 년까지 개봉한 한국영화는 1,460 편이며, 관람객 수는 총 393,612,036 명이다 즉, 본 연구에서 분석하는 영화의 수는 209 편이지만, 관람객 수는 356,229,743 명으로 같은 기간 영화 관람객 점유율의 90% 이상을 차지한다. 본 연구는 앞서 진행한 영화 별 온라인 리뷰 마이닝 결과를 활용하여 최종 영화 흥행 성적을 예측하고자 한다. 따라서, 최종 영화 관람객 수를 다음 <표 7>와 같이 구분하였다. <표 7> 영화 등급 구분 등급 설명 영화 1 개봉연도 관람객 수 상위 10% 22 2 개봉연도 관람객 수 상위 10% ~ 50% 46 3 개봉연도 관람객 수 50% ~ 하위 10% 개봉연도 관람객 수 하위 10% 20 1 등급에 해당하는 영화의 총 관람객은 143,839,470 명(평균 = 6,538,158, Std. = 3,058,393)으로 전체 209 편 영화 관람객의 약 40.38%를 점유했다. 2 등급 영화의 경우, 총 137,196,808 명(평균 = 2,855,251, Std. = 1,230,538)이 관람했다. 하위등급인 3 등급과 4 등급에 해당하는 영화는 총 141 편으로 가장 많은 영화들이 이에 해당한다. 하지만 하위등급 영화의 총 관람객 수는 78,193,465 명으로, 209 편 영화 관람객의 22.04%를 점유했다 변수 변환 온라인 리뷰 마이닝의 결과에서 확인할 수 있듯이, 209 개 영화 사이에서도 작성된 리뷰 수의 편차가 크다. 따라서 본 연구에서는 이러한 작성된 리뷰 수에 대한 문제를 보완하기 위해서 온라일 리뷰 마이닝 결과를 비율척도로 변환하였다. 다음 <표 8>는 예측모형을 만들기 위해 본 연구에서 사용한 변수들에 대한 설명이다. <표 8> 변수 정의 변수명 설명 변수명 설명 ln_review ln(개봉 첫 주 총 온라인 리뷰 수) Comb_1 전체 리뷰 중 복합형_1 리뷰 비율 ln_screen ln(개봉 첫 주 누적 상영관 수) Comb_4 전체 리뷰 중 복합형_4 리뷰 비율 Positive 전체 리뷰 중 8 정 이상 리뷰 비율 Comb_5 전체 리뷰 중 복합형_5 리뷰 비율 Director 전체 리뷰 중 감독 리뷰 비율 Comb_7 전체 리뷰 중 복합형_7 리뷰 비율 Actor 전체 리뷰 중 배우 리뷰 비율 Comb_8 전체 리뷰 중 복합형_8 리뷰 비율 10

11 Story 전체 리뷰 중 스토리 리뷰 비율 Comb_9 전체 리뷰 중 복합형_9 리뷰 비율 Effect 전체 리뷰 중 효과 리뷰 비율 Comb_10 전체 리뷰 중 복합형_10 리뷰 비율 복합형_2(감독 + 배우 + 효과)와 복합형_6(감독+스토리)는 온라인 리뷰 마이닝에 의해 분류된 리뷰의 수가 각각 4 개, 14 개 이므로, 본 예측모형 분석에서는 제외하였다 요인 분석 및 해석 온라인 리뷰 분류 기준에서 복합형 리뷰는 감독, 배우, 스토리, 효과 등 단일 기준이 2 개 이상 복합적으로 등장하는 리뷰이다. 따라서, 분류 결과를 그대로 사용할 경우, 단일 분류 기준과의 중복이 발생할 수 있다. 이러한 문제를 제거하기 위해서, 본 연구에서는 데이터의 전처리 기법 중 요인 분석을 수행하였다(Zhu 2005). 요인분석 방법으로는 주성분 분석과 직교 회전 방법 중 베리맥스(Varimax) 방법을 사용하였다. 요인분석을 통해 고유값이 1 이상인 주성분 3 개가 추출되었으며, 이 과정을 통해 Comb_7 항목을 제거하였다. 이를 통해 구성 된 요인구조를 중심으로 크론바하 알파(Cronbach's α) 계수를 사용하여 신뢰도 검정을 실시하였다. 요인분석 결과는 다음 < 표 9 >와 같다. 구분 배우 중심 평가 감독 중심 평가 스토리 및 효과 평가 * Cronbach s α <표 9> 요인 분석 및 신뢰도 분석 결과 요인 적재치 Comb_ Actor Comb_ Comb_ Comb_ Comb_ Director Comb_ Effect Story 신뢰도* 요인분석 결과, 배우 중심 평가 요인 은 온라인 리뷰를 작성 시 배우의 연기력 및 명성 등을 중심으로 작성된 온라인 리뷰를 의미한다. 복합형_4, 복합형_8, 복합형_9 는 모두 배우 관련 평가요소와 기타 요소들을 복합적으로 평가하는 리뷰들이다. 감독 중심 평가 요인 은 Director, Comb_1, Comb_5 로 묶였다. 특히, 복합형_1 과 복합형_5 는 감독뿐만 아니라 배우에 대한 평가가 복합적으로 이뤄지고 있는 리뷰이기 때문에, 다소 해석 상 논란의 여지가 있을 수 있다. 하지만, 이들 복합형 리뷰는 감독의 연출력과 배우의 연기력의 시너지 효과를 주로 언급하므로, 감독 연출력을 중심으로 한 평가로 생각할 수 있다. 마지막 스토리 및 효과 평가 요인 은 Effect, Story, Comb_10 로 구성된 요인으로, 영화의 시나리오 및 구성 요소에 관련된 요인으로 판단된다. 본 연구에서는 요인분석을 통해 묶인 변수들의 합으로 변수들을 통합하였다. 11

12 다음 < 표 10 >은 요인분석을 통한 요인들과 추가된 세 변수(ln_review, ln_screen, Positive) 간의 상관관계 분석한 결과이다. 상관관계 분석 결과, 개봉 첫 주 총 온라인 리뷰 수 와 개봉 첫 주 누적 상영관 수 간의 상관관계가 높음을 알 수 있다. 이에 본 연구에서는 예측모형 분석 시, 개봉 첫 주 총 온라인 리뷰 수 와 개봉 첫 주 누적 상영관 수 의 상호작용항을 추가하여 분석을 진행하였다. <표 10> 상관관계 분석 결과 배우 중심 평가 감독 중심 평가 스토리 및 효과 평가 Positive ln_review ln_screen 평균 (STD.) 배우중심 평가 감독중심 평가 스토리 및 효과 평가 Positive ln_review ln_screen < < (0.093) 0.034(0.042) 0.177(0.064) 0.643(0.143) 6.987(1.309) 5.930(0.532) 5.2 판별분석을 통한 예측모형 판별변수 기초통계량 분석 다음 < 표 11 >은 각 등급별 판별변수들의 평균과 일변량 분산분석 결과를 제시하고 있다. 이를 통해, 6 개 판별변수 모두 등급 간 유의한 차이가 있음을 확인할 수 있다. 각 등급 별 판별변수 간 차이를 보면, 하위 등급은 3 등급과 4 등급의 영화에서 감독중심 평가 와 스토리 및 효과 평가 가 상위 등급(1 등급, 2 등급)에 비해 높음을 알 수 있다. 이와 달리, 상위 등급에 해당하는 영화들은 배우중심 평가 가 높으며, 전반적으로 긍정적 리뷰의 비율과 전체 리뷰의 수가 높음을 확인할 수 있다. 이는 현재 상위 흥행 성적의 영화들은 배우에 대한 긍정적 평가가 높음을 알 수 있으며, 더 나아가 개봉 첫 주 동안에는 감독과 스토리에 대한 평가보다는 배우에 대한 평가 비율이 높을수록 상위 흥행 성적을 얹을 수 있음을 유추 할 수 있다. 12

13 <표 11> 영화 등급 별 평균 비교 변수 1 등급 2 등급 3 등급 4 등급 Pr>F 배우중심 평가 감독중심 평가 스토리 및 효과 평가 Positive ln_review <.001 ln_screen <.001 ln_review* ln_screen <.001 *상호작용항의 평균은 41.97, 표준편차는 다변량 판별분석 예측결과 영화의 흥행성과 예측모형을 개발하기 위해 다변량 판별분석(Multivariate Discriminant Analysis)을 수행하였다. 다변량 판별분석은 종속변수가 범주형 변수이고 독립변수가 연속형 변수일 때, 선험적으로 정의된 두 개 이상의 집단들을 판별할 수 있는 둘 이상의 독립변수의 선형조합을 찾아내는 분석기법이다(강현철 외 2011). 본 연구에서는 판별분석의 타당성을 검증하기 위해, 10 겹 교차 검증법을 사용하였다. 학습 데이터를 통해 도출된 판별함수의 카이제곱(Chi-square)값은 , 유의확률이 < 이므로 판별함수의 유의성을 확인할 수 있다. 다음 <식 1>부터 <식 3>까지는 판별분석을 통해 도출된 3 개의 선형 판별함수이다. 또한, 각 판별함수의 유의확률도 0.05 미만이므로, 3 개의 판별함수 모두 유의한 수준의 판별력을 가지고 있음을 확인하였다. 판별함수 1(v 1 ) = 0.142z z z z z z z 7 (1) 판별함수 2(v 2 ) = 0.019z z z z z z z 7 (2) 판별함수 3(v 3 ) = 0.50z z z z z z z 7 (3) 위 결과에서 표준화 된 계수를 나타내며, 계수의 절대값 크기를 이용하여 각 변수가 판별함수에 기여하는 정도를 평가할 수 있다(강현철 외 2011)4. 즉, 판별함수 1 에서는 개봉 첫 주 누적 상영관 수(ln_screen) 와 개봉 첫 주 총 온라인 리뷰 수(ln_review), 스토리 및 효과 평가 가 다른 변수에 비해 판별 기여도가 크다고 할 수 있으며, 판별함수 2 에서는 개봉 첫 주 긍정적 리뷰 비율(Positive) 와 개봉 첫 주 총 온라인 리뷰 수(ln_review), 개봉 첫 주 누적 상영관 수(ln_screen) 의 판별 기여도가 높음을 알 수 있다. 마지막으로, 판별함수 3 에서는 2 개의 판별함수에 비해 온라인 리뷰 마이닝 결과를 통해 계산된 세 변수(배우 중심 평가, 감독 중심 평가, 스토리 및 효과 평가)의 판별기여도가 높아졌음을 확인 할 수 있다. 3 개의 판별함수 모두 개봉 첫 주 누적 상영관 수(ln_screen) 의 판별기여도가 높으며, 이는 영화 관람객 수와 영화 상영횟수는 상관관계가 있다는 기존 연구 결과와 일치한다(Neelamegham and Jain 1999). 개봉 첫 주 총 온라인 리뷰 수 와 개봉 첫 주 누적 상영관 수 의 상호작용 효과를 의미하는 ln_review*ln_screen 또한 판별함수에서 중요 변수로 작용하였다. Y. Chen et al.(2004)는 제품의 판매량과 4 x i 는 순서대로 배우 중심 평가, 감독 중심 평가, 스토리 및 효과 평가, Positive, ln_review, ln_screen, ln_review*ln_screen 이며, z j =(x j x j )/s j 이다. 13

14 온라인 리뷰 간의 인과관계는 양방향으로 작용한다고 하였으며, 위에서 언급한 것과 같이 개봉 첫 주 상영횟수는 관람객 수에 유의적인 영향을 작용한다. 다시 말해, 온라인 리뷰와 상영횟수 간의 상호작용은 영화 관람객 수에 영향을 미친다고 할 수 있다. 다음<표 12>는 각 등급 별 3 개의 판별함수 결과를 정리한 것이다. 관객수 상위 10%에 해당되는 영화들은 판별함수에서 모두 양수의 값이 계산되었으며, 상위 10%부터 50%에 해당하는 영화들은 판별함수 3 에서만 음의 값이 나왔다. <표 12> 영화 등급 별 판별 결과 판별함수 1 판별함수 2 판별함수 3 1 등급 등급 등급 등급 위 결과에서 알 수 있듯이, 1 등급과 2 등급의 영화를 구분할 수 있는 기준은 판별함수 3 에 의해서 제시되고 있으며, 3 등급과 4 등급 간의 차이는 판별함수 2 와 3 에 의해서 분류될 수 있다. 즉, 온라인 리뷰에 의한 변수들의 판별기여도가 높은 판별함수 3 에 의해, 상위등급과 하위등급을 좀 더 세부적으로 분류할 수 있음을 확인할 수 있다. 본 연구에서는 3 개의 판별함수로 구성된 예측 모형을 개발하였으며, 학습데이터를 통해 각 그룹의 중심값을 계산하였다. 그 후 본 모형을 검증하기 위해 다음 <그림 2>와 같이, 각 영화 별 예측 모형에 의한 결과값과 각 그룹 별 중심값 과의 거리를 측정하여, 가장 가까운 거리를 갖는 그룹으로 해당 영화를 예측하였다. 예측한 결과는 다음 <표 13>과 같이, 10 겹 교차 검증법을 통해 검증하였으며, 10 회 평균 각 등급 별 및 전체 오분류율을 정리한 것이다. 예측 모델을 검증한 결과, 도출된 예측모형의 정확도는 약 82.02%라 할 수 있다. 표 13. 예측모형 검증 결과 오분류율 Ⅵ. 연구 결과 및 의의 6.1 연구 결과 토의 본 연구는 개봉 첫 주 동안 작성된 온라인 리뷰를 통해 최종 영화 관객수를 예측하였다. 이를 위해, 서포트 벡터 머신 알고리즘이 적용된 온라인 리뷰 마이닝을 수행하였으며, 흥행 등급을 구분하기 위한 3 개의 판별함수를 제시하였다. 온라인 리뷰 마이닝을 진행하기 위한 온라인 리뷰 분류 기준을 기존 연구들을 바탕으로 감독, 배우, 스토리, 효과 등으로 정리하였으며, 현재 온라인 리뷰 작성 환경을 고려한 복합형 리뷰 를 10 가지 경우로 구분하였다. 온라인 리뷰 마이닝 결과, 복합형_3 (감독 + 스토리 + 효과)과 복합형_2 (감독 + 배우 + 효과), 14

15 복합형_6 (감독+스토리)에 해당하는 리뷰가 각각 0 개, 4 개, 14 개로 분류되어, 본 연구에서는 해당 분류 결과를 제거하고 연구를 진행하였다. <그림 2> 예측 모형 적용 방법 예측모형을 개발하기 위한 전 단계로 데이터 전처리를 통한 온라인 리뷰 마이닝 결과의 통합과 영화 관람객 수의 범주화를 진행하였다. 요인분석으로 온라인 리뷰 마이닝 결과를 배우 중심 평가 와 감독 중심 평가, 스토리 및 효과 평가 로 변수들을 통합하였으며, 영화 관람객 수를 상위 10%부터 하위 10%까지 4 개의 등급으로 범주화하였다. 판별분석을 통해 도출된 3 개의 판별함수에서는 공통적으로 개봉 첫 주 누적 상영관 수 에 해당하는 변수의 기여도가 컸다. 이는 C. Dellarocas et al.(2007)의 연구 결과와 같이, 영화 상영 횟수와 영화 관람객 수 간의 상관관계가 있음을 확인할 수 있었다. 또한, 개봉 첫 주 누적 상영관 수 와 개봉 첫 주 총 온라인 리뷰 수 간에 상호작용이 있음을 확인하고, 판별분석에서도 중요변수로 작용함을 알 수 있었다. 온라인 리뷰에 의한 변수인 배우 중심 평가, 감독 중심 평가, 스토리 및 효과 평가 는 판별함수 3 에서의 판별 기여도가 다른 2 개의 판별함수에서 보다 높게 나왔으며, 배우 중심 평가 와 스토리 및 효과 평가 가 감독 중심 평가 보다 높은 판별 기여도가 있었다. 이러한 판별함수 3 은 영화 흥행성과를 세부적으로 분류하는데 기여하였다. 다시 말해, 1 등급에 해당하는 영화들은 2 등급에 해당하는 영화에 비해, 감독, 배우 및 스토리 및 효과 에 대해서 긍정적으로 평가하는 리뷰가 많은 영화라고 할 수 있다. 더 나아가, 감독 중심 평가 보다 배우 중심 평가 와 스토리 및 효과 평가 가 높을수록, 1 등급에 속할 확률이 높아진다. 예를 들어, 연가시(2012) 와 감기(2013) 의 경우, 두 영화 모두 재난영화이며, 개봉 첫 주 총 온라인 리뷰 수는 약 5,000 건, 긍정적 리뷰의 비율은 약 60%이다. 또한 개봉 첫 주 누적 상영관 수는 감기 가 약 50 개 정도 더 많았다. 하지만, 본 연구의 예측모형을 통해 분석한 결과, 연가시 와 감기 가 1 등급에 속할 확률이 각각 52.5%, 47.2%로 나왔다. 실제 온라인 리뷰 분석결과를 비교하면 연가시 에서의 배우 중심 평가 비율이 감기 보다 약 10%정도 더 높음을 확인할 수 있었다5. 5 연가시 의 최종 관객수는 4,515,833 명이며, 2012 년 국내 박스오피스 10 위(해외영화 포함)이다. 감기 는 총 3,119,023 명이 관람했으며, 2013 년 박스오피스 17 위를 기록했다. 실제 두 영화 모두 1 등급에 포함되는 영화이며, 예측모형에서도 1 등급으로 분류되었다. 15

16 이와 같이, 개봉 첫 주 동안 작성된 온라인 리뷰를 활용하여 최종 영화 관람객 규모를 예측할 수 있었으며, 관객수가 많은 영화들은 감독 과 관련된 평가보다 배우 및 스토리, 효과 관련 평가가 많다는 것을 확인할 수 있었다. 6.2 연구의 한계 및 향후 연구 방향 본 연구는 온라인 리뷰 마이닝을 통해 온라인 리뷰를 분류하고, 최종적으로 영화 흥행성과 예측모형을 개발하였다. 하지만, 다음과 같은 한계점을 가지고 있으며, 이는 향후 연구에서 보완되어야 할 것이다. 첫 번째로, 1 차 학습 데이터를 만들기 위해 내용분석법을 사용하였다. 내용분석법은 다양한 장점에도 불구하고 연구자의 주관성을 완전히 배제되지 못 할 가능성을 가지고 있다(Eugene and Mary 1993). 본 연구에서는 연구자가 개별적으로 약 3,000 개 리뷰를 분류하고, 동일하게 분류된 결과만을 사용함으로써 가급적 주관성을 배제하기 위해 노력하였다. 하지만, 내용분석법의 근본적 한계로서 어느 정도 연구자의 주관성이 개입되었을 수도 있다. 향후 연구에서는 온라인 리뷰에 대한 객관성이 입증된 분류 사전에 대한 연구가 필요하다. 두 번째로, 본 연구는 온라인 리뷰 마이닝을 하기 위해 꼬꼬마 형태소 분석기 를 사용하였다. 해당 형태소 분석기는 띄어쓰기 등 오류에 덜 민감하다는 평가를 받고 있다. 하지만, 실제 온라인 리뷰에서는 여러 오 탈자와 신조어들이 존재한다. 이에 최초 수집한 긍정적 리뷰 307,385 개 중 형태소 분석이 되지 않는 19,197 개의 리뷰를 제거하고 온라인 리뷰 마이닝이 수행하였다. 따라서, 향후 연구에서는 온라인 환경에 적합한 형태소 분석기의 개발과 다양한 은어, 신조어 관련 단어 사전의 구축이 필요할 것이다. 세 번째로, 본 연구에서는 각 리뷰에 대한 감성을 각 리뷰 별 평점을 통해 분류하였으며, 그 중 8 점 이상의 리뷰만을 대상으로 진행하였다. 하지만 8 점 미만의 리뷰 또한 영화 관람객의 평가정보이며, 이들 또한 영화 흥행에 영향을 미칠 수 있다. 향후 연구에서는 중립적 리뷰와 부정적 리뷰에 대한 분류 기준을 정리하여 보다 포괄적인 온라인 리뷰 분석을 진행되어야 할 것이다. 마지막으로, 수집된 온라인 리뷰 중 관람 전 작성된 리뷰와 거짓 온라인 리뷰의 존재 가능성이다. 현재 여러 매체를 통해, 댓글 알바 에 대한 문제가 지적되고 있으며6, 리뷰 작성자가 실제 영화를 관람하고 평가를 했는지에 대한 문제가 있다. 이에 본 연구는 감독, 배우, 효과, 스토리 등의 속성에 대한 평가가 없이 작성된 전반적 평가 를 분류하고, 이렇게 단순 추천이 이뤄진 리뷰는 예측모형에 개발단계에서 배제하였다. 하지만 이러한 방식은 임시적인 방법이며, 객관성이 부족하다고 판단된다. 따라서 실제 관객이 작성한 리뷰만을 분류할 수 있는 기준 및 방법에 대한 연구가 필요하다. 6.3 연구의 학술적/실무적 의의 본 연구는 영화 개봉 후 작성된 온라인 리뷰를 활용한 최종 영화 흥행성과 예측모형을 제시하였으며, 이러한 본 연구의 학술적 의의를 살펴보면 다음과 같다. 첫 째, 온라인 리뷰 마이닝을 통한 온라인 리뷰 중심의 예측모형을 개발하였다. 기존 영화 수익 관련 연구에서의 온라인 리뷰는 양(Volume)과 의견 정도(Valence)에 집중하여 연구를 진하였다(Min and Lee 2005). 이와 달리, 본 연구에서는 15 개의 분류기준을 정리하고, 온라인 리뷰 마이닝을 통해 각 분류 기준 별 분류 사전을 구축하여 온라인 리뷰를 분류하였다. 온라인 리뷰 마이닝 결과, 감독 에 관련된 온라인 리뷰는 감독의 연출력과 관련된 언급이 많으며, 배우와 관련해서는 배우의 연기력에 대한 평가가 많음을 확인 할 수 있었다. 6 이승재, 영화평론은 죽었다, 동아일보, 개제일: , /1 16

17 둘 째, 복합형 리뷰 속성을 제시하고, 연구를 진행하였다. 기존 연구에서는 각 영화 리뷰의 속성을 한 개의 속성을 가진다고 가정하거나(김광수 2000)박형현 and 박찬수 2001), 감성분석을 통해 영화 속성과 감성 간의 관계를 파악하기 위한 연구를 진행하였다(Linton and Petrovich 1988; Dellarocas 2003). 하지만 실제 온라인 리뷰는 140 글자까지 작성이 가능하며, 한 리뷰 내에서 감독, 배우, 스토리, 효과 등의 독립적 속성을 동시에 평가할 수 있다. 이에 본 연구에선 복합형 리뷰 라는 분류 기준을 추가하고, 이를 10 가지의 경우를 분류하여 분석하였다. 분석 결과, 복합형 리뷰 에서도 배우 와 스토리, 스토리와 효과 가 복합적으로 평가하는 리뷰가 주를 이루고 있음을 확인 할 수 있었다. 마지막으로 본 연구에서 제시한 15 가지의 분류기준을 요인분석을 통해, 3 가지 요인으로 정리하였다. 기존 연구들은 각 연구에 따라 온라인 리뷰 내 영화속성을 다르게 제시하고 있다(Dellarocas 2003; Addi and Wlliams 2010; 김광수 2000)박형현 and 박찬수 2001). 이에 본 연구는 기존연구와 실제 온라인 리뷰 상황을 고려하여, 15 가지의 분류기준을 제시하였으며, 요인분석을 통해 온라인 리뷰 분류 기준을 3 가지로 축소하였다. 요인분석 결과, 배우, 배우+스토리+효과 (복합형_4), 배우+스토리 (복합형_8), 배우+효과 (복합형_9)가 하나의 요인으로 묶여 배우 중심 평가 로 정리하였으며, 감독, 감독+배우+스토리 (복합형_1), 감독+배우 (복합형_5)를 감독 중심 평가 요인으로 하였다. 또한, 스토리, 효과, 스토리+효과 (복합형_10)가 한 요인으로 묶임으로써, 스토리 및 효과 평가 로 하였다. 이와 같이, 본 연구는 영화관련 온라인 리뷰의 분류 방법 및 분류 기준을 제시하였다는 것에 학술적 의의를 두고 있다. 본 연구는 학술적 의의 외에도 다음과 같은 실무적 시사점을 갖는다. 첫 째, 영화 제작단계에서의 감독 및 배우의 평가기준으로 활용될 수 있다. 현재 영화 제작단계에서 감독과 배우의 스타파워는 중요한 변수이다(Li et al. 2006). 이는 전작의 관객 수 및 현재까지의 연출 또는 주연급으로 캐스팅된 영화의 수 등으로 간접적으로 측정되고 있다. 하지만 본 연구에서 제시한 분류 기준 및 온라인 리뷰 마이닝 방법을 적용한다면, 전작에서의 감독과 배우에 대한 일반관객들의 평가 비중을 측정할 수 있을 것이다. 둘 째, 온라인 리뷰와 상영관 수 등 공개된 정보만을 활용하여 예측모형을 제시하고 있다. 영화가 개봉한 후 경쟁 영화와의 비교는 영화 수익 및 마케팅 전략에도 중요한 요인으로 활용되고 있다. 하지만, 기존 연구에서의 영화 수익 예측모형에서는 제작비와 같이 개봉 당시에는 공개되지 않는 변수가 활용되고 있다. 이와 달리, 본 연구에서는 온라인 리뷰를 중점적으로 사용하고 있으며, 누적 상영관 수 라는 공개된 정보를 추가적으로 사용하였다. 즉, 실제 개봉 영화 간의 예상 수익 정도의 비교에 용이할 것이다. 마지막으로 본 연구에서는 개봉 초기의 데이터를 활용하여 최종 영화 흥행성과를 예측하고 있다. 이는 개봉 첫 주 관객의 반응을 점검하고, 흥행성과를 향상시키기 위한 전략을 개발하는데 있어서 활용될 수 있을 것이라 판단된다. 판별함수 3 을 통해 확인하였듯이, 감독 관련 평가에 비해 배우 평가의 비중이 높을수록 상위등급으로 갈 확률이 높아진다. 즉, 개봉 초기에 흥행성과를 향상시키기 위한 조건을 탐색함에 있어서 본 연구 결과를 활용할 수 있을 것이다. 영화 산업에서의 수익 예측은 영화 상영과정에서 필수적인 전략이다. 본 연구의 예측모형은 다양한 마케팅 전략 및 영화 제작 단계에서 활용될 수 있을 것이며, 더 나아가 한국 영화산업 발전에도 기여할 수 있을 것으로 기대한다. 참고문헌 강문수, 백승희, 최영식, 맵리듀스를 이용한 통계적 접근의 감성 분류, 감성과학(15:4), 2012, pp 강현철, 한상태, 김기영, 전명식, 예제로 배우는 SAS 다변량 자료 분석 입문, 자유아카데미, 2011, pp

18 고정민, 미국영화와 한국영화의 흥행요인에 관한 비교연구-애국심 유발 요인을 중심으로, 문화산업연구(10:2), 2010, pp 김광수, "영화 선택 및 평가에 관한 연구," Korean Association for Advertising and Public Relations(48), 2000, pp 박동권, 분산분석과 반복측정자료, 민영사, 2007, pp 박승현, 송현주, "영화 관객의 온라인 평가 분석: <박쥐>를 중심으로," 언론과학연구(10:4), 2010, pp 박승현, 장정헌, "온라인 영화 리뷰의 내용과 품질에 관한 탐색적 연구: <마당을 나온 암탁>을 중심으로," 언론과학연구(12:4), 2012, pp 박승현, 정완규, 한국 영화시장의 흥행결정 요인에 관한 연구: 년 개봉작품을 중심으로," 언론과학연구(9:4), 2009, pp 박형현, 박찬수, 영화 평론과 흥행 성과 간의 관계-인터넷 시대에도 유효한가?, 마케팅연구(16:4), 2001, pp 성영신, 박진영, 박은아, 온라인 구전정보가 영화 관람 의도에 미치는 영향, 광고연구(57), 2002, pp 양소영, 김형수, 김영걸, 온라인 고객 리뷰의 분류 항목별 차이 분석: 채널, 제품속성, 가격을 중심으로, Asia marketing journal(10:2), 2008, pp 오은희, 전범수, "네티즌과 영화 평론가의 영화 평가 결정 요인 비교," 한국방송학보(22:6), 2008, pp 이경재, 장우진, 베이지안 선택 모형을 이용한 영화흥행 예측, 2006년 대한산업공학회 춘계학술대회 논문집, 2006, pp 이동주, 연종흠, 이상구, 한국어 문장의 띄어 쓰기 오류 과정과 최적 형태소 분석을 위한 통합 확률 모델, 한국정보과학회 2011한국컴퓨터종합학술대회 논문집(38:1(A)), 2011, pp 이성직, 김한준, TF IDF의 변형을 이용한 전자뉴스에서의 키워드 추출 기법, 한국전자거래학회지(14:4), 2009, pp Alistair Kennedy, and Diana Inkpen, "Sentiment classification of movie reviews using contextual valence shifters," Computational Intelligence(22), 2006, pp Bausuroy, S., Chatterjee, S., and Ravid, S. A., "How critical are review? The box office effects of film critics, star, power, and budget," Journal of Marketing(67: 4), 2003, pp Bo Pang, Lillian Lee, and Shivakumar Vaithyanathan, "Thumbs up? Sentiment Classification using Machine Learning Techniques," Proceedings of EMNLP 2002, 2002, pp Bowman, Douglas, and Das Narayandas, Managing Customer-Initiated Contacts with Manufacturers: The Impact on Share of Category Requirements and Word-of-Mouth Behavior," Journal of Marketing Research(38:3), 2001, pp Brian Eriksson, "Sentiment classification of movie reviews using linguistic parsing," 2006, (Available online at C. Dellarocas, The digitization of word of mouth: promise and challenges of online feedback mechanisms, Management Science(49:10), 2003, pp Chrysanthos Dellarocas, xiaoquan(michael) zhang, and neveen f. Awad, Exploring the value of online product reviews in forecasting sales: the case of motion pictures, Journal of interactive marketing(21:4), 2007, pp d Astous, A., and Touil N., Consumer Evaluations of Movies on the Basis of Critics Judgments, Psychology & Marketing(16:8), 1999, pp De Vany, A., and Walls, D, "Bose-Einstein dynamics and adaptive contraction in the motion picture industry." The Economic Journal(106), 1996, pp Eliashberg, J., and S. Shugan, Film Critics: Influencers or Predictors?, Journal of Marketing(61), April 1997, pp Eugene W. Anderson, and Mary W. Sullivan, The Antecedents and Consequences of Customer Satisfaction for Firms, Marketing Science(12:2), 1993, pp H. Addi, and L. J. Williams, Principal component analysis, Wiley Interdisciplinary Reviews: Computational Statistics(2:4), 2010, pp Hirschman, E., and A. Pieros, Relationships Among Indicators of Success in Broadway Plays and Motion Pictures, Journal of Cultural Economics(9), June 1985, pp

19 Jay Prag, and James Casavant, An Empirical Study of Determinants of Revenues and Marketing Expenditures in the Motion Picture Industry, Journal of Cultural Economics(18), 1994, pp Jo, T., and N. Japkowicz, Class Imbalances versus Small Disjuncts, ACM SIGKDD Exploration(6), 2004, pp Lehmann, D. R., and C. B. Weinberg, "Sales through Sequential Distribution Channels: An Application to Movies and Videos," Journal of Marketing(64:3), 2000, pp Li Zhuang, Feng Jing, and Xiao-Yan Zhu, "Movie Review Mining and Summarization," CIKM '06 Proceedings of the 15th ACM international conference on Information and knowledge management, 2006, pp Linton, J., and J. Petrovich, The application of the consumer information acquisition approach to movie selection: An exploratory study. In B.A. Austin(Ed.), Current research in film: Audiences, economics, and law(4), 1988, pp , Norwood, NJ: Ablex. Litman, B., and L. Kohl, Predicting Financial Success of Motion Pictures: The Early 80s experience, Journal of Media Economics(2), 1989, pp Marsha L. Richins, Negative Word-of-Mouth by Dissatisfied Consumers: A Pilot Study," Journal of Marketing(47:1), 1983, pp. 68. Min, J. H., and Y. C. Lee, Bankruptcy Prediction Using Support Vector Machine with Optimal Choice of Kernel Function Parameters, Expert Systems with Applications(28), 2005, pp Neelamegham, R., and Jain, D., Consumer choice process for experience goods: An econometric model and analysis, Journal of Marketing Research(36), 1999, pp Reddy K.R., Wang Y., DeBusk W.F., Fisher M.M., and Newman S., Forms of soil phosphorus in selected hydrologic units of the Florida Everglades, Soil Science Society of America Journal(62), 1998, pp Vapnik, V., The Nature of Statistical Learning Theory, Chapter 5. Springer-Verlag, New York, Vasileios Hatzivassiloglou, and Kathleen R. McKeown, Predicting the Semantic Orientation of Adjectives, ACL '98 Proceedings of the 35th Annual Meeting of the Association for Computational Linguistics and Eighth Conference of the European Chapter of the Association for Computational Linguistics, 1997, pp Wallace, W. T., Seigerman, A. and Holbrook, M. B., The Role of actors and actresses in the success of films: How much is a movie star worth? Journal of Cultural Economics(17:1), 1993, pp Xiaojin Zhu, Semi-Supervised Learning with Graphs, Language Technologies Institute, CMU-LTI , School of Computer Science, Carnegie Mellon University Y. Liu, "Word-of-mouth for movies: Its dynamics and impact on box office revenue," Journal of Marketing(70), 2006, pp