1. 누가 여론조사를 실시했는가?
우선 누가 여론조사를 실시했는가를 알아야 한다. 이를테면 조사를 실시한 주체가 정당, 연구소, 전문 여론조사기관
혹은 기업인지를 먼저 파악해야 한다.
조사자의 신원을 알 수 없다면 여론조사결과와 관련한 여러 질문들을 물을 수 없게 된다. 조사자가 누구인지를
알려주지 않는다면 조사의 신뢰성이나 정확성을 의심해야 할 것이다.
대부분의 유력한 여론조사 기관들은 조사과정에서 발생할 수 있는 오류를 최대한으로 줄이려는 노력을 기울였음을
공개함으로써 좋은 평판을 얻고자 하므로 조사결과를 평가하는 데 필요한 다양한 정보를 제공해 준다.
2. 누가 여론조사의 비용을 지불했으며, 조사의 목적은 무엇인가?
누가 여론조사의 비용을 지불했는지를 알아야 한다. 그래야만 누가 이런 질문을 궁금하다고 여겨 비용까지 지불하면서
조사하고자 했는지를 알아낼 수 있으며, 이는 언론인이나 독자들이 조사결과의 의미를 파악하는 데 도움을 준다.
여론조사는 나름대로의 목적을 달성하기 위해서 실시된다. 여기서 목적이란 어떤 작업을 수행하는 데 필요한 정보를
얻기 위한 것일 수도 있으며, 혹은 어떤 주장을 펴기 위한 것일 수 있다. 실제로 언론사는 좋은 기사거리를 얻기 위해서,
정치인은 선거에 당선되기 위해서, 기업은 새로운 제품의 판매촉진을 위해서 그리고 이익집단은 여론을 환기시켜 특정한 이해를
증진시키기 위해서 여론조사를 실시한다.
여론조사의 목적이 조사결과의 타당성을 훼손시킬 만큼 부당한 것이라면 보도여부를 신중하게 검토해야 한다.
선거운동과정에서 특정인을 홍보하기 위한 수단으로 진행되는 여론조사는 오직 그 후보가 선거에서 승리하도록 하기 위해
매우 편향된 질문과 비과학적인 표집방법을 사용하기 때문이다. 게다가 이런 조사는 새로운 선거구호와 상대방에 대한 비방의
효과를 시험하고 선거쟁점을 개발하는 수단으로 이용되고 있으며 따라서 조사결과 또한 왜곡될 수 있으므로 각별한 주의를 기울여야 한다.
이익단체가 실시한 여론조사를 보도할 때에도 조심해야 한다. 예를 들어 어떤 환경단체가 자체적으로 여론조사를 실시한 결과
대다수 국민들은 매우 강경한 환경보호정책을 선호하고 있음을 발견하고 이를 대대적으로 홍보한다고 할 때, 뚜렷한 목적을 지닌
특정한 이익단체가 여론조사를 실시했다는 점에 유의할 필요가 있다. 이 경우 질문의 어법, 여론조사의 시점, 조사대상자의 선정,
그리고 질문항목의 배열순서 등을 결정하는 과정에서 편견이 개입되었을지도 모르기 때문이다. 특정단체의 주장을 홍보하는 위한 것이
아니라 일반인의 의견을 정확히 반영하기 위해 조사결과를 보도한다는 언론인의 사명을 명심할 필요가 있다.
3. 조사응답자의 수는 몇 명인가?
여론조사에는 다른 모든 조건이 동일할 경우 조사응답자의 수가 많을수록 표집과정에서 생기는 오류는 작아진다.
그러나 응답자의 수가 많다고 무조건 좋은 것이 아니라는 점에 유의해야 한다. 응답자 규모가 클수록 표집오차가 작아지기는 하지만
여론조사의 신뢰도에 영향을 미치는 많은 요인들이 있음을 알아야 한다.
4. 조사대상자들을 어떻게 선정했는가?
여론조사결과의 정확성을 평가하는 가장 중요한 기준은 조사대상자가 무작위로 선정되었는지 여부라고 하겠다.
과학적 여론조사를 수행하는 조사자라면 조사대상자를 선정하기 위해 확률이론에 근거한 특정한 표집방법을 사용하지만,
비과학적 여론조사에서는 원하는 사람들이 자발적으로 조사에 참여하도록 허용한다.
과학적 조사를 위한 표집방법은 통계학적 원리를 수용하고 있는데, 표집과정에서 가장 중요한 원칙은 모집단에서 표본으로
선정될 확률을 알아야 한다는 것이다. 그래야만 표본을 대상으로 한 조사결과를 모집단으로까지 확대하여 해석할 수 있다.
이러한 과정을 거쳐 만들어진 표본을 무선표본 혹은 확률표본이라 하며, 이런 표집방법을 채택함으로써 성인 1000명을 대상으로 한
조사를 통해 우리나라의 4천만 명 이상이 되는 성인들의 의견분포를 추론해 볼 수 있는 것이다.
여론조사를 위한 표본을 추출하기 위해서 다양한 방식을 채택할 수 있다. 예를 들어, 전화조사의 표집을 위해서 무선으로 추출된
전화번호를 그대로 이용하지 않고 응답률을 높이기 위해서 실제로 사용되고 있는 전화번호의 목록을 사용하는 경우가 있다.
등록된 모든 전화번호들에 근거해서 추출한 표본과 실제 사용되고 있는 전화번호들 이용한 표본이 동일하지 않다. 무선표집을 시도했다고
해서 모집단을 완벽하게 반영하는 것은 아니다. 전화가 없는 사람, 대답을 거부하는 사람, 조사당시 집을 비운 사람들이 있기 때문이다.
5. 조사대상자의 모집단을 어떻게 규정하고 있는가? 조사대상자를 어느 지역 혹은 어떤 집단에서 구했는가?
조사대상자들이 어느 지역 혹은 어떤 집단에서 추출되었는지를 알아야 한다. 표본이 전국의 모든 성인들 중에서 추출되었는지,
혹은 오직 특정한 도나 시에서 추출되었는지, 또는 특정한 집단에서 추출되었는지 여부를 꼭 알아야 한다. 예를 들어 사업가들을
대상으로 한 여론조사는 사업가들의 의견을 반영할 수 있을지언정, 모든 성인의 의견을 반영하지는 못한다. 그러므로 조사대상자들이
전국의 모든 성인들로부터 추출되었을 때에만 조사결과가 전국의 모든 성인들의 의견을 반영하는 것이라고 말할 수 있다.
전화 조사의 경우 모집단은 전화가 있는 집에 거주하는 사람들이다. 따라서 빈민이나 노숙자들의 견해에 관한 여론조사를 실시하고자
한다면, 전화조사는 적합한 자료수집방법이 아니다. 과학적인 표집절차를 따랐다고 해서 반드시 조사에서 의도했던 모집단을 조사했음을
의미하는 것은 아니라는 것이다.
선거에 관한 여론조사의 보도에도 모집단에 대한 이해가 필요하다. 모집단이 모든 유권자를 다 포함하는 것인지, 모집단에서 배제된
연령층, 지역, 직업집단은 없는지 등을 살펴보아야 할 것이다. 특히 특정 지역이나 투표참여율이 높은 연령층의 유권자가 모집단에서 빠졌다면
이는 조사결과에 중대한 영향을 미칠 수 있음을 알아야 한다.
6. 여론조사 결과는 모든 응답자들의 대답에 근거하여 산출한 것인가?
여론조사결과 가운데 특정한 하위집단 응답결과만을 보도하는 방식은 지양해야 한다. 우리나라처럼 지역별 지지정당이
명확히 구분되는 경우에 어느 한 지역 유권자들의 응답만을 보도하는 것은 아무런 의미가 없다.
7. 응답률은 얼마인가?
조사대상자 모두를 조사하는 경우는 드물다. 응답을 구하지 못한 조상대상자가 나오기 마련이기 때문이다. 조사자가 응답률을
높이기 위해서 어떤 노력과 조치를 취했는지를 알아야한다. 조사대상자와의 접촉을 시도한 횟수와 기간 등의 정보가 확보되어야 한다.
조사대상자를 실제로 전부 조사하지 못한 데에는 여러 가지 이유가 있다. 예를 들어 조사대상자들이 조사를 거절하거나 조사자가
전화를 했을 때 아무도 집에 없을 수도 있다. 또한 조사대상자가 언어를 이해하지 못하거나 청력에 문제가 있어 응답을 구하지 못하는
경우도 있다.
8. 언제 여론조사를 실시했는가?
조사기간 중 일어나는 주요 사건들은 여론조사 결과에 중대한 영향을 미칠 수 있다. 따라서 이런 주요 사건들의 영향력을
감안하여 조사결과를 해석해야 한다. 가장 최근에 실시된 여론조사 결과조차 이런저런 사건들에 의해 영향을 받을 수 있다.
조사기간 중에 대통령이 국민들에게 중대한 연설을 할 수도 있고, 주식시장이 붕괴하거나 유조선이 해변에 몇만 톤의 원유를
누출하는 사건이 발생할 수도 있는 것이다.
9. 어떤 조사방법을 사용했는가?
여론조사는 대체로 면접, 전화, 우편을 통해 실시되는데, 현재 대부분의 조사는 전화인터뷰로 응답을 구하고 있다. 그러나 경우에
따라서는 조사원을 직접 조사대상자의 가정으로 보내 면접을 실시한다. 우편조사의 경우에도 설문지를 받고 응답한 후 이를 회신할
조사대상자를 과학적으로 추출해야 한다.
우편조사의 가장 큰 약점은 우편조사를 하는데 보통 몇 주나 걸린다는 것이다. 우편조사는 전화조사에 비해 시의적절한
여론조사자료를 제공하지 못할 수 있다. 그리고 우편조사는 응답률이 낮기 때문에 조사결과를 해석하는 데 신중을 기해야 한다.
쇼핑몰이나 상점, 또는 길거리에서 행해진 여론조사의 결과는 조사후원자에게 소용이 있을지 몰라도 뉴스로서는 별로 가치가 없다.
이런 조사로 사람들이 흥미를 갖는 이야기거리를 만들어 낼 수는 있지만 이를 의미있는 여론조사로 간주하여 보도해서는 안 된다.
컴퓨터기술의 진보는 전화를 걸어서 응답자에게 테이프에 녹음된 질문을 틀어준 후, 전화기의 숫자를 눌러 응답을 기록하는
전산화된 인터뷰 시스템의 발달을 가능케 했다. 그러한 조사는 응답자 선정을 통제할 수 없으며 응답률이 저조하다는 등의 문제점을 낳고 있다.
10. 인터넷이나 웹 상에서의 여론조사는 믿을만한 것인가?
인터넷과 월드 와이드 웹의 확산으로 말미암아 다양한 형태의 온라인 여론조사가 등장하였다. 많은 온라인 여론조사는 오락적 요소를
지니고 있지만, 여론에 대해서는 아무 것도 말해주지 않는다.
대부분의 인터넷 여론조사는 최근에 등장한 사이비 여론조사의 한 유형에 불과하다. 웹 서베이를 하건, 수신자 부담 여론조사를 하건,
그 결과는 보도할 만한 가치가 없는 것이다. 모든 사이비 여론조사는 동일한 문제를 안고 있는데, 이는 응답자가 스스로가 조사대상자가
된다. 개인이 스스로 여론조사에 참여하므로 조사자의 조사대상자 선정과정이 생략되기 마련이다.
여론조사의 목적은 표본이 아닌 모집단에 대한 결론을 도출해 내는 것이라는 점을 기억하라. 이러한 사이비여론조사는 그 결과를
더 큰 집단에 반영할 이론적 근거를 지니고있지 못하다.
웹사이트의 투표란에 있는 특정 후보자 버튼을 누름으로써 온라인 여론조사의 특정 후보자 지지율 숫자를 올릴 수 있을지 모른다.
그러나 이런 유형의 온라인 조사는 응답자를 선정하거나, 한 이용자가 여러 번 투표하는 것을 제한하거나, 일반적으로 그 웹사이트를 방문하지
않는 사람들에게 접근하기 위한 노력을 전혀 기울이지 않는다.
결코 응답 수 규모에 현혹되어서는 안 된다. 어떤 경우에는 소수의 사람들이 몇 천 번 접속하는 경우가 있다. 50만 명이 인터넷에 접속하여
응답하였다고 하더라도 그러한 조사결과는 별로 큰 의미를 지니지 못한다.
우편 쿠폰 여론조사도 나쁘기는 마찬가지다. 잡지나 신문에는 질문에 응답했을 경우 반송해 주는 쿠폰이 들어있다. 이 경우도 역시
누가 응답했는지, 한 사람이 몇 번이나 응답했는지를 알 수가 없다.
사이비 여론조사는 모금활동에도 이용된다. 우편을 통해 응답자에게 각각의 후보자에 관한 견해를 묻고, 특정 후보나 정당에 후원금을
보내줄 것을 응답자에게 요청하는 기법은 정당과 특정 이익단체에서부터 자선단체에 이르기까지 다양한 조직에 의해 이용된다. 만약 여론조사가
자금조달과 관련되는 것이라면 그 여론조사 결과는 아무 쓸모가 없는 것이다.
인터넷과 관련해서, 초기단계이긴 하지만 온라인에 접근할 수 있는 사람들의 의견을 표집할 수 있는 방법들이 개발되고 있다.
비록 인터넷에 접근할 수 있는 사람들을 정확히 표집했다고 하더라도, 여전히 그 조사는 전국민을 대상으로 한 여론조사가 아니다.
왜냐하면 아직 전국 성인 가운데 비교적 소수만이 인터넷에 접근가능하기 때문이다.
|
