자원자 패널 웹 조사는 총 오차와 관련해서 볼 때 과학적인 자료의 논리성을 나타내지는 못한다. 이는 선택 편향으로서 선택 메커니즘이 랜덤성을 보장하지 못하기 때문에 발생하는 문제때문이다.
자원자 패널 웹 조사가 자료수집 방법으로서 기존의 전통적인 대면조사나 전화조사의 좋은 대안이긴 하지만, 조사의 총 오차와 관련해서 볼 때 과학적 자료의 질을 암시하지는 못한다(Groves, 1989). 왜냐하면 [그림 5-1]에서처럼 한 단계에서 다른 단계로 이동할 때 선택 메커니즘이 잘 알려져 있지 않을뿐더러 연구자가 각 단계를 제어할 수 없기 때문이다. 자원자 패널 웹 조사의 가장 큰 위협은 일반 모집단에 대해 불확실하고 불완전한 커버리지에 있다. 일반 모집단 중 조사 참여를 선택한 비율만이 웹에 접근한다는 사실은 일반 모집단에 대한 대표성을 의심스럽게 한다. 따라서 [그림 5-2]에서 살펴본 바와 같이 미포함, 비확률 추출, 무응답 등은 종합적으로 조사에 작용하여 웹 조사 추정치의 일반화를 어렵게 한다. 요약하면 이는 선택 편향으로서 선택 메커니즘이 랜덤성을 보장하지 못하기 때문에 발생하는 문제이다.