선관위는 거소투표를 둘러싸고 투표정보 제공과 투표보조에 대한 불신으로 시설을 통제하지만 시설은 과한 통제에 대한 불만과 무책임함으로 선관위를 불신한다. 이 상호불신을 해결하기 위해서는 구체적인 제도개선이 필요하다.
첫째, 선관위는 상대적으로 감독이 느슨한 격리된 장소에서 시설종사자의 보조 하에 이루어지는 거소투표에 대하여 부정적인 시각을 견지하고 있으며, 이러한 시각은 시설에 대한 통제로 나타나고 있었다. 한편 시설은 선관위의 통제를 과도한 것으로 인식하고 있으며, 자신들의 책임을 시설에 전가하는 것으로 느끼고 있었다. 이러한 상반된 입장은 선관위와 시설간의 상호불신으로 드러나고 있다. 즉 선관위는 투표정보 제공과 투표보조에 대하여 시설에 불신을 가지고 있는 반면, 시설은 투표준비와 진행에서 선관위의 방임과 무책임에 대하여 대안이 필요하다고 인식하고 있다. 이러한 현상은 시설에서의 거소투표에 대한 구체적인 관리지침 마련과 이에 대한 선관위의 관리책임을 명확하게 규정하는 제도개선의 필요성을 드러내고 있는 것으로 보인다.