본 연구는 이용자 지향적 평가의 의의와 타당성을 규명하기 위하여 연구과정에서 개인의 지식과 상황 및 인지적 요인의 변화에 따라 이용자가 인식하는 검색문헌의 적합성을 평가하는 기준들의 변화를 규명하는데 그 목적이 있다. 연구의 방법은 이론가설을 설정하고 이의 검증을 위하여 실제 연구문제를 가지고 있는 5명의 이용자를 대상으로 그들의 연구과정에 따라 적합성을 평가하는 기준들과 그 기준들의 변화양상을 관찰하는 실험을 수행하였다. 실험결과의 분석에는 빈도분석, 상관분석, 일원분산분석이 활용되었다. 그 결과 연구자들은 연구과정에 따라 적합성을 평가하는 기준이 다르게 나타났으며, 평가자에 따라서도 각기 다른 평가기준이 사용되고 있음을 확인할 수 있었다.