파일럿 테스트를 먼저 효과적으로 수행하는 방법은 무엇입니까?

누군가 참가자로 서 있는 연구의 리허설입니다. 실제 참가자와 함께 있는 것처럼 세션을 실행하지만 데이터를 버리게 됩니다. 목적은 기술에 문제가 있는지 확인하고 관련된 절차에 대한 연습을 하는 것입니다. 그런 다음 기술 및 토론 가이드를 변경할 수 있습니다.

파일럿 테스트에서 발견된 문제점은 무엇입니까?

파일럿 테스트는 다음을 포함하여 연구 계획 및 방법에서 문제를 찾는 데 도움이 됩니다.

• 참가자들은 당신이 그들에게 요구하는 것을 이해합니까?
• 과제의 표현이 답을 제공합니까?
• 질문이나 작업이 편향되어 있습니까?
• 질문이나 작업이 필요한 종류의 정보를 이끌어 내고 있습니까?
• 제거할 수 있는 반복적이거나 불필요한 질문이나 작업이 있습니까?
• 프로토타입에서 작업을 완료할 수 있습니까, 아니면 특정 화면, 상태 또는 상호 작용이 누락되었습니까?
• 세션은 얼마나 걸립니까?

Choosing the Pilot Test Participant

일부 연구의 경우 동료, 친구 또는 친척과 같은 거의 모든 사람을 파일럿 테스트 참가자로 사용할 수 있습니다. 예를 들어, 여행 예약 사이트와 같은 일반적인 소비자 대상 웹 사이트에 대한 파일럿 사용 편의성 테스트를 수행하는 경우 거의 모든 사람을 사용할 수 있습니다. 특별한 지식이나 경험이 없어도 됩니다.

그러나 일부 테스트의 경우 사용할 실제 참가자의 프로필에 밀접하게 맞는 파일럿 테스트 참가자를 얻는 것이 가장 좋습니다. 예를 들어, 세무사가 사용하는 소프트웨어의 사용성 테스트를 수행하는 경우 해당 애플리케이션을 사용하는 데 필요한 도메인 지식을 갖춘 파일럿 테스트 참가자를 확보하는 것이 이상적입니다. 자동차 구매 웹사이트를 사용하는 사람들에 대한 연구와 같이 간단해 보이는 일이라도 향후 3개월 이내에 자동차 구매를 고려하는 사람들의 사용자 프로필에 맞는 파일럿 테스트 참가자를 확보하는 것이 가장 좋습니다. 귀하의 질문이 자동차 구매자의 동기 및 사이트 사용 방법과 많은 관련이 있는 경우 프로필에 맞지 않는 사람으로부터 매우 다른 답변을 얻을 수 있습니다. 이러한 상황에서 프로필에 맞지 않는 파일럿 참가자를 사용하면 질문이 관련성이 있는지, 흥미로운 토론을 생성하는지 또는 세션이 얼마나 오래 걸릴지 잘 알 수 없습니다.

첫 번째 세션은 파일럿 테스트가 될 수 없습니까?

파일럿 테스트를 구체적으로 수행하지 않으면 첫 번째 세션이 파일럿 테스트가 됩니다. 여기에서 방법, 작업 및 질문의 문제를 찾을 수 있습니다. 첫 번째 참가자가 문제를 찾을 때까지 기다리는 것의 문제는 다음 세션 전에 변경할 시간이 많지 않다는 것입니다. 첫 번째 세션과 두 번째 세션 사이의 짧은 시간 동안 사소한 변경을 할 수 있지만 큰 변경을 하기에는 너무 늦을 것입니다.

The Ideal Pilot Test

이상적으로는 첫 번째 세션 최소 하루나 이틀 전에 파일럿 테스트를 수행하는 것이 좋습니다. 파일럿 테스트를 수행할 모든 심사 기준과 일치하는 추가 참가자를 모집합니다. 모든 것이 잘 진행되면 그 사람의 데이터를 보관할 수 있습니다. 문제를 발견하면 공식 연구 세션이 시작되기 전에 수정할 수 있습니다.

새로운 연구 활동 테스트

파일럿 테스트는 항상 유용하지만 새로운 기술을 시도할 때 특히 중요합니다. 예를 들어, 저는 그룹 워크숍을 진행한 적이 있는데, 참가자들을 소그룹으로 나누어 포스트잇에 작업 과정을 설명하도록 했습니다. 우리는 그들이 그룹 활동으로 함께 이것을 하는 것이 너무 어렵다는 것을 알게 되었습니다. 시간이 부족했고 최고의 경험은 아니었습니다. 후속 워크숍에서는 각 참가자가 자신의 작업 과정을 설명하기 위해 개별적으로 작업하도록 했는데, 이는 훨씬 쉽고 효과적이었습니다. 사실상, 우리의 첫 번째 워크숍은 의도하지 않은 파일럿 테스트로 성공적이었습니다. 그러나 더 적은 수의 참가자와 함께 파일럿 테스트로 계획했다면 훨씬 더 좋았을 것입니다.

파일럿 테스트가 중요한 이유

첫 번째 세션 전까지는 연구 조사가 얼마나 잘 진행될지 알 수 없습니다. 첫 번째 세션보다 파일럿 테스트에서 꼬임을 해결하는 것이 훨씬 낫습니다. 물론, 때때로 파일럿 테스트를 건너뛸 수 있으며 모든 것이 잘 작동합니다. 그러나 더 일찍 발견될 수 있었던 일이 잘못되었을 때 먼저 파일럿 테스트를 수행했으면 좋았을 것입니다.