열린 공간, 누가바닷컴 :: Exploratory Testing에서의 Learning이라는 것은?
열린 공간, 누가바닷컴 Twitter Facebook RSS Home Menu Notice
Guestbook Exploratory Testing에서의 Learning이라는 것은? 2011/12/15 11:52 Showstopper
▶ 테스터의 눈 View Comments
Exploratory Testing is :
Simultaneously learning about system while designing and executing tests, using feedback from the last test to inform the next. ET에 대해 잘 모르는 사람에게 ET의 개념을 설명할 때 위의 정의만큼 잘 정리된 것도 없다.
어떤 단계적인 형태를 갖는 단방향 프로세스가 아닌 '하나 또는 여러 세션' 속에서 혹은 '하나 또는 여러 테스트 사이클' 속에서 시시각각 바뀌는 Context를 고려하여 설계, 수행, 학습 등 여러 가지 행위들이 동시적으로 일어난다는 것을 겨우 이해시키고 나면 그 다음 또 의문을 갖는 것이 '학습'에 대한 의미가 무엇이냐, 하는 것이다. "요구사항보면 제품에 대해 나오는데 뭔 학습이 필요하지?"
"제품 기획자가 과제 설명회할 때 잘 들었어야지."
"정말 신입들에게 유용한 테스팅 기법이겠네."
ET에서 학습이라는 것은 제품에 대해 무지한 신입 테스터가 제품을 써보면서 어느 정도 제품에 대해 이해하기 위한 정도의 개념이 아니다. 정말 그 정도의 의미로 밖에 이해하지 않는다면 차라리 사용자 매뉴얼을 보고 그대로 따라 사용해봐라, 라고 하는 것이 ET를 수행하는 것보다 훨씬 효과적일 것이다. 제품에 대해 학습한다는 것의 의미는 제품이 동작하는 원리를 안다는 것이고, 제품이 어느 부분에서 취약점을 가지고 있는지를 안다는 것이고, 사용성 관점에서 무엇이 불편하며, 제품이 결함을 일으키는 원인을 알아간다는 것이다. 그 후에는 학습의 대상은 제품 뿐만 아니라 개발자, 사용자, 구매자, 이해관계자 그리고 마켓 등 제품을 둘러싼 모든 영향을 주고 받는 요소에 대한 범위로 까지 확장된다.
이렇게 까지 설명을 해도 '학습'의 의미를 좁은 범위로 한정하는 사람이 있다면, 그 사람은 분명 학습을 하는 방법 자체가 잘못된 것이다. 제대로 된 학습을 통해 의미있는 경험을 한 적이 없기 때문에 그 사람은 학습의 의미를 좁게 보는 것이다. 좋은 질문은 좋은 답을 이끌어낸다. 좋은 테스트 아이디어는 좋은 질문이고, 좋은 학습은 좋은 답이다. 좋은 테스트 아이디어는 유연한 사고체계와 경험, 지식, 스킬을 잘 활용할 줄 알 때 나온다. 실제로 아웃소싱 팀의 테스터들이 Adhoc Test(ET를 수행할 여건이 안되어)를 수행하는 것을 지켜본 일이 있다. 테스터 A는 UI 상에 보여지는 버튼들을 이용하여 테스트 아이디어들을 도출했다. 버튼들을 한번씩 눌러보고 제대로 동작을 하는지 장애를 일으키지 않는지를 보겠다는 것이다.
테스터 B는 테스터 A의 사고방식의 역방향으로 접근했다. 자신의 과거에 경험했던 장애들을 떠올리며 그런 유형의 장애를 일으킬만한 시나리오들을 세우고는 시행착오를 겪으며 이것 저것 시도하고 있었다.
테스터 C는 좀 엉뚱했다. 내가 제공해준 테스트 파일은 2가지 워드 문서였는데, 굳이 그 워드 문서를 뒤죽박죽 편집해가며 테스트를 하고 있었다. 테스터 D는 한번은 해커의 옷을 입었다가 한번은 학생의 옷을 입었다가 한번은 여성의 옷을 입으며 여러 관점에서 각 User가 수행할 것으로 예상되는 시나리오를 세워 테스트를 하고 있었다.
자, 각각의 테스터는 어떤 학습을 하게 될까? 마이피플
'▶ 테스터의 눈' 카테고리의 다른 글
[펭귄의 생활의 책소개 코너 - 1] 잡동사니 증후군을 소개합니다. (6)
mVoip와 크라우드소싱 (1)
숨바꼭질 (4)
Tester's Food :: 오징어보쌈 (7)
크라우드소싱을 경험하다 (5)
Exploratory Testing에서의 Learning이라는 것은? (2)
휴리스틱에 대한 단상 (0)
[고전에서 배우다] (1) 회생지술(回生之術)과 테스팅 전략 (0)
대한민국에서의 SW Testing. (0)
테스팅 서적의 번역에 임하는 마음가짐 (3)
테스트 전략은 병법이다. (0)
미키지왕 2011/12/15 15:11
A : 메뉴얼 작성 능력 향상 및 문서 누락 사항 개선 이바지. hallway test 효과도?
B : 도메인에 따라 천차만별이지만 엄청 효과적일 수도, 또는 전혀 도움이 안될 수도..
C : 어떤 의미인지 모르겠음.
D : 여러 옷을 입는 것은 좋지만 시간이 한정적인 테스트의 경우에는 오히려 역효과. 다른 영역의 전문가가 보기엔 그사람은 자신에 맞지 않은 옷을 입었다고 느껴질 수도있음. 모두 다 장단점이 있는것 같습니다. 하지만, ET는 나침반이 없이 수행하면 안될것 같습니다. 그 나침반이 향하는 방향은 결국 business model 및 중점에 따라 달라질테니 늘 정답은 없을것 같습니다.
오 2011/12/15 15:55
정말 이렇게 답을 적어주실지는 몰랐어요.^^ Forward Thinking, Backward Thinking, Lateral thinking 등 다양한 사고방식이 있지만 한가지씩만 적용하고 있는 테스터들의
예를 들어본거구요, 각자가 학습한 건 댓글 달아주신 것처럼 다양할겁니다. 적절히 잘 섞어서 사용하면 다차원적인 학습을 하게 될 꺼구요. 실제로 테스터들은 ET의 효과를 낮게 보는 사람들이 이해하는 학습의 범위보다 더 큰 범위로 학습하고 있었습니다. 그 학습은 물론 다음 테스트 세션에서 엄청난 영향을 끼쳤구요.
Secret 트랙백0 Tracbacks (+view to the desc.) Trackback Address :: http://noogabar.com/trackback/293
Noogabar
분류 전체보기 (447) ▶ 누가바 통신 (44)▶ 테스팅 24시 (76)세미나/컨퍼런스 (29)테스터스 초이스 (22)각종 후기 (18)릴레이 인터뷰 (7)▶ 테스팅을 말한다 (194) 테스팅 일반 (54)테스트 프로세스 (7)요구공학 (11)테스트 설계 (49)사용성 테스팅 (17)성능 테스팅 (9)애자일 테스팅 (4)게임 테스팅 (27) ▶ 테스터의 눈 (86)▶ 소셜 토크 (46)2012년 누가바포럼 (8)2012년 #누가바 (3)2011년 #noogabar (35)▶ 누가바 스터디 (1)Model-based Testing (1)
Recent Posts 무료로 사용가능한 Testcase를 공유 합니... (2)
[게임테스팅]서비스 및 게임 장애 유형들... Simple & Fast Android UI Automation Test. 소프트웨어 테스팅(Software Testing) 과... (6)
테스트 케이스 작성 시 표현은 명확하게. Recent Comments
물론 계속 무료입니다. 뭐 이런걸 무료라...
∞ 기시감 늘 같이 참여한 인원들과 TC 취합하는 것...
그소년 잘 보았습니다. 테이스팅과 와인을 비교...
별의카비 네에. 같은 주제였어요 +_+ 새로운 내...
ikooya 감사합니다. ^^.
ikooya Recent Trackbacks
품질보증(QA) or 테스팅 ?.
pdaclub 게임의 글리치 이슈.
pdaclub [번역] How Google Tests Software - Par...
The life is REAL 1회성 버그에 대한 인식.
pdaclub 리스크기반 테스팅.
pdaclub Archive
호야네 집.
뮤리안 스쿨.
검은 궁.
곰돌군의 홈페이지.
서니 아파트.
ASK 상담소.
8BIT 애견호텔.
하니벙커.
아이쿠야 하우스.
모노책방.
센치 포장마차.
Techbard 다방.
와이즈독 검진센터.
게임테스팅
OA Testing
리그레션 테스팅
리그레션 테스트
Game Tesing