APPENDIX I (pp. 242-247)

List of Expert’s Individual Ranking of TSORA Responses

——————————————

 

List of Expert’s Individual Ranking of TSORA Responses

Expert listed by number. Question number is followed by that expert’s ranked value for each of five response choices. Missing responses indicated by “.” in column. Experts were asked to rank the responses as:

one response with a “2” as the most appropriate
two responses with a “1” neither the most or least appropriate
two responses with a “0” as the least appropriate

 

Expert # E1Q# a b c d e

1) 1 0 . 2 .
2) 2 0 1 . .
3) 1 . 0 . 2

4) 0 1 . 2 .
5) 1 2 0 . .
6) . 2 0 . 1

7) . 0 2 . 1
8) . 2 . 0 .
9) 0 1 . 2 .

QQ# a b c d e

10) 2 . 0 1 .
11)
2 . . 0 1
12)
0 . 2 . 1

13) . . 1 2 0
14)
. . 2 1 0
15)
0 1 . 2 .

16) 1 0 . . 2
17)
0 2 1 . .
18)
0 2 . 1 .

Expert # E2Q# a b c d e

1) 1 1 0 2 0
2)
2 1 1 0 0
3)
1 0 0 0 2

4) 0 1 0 2 1
5)
1 2 0 0 0
6)
0 2 0 1 1

7) 1 0 1 0 2
8)
0 2 1 1 0
9)
1 0 0 2 1

QQ# a b c d e

10) 2 1 0 0 1
11)
2 0 1 0 1
12)
0 0 2 1 1

13) 1 0 1 2 0
14)
0 1 2 1 0
15)
0 0 1 2 1

16) 1 1 0 0 2
17)
0 2 1 0 1
18)
0 2 1 1 0

Expert # E3Q# a b c d e

1) 1 1 0 2 0
2)
2 0 1 0 1
3)
1 1 0 0 2

4) 0 1 0 2 1
5)
1 2 0 0 1
6)
0 2 0 1 1

7) 1 0 1 0 2
8)
1 2 0 0 1
9)
0 0 0 2 1

QQ# a b c d e 10) 2 1 0 0 1
11)
2 0 1 0 1
12)
0 0 2 0 0

13) 1 1 0 2 0
14)
0 1 2 1 0
15)
0 0 1 2 1

16) 0 1 1 0 2
17) .
2 . . .
18)
0 2 0 0 1

Expert # E4Q# a b c d e

1) 1 1 0 2 0
2)
2 0 0 1 1
3)
1 1 0 0 2

4) 0 1 0 2 1
5)
1 2 0 0 1
6)
0 2 0 1 1

7) 1 0 2 0 1
8)
1 2 0 1 0
9)
0 0 1 2 1

QQ# a b c d e 10) 2 1 1 0 0
11)
2 0 1 0 1
12)
0 0 1 2 1

13) 1 0 1 2 0
14)
0 1 2 1 0
15)
0 0 1 2 1

16) 0 0 1 0 2
17)
1 2 0 1 0
18)
0 2 0 1 1

Expert # E5Q# a b c d e

1) 0 1 0 2 0
2)
1 0 2 0 1
3)
1 1 0 0 2

4) 0 1 0 2 1
5)
1 2 0 0 1
6)
0 2 0 1 1

7) 1 0 1 0 2
8)
1 2 0 0 1
9)
0 1 0 2 1

QQ# a b c d e

10) 1 2 0 0 1
11)
2 0 1 0 1
12)
0 0 2 1 1

13) 1 0 1 2 0
14)
0 1 2 1 0
15)
1 0 0 2 1

16) 0 1 1 0 2
17)
0 2 1 1 0
18)
0 2 1 1 0

Expert # E6Q# a b c d e

1) 0 1 0 2 1
2)
1 1 2 0 0
3)
1 0 1 0 2

4) 0 1 0 2 1
5)
1 2 0 0 0
6) .
. . . .

7) 1 0 1 0 2
8)
0 2 0 0 0
9)
1 0 0 2 1

QQ# a b c d e

10) 2 1 0 1 0
11)
2 0 1 0 1
12)
0 0 1 1 0

13) 0 1 2 1 0
14)
0 1 2 1 0
15)
0 1 0 2 1

16) 0 1 1 0 2
17)
1 2 0 0 1
18)
0 2 0 1 1

Expert # E7Q# a b c d e

1) 0 0 1 2 1
2)
2 0 1 0 1
3)
1 1 0 0 2

4) 1 0 0 2 1
5)
2 1 0 0 1
6)
0 2 1 1 0

7) 0 0 1 1 2
8)
0 2 0 1 1
9)
0 0 1 2 2

QQ# a b c d e

10) 2 1 0 1 0
11)
2 0 1 0 1
12)
0 0 1 2 0

13) 0 1 0 2 0
14)
0 1 2 1 0
15)
0 1 0 2 1

16) 0 1 1 0 2
17)
0 2 1 1 0
18)
0 2 1 1 0

Expert # E8Q# a b c d e

1) 0 1 0 2 1
2)
2 1 1 0 0
3)
1 1 0 0 2

4) 0 1 0 2 1
5)
1 2 0 0 1
6)
0 2 0 1 1

7) 1 0 1 0 2
8)
2 1 0 0 1
9)
0 0 1 2 1

QQ# a b c d e

10) 2 1 0 1 0
11)
2 0 1 0 1
12)
0 0 2 1 1

13) 1 1 0 2 0
14)
0 1 2 1 0
15)
0 1 1 2 0

16) 1 0 1 0 2
17)
0 2 0 1 1
18)
0 2 0 1 1

Expert # E9Q# a b c d e

1) 1 1 0 2 0
2)
2 0 1 0 1
3)
1 1 0 0 2

4) 1 0 0 2 1
5)
1 2 0 0 1
6)
0 2 0 1 1

7) 1 0 1 0 2
8)
1 2 0 0 1
9)
0 0 1 2 1

Q# a b c d e

10) 2 1 1 0 0
11)
2 0 1 0 1
12)
0 0 2 1 1

13) 1 1 0 2 0
14)
0 1 2 1 0
15)
0 1 1 2 0

16) 0 1 1 0 2
17)
0 2 1 0 1
18)
0 2 0 1 1

Expert # E10Q# a b c d e

1) 0 0 1 2 0
2)
2 0 0 0 1
3)
0 1 0 0 2

4) 0 0 0 1 0
5)
1 2 0 0 0
6)
0 2 0 0 1

7) 1 0 0 0 2
8)
0 2 0 0 0
9)
0 0 0 2 1

QQ# a b c d e

10) 2 0 0 1 0
11)
2 0 0 0 1
12)
0 0 2 1 0

13) 0 0 0 2 0
14)
0 1 2 0 0
15)
0 1 0 2 0

16) 0 0 1 0 2
17)
0 2 0 0 0
18)
0 2 0 0 0

Expert # E11Q# a b c d e

1) . . . . .
2) 2 1 1 0 0
3) 1 0 1 0 2

4) 0 0 0 2 1
5) 1 2 0 0 .
6) 0 2 0 0 1

7) 1 0 0 1 2
8) 0 2 0 0 1
9) 0 0 0 2 1

QQ# a b c d e

10) 2 1 0 0 0
11) 2 0 1 0 1
12) 0 0 2 1 1

13) 1 1 0 2 0
14) 0 1 2 1 0
15) 0 0 1 2 1

16) 0 1 1 0 2
17) 0 2 0 0 0
18) 0 2 0 1 1

Expert # E12Q# a b c d e

1) 0 0 1 2 1
2)
2 0 1 0 1
3)
1 0 0 0 2

4) 0 1 0 2 0
5)
1 2 0 0 0
6)
0 2 0 0 1

7) 1 0 1 0 2
8)
1 2 0 1 0
9)
0 1 1 2 1

QQ# a b c d e

10) 2 1 0 0 0
11)
2 0 1 0 1
12)
0 0 2 1 1

13) 0 0 1 2 0
14)
0 1 2 1 0
15)
0 1 0 2 1

16) 0 0 1 0 2
17)
1 2 1 0 0
18)
0 2 0 1 0

Expert # E13Q# a b c d e

1) 2 0 . 2 1
2)
2 0 2 0 1
3)
1 0 0 0 2

4) 0 1 0 2 1
5)
1 2 0 0 0
6)
0 2 . 2 1

7) 1 0 1 1 2
8)
0 2 0 1 0
9)
0 2 1 2 2

QQ# a b c d e

10) 2 1 0 0 0
11)
2 0 1 0 1
12)
0 0 2 1 0

13) . 1 1 2 0
14)
. . 2 1 0
15)
0 1 2 1 2

16) 0 0 1 0 2
17)
1 2 0 0 1
18)
0 2 0 1 .

Expert # E14Q# a b c d e

1) 1 0 0 2 1
2)
2 1 0 0 1
3)
2 1 0 0 1

4) 0 1 0 2 1
5)
1 2 0 0 0
6)
0 2 1 0 1

7) 0 0 1 1 2
8)
0 2 0 0 1
9)
1 0 0 2 1

QQ# a b c d e

10) 2 1 0 1 0
11)
2 0 1 0 1
12)
0 0 2 1 1

13) 1 0 1 2 0
14)
0 1 2 1 0
15)
0 0 1 2 1

16) 0 0 1 0 2
17)
0 2 1 1 0
18)
0 2 0 1 1

Expert # E15Q# a b c d e

1) 0 1 0 2 1
2)
2 0 1 0 1
3)
1 1 0 0 2

4) 0 1 0 2 1
5)
1 2 0 0 1
6)
0 2 0 1 1

7) 1 0 1 0 2
8)
0 1 0 1 2
9)
0 0 1 2 1

QQ# a b c d e

10) 2 1 0 0 1
11)
2 0 1 0 1
12)
1 0 2 1 0

13) 0 1 1 2 0
14)
0 2 1 1 0
15)
0 0 1 2 1

16) 0 1 1 0 2
17)
0 2 1 0 1
18)
0 2 0 1 1

Expert # E16Q# a b c d e

1) 1 0 0 2 1
2) 2 0 2 0 1
3) 1 0 0 0 2

4) 0 1 0 2 1
5) 1 2 0 0 0
6) 0 2 1 1 1

7) 1 0 2 1 2
8) 1 2 0 0 1
9) 1 1 1 2 1

QQ# a b c d e

10) 2 0 0 1 0
11) 2 0 1 0 1
12) 0 0 2 1 1

13) 0 1 1 2 0
14) 0 1 2 1 1
15) 0 1 1 2 1

16) 0 0 1 1 2
17) 0 2 1 0 1
18) 0 2 1 1 1

Expert # E17Q# a b c d e

1) 1 1 0 2 0
2)
2 1 1 0 0
3)
1 1 0 0 2

4) 0 1 0 2 1
5)
2 1 0 0 1
6)
0 2 0 1 1

7) 1 0 1 0 2
8)
1 2 0 1 0
9)
0 0 1 2 1

QQ# a b c d e

10) 2 1 0 1 0
11)
2 0 1 0 1
12)
0 0 2 1 1

13) 1 0 1 2 0
14)
0 1 2 1 0
15)
0 1 1 2 0

16) 0 1 1 0 2
17)
1 2 0 1 0
18)
1 2 0 0 1

Expert # E18Q# a b c d e

1) . 0 . 2 1
2)
1 . 2 0
3)
1 . . 0 2

4) 0 1 . 2 .
5)
2 1 0 . .
6)
0 2 . . 1

7) 1 0 . . 2
8)
0 2 . . .
9)
0 . . 2 1

QQ# a b c d e

10) 2 1 0 . .
11)
2 . . 0 1
12)
0 . 2 1 .

13) . 1 . 2 0
14)
. 1 2 . 0
15)
0 . . 2 1

16) . 1 . 0 2
17)
1 2 0 . .
18)
0 2 . 1 .

Expert # E19Q# a b c d e

1) 0 1 0 2 1
2)
1 0 2 0 0
3)
2 0 0 0 1

4) 0 1 0 2 1
5)
1 2 0 0 0
6)
0 2 0 0 1

7) 0 0 1 1 2
8)
0 2 0 0 0
9)
0 0 1 2 1

QQ# a b c d e

10) 2 1 0 0 0
11)
1 0 1 0 2
12)
0 0 2 1 0

13) 0 0 0 2 0
14)
1 1 2 0 0
15)
0 1 1 2 1

16) 1 0 1 0 2
17)
0 2 0 0 0
18)
0 2 1 1 0

Expert # E20Q# a b c d e

1) . 0 1 2 .
2)
2 1 0 . .
3)
1 . . 0 2

4) 0 . . 2 1
5)
1 2 0 0 0
6)
. 2 0 1 .

7) . 0 1 . 2
8)
0 2 0 0 0
9)
0 0 0 1 2

QQ# a b c d e

10) 1 2 0 . .
11)
2 . . 0 1
12)
0 . 2 1 .

13) 1 . 0 2 .
14)
0 . 2 1 0
15)
0 0 0 2 0

16) 0 0 0 0 2
17)
0 2 . . 0
18)
1 2 0 0 0

Expert # E21Q# a b c d e

1) 0 1 0 2 1
2)
2 0 1 1 0
3)
1 1 0 0 2

4) 0 1 0 2 1
5)
1 2 0 0 1
6)
0 2 1 0 1

7) 1 0 1 0 2
8)
0 2 0 1 1
9)
0 0 1 2 1

QQ# a b c d e

10) 2 1 0 0 1
11)
2 0 1 0 1
12)
0 0 2 1 1

13) 0 1 1 2 0
14)
0 1 2 1 0
15)
0 1 0 2 1

16) 0 1 1 0 2
17)
1 2 0 0 1
18)
0 2 1 1 0

 

Next: J: List of Experts’ Created Responses on TSFRA

Page last updated on December 1st, 2013