md_test_greg.ref.rttm
12.5 KB
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
;; mdeval md_test18 ref rttm
;;
;; The ref and sys carve up the time interval from 16.0 through 28.0
;; into different numbers of SU's, with different boundaries.
;; The expected scoring output is:
;; SU (exact) end detection statistics -- in terms of reference words
;; Nref Ndel Nins Nsub Nerr %Del %Ins %Sub %Err
;; ALL 5 2 4 <ns> 6 40.00 80.00 <ns> 120.00
;;
;; SU detection statistics -- in terms of # of SUs
;; Nref Ndel Nins Nsub Nerr %Del %Ins %Sub %Err
;; ALL 5 0 2 0 2 0.00 40.00 0.00 40.00
SPKR-INFO md_test18 1 <NA> <NA> <NA> child spkr1r <NA>
SEGMENT md_test18 1 10.0 6.0 <NA> <NA> spkr1r <NA>
SPEAKER md_test18 1 10.0 6.0 <NA> <NA> spkr1r <NA>
SU md_test18 1 10.0 3.0 <NA> statement spkr1r <NA>
LEXEME md_test18 1 10.0 1.0 firstWord lex spkr1r <NA>
LEXEME md_test18 1 11.0 1.0 T.'s alpha spkr1r <NA>
LEXEME md_test18 1 12.0 1.0 thirdWord acronym spkr1r <NA>
SU md_test18 1 13.0 3.0 <NA> question spkr1r <NA>
LEXEME md_test18 1 13.0 1.0 fourthWord interjection spkr1r <NA>
LEXEME md_test18 1 14.0 1.0 fifthWord propernoun spkr1r <NA>
LEXEME md_test18 1 15.0 1.0 sixthWord other spkr1r <NA>
SPKR-INFO md_test18 1 <NA> <NA> <NA> unknown spkr2r <NA>
SEGMENT md_test18 1 16.0 12.0 <NA> <NA> spkr2r <NA>
SPEAKER md_test18 1 16.0 12.0 <NA> <NA> spkr2r <NA>
SU md_test18 1 16.0 4.0 <NA> statement spkr2r <NA>
LEXEME md_test18 1 16.0 1.0 seventhWord lex spkr2r <NA>
LEXEME md_test18 1 17.0 1.0 eighthWord lex spkr2r <NA>
LEXEME md_test18 1 18.0 1.0 ninthWord lex spkr2r <NA>
LEXEME md_test18 1 19.0 1.0 tenthWord lex spkr2r <NA>
SU md_test18 1 20.0 4.0 <NA> statement spkr2r <NA>
LEXEME md_test18 1 20.0 1.0 eleventhWord lex spkr2r <NA>
LEXEME md_test18 1 21.0 1.0 twelfthWord lex spkr2r <NA>
LEXEME md_test18 1 22.0 1.0 thirteenthWord lex spkr2r <NA>
LEXEME md_test18 1 23.0 1.0 fourteenthWord lex spkr2r <NA>
SU md_test18 1 24.0 4.0 <NA> statement spkr2r <NA>
LEXEME md_test18 1 24.0 1.0 fifteenthWord lex spkr2r <NA>
LEXEME md_test18 1 25.0 1.0 sixteenthWord lex spkr2r <NA>
LEXEME md_test18 1 26.0 1.0 seventeenthWord lex spkr2r <NA>
LEXEME md_test18 1 27.0 1.0 eighteenthWord lex spkr2r <NA>
;; mdeval md_test24 ref rttm
;; Syntactically and semantically legal.
;; A bunch of SU's, with systematically varying "ref vs. sys" overlaps.
;; This md_test should illustrate some of the effects of the rule that
;; word-based alignment looks at only the last two words of an SU.
;;
;; Scoring of
;; SU (exact) end detection statistics -- in terms of reference words
;; should count 1 Del and 1 Ins for each ref SU from 91.0 through 137.0
;; i.e., Nref 18, Ndel 5, Nins 5
;; SU detection statistics -- in terms of # of SU's
;; Nref 18, Ndel 2, Nins 2
SPKR-INFO md_test24 1 <NA> <NA> <NA> adult_male spkr1r <NA>
SEGMENT md_test24 1 1.0 179.0 <NA> <NA> spkr1r <NA>
SPEAKER md_test24 1 1.0 179.0 <NA> <NA> spkr1r <NA>
SU md_test24 1 4.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 4.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 5.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 6.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 7.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 8.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 9.0 1.0 zblah lex spkr1r <NA>
SU md_test24 1 14.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 14.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 15.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 16.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 17.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 18.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 19.0 1.0 zblah lex spkr1r <NA>
SU md_test24 1 24.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 24.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 25.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 26.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 27.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 28.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 29.0 1.0 zblah lex spkr1r <NA>
SU md_test24 1 34.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 34.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 35.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 36.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 37.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 38.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 39.0 1.0 zblah lex spkr1r <NA>
SU md_test24 1 44.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 44.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 45.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 46.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 47.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 48.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 49.0 1.0 zblah lex spkr1r <NA>
SU md_test24 1 54.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 54.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 55.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 56.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 57.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 58.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 59.0 1.0 zblah lex spkr1r <NA>
SU md_test24 1 64.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 64.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 65.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 66.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 67.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 68.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 69.0 1.0 zblah lex spkr1r <NA>
SU md_test24 1 74.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 74.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 75.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 76.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 77.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 78.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 79.0 1.0 zblah lex spkr1r <NA>
SU md_test24 1 84.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 84.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 85.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 86.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 87.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 88.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 89.0 1.0 zblah lex spkr1r <NA>
SU md_test24 1 91.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 91.0 1.0 vblah lex spkr1r <NA>
LEXEME md_test24 1 92.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 93.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 94.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 95.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 96.0 1.0 zblah lex spkr1r <NA>
SU md_test24 1 101.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 101.0 1.0 wblah lex spkr1r <NA>
LEXEME md_test24 1 102.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 103.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 104.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 105.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 106.0 1.0 zblah lex spkr1r <NA>
SU md_test24 1 111.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 111.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 112.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 113.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 114.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 115.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 116.0 1.0 zblah lex spkr1r <NA>
SU md_test24 1 121.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 121.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 122.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 123.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 124.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 125.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 126.0 1.0 zblah lex spkr1r <NA>
SU md_test24 1 131.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 131.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 132.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 133.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 134.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 135.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 136.0 1.0 zblah lex spkr1r <NA>
SU md_test24 1 141.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 141.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 142.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 143.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 144.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 145.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 146.0 1.0 zblah lex spkr1r <NA>
SU md_test24 1 151.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 151.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 152.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 153.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 154.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 155.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 156.0 1.0 zblah lex spkr1r <NA>
SU md_test24 1 161.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 161.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 162.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 163.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 164.0 1.0 xxblah lex spkr1r <NA>
LEXEME md_test24 1 165.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 166.0 1.0 zblah lex spkr1r <NA>
SU md_test24 1 171.0 6.0 <NA> statement spkr1r <NA>
LEXEME md_test24 1 171.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 172.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 173.0 1.0 zblah lex spkr1r <NA>
LEXEME md_test24 1 174.0 1.0 xblah lex spkr1r <NA>
LEXEME md_test24 1 175.0 1.0 yblah lex spkr1r <NA>
LEXEME md_test24 1 176.0 1.0 zblah lex spkr1r <NA>