German - Arcana v3 vs. Coda

Translate to English

Overall

coda_davidsmth_480k (Model B)

-0.85

arcana_api (Model A)

By Tag

coda_davidsmth_480k (Model B)

arcana_api (Model A)

Answers

2. arcana_api (Model A) is preferred

-1

-2. coda_davidsmth_480k (Model B) is preferred

69 (6.71%)

97 (9.43%)

157 (15.26%)

304 (29.54%)

402 (39.07%)

Deep analysis

2. arcana_api (Model A) is preferred

-1

-2. coda_davidsmth_480k (Model B) is preferred

		Tags	Statistics
00:00 --:-- en/20260429_eval_en/arcana_Etna_GA_20260327_w_japanese/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/arcana/baldur/repetition_penalty__None___temperature__None/sent_08.wav 00:00 --:-- de/20260429_eval_de/20260427_coda_ga_davidsmth_480k/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/etna/baldur/repetition_penalty__None___temperature__None/sent_08.wav	arcana_api coda_davidsmth_480k	legal long spk_baldur legal long spk_baldur	-1.14 0.35 0.14
00:00 --:-- en/20260429_eval_en/arcana_Etna_GA_20260327_w_japanese/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/arcana/runa/repetition_penalty__None___temperature__None/sent_33.wav 00:00 --:-- de/20260429_eval_de/20260427_coda_ga_davidsmth_480k/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/etna/runa/repetition_penalty__None___temperature__None/sent_33.wav	arcana_api coda_davidsmth_480k	numbers fillers spk_runa numbers fillers spk_runa	-0.57 1.40 0.57
00:00 --:-- en/20260429_eval_en/arcana_Etna_GA_20260327_w_japanese/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/arcana/lorelei/repetition_penalty__None___temperature__None/sent_42.wav 00:00 --:-- de/20260429_eval_de/20260427_coda_ga_davidsmth_480k/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/etna/lorelei/repetition_penalty__None___temperature__None/sent_42.wav	arcana_api coda_davidsmth_480k	conversational long question spk_lorelei conversational long question spk_lorelei	-1.57 0.73 0.30
00:00 --:-- en/20260429_eval_en/arcana_Etna_GA_20260327_w_japanese/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/arcana/baldur/repetition_penalty__None___temperature__None/sent_10.wav 00:00 --:-- de/20260429_eval_de/20260427_coda_ga_davidsmth_480k/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/etna/baldur/repetition_penalty__None___temperature__None/sent_10.wav	arcana_api coda_davidsmth_480k	address spk_baldur address spk_baldur	1.14 0.99 0.40
00:00 --:-- en/20260429_eval_en/arcana_Etna_GA_20260327_w_japanese/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/arcana/runa/repetition_penalty__None___temperature__None/sent_15.wav 00:00 --:-- de/20260429_eval_de/20260427_coda_ga_davidsmth_480k/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/etna/runa/repetition_penalty__None___temperature__None/sent_15.wav	arcana_api coda_davidsmth_480k	medical spk_runa medical spk_runa	0.14 1.64 0.67
00:00 --:-- en/20260429_eval_en/arcana_Etna_GA_20260327_w_japanese/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/arcana/lorelei/repetition_penalty__None___temperature__None/sent_38.wav 00:00 --:-- de/20260429_eval_de/20260427_coda_ga_davidsmth_480k/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/etna/lorelei/repetition_penalty__None___temperature__None/sent_38.wav	arcana_api coda_davidsmth_480k	general namedentity numbers spk_lorelei general namedentity numbers spk_lorelei	-1.00 0.76 0.31
00:00 --:-- en/20260429_eval_en/arcana_Etna_GA_20260327_w_japanese/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/arcana/baldur/repetition_penalty__None___temperature__None/sent_05.wav 00:00 --:-- de/20260429_eval_de/20260427_coda_ga_davidsmth_480k/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/etna/baldur/repetition_penalty__None___temperature__None/sent_05.wav	arcana_api coda_davidsmth_480k	numbers spk_baldur numbers spk_baldur	-0.57 1.05 0.43
00:00 --:-- en/20260429_eval_en/arcana_Etna_GA_20260327_w_japanese/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/arcana/lorelei/repetition_penalty__None___temperature__None/sent_45.wav 00:00 --:-- de/20260429_eval_de/20260427_coda_ga_davidsmth_480k/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/etna/lorelei/repetition_penalty__None___temperature__None/sent_45.wav	arcana_api coda_davidsmth_480k	conversational callcenter question spk_lorelei conversational callcenter question spk_lorelei	-0.57 1.40 0.57

Annotations (beta)

Q10

Q11

Q12

Q13

Q14

Q15

Q16

Q17

Q18

Q19

Q20

Q21

Q22

Q23

Q24

Q25

Q26

Q27

Q28

Q29

Q30

Q31

Q32

Q33

Q34

Q35

Q36

Q38

Q39

Q40

Q41

Q42

Q43

Q44

Q45

Q46

Q47

Q48

Q50

Q51

Q52

Q53

Q54

Q55

Q56

Q57

Q58

Q59

Q60

Q61

Q62

Q63

Q64

Q65

Q66

Q67

Q68

Q69

Q70

Q71

Q72

Q74

Q75

Q76

Q77

Q78

Q79

Q80

Q81

Q82

Q83

Q84

Q86

Q87

Q88

Q89

Q90

Q91

Q92

Q93

Q94

Q95

Q96

Q97

Q98

Q99

Q100

Q101

Q102

Q103

Q104

Q106

Q107

Q108

Q109

Q110

Q111

Q112

Q113

Q114

Q115

Q116

Q117

Q118

Q119

Q120

Q121

Q122

Q124

Q125

Q126

Q128

Q129

Q130

Q131

Q132

Q133

Q134

Q135

Q136

Q137

Q138

Q139

Q140

Q141

Q142

Q143

Q144

Q145

Q146

Q37

Q49

Q73

Q85

Q105

Q123

Q127

Q147

Annotations (beta)

Q10

Q11

Q12

Q14

Q15

Q16

Q17

Q18

Q21

Q24

Q26

Q27

Q30

Q32

Q33

Q37

Q41

Q42

Q43

Q44

Q45

Q46

Q48

Q49

Q53

Q55

Q56

Q57

Q59

Q64

Q66

Q68

Q69

Q71

Q74

Q75

Q76

Q77

Q78

Q80

Q81

Q83

Q85

Q86

Q87

Q92

Q93

Q97

Q98

Q100

Q101

Q104

Q107

Q109

Q110

Q111

Q115

Q116

Q117

Q121

Q125

Q128

Q130

Q131

Q132

Q135

Q137

Q138

Q139

Q140

Q141

Q142

Q143

Q144

Q145

Q146

Q13

Q19

Q20

Q22

Q23

Q25

Q28

Q29

Q31

Q34

Q35

Q36

Q38

Q39

Q40

Q47

Q50

Q51

Q52

Q54

Q58

Q60

Q61

Q62

Q63

Q65

Q67

Q70

Q72

Q73

Q79

Q82

Q84

Q88

Q89

Q90

Q91

Q94

Q95

Q96

Q99

Q102

Q103

Q105

Q106

Q108

Q112

Q113

Q114

Q118

Q119

Q120

Q122

Q123

Q124

Q126

Q127

Q129

Q133

Q134

Q136

Q147

Overall

coda_davidsmth_480k (Model B)

-0.85

arcana_api (Model A)

By Tag

coda_davidsmth_480k (Model B)

arcana_api (Model A)

Answers

2. arcana_api (Model A) is preferred

-1

-2. coda_davidsmth_480k (Model B) is preferred

69 (6.71%)

97 (9.43%)

157 (15.26%)

304 (29.54%)

402 (39.07%)

Deep analysis

2. arcana_api (Model A) is preferred

-1

-2. coda_davidsmth_480k (Model B) is preferred

		Tags	Statistics
00:00 --:-- en/20260429_eval_en/arcana_Etna_GA_20260327_w_japanese/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/arcana/baldur/repetition_penalty__None___temperature__None/sent_08.wav 00:00 --:-- de/20260429_eval_de/20260427_coda_ga_davidsmth_480k/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/etna/baldur/repetition_penalty__None___temperature__None/sent_08.wav	arcana_api coda_davidsmth_480k	legal long spk_baldur legal long spk_baldur	-1.14 0.35 0.14
00:00 --:-- en/20260429_eval_en/arcana_Etna_GA_20260327_w_japanese/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/arcana/runa/repetition_penalty__None___temperature__None/sent_33.wav 00:00 --:-- de/20260429_eval_de/20260427_coda_ga_davidsmth_480k/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/etna/runa/repetition_penalty__None___temperature__None/sent_33.wav	arcana_api coda_davidsmth_480k	numbers fillers spk_runa numbers fillers spk_runa	-0.57 1.40 0.57
00:00 --:-- en/20260429_eval_en/arcana_Etna_GA_20260327_w_japanese/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/arcana/lorelei/repetition_penalty__None___temperature__None/sent_42.wav 00:00 --:-- de/20260429_eval_de/20260427_coda_ga_davidsmth_480k/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/etna/lorelei/repetition_penalty__None___temperature__None/sent_42.wav	arcana_api coda_davidsmth_480k	conversational long question spk_lorelei conversational long question spk_lorelei	-1.57 0.73 0.30
00:00 --:-- en/20260429_eval_en/arcana_Etna_GA_20260327_w_japanese/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/arcana/baldur/repetition_penalty__None___temperature__None/sent_10.wav 00:00 --:-- de/20260429_eval_de/20260427_coda_ga_davidsmth_480k/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/etna/baldur/repetition_penalty__None___temperature__None/sent_10.wav	arcana_api coda_davidsmth_480k	address spk_baldur address spk_baldur	1.14 0.99 0.40
00:00 --:-- en/20260429_eval_en/arcana_Etna_GA_20260327_w_japanese/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/arcana/runa/repetition_penalty__None___temperature__None/sent_15.wav 00:00 --:-- de/20260429_eval_de/20260427_coda_ga_davidsmth_480k/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/etna/runa/repetition_penalty__None___temperature__None/sent_15.wav	arcana_api coda_davidsmth_480k	medical spk_runa medical spk_runa	0.14 1.64 0.67
00:00 --:-- en/20260429_eval_en/arcana_Etna_GA_20260327_w_japanese/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/arcana/lorelei/repetition_penalty__None___temperature__None/sent_38.wav 00:00 --:-- de/20260429_eval_de/20260427_coda_ga_davidsmth_480k/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/etna/lorelei/repetition_penalty__None___temperature__None/sent_38.wav	arcana_api coda_davidsmth_480k	general namedentity numbers spk_lorelei general namedentity numbers spk_lorelei	-1.00 0.76 0.31
00:00 --:-- en/20260429_eval_en/arcana_Etna_GA_20260327_w_japanese/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/arcana/baldur/repetition_penalty__None___temperature__None/sent_05.wav 00:00 --:-- de/20260429_eval_de/20260427_coda_ga_davidsmth_480k/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/etna/baldur/repetition_penalty__None___temperature__None/sent_05.wav	arcana_api coda_davidsmth_480k	numbers spk_baldur numbers spk_baldur	-0.57 1.05 0.43
00:00 --:-- en/20260429_eval_en/arcana_Etna_GA_20260327_w_japanese/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/arcana/lorelei/repetition_penalty__None___temperature__None/sent_45.wav 00:00 --:-- de/20260429_eval_de/20260427_coda_ga_davidsmth_480k/eval/_assets/TTS_text_evalset_perceptual_subset_perceptual_eval_20260312_gold_ft/etna/lorelei/repetition_penalty__None___temperature__None/sent_45.wav	arcana_api coda_davidsmth_480k	conversational callcenter question spk_lorelei conversational callcenter question spk_lorelei	-0.57 1.40 0.57

Annotations (beta)

Q10

Q11

Q12

Q13

Q14

Q15

Q16

Q17

Q18

Q19

Q20

Q21

Q22

Q23

Q24

Q25

Q26

Q27

Q28

Q29

Q30

Q31

Q32

Q33

Q34

Q35

Q36

Q38

Q39

Q40

Q41

Q42

Q43

Q44

Q45

Q46

Q47

Q48

Q50

Q51

Q52

Q53

Q54

Q55

Q56

Q57

Q58

Q59

Q60

Q61

Q62

Q63

Q64

Q65

Q66

Q67

Q68

Q69

Q70

Q71

Q72

Q74

Q75

Q76

Q77

Q78

Q79

Q80

Q81

Q82

Q83

Q84

Q86

Q87

Q88

Q89

Q90

Q91

Q92

Q93

Q94

Q95

Q96

Q97

Q98

Q99

Q100

Q101

Q102

Q103

Q104

Q106

Q107

Q108

Q109

Q110

Q111

Q112

Q113

Q114

Q115

Q116

Q117

Q118

Q119

Q120

Q121

Q122

Q124

Q125

Q126

Q128

Q129

Q130

Q131

Q132

Q133

Q134

Q135

Q136

Q137

Q138

Q139

Q140

Q141

Q142

Q143

Q144

Q145

Q146

Q37

Q49

Q73

Q85

Q105

Q123

Q127

Q147

Annotations (beta)

Q10

Q11

Q12

Q14

Q15

Q16

Q17

Q18

Q21

Q24

Q26

Q27

Q30

Q32

Q33

Q37

Q41

Q42

Q43

Q44

Q45

Q46

Q48

Q49

Q53

Q55

Q56

Q57

Q59

Q64

Q66

Q68

Q69

Q71

Q74

Q75

Q76

Q77

Q78

Q80

Q81

Q83

Q85

Q86

Q87

Q92

Q93

Q97

Q98

Q100

Q101

Q104

Q107

Q109

Q110

Q111

Q115

Q116

Q117

Q121

Q125

Q128

Q130

Q131

Q132

Q135

Q137

Q138

Q139

Q140

Q141

Q142

Q143

Q144

Q145

Q146

Q13

Q19

Q20

Q22

Q23

Q25

Q28

Q29

Q31

Q34

Q35

Q36

Q38

Q39

Q40

Q47

Q50

Q51

Q52

Q54

Q58

Q60

Q61

Q62

Q63

Q65

Q67

Q70

Q72

Q73

Q79

Q82

Q84

Q88

Q89

Q90

Q91

Q94

Q95

Q96

Q99

Q102

Q103

Q105

Q106

Q108

Q112

Q113

Q114

Q118

Q119

Q120

Q122

Q123

Q124

Q126

Q127

Q129

Q133

Q134

Q136

Q147