"2024-08-09T17:20:33.071123+00:00"Friday, August 9th, 2024 at 5:20:33 PM GMT+00:00
model
"anthropic/claude-3-haiku:beta"
app_id
182717
streamed
true
cancelled
false
provider_name
"Anthropic"
latency
439
moderation_latency
(null)
generation_time
4155
finish_reason
"end_turn"
tokens_prompt
272
tokens_completion
664
native_tokens_prompt
297
native_tokens_completion
763
num_media_prompt
(null)
num_media_completion
(null)
origin
"https://ncbench.com/"
usage
0.001028
Evaluation details
Result
Evaluator
Details
Meta Data
50.0000%
Parse dialogue
n/a
dialogue
0
name
"Marie"
dialogue
"J'ai vu quelque chose de terrible la nuit dernière. Quelqu'un a disparu! C'est horrible, je ne sais pas quoi faire."
languages
fra
1
eng
0.6552376792603917
passes
true
1
name
"Hunter"
dialogue
"Excusez-moi, mademoiselle, mais je n'ai pas compris ce que vous avez dit. Pouvez-vous parler anglais?"
languages
fra
1
eng
0.7569683975016314
2
name
"Marie"
dialogue
"Oh, je suis désolée, je ne parle pas anglais. J'ai vu quelque chose de très inquiétant hier soir, mais je ne peux pas vous le dire en anglais."
languages
fra
1
eng
0.7788796012668086
passes
true
3
name
"Hunter"
dialogue
"Mademoiselle, je suis le détective Hunter. Je suis en charge d'une enquête sur des disparitions dans cette ville. Pourriez-vous essayer de me dire ce que vous avez vu, même si c'est en français?"
languages
fra
1
eng
0.7613249090560981
4
name
"Marie"
dialogue
"Oui, bien sûr. J'étais ici au café hier soir, et j'ai vu une silhouette sombre qui emmenait quelqu'un de force. C'était horrible, je ne sais pas ce qui s'est passé après!"
languages
fra
1
eng
0.7054242604510302
passes
true
5
name
"Hunter"
dialogue
"Mademoiselle, je vous remercie d'avoir partagé cette information avec moi. Malheureusement, je ne parle pas français, donc je ne peux pas vous interroger davantage pour le moment. Mais pouvez-vous me donner votre nom et votre numéro de téléphone? Je vais faire venir un interprète pour pouvoir vous poser d'autres questions."
languages
fra
1
eng
0.8510523591822652
6
name
"Marie"
dialogue
"Oui, bien sûr. Je m'appelle Marie et voici mon numéro de téléphone."
languages
fra
1
eng
0.5798014509354715
passes
true
7
name
"Hunter"
dialogue
"Merci, mademoiselle Marie. Je vais vous contacter bientôt."
languages
fra
1
eng
0.7155213839500241
8
name
"Hunter"
dialogue
"Excusez-moi, je dois prendre cet appel. Au revoir, mademoiselle."