初始化项目，由ModelHub XC社区提供模型
Model: pathcosmos/frankenstallm Source: Original Platform
This commit is contained in:
ModelHub XC
File diff suppressed because one or more lines are too long
File diff suppressed because one or more lines are too long
@@ -0,0 +1,188 @@
|
||||
{"doc_id": 0, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n청동기 시대에 커다란 돌을 쌓아 만든 족장의 무덤을 무엇이라고 하는가?\n\n### 선택지: \n(A) 고분\n(B) 고인돌\n(C) 돌무덤\n(D) 돌기와집\n(E) 굴식돌방\n\n### 정답:", "options": "['고분', '고인돌', '돌무덤', '돌기와집', '굴식돌방']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n청동기 시대에 커다란 돌을 쌓아 만든 족장의 무덤을 무엇이라고 하는가?\n\n### 선택지: \n(A) 고분\n(B) 고인돌\n(C) 돌무덤\n(D) 돌기와집\n(E) 굴식돌방\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n청동기 시대에 커다란 돌을 쌓아 만든 족장의 무덤을 무엇이라고 하는가?\n\n### 선택지: \n(A) 고분\n(B) 고인돌\n(C) 돌무덤\n(D) 돌기와집\n(E) 굴식돌방\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n청동기 시대에 커다란 돌을 쌓아 만든 족장의 무덤을 무엇이라고 하는가?\n\n### 선택지: \n(A) 고분\n(B) 고인돌\n(C) 돌무덤\n(D) 돌기와집\n(E) 굴식돌방\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n청동기 시대에 커다란 돌을 쌓아 만든 족장의 무덤을 무엇이라고 하는가?\n\n### 선택지: \n(A) 고분\n(B) 고인돌\n(C) 돌무덤\n(D) 돌기와집\n(E) 굴식돌방\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n청동기 시대에 커다란 돌을 쌓아 만든 족장의 무덤을 무엇이라고 하는가?\n\n### 선택지: \n(A) 고분\n(B) 고인돌\n(C) 돌무덤\n(D) 돌기와집\n(E) 굴식돌방\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.4453125", "False"]], [["-6.671875", "False"]], [["-8.6328125", "False"]], [["-7.1484375", "False"]], [["-9.5078125", "False"]]], "filtered_resps": [["-6.4453125", "False"], ["-6.671875", "False"], ["-8.6328125", "False"], ["-7.1484375", "False"], ["-9.5078125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "e88d1642f28095a10751ee6ddc4c01e528a23de42e6f7c6bd977dedf9e23309d", "prompt_hash": "caea7936a3f98e2dfb1030d2e8ac5095e1facf4dedf4f021e37a3a0c5c1b7395", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 1, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 국가는?\n\n### 선택지: \n(A) 발해\n(B) 조선\n(C) 고구려\n(D) 신라\n(E) 고조선\n\n### 정답:", "options": "['발해', '조선', '고구려', '신라', '고조선']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 국가는?\n\n### 선택지: \n(A) 발해\n(B) 조선\n(C) 고구려\n(D) 신라\n(E) 고조선\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 국가는?\n\n### 선택지: \n(A) 발해\n(B) 조선\n(C) 고구려\n(D) 신라\n(E) 고조선\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 국가는?\n\n### 선택지: \n(A) 발해\n(B) 조선\n(C) 고구려\n(D) 신라\n(E) 고조선\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 국가는?\n\n### 선택지: \n(A) 발해\n(B) 조선\n(C) 고구려\n(D) 신라\n(E) 고조선\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 국가는?\n\n### 선택지: \n(A) 발해\n(B) 조선\n(C) 고구려\n(D) 신라\n(E) 고조선\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.296875", "False"]], [["-6.2265625", "False"]], [["-8.0703125", "False"]], [["-6.953125", "False"]], [["-9.0859375", "False"]]], "filtered_resps": [["-6.296875", "False"], ["-6.2265625", "False"], ["-8.0703125", "False"], ["-6.953125", "False"], ["-9.0859375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "15c82564325dec140f5b0c3565538b6ee632d0acb386aa38ab0d7c3860651bc3", "prompt_hash": "4daea36ff4474c5cdd640456487bc438d430132925ae73b95d84a2a033366134", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 2, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘널리 인간을 이롭게 한다.’는 고조선의 건국 이념은?\n\n### 선택지: \n(A) 제왕운기\n(B) 공동번영\n(C) 인류공영\n(D) 만민보\n(E) 홍익인간\n\n### 정답:", "options": "['제왕운기', '공동번영', '인류공영', '만민보', '홍익인간']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘널리 인간을 이롭게 한다.’는 고조선의 건국 이념은?\n\n### 선택지: \n(A) 제왕운기\n(B) 공동번영\n(C) 인류공영\n(D) 만민보\n(E) 홍익인간\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘널리 인간을 이롭게 한다.’는 고조선의 건국 이념은?\n\n### 선택지: \n(A) 제왕운기\n(B) 공동번영\n(C) 인류공영\n(D) 만민보\n(E) 홍익인간\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘널리 인간을 이롭게 한다.’는 고조선의 건국 이념은?\n\n### 선택지: \n(A) 제왕운기\n(B) 공동번영\n(C) 인류공영\n(D) 만민보\n(E) 홍익인간\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘널리 인간을 이롭게 한다.’는 고조선의 건국 이념은?\n\n### 선택지: \n(A) 제왕운기\n(B) 공동번영\n(C) 인류공영\n(D) 만민보\n(E) 홍익인간\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘널리 인간을 이롭게 한다.’는 고조선의 건국 이념은?\n\n### 선택지: \n(A) 제왕운기\n(B) 공동번영\n(C) 인류공영\n(D) 만민보\n(E) 홍익인간\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.66796875", "False"]], [["-7.26171875", "False"]], [["-8.40625", "False"]], [["-8.078125", "False"]], [["-9.7265625", "False"]]], "filtered_resps": [["-6.66796875", "False"], ["-7.26171875", "False"], ["-8.40625", "False"], ["-8.078125", "False"], ["-9.7265625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "3fd253027102dc2536a1645333a5815c96b3967ee5a91969ad67e93282219067", "prompt_hash": "33471b354f0ed73c39aad456a3f7fbc55c4bc59df90eb180f84384720b019979", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 3, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n단군 왕검이 하늘에 제사를 지냈다는 참성단이 있는 곳은?\n\n### 선택지: \n(A) 평양\n(B) 춘천\n(C) 강화도\n(D) 백두산\n(E) 강릉\n\n### 정답:", "options": "['평양', '춘천', '강화도', '백두산', '강릉']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n단군 왕검이 하늘에 제사를 지냈다는 참성단이 있는 곳은?\n\n### 선택지: \n(A) 평양\n(B) 춘천\n(C) 강화도\n(D) 백두산\n(E) 강릉\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n단군 왕검이 하늘에 제사를 지냈다는 참성단이 있는 곳은?\n\n### 선택지: \n(A) 평양\n(B) 춘천\n(C) 강화도\n(D) 백두산\n(E) 강릉\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n단군 왕검이 하늘에 제사를 지냈다는 참성단이 있는 곳은?\n\n### 선택지: \n(A) 평양\n(B) 춘천\n(C) 강화도\n(D) 백두산\n(E) 강릉\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n단군 왕검이 하늘에 제사를 지냈다는 참성단이 있는 곳은?\n\n### 선택지: \n(A) 평양\n(B) 춘천\n(C) 강화도\n(D) 백두산\n(E) 강릉\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n단군 왕검이 하늘에 제사를 지냈다는 참성단이 있는 곳은?\n\n### 선택지: \n(A) 평양\n(B) 춘천\n(C) 강화도\n(D) 백두산\n(E) 강릉\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.4140625", "False"]], [["-6.19921875", "False"]], [["-7.3671875", "False"]], [["-6.67578125", "False"]], [["-8.5859375", "False"]]], "filtered_resps": [["-5.4140625", "False"], ["-6.19921875", "False"], ["-7.3671875", "False"], ["-6.67578125", "False"], ["-8.5859375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "1c9e67c19acbda7b3831be20e85aba16195f4ca2c35d5ad3574a5f00b49b3f84", "prompt_hash": "f1450b46666e099181ff29abc0b04d9465886099ed083b36cc04d60c334a0670", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 4, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n동명 성왕인 주몽이 세운 나라의 이름은?\n\n### 선택지: \n(A) 발해\n(B) 신라\n(C) 고구려\n(D) 고려\n(E) 백제\n\n### 정답:", "options": "['발해', '신라', '고구려', '고려', '백제']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n동명 성왕인 주몽이 세운 나라의 이름은?\n\n### 선택지: \n(A) 발해\n(B) 신라\n(C) 고구려\n(D) 고려\n(E) 백제\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n동명 성왕인 주몽이 세운 나라의 이름은?\n\n### 선택지: \n(A) 발해\n(B) 신라\n(C) 고구려\n(D) 고려\n(E) 백제\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n동명 성왕인 주몽이 세운 나라의 이름은?\n\n### 선택지: \n(A) 발해\n(B) 신라\n(C) 고구려\n(D) 고려\n(E) 백제\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n동명 성왕인 주몽이 세운 나라의 이름은?\n\n### 선택지: \n(A) 발해\n(B) 신라\n(C) 고구려\n(D) 고려\n(E) 백제\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n동명 성왕인 주몽이 세운 나라의 이름은?\n\n### 선택지: \n(A) 발해\n(B) 신라\n(C) 고구려\n(D) 고려\n(E) 백제\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.73046875", "False"]], [["-5.99609375", "False"]], [["-7.66015625", "False"]], [["-6.9140625", "False"]], [["-8.421875", "False"]]], "filtered_resps": [["-5.73046875", "False"], ["-5.99609375", "False"], ["-7.66015625", "False"], ["-6.9140625", "False"], ["-8.421875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "eda3734723512b4e1f3e8f6e9455d6b1a8bf75fcf8ec84864da3e839e463aca3", "prompt_hash": "e70dc414531e5ee1ef16487b75d915c15910a09577e59d62ba01dba925d96840", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 5, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n삼국이 통일된 후 대조영이 옛 고구려의 영토에 세운 나라는?\n\n### 선택지: \n(A) 고구려\n(B) 백제\n(C) 발해\n(D) 신라\n(E) 고려\n\n### 정답:", "options": "['고구려', '백제', '발해', '신라', '고려']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n삼국이 통일된 후 대조영이 옛 고구려의 영토에 세운 나라는?\n\n### 선택지: \n(A) 고구려\n(B) 백제\n(C) 발해\n(D) 신라\n(E) 고려\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n삼국이 통일된 후 대조영이 옛 고구려의 영토에 세운 나라는?\n\n### 선택지: \n(A) 고구려\n(B) 백제\n(C) 발해\n(D) 신라\n(E) 고려\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n삼국이 통일된 후 대조영이 옛 고구려의 영토에 세운 나라는?\n\n### 선택지: \n(A) 고구려\n(B) 백제\n(C) 발해\n(D) 신라\n(E) 고려\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n삼국이 통일된 후 대조영이 옛 고구려의 영토에 세운 나라는?\n\n### 선택지: \n(A) 고구려\n(B) 백제\n(C) 발해\n(D) 신라\n(E) 고려\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n삼국이 통일된 후 대조영이 옛 고구려의 영토에 세운 나라는?\n\n### 선택지: \n(A) 고구려\n(B) 백제\n(C) 발해\n(D) 신라\n(E) 고려\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.53515625", "False"]], [["-6.03125", "False"]], [["-7.26171875", "False"]], [["-6.4296875", "False"]], [["-8.578125", "False"]]], "filtered_resps": [["-5.53515625", "False"], ["-6.03125", "False"], ["-7.26171875", "False"], ["-6.4296875", "False"], ["-8.578125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "59283003bb58df38815d62688d48ad177e219a27321ce05aa93b5d1e1e5baf8b", "prompt_hash": "f250d5a3ad6b136e0f96fce339a94f257a0d4cf02efe3a720ccc4de0f4e94304", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 6, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라가 삼국 통일의 위업을 달성할 때의 왕은 누구인가?\n\n### 선택지: \n(A) 진흥왕\n(B) 진평왕\n(C) 법흥왕\n(D) 문무왕\n(E) 고국천왕\n\n### 정답:", "options": "['진흥왕', '진평왕', '법흥왕', '문무왕', '고국천왕']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라가 삼국 통일의 위업을 달성할 때의 왕은 누구인가?\n\n### 선택지: \n(A) 진흥왕\n(B) 진평왕\n(C) 법흥왕\n(D) 문무왕\n(E) 고국천왕\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라가 삼국 통일의 위업을 달성할 때의 왕은 누구인가?\n\n### 선택지: \n(A) 진흥왕\n(B) 진평왕\n(C) 법흥왕\n(D) 문무왕\n(E) 고국천왕\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라가 삼국 통일의 위업을 달성할 때의 왕은 누구인가?\n\n### 선택지: \n(A) 진흥왕\n(B) 진평왕\n(C) 법흥왕\n(D) 문무왕\n(E) 고국천왕\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라가 삼국 통일의 위업을 달성할 때의 왕은 누구인가?\n\n### 선택지: \n(A) 진흥왕\n(B) 진평왕\n(C) 법흥왕\n(D) 문무왕\n(E) 고국천왕\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라가 삼국 통일의 위업을 달성할 때의 왕은 누구인가?\n\n### 선택지: \n(A) 진흥왕\n(B) 진평왕\n(C) 법흥왕\n(D) 문무왕\n(E) 고국천왕\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.19140625", "False"]], [["-6.4375", "False"]], [["-7.67578125", "False"]], [["-7.02734375", "False"]], [["-9.125", "False"]]], "filtered_resps": [["-6.19140625", "False"], ["-6.4375", "False"], ["-7.67578125", "False"], ["-7.02734375", "False"], ["-9.125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "30f48a272e45c8898364b1975926b59eab23f2a54661d2075582d25657ae5be2", "prompt_hash": "14d216693dfa051352f581b0a548b1f51d4fcddf87a75574db66ef1c405e2135", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 7, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n화랑도 정신인 세속 오계를 지은 사람은?\n\n### 선택지: \n(A) 원효 대사\n(B) 원광 법사\n(C) 양지 스님\n(D) 의상\n(E) 혜공\n\n### 정답:", "options": "['원효 대사', '원광 법사', '양지 스님', '의상', '혜공']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n화랑도 정신인 세속 오계를 지은 사람은?\n\n### 선택지: \n(A) 원효 대사\n(B) 원광 법사\n(C) 양지 스님\n(D) 의상\n(E) 혜공\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n화랑도 정신인 세속 오계를 지은 사람은?\n\n### 선택지: \n(A) 원효 대사\n(B) 원광 법사\n(C) 양지 스님\n(D) 의상\n(E) 혜공\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n화랑도 정신인 세속 오계를 지은 사람은?\n\n### 선택지: \n(A) 원효 대사\n(B) 원광 법사\n(C) 양지 스님\n(D) 의상\n(E) 혜공\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n화랑도 정신인 세속 오계를 지은 사람은?\n\n### 선택지: \n(A) 원효 대사\n(B) 원광 법사\n(C) 양지 스님\n(D) 의상\n(E) 혜공\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n화랑도 정신인 세속 오계를 지은 사람은?\n\n### 선택지: \n(A) 원효 대사\n(B) 원광 법사\n(C) 양지 스님\n(D) 의상\n(E) 혜공\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.078125", "False"]], [["-6.21875", "False"]], [["-8.0546875", "False"]], [["-7.1875", "False"]], [["-8.8359375", "False"]]], "filtered_resps": [["-6.078125", "False"], ["-6.21875", "False"], ["-8.0546875", "False"], ["-7.1875", "False"], ["-8.8359375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "7dce46c33fbd8c887773e97fcea1c1c4e640753d7652d881204d0651c5bb38b0", "prompt_hash": "f1f1f38eb6f774ba67429f002645ef63a5eae225f9dc2250d12add2836d358e9", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 8, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 영토를 북쪽으로는 한강, 남쪽으로는 탐라국까지 넓힌 왕은 누구인가?\n\n### 선택지: \n(A) 의자왕\n(B) 문무왕\n(C) 장수왕\n(D) 법흥왕\n(E) 근초고왕\n\n### 정답:", "options": "['의자왕', '문무왕', '장수왕', '법흥왕', '근초고왕']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 영토를 북쪽으로는 한강, 남쪽으로는 탐라국까지 넓힌 왕은 누구인가?\n\n### 선택지: \n(A) 의자왕\n(B) 문무왕\n(C) 장수왕\n(D) 법흥왕\n(E) 근초고왕\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 영토를 북쪽으로는 한강, 남쪽으로는 탐라국까지 넓힌 왕은 누구인가?\n\n### 선택지: \n(A) 의자왕\n(B) 문무왕\n(C) 장수왕\n(D) 법흥왕\n(E) 근초고왕\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 영토를 북쪽으로는 한강, 남쪽으로는 탐라국까지 넓힌 왕은 누구인가?\n\n### 선택지: \n(A) 의자왕\n(B) 문무왕\n(C) 장수왕\n(D) 법흥왕\n(E) 근초고왕\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 영토를 북쪽으로는 한강, 남쪽으로는 탐라국까지 넓힌 왕은 누구인가?\n\n### 선택지: \n(A) 의자왕\n(B) 문무왕\n(C) 장수왕\n(D) 법흥왕\n(E) 근초고왕\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 영토를 북쪽으로는 한강, 남쪽으로는 탐라국까지 넓힌 왕은 누구인가?\n\n### 선택지: \n(A) 의자왕\n(B) 문무왕\n(C) 장수왕\n(D) 법흥왕\n(E) 근초고왕\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.58984375", "False"]], [["-6.0078125", "False"]], [["-7.25", "False"]], [["-5.8671875", "False"]], [["-8.125", "False"]]], "filtered_resps": [["-5.58984375", "False"], ["-6.0078125", "False"], ["-7.25", "False"], ["-5.8671875", "False"], ["-8.125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "d5f444fb7d590d7b14fc51f46a03791fd75db6b5f57d8214c803d02b9e071693", "prompt_hash": "a8cd874f60af48f2edd0a1102675c70820a933cc3ad961de6eedbe61be636ff5", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 9, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고구려의 영토를 북만주까지 넓혀 고구려인의 용맹을 과시한 왕은 누구인가?\n\n### 선택지: \n(A) 문무왕\n(B) 법흥왕\n(C) 근초고왕\n(D) 장수왕\n(E) 광개토대왕\n\n### 정답:", "options": "['문무왕', '법흥왕', '근초고왕', '장수왕', '광개토대왕']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고구려의 영토를 북만주까지 넓혀 고구려인의 용맹을 과시한 왕은 누구인가?\n\n### 선택지: \n(A) 문무왕\n(B) 법흥왕\n(C) 근초고왕\n(D) 장수왕\n(E) 광개토대왕\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고구려의 영토를 북만주까지 넓혀 고구려인의 용맹을 과시한 왕은 누구인가?\n\n### 선택지: \n(A) 문무왕\n(B) 법흥왕\n(C) 근초고왕\n(D) 장수왕\n(E) 광개토대왕\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고구려의 영토를 북만주까지 넓혀 고구려인의 용맹을 과시한 왕은 누구인가?\n\n### 선택지: \n(A) 문무왕\n(B) 법흥왕\n(C) 근초고왕\n(D) 장수왕\n(E) 광개토대왕\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고구려의 영토를 북만주까지 넓혀 고구려인의 용맹을 과시한 왕은 누구인가?\n\n### 선택지: \n(A) 문무왕\n(B) 법흥왕\n(C) 근초고왕\n(D) 장수왕\n(E) 광개토대왕\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고구려의 영토를 북만주까지 넓혀 고구려인의 용맹을 과시한 왕은 누구인가?\n\n### 선택지: \n(A) 문무왕\n(B) 법흥왕\n(C) 근초고왕\n(D) 장수왕\n(E) 광개토대왕\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.2265625", "False"]], [["-5.45703125", "False"]], [["-6.8203125", "False"]], [["-6.20703125", "False"]], [["-8.0234375", "False"]]], "filtered_resps": [["-5.2265625", "False"], ["-5.45703125", "False"], ["-6.8203125", "False"], ["-6.20703125", "False"], ["-8.0234375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "20e682b2206bcce589593fe1167bf1ccc2e73d568abe37113a5b4b17ebdd30f9", "prompt_hash": "90bc189ae4acea0d4dbb501408d3f3e2d77cf440f76311a7ee0054175083cce9", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 10, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려에 처음 쳐들어온 외적으로 만주 서북부 지방에 살았고 요라는 나라를 세운 민족은?\n\n### 선택지: \n(A) 돌궐족\n(B) 여진족\n(C) 오랑캐\n(D) 거란족\n(E) 우량카이족\n\n### 정답:", "options": "['돌궐족', '여진족', '오랑캐', '거란족', '우량카이족']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려에 처음 쳐들어온 외적으로 만주 서북부 지방에 살았고 요라는 나라를 세운 민족은?\n\n### 선택지: \n(A) 돌궐족\n(B) 여진족\n(C) 오랑캐\n(D) 거란족\n(E) 우량카이족\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려에 처음 쳐들어온 외적으로 만주 서북부 지방에 살았고 요라는 나라를 세운 민족은?\n\n### 선택지: \n(A) 돌궐족\n(B) 여진족\n(C) 오랑캐\n(D) 거란족\n(E) 우량카이족\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려에 처음 쳐들어온 외적으로 만주 서북부 지방에 살았고 요라는 나라를 세운 민족은?\n\n### 선택지: \n(A) 돌궐족\n(B) 여진족\n(C) 오랑캐\n(D) 거란족\n(E) 우량카이족\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려에 처음 쳐들어온 외적으로 만주 서북부 지방에 살았고 요라는 나라를 세운 민족은?\n\n### 선택지: \n(A) 돌궐족\n(B) 여진족\n(C) 오랑캐\n(D) 거란족\n(E) 우량카이족\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려에 처음 쳐들어온 외적으로 만주 서북부 지방에 살았고 요라는 나라를 세운 민족은?\n\n### 선택지: \n(A) 돌궐족\n(B) 여진족\n(C) 오랑캐\n(D) 거란족\n(E) 우량카이족\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.09375", "False"]], [["-6.03125", "False"]], [["-7.6640625", "False"]], [["-6.53125", "False"]], [["-8.125", "False"]]], "filtered_resps": [["-6.09375", "False"], ["-6.03125", "False"], ["-7.6640625", "False"], ["-6.53125", "False"], ["-8.125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "75e6805bb20e5920214485eb10505b98dc15eebc32abdb2b91548f9cd1a6be85", "prompt_hash": "3bfd4560b2d6242dc361d5464f138e33777a9140e76d73d5d7981934250982e6", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 11, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 만주 동북부 지방에 살면서 고려의 국경을 자주 넘어와서 노략질을 하였으며 금이라는 나라를 세운 민족은?\n\n### 선택지: \n(A) 우량카이족\n(B) 거란족\n(C) 돌궐족\n(D) 오랑캐\n(E) 여진족\n\n### 정답:", "options": "['우량카이족', '거란족', '돌궐족', '오랑캐', '여진족']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 만주 동북부 지방에 살면서 고려의 국경을 자주 넘어와서 노략질을 하였으며 금이라는 나라를 세운 민족은?\n\n### 선택지: \n(A) 우량카이족\n(B) 거란족\n(C) 돌궐족\n(D) 오랑캐\n(E) 여진족\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 만주 동북부 지방에 살면서 고려의 국경을 자주 넘어와서 노략질을 하였으며 금이라는 나라를 세운 민족은?\n\n### 선택지: \n(A) 우량카이족\n(B) 거란족\n(C) 돌궐족\n(D) 오랑캐\n(E) 여진족\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 만주 동북부 지방에 살면서 고려의 국경을 자주 넘어와서 노략질을 하였으며 금이라는 나라를 세운 민족은?\n\n### 선택지: \n(A) 우량카이족\n(B) 거란족\n(C) 돌궐족\n(D) 오랑캐\n(E) 여진족\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 만주 동북부 지방에 살면서 고려의 국경을 자주 넘어와서 노략질을 하였으며 금이라는 나라를 세운 민족은?\n\n### 선택지: \n(A) 우량카이족\n(B) 거란족\n(C) 돌궐족\n(D) 오랑캐\n(E) 여진족\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 만주 동북부 지방에 살면서 고려의 국경을 자주 넘어와서 노략질을 하였으며 금이라는 나라를 세운 민족은?\n\n### 선택지: \n(A) 우량카이족\n(B) 거란족\n(C) 돌궐족\n(D) 오랑캐\n(E) 여진족\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.875", "False"]], [["-5.62109375", "False"]], [["-7.16015625", "False"]], [["-6.78125", "False"]], [["-8.109375", "False"]]], "filtered_resps": [["-5.875", "False"], ["-5.62109375", "False"], ["-7.16015625", "False"], ["-6.78125", "False"], ["-8.109375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "6c4fa0f223e9797b7058c965acc7fcbbead3afed257e17812cb52e842bc2cf85", "prompt_hash": "f0de3e42ed4ed5ce698612c335285ecaa5ccb47bf6be816161b0ffc94ea7def1", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 12, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려와 친교를 맺고 사이좋게 지냈던 나라는?\n\n### 선택지: \n(A) 고구려\n(B) 당나라\n(C) 송나라\n(D) 고조선\n(E) 미국\n\n### 정답:", "options": "['고구려', '당나라', '송나라', '고조선', '미국']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려와 친교를 맺고 사이좋게 지냈던 나라는?\n\n### 선택지: \n(A) 고구려\n(B) 당나라\n(C) 송나라\n(D) 고조선\n(E) 미국\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려와 친교를 맺고 사이좋게 지냈던 나라는?\n\n### 선택지: \n(A) 고구려\n(B) 당나라\n(C) 송나라\n(D) 고조선\n(E) 미국\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려와 친교를 맺고 사이좋게 지냈던 나라는?\n\n### 선택지: \n(A) 고구려\n(B) 당나라\n(C) 송나라\n(D) 고조선\n(E) 미국\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려와 친교를 맺고 사이좋게 지냈던 나라는?\n\n### 선택지: \n(A) 고구려\n(B) 당나라\n(C) 송나라\n(D) 고조선\n(E) 미국\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려와 친교를 맺고 사이좋게 지냈던 나라는?\n\n### 선택지: \n(A) 고구려\n(B) 당나라\n(C) 송나라\n(D) 고조선\n(E) 미국\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.72265625", "False"]], [["-6.0", "False"]], [["-7.46875", "False"]], [["-6.796875", "False"]], [["-8.34375", "False"]]], "filtered_resps": [["-5.72265625", "False"], ["-6.0", "False"], ["-7.46875", "False"], ["-6.796875", "False"], ["-8.34375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "4f67f38748f01371193de7b57d817b9609d85ef2a67701125c875b64844ceaa4", "prompt_hash": "801468bc71f29ee8b4ca1767f8464ca45d945c0eed4f1f9def09143e4ed31b50", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 13, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n100만이 넘는 수나라의 대군을 살수의 얕은 물로 유인하여 거의 전멸시킨 사람은 누구인가?\n\n### 선택지: \n(A) 이순신\n(B) 양만춘\n(C) 을지문덕\n(D) 홍범도\n(E) 윤권\n\n### 정답:", "options": "['이순신', '양만춘', '을지문덕', '홍범도', '윤권']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n100만이 넘는 수나라의 대군을 살수의 얕은 물로 유인하여 거의 전멸시킨 사람은 누구인가?\n\n### 선택지: \n(A) 이순신\n(B) 양만춘\n(C) 을지문덕\n(D) 홍범도\n(E) 윤권\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n100만이 넘는 수나라의 대군을 살수의 얕은 물로 유인하여 거의 전멸시킨 사람은 누구인가?\n\n### 선택지: \n(A) 이순신\n(B) 양만춘\n(C) 을지문덕\n(D) 홍범도\n(E) 윤권\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n100만이 넘는 수나라의 대군을 살수의 얕은 물로 유인하여 거의 전멸시킨 사람은 누구인가?\n\n### 선택지: \n(A) 이순신\n(B) 양만춘\n(C) 을지문덕\n(D) 홍범도\n(E) 윤권\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n100만이 넘는 수나라의 대군을 살수의 얕은 물로 유인하여 거의 전멸시킨 사람은 누구인가?\n\n### 선택지: \n(A) 이순신\n(B) 양만춘\n(C) 을지문덕\n(D) 홍범도\n(E) 윤권\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n100만이 넘는 수나라의 대군을 살수의 얕은 물로 유인하여 거의 전멸시킨 사람은 누구인가?\n\n### 선택지: \n(A) 이순신\n(B) 양만춘\n(C) 을지문덕\n(D) 홍범도\n(E) 윤권\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.52734375", "False"]], [["-6.0078125", "False"]], [["-7.49609375", "False"]], [["-6.53515625", "False"]], [["-8.1953125", "False"]]], "filtered_resps": [["-5.52734375", "False"], ["-6.0078125", "False"], ["-7.49609375", "False"], ["-6.53515625", "False"], ["-8.1953125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "586ab0c27a0279dd4ec5fa485faf938ae7ac9cbfd8e4cc7db05e983399138336", "prompt_hash": "83ea08438f35ba46483954af9cab34fa1b8c39ed22ab3f448c3f2cd43f5fceb5", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 14, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n여러 해 동안 전쟁 준비를 하고 있던 일본이 1592년에 조선을 침략하였는데 이 전쟁을 무엇이라고 하는가?\n\n### 선택지: \n(A) 살수대첩\n(B) 고구려-당 전쟁\n(C) 임진왜란\n(D) 여수전쟁\n(E) 6.25 전쟁\n\n### 정답:", "options": "['살수대첩', '고구려-당 전쟁', '임진왜란', '여수전쟁', '6.25 전쟁']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n여러 해 동안 전쟁 준비를 하고 있던 일본이 1592년에 조선을 침략하였는데 이 전쟁을 무엇이라고 하는가?\n\n### 선택지: \n(A) 살수대첩\n(B) 고구려-당 전쟁\n(C) 임진왜란\n(D) 여수전쟁\n(E) 6.25 전쟁\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n여러 해 동안 전쟁 준비를 하고 있던 일본이 1592년에 조선을 침략하였는데 이 전쟁을 무엇이라고 하는가?\n\n### 선택지: \n(A) 살수대첩\n(B) 고구려-당 전쟁\n(C) 임진왜란\n(D) 여수전쟁\n(E) 6.25 전쟁\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n여러 해 동안 전쟁 준비를 하고 있던 일본이 1592년에 조선을 침략하였는데 이 전쟁을 무엇이라고 하는가?\n\n### 선택지: \n(A) 살수대첩\n(B) 고구려-당 전쟁\n(C) 임진왜란\n(D) 여수전쟁\n(E) 6.25 전쟁\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n여러 해 동안 전쟁 준비를 하고 있던 일본이 1592년에 조선을 침략하였는데 이 전쟁을 무엇이라고 하는가?\n\n### 선택지: \n(A) 살수대첩\n(B) 고구려-당 전쟁\n(C) 임진왜란\n(D) 여수전쟁\n(E) 6.25 전쟁\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n여러 해 동안 전쟁 준비를 하고 있던 일본이 1592년에 조선을 침략하였는데 이 전쟁을 무엇이라고 하는가?\n\n### 선택지: \n(A) 살수대첩\n(B) 고구려-당 전쟁\n(C) 임진왜란\n(D) 여수전쟁\n(E) 6.25 전쟁\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.6796875", "False"]], [["-5.89453125", "False"]], [["-7.76171875", "False"]], [["-7.24609375", "False"]], [["-8.6484375", "False"]]], "filtered_resps": [["-5.6796875", "False"], ["-5.89453125", "False"], ["-7.76171875", "False"], ["-7.24609375", "False"], ["-8.6484375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "284ec583bce4f3962320de02652ff09de6df3720972db038aaec7769be31ef01", "prompt_hash": "82c799a77249f19495dbd4ab54f650ee2c84fee0cca4067fb0baca572e38a75c", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 15, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 이순신 장군이 적선을 한산도 앞 넓은 바다로 유인하여 학익진 전법으로 크게 무찔러 승리한 싸움은?\n\n### 선택지: \n(A) 고구려-당 전쟁\n(B) 6.25 전쟁\n(C) 여수전쟁\n(D) 살수대첩\n(E) 한산도대첩\n\n### 정답:", "options": "['고구려-당 전쟁', '6.25 전쟁', '여수전쟁', '살수대첩', '한산도대첩']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 이순신 장군이 적선을 한산도 앞 넓은 바다로 유인하여 학익진 전법으로 크게 무찔러 승리한 싸움은?\n\n### 선택지: \n(A) 고구려-당 전쟁\n(B) 6.25 전쟁\n(C) 여수전쟁\n(D) 살수대첩\n(E) 한산도대첩\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 이순신 장군이 적선을 한산도 앞 넓은 바다로 유인하여 학익진 전법으로 크게 무찔러 승리한 싸움은?\n\n### 선택지: \n(A) 고구려-당 전쟁\n(B) 6.25 전쟁\n(C) 여수전쟁\n(D) 살수대첩\n(E) 한산도대첩\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 이순신 장군이 적선을 한산도 앞 넓은 바다로 유인하여 학익진 전법으로 크게 무찔러 승리한 싸움은?\n\n### 선택지: \n(A) 고구려-당 전쟁\n(B) 6.25 전쟁\n(C) 여수전쟁\n(D) 살수대첩\n(E) 한산도대첩\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 이순신 장군이 적선을 한산도 앞 넓은 바다로 유인하여 학익진 전법으로 크게 무찔러 승리한 싸움은?\n\n### 선택지: \n(A) 고구려-당 전쟁\n(B) 6.25 전쟁\n(C) 여수전쟁\n(D) 살수대첩\n(E) 한산도대첩\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 이순신 장군이 적선을 한산도 앞 넓은 바다로 유인하여 학익진 전법으로 크게 무찔러 승리한 싸움은?\n\n### 선택지: \n(A) 고구려-당 전쟁\n(B) 6.25 전쟁\n(C) 여수전쟁\n(D) 살수대첩\n(E) 한산도대첩\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.15625", "False"]], [["-6.3125", "False"]], [["-7.2109375", "False"]], [["-6.15625", "False"]], [["-7.76171875", "False"]]], "filtered_resps": [["-5.15625", "False"], ["-6.3125", "False"], ["-7.2109375", "False"], ["-6.15625", "False"], ["-7.76171875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "91e242395eb8492b37ae1ca1d67b2697931a76e49fe54c96a4d3d0fb1d296f25", "prompt_hash": "f09925016017fc5ec715f2116b9121573d111d0d22b0395be54ad44bb8e49da6", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 16, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n의령 지방에서 의병을 일으켜 왜군에게 큰 타격을 준 의병장은 누구인가?\n\n### 선택지: \n(A) 윤권\n(B) 곽재우\n(C) 을지문덕\n(D) 홍범도\n(E) 양만춘\n\n### 정답:", "options": "['윤권', '곽재우', '을지문덕', '홍범도', '양만춘']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n의령 지방에서 의병을 일으켜 왜군에게 큰 타격을 준 의병장은 누구인가?\n\n### 선택지: \n(A) 윤권\n(B) 곽재우\n(C) 을지문덕\n(D) 홍범도\n(E) 양만춘\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n의령 지방에서 의병을 일으켜 왜군에게 큰 타격을 준 의병장은 누구인가?\n\n### 선택지: \n(A) 윤권\n(B) 곽재우\n(C) 을지문덕\n(D) 홍범도\n(E) 양만춘\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n의령 지방에서 의병을 일으켜 왜군에게 큰 타격을 준 의병장은 누구인가?\n\n### 선택지: \n(A) 윤권\n(B) 곽재우\n(C) 을지문덕\n(D) 홍범도\n(E) 양만춘\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n의령 지방에서 의병을 일으켜 왜군에게 큰 타격을 준 의병장은 누구인가?\n\n### 선택지: \n(A) 윤권\n(B) 곽재우\n(C) 을지문덕\n(D) 홍범도\n(E) 양만춘\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n의령 지방에서 의병을 일으켜 왜군에게 큰 타격을 준 의병장은 누구인가?\n\n### 선택지: \n(A) 윤권\n(B) 곽재우\n(C) 을지문덕\n(D) 홍범도\n(E) 양만춘\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.390625", "False"]], [["-5.55078125", "False"]], [["-7.1328125", "False"]], [["-5.83984375", "False"]], [["-7.83984375", "False"]]], "filtered_resps": [["-5.390625", "False"], ["-5.55078125", "False"], ["-7.1328125", "False"], ["-5.83984375", "False"], ["-7.83984375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "914148215ed0b930cef857ce6a4c65659021c71609c4755903088f56a66faef2", "prompt_hash": "81235a906146aca18e04531f3c1d14aa2c383012e1c29c8a10b01e6ad5a0941b", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 17, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n한자의 소리나 뜻을 빌려 우리말을 기록한 글자는?\n\n### 선택지: \n(A) 각운\n(B) 간자체\n(C) 한자\n(D) 한글\n(E) 이두\n\n### 정답:", "options": "['각운', '간자체', '한자', '한글', '이두']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n한자의 소리나 뜻을 빌려 우리말을 기록한 글자는?\n\n### 선택지: \n(A) 각운\n(B) 간자체\n(C) 한자\n(D) 한글\n(E) 이두\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n한자의 소리나 뜻을 빌려 우리말을 기록한 글자는?\n\n### 선택지: \n(A) 각운\n(B) 간자체\n(C) 한자\n(D) 한글\n(E) 이두\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n한자의 소리나 뜻을 빌려 우리말을 기록한 글자는?\n\n### 선택지: \n(A) 각운\n(B) 간자체\n(C) 한자\n(D) 한글\n(E) 이두\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n한자의 소리나 뜻을 빌려 우리말을 기록한 글자는?\n\n### 선택지: \n(A) 각운\n(B) 간자체\n(C) 한자\n(D) 한글\n(E) 이두\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n한자의 소리나 뜻을 빌려 우리말을 기록한 글자는?\n\n### 선택지: \n(A) 각운\n(B) 간자체\n(C) 한자\n(D) 한글\n(E) 이두\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.78125", "False"]], [["-6.84375", "False"]], [["-7.94921875", "False"]], [["-7.578125", "False"]], [["-8.3203125", "False"]]], "filtered_resps": [["-5.78125", "False"], ["-6.84375", "False"], ["-7.94921875", "False"], ["-7.578125", "False"], ["-8.3203125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "359b827b84b82d61f890281626c3c702f7b59af90c42ea2270bcfb81ff36afc0", "prompt_hash": "4c63df8cfe5d9b21ee93dbe6ab2ef1d700ca8c709440a485e547d0640ba8e912", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 18, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n세종 대왕 때 만들어졌으며 비가 온 양을 재는 기구는?\n\n### 선택지: \n(A) 물시계\n(B) 해시계\n(C) 우량기\n(D) 측우기\n(E) 거중기\n\n### 정답:", "options": "['물시계', '해시계', '우량기', '측우기', '거중기']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n세종 대왕 때 만들어졌으며 비가 온 양을 재는 기구는?\n\n### 선택지: \n(A) 물시계\n(B) 해시계\n(C) 우량기\n(D) 측우기\n(E) 거중기\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n세종 대왕 때 만들어졌으며 비가 온 양을 재는 기구는?\n\n### 선택지: \n(A) 물시계\n(B) 해시계\n(C) 우량기\n(D) 측우기\n(E) 거중기\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n세종 대왕 때 만들어졌으며 비가 온 양을 재는 기구는?\n\n### 선택지: \n(A) 물시계\n(B) 해시계\n(C) 우량기\n(D) 측우기\n(E) 거중기\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n세종 대왕 때 만들어졌으며 비가 온 양을 재는 기구는?\n\n### 선택지: \n(A) 물시계\n(B) 해시계\n(C) 우량기\n(D) 측우기\n(E) 거중기\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n세종 대왕 때 만들어졌으며 비가 온 양을 재는 기구는?\n\n### 선택지: \n(A) 물시계\n(B) 해시계\n(C) 우량기\n(D) 측우기\n(E) 거중기\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.453125", "False"]], [["-5.8359375", "False"]], [["-7.26171875", "False"]], [["-6.95703125", "False"]], [["-8.9609375", "False"]]], "filtered_resps": [["-5.453125", "False"], ["-5.8359375", "False"], ["-7.26171875", "False"], ["-6.95703125", "False"], ["-8.9609375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "9aea40291888a9267e35ac3203ec1d28aec94cc492e2f83206a9f3ac4a7e3895", "prompt_hash": "e8e279bd15bd5ed5c379b73cc9e21947cc968e44b13d9d6ccdbe913a0388e34d", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 19, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n많은 이두를 모아 체계를 세워, 백성들이 쉽게 사용할 수 있도록 한 사람은 누구인가?\n\n### 선택지: \n(A) 세종대왕\n(B) 장영실\n(C) 성균관\n(D) 설총\n(E) 정약용\n\n### 정답:", "options": "['세종대왕', '장영실', '성균관', '설총', '정약용']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n많은 이두를 모아 체계를 세워, 백성들이 쉽게 사용할 수 있도록 한 사람은 누구인가?\n\n### 선택지: \n(A) 세종대왕\n(B) 장영실\n(C) 성균관\n(D) 설총\n(E) 정약용\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n많은 이두를 모아 체계를 세워, 백성들이 쉽게 사용할 수 있도록 한 사람은 누구인가?\n\n### 선택지: \n(A) 세종대왕\n(B) 장영실\n(C) 성균관\n(D) 설총\n(E) 정약용\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n많은 이두를 모아 체계를 세워, 백성들이 쉽게 사용할 수 있도록 한 사람은 누구인가?\n\n### 선택지: \n(A) 세종대왕\n(B) 장영실\n(C) 성균관\n(D) 설총\n(E) 정약용\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n많은 이두를 모아 체계를 세워, 백성들이 쉽게 사용할 수 있도록 한 사람은 누구인가?\n\n### 선택지: \n(A) 세종대왕\n(B) 장영실\n(C) 성균관\n(D) 설총\n(E) 정약용\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n많은 이두를 모아 체계를 세워, 백성들이 쉽게 사용할 수 있도록 한 사람은 누구인가?\n\n### 선택지: \n(A) 세종대왕\n(B) 장영실\n(C) 성균관\n(D) 설총\n(E) 정약용\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.3828125", "False"]], [["-6.3125", "False"]], [["-8.046875", "False"]], [["-7.609375", "False"]], [["-9.390625", "False"]]], "filtered_resps": [["-6.3828125", "False"], ["-6.3125", "False"], ["-8.046875", "False"], ["-7.609375", "False"], ["-9.390625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "8f7a78be6c1139416f1322953b5efa9721e5163c49aec1092fdbd6a04e92af4e", "prompt_hash": "97b80a5afc76106c0352a168396e00ab96f593ac5f8151ba7f87ade11d543cf1", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 20, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n훈민정음으로 쓴 최초의 글로 왕실 조상의 역사를 노래한 것은 무엇인가?\n\n### 선택지: \n(A) 화통가\n(B) 해례\n(C) 도비가\n(D) 강강수월래\n(E) 용비어천가\n\n### 정답:", "options": "['화통가', '해례', '도비가', '강강수월래', '용비어천가']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n훈민정음으로 쓴 최초의 글로 왕실 조상의 역사를 노래한 것은 무엇인가?\n\n### 선택지: \n(A) 화통가\n(B) 해례\n(C) 도비가\n(D) 강강수월래\n(E) 용비어천가\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n훈민정음으로 쓴 최초의 글로 왕실 조상의 역사를 노래한 것은 무엇인가?\n\n### 선택지: \n(A) 화통가\n(B) 해례\n(C) 도비가\n(D) 강강수월래\n(E) 용비어천가\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n훈민정음으로 쓴 최초의 글로 왕실 조상의 역사를 노래한 것은 무엇인가?\n\n### 선택지: \n(A) 화통가\n(B) 해례\n(C) 도비가\n(D) 강강수월래\n(E) 용비어천가\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n훈민정음으로 쓴 최초의 글로 왕실 조상의 역사를 노래한 것은 무엇인가?\n\n### 선택지: \n(A) 화통가\n(B) 해례\n(C) 도비가\n(D) 강강수월래\n(E) 용비어천가\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n훈민정음으로 쓴 최초의 글로 왕실 조상의 역사를 노래한 것은 무엇인가?\n\n### 선택지: \n(A) 화통가\n(B) 해례\n(C) 도비가\n(D) 강강수월래\n(E) 용비어천가\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.77734375", "False"]], [["-6.2890625", "False"]], [["-7.68359375", "False"]], [["-6.734375", "False"]], [["-8.40625", "False"]]], "filtered_resps": [["-5.77734375", "False"], ["-6.2890625", "False"], ["-7.68359375", "False"], ["-6.734375", "False"], ["-8.40625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "58664d8bffbb54d78e27dd7fa21b00858e348964a500d4af6dfb3a07ecfb287a", "prompt_hash": "97620d9bedf0c15377de0d481c889e57c00d7083a512c4107b4eb3c8b5bf238c", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 21, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 조선 후기 백성들이 잘 살고 나라가 튼튼해지는 방법을 연구한 학문을 무엇이라고 하는가?\n\n### 선택지: \n(A) 유교\n(B) 실학\n(C) 성리학\n(D) 양학\n(E) 불교\n\n### 정답:", "options": "['유교', '실학', '성리학', '양학', '불교']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 조선 후기 백성들이 잘 살고 나라가 튼튼해지는 방법을 연구한 학문을 무엇이라고 하는가?\n\n### 선택지: \n(A) 유교\n(B) 실학\n(C) 성리학\n(D) 양학\n(E) 불교\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 조선 후기 백성들이 잘 살고 나라가 튼튼해지는 방법을 연구한 학문을 무엇이라고 하는가?\n\n### 선택지: \n(A) 유교\n(B) 실학\n(C) 성리학\n(D) 양학\n(E) 불교\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 조선 후기 백성들이 잘 살고 나라가 튼튼해지는 방법을 연구한 학문을 무엇이라고 하는가?\n\n### 선택지: \n(A) 유교\n(B) 실학\n(C) 성리학\n(D) 양학\n(E) 불교\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 조선 후기 백성들이 잘 살고 나라가 튼튼해지는 방법을 연구한 학문을 무엇이라고 하는가?\n\n### 선택지: \n(A) 유교\n(B) 실학\n(C) 성리학\n(D) 양학\n(E) 불교\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 조선 후기 백성들이 잘 살고 나라가 튼튼해지는 방법을 연구한 학문을 무엇이라고 하는가?\n\n### 선택지: \n(A) 유교\n(B) 실학\n(C) 성리학\n(D) 양학\n(E) 불교\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.73828125", "False"]], [["-6.6640625", "False"]], [["-8.1953125", "False"]], [["-7.890625", "False"]], [["-9.9375", "False"]]], "filtered_resps": [["-6.73828125", "False"], ["-6.6640625", "False"], ["-8.1953125", "False"], ["-7.890625", "False"], ["-9.9375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "094c8dff3b19a5801570b5d0104db954f424dc0c0b08e8bb0988f0f4df6b7bed", "prompt_hash": "15bc6359c25dac3e7a4c9a56ecec224bd2f0f004126c93ca5d735300085d8d60", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 22, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 말기에 화약 및 화기의 제조를 맡아 본 임시 관청의 이름은?\n\n### 선택지: \n(A) 화통도감\n(B) 국방부\n(C) 총독부\n(D) 활총서\n(E) 화감\n\n### 정답:", "options": "['화통도감', '국방부', '총독부', '활총서', '화감']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 말기에 화약 및 화기의 제조를 맡아 본 임시 관청의 이름은?\n\n### 선택지: \n(A) 화통도감\n(B) 국방부\n(C) 총독부\n(D) 활총서\n(E) 화감\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 말기에 화약 및 화기의 제조를 맡아 본 임시 관청의 이름은?\n\n### 선택지: \n(A) 화통도감\n(B) 국방부\n(C) 총독부\n(D) 활총서\n(E) 화감\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 말기에 화약 및 화기의 제조를 맡아 본 임시 관청의 이름은?\n\n### 선택지: \n(A) 화통도감\n(B) 국방부\n(C) 총독부\n(D) 활총서\n(E) 화감\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 말기에 화약 및 화기의 제조를 맡아 본 임시 관청의 이름은?\n\n### 선택지: \n(A) 화통도감\n(B) 국방부\n(C) 총독부\n(D) 활총서\n(E) 화감\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 말기에 화약 및 화기의 제조를 맡아 본 임시 관청의 이름은?\n\n### 선택지: \n(A) 화통도감\n(B) 국방부\n(C) 총독부\n(D) 활총서\n(E) 화감\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.71484375", "False"]], [["-6.328125", "False"]], [["-7.3203125", "False"]], [["-7.0859375", "False"]], [["-8.4140625", "False"]]], "filtered_resps": [["-5.71484375", "False"], ["-6.328125", "False"], ["-7.3203125", "False"], ["-7.0859375", "False"], ["-8.4140625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "78e5bdd898284f0516bd1a0911380f943cf403cdbe15ab70e162cf1aa9d7deb8", "prompt_hash": "62351f350ee14ba6e992b306631d439c119e3f26beadc348219a6d7f0f53ad4a", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 23, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신사임당의 아들이며 조선 시대의 대표적인 유학자로 10만 양병설을 주장한 사람은 누구인가?\n\n### 선택지: \n(A) 이황\n(B) 윤권\n(C) 정약용\n(D) 이이\n(E) 이순신\n\n### 정답:", "options": "['이황', '윤권', '정약용', '이이', '이순신']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신사임당의 아들이며 조선 시대의 대표적인 유학자로 10만 양병설을 주장한 사람은 누구인가?\n\n### 선택지: \n(A) 이황\n(B) 윤권\n(C) 정약용\n(D) 이이\n(E) 이순신\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신사임당의 아들이며 조선 시대의 대표적인 유학자로 10만 양병설을 주장한 사람은 누구인가?\n\n### 선택지: \n(A) 이황\n(B) 윤권\n(C) 정약용\n(D) 이이\n(E) 이순신\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신사임당의 아들이며 조선 시대의 대표적인 유학자로 10만 양병설을 주장한 사람은 누구인가?\n\n### 선택지: \n(A) 이황\n(B) 윤권\n(C) 정약용\n(D) 이이\n(E) 이순신\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신사임당의 아들이며 조선 시대의 대표적인 유학자로 10만 양병설을 주장한 사람은 누구인가?\n\n### 선택지: \n(A) 이황\n(B) 윤권\n(C) 정약용\n(D) 이이\n(E) 이순신\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신사임당의 아들이며 조선 시대의 대표적인 유학자로 10만 양병설을 주장한 사람은 누구인가?\n\n### 선택지: \n(A) 이황\n(B) 윤권\n(C) 정약용\n(D) 이이\n(E) 이순신\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.8203125", "False"]], [["-5.8671875", "False"]], [["-7.4609375", "False"]], [["-6.6171875", "False"]], [["-8.6484375", "False"]]], "filtered_resps": [["-5.8203125", "False"], ["-5.8671875", "False"], ["-7.4609375", "False"], ["-6.6171875", "False"], ["-8.6484375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "73be5b780edf8085d02710ac4bca663ee90160beb3da77e4935141512ad69334", "prompt_hash": "59e62fd31f3baa9bda57e55e5889bf565a181be97d5b7bb62bc0fdbf18817d19", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 24, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n장보고가 해적을 소탕하기 위하여 해군 기지인 청해진을 설치한 곳은 어디인가?\n\n### 선택지: \n(A) 제주도\n(B) 완도\n(C) 인천\n(D) 벽란도\n(E) 강화도\n\n### 정답:", "options": "['제주도', '완도', '인천', '벽란도', '강화도']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n장보고가 해적을 소탕하기 위하여 해군 기지인 청해진을 설치한 곳은 어디인가?\n\n### 선택지: \n(A) 제주도\n(B) 완도\n(C) 인천\n(D) 벽란도\n(E) 강화도\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n장보고가 해적을 소탕하기 위하여 해군 기지인 청해진을 설치한 곳은 어디인가?\n\n### 선택지: \n(A) 제주도\n(B) 완도\n(C) 인천\n(D) 벽란도\n(E) 강화도\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n장보고가 해적을 소탕하기 위하여 해군 기지인 청해진을 설치한 곳은 어디인가?\n\n### 선택지: \n(A) 제주도\n(B) 완도\n(C) 인천\n(D) 벽란도\n(E) 강화도\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n장보고가 해적을 소탕하기 위하여 해군 기지인 청해진을 설치한 곳은 어디인가?\n\n### 선택지: \n(A) 제주도\n(B) 완도\n(C) 인천\n(D) 벽란도\n(E) 강화도\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n장보고가 해적을 소탕하기 위하여 해군 기지인 청해진을 설치한 곳은 어디인가?\n\n### 선택지: \n(A) 제주도\n(B) 완도\n(C) 인천\n(D) 벽란도\n(E) 강화도\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.7109375", "False"]], [["-5.52734375", "False"]], [["-6.9765625", "False"]], [["-6.4296875", "False"]], [["-8.90625", "False"]]], "filtered_resps": [["-5.7109375", "False"], ["-5.52734375", "False"], ["-6.9765625", "False"], ["-6.4296875", "False"], ["-8.90625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "a81171ead80d552850ba8ae09043512d35fa46ec0c19e4f43056e4e7e6b4fa9b", "prompt_hash": "b13cc962a58671906ddffb01ff754dbf2e5252203fa6501776099f960c482b5a", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 25, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n당나라에는 신라인들이 집단으로 거주하는 마을이 있었는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 신촌\n(B) 신라방\n(C) 당신라\n(D) 당방\n(E) 당촌\n\n### 정답:", "options": "['신촌', '신라방', '당신라', '당방', '당촌']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n당나라에는 신라인들이 집단으로 거주하는 마을이 있었는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 신촌\n(B) 신라방\n(C) 당신라\n(D) 당방\n(E) 당촌\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n당나라에는 신라인들이 집단으로 거주하는 마을이 있었는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 신촌\n(B) 신라방\n(C) 당신라\n(D) 당방\n(E) 당촌\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n당나라에는 신라인들이 집단으로 거주하는 마을이 있었는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 신촌\n(B) 신라방\n(C) 당신라\n(D) 당방\n(E) 당촌\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n당나라에는 신라인들이 집단으로 거주하는 마을이 있었는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 신촌\n(B) 신라방\n(C) 당신라\n(D) 당방\n(E) 당촌\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n당나라에는 신라인들이 집단으로 거주하는 마을이 있었는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 신촌\n(B) 신라방\n(C) 당신라\n(D) 당방\n(E) 당촌\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.6796875", "False"]], [["-6.58203125", "False"]], [["-8.2265625", "False"]], [["-7.5546875", "False"]], [["-9.7578125", "False"]]], "filtered_resps": [["-6.6796875", "False"], ["-6.58203125", "False"], ["-8.2265625", "False"], ["-7.5546875", "False"], ["-9.7578125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "d980e8cea9e3f985a4a21916c3ff45c53824230f18049ca97f89194d6a45b69d", "prompt_hash": "1536fa49faaad2f557f184fe50d7568eaf9d997d6be2762b194b86b7b9a9f1e4", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 26, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려는 송나라 뿐만 아니라 멀리 아라비아 상인들하고도 무역을 활발히 하였는데, 당시 국제 무역항의 역할을 하였던 곳은?\n\n### 선택지: \n(A) 인천\n(B) 제주도\n(C) 벽란도\n(D) 완도\n(E) 강화도\n\n### 정답:", "options": "['인천', '제주도', '벽란도', '완도', '강화도']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려는 송나라 뿐만 아니라 멀리 아라비아 상인들하고도 무역을 활발히 하였는데, 당시 국제 무역항의 역할을 하였던 곳은?\n\n### 선택지: \n(A) 인천\n(B) 제주도\n(C) 벽란도\n(D) 완도\n(E) 강화도\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려는 송나라 뿐만 아니라 멀리 아라비아 상인들하고도 무역을 활발히 하였는데, 당시 국제 무역항의 역할을 하였던 곳은?\n\n### 선택지: \n(A) 인천\n(B) 제주도\n(C) 벽란도\n(D) 완도\n(E) 강화도\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려는 송나라 뿐만 아니라 멀리 아라비아 상인들하고도 무역을 활발히 하였는데, 당시 국제 무역항의 역할을 하였던 곳은?\n\n### 선택지: \n(A) 인천\n(B) 제주도\n(C) 벽란도\n(D) 완도\n(E) 강화도\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려는 송나라 뿐만 아니라 멀리 아라비아 상인들하고도 무역을 활발히 하였는데, 당시 국제 무역항의 역할을 하였던 곳은?\n\n### 선택지: \n(A) 인천\n(B) 제주도\n(C) 벽란도\n(D) 완도\n(E) 강화도\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려는 송나라 뿐만 아니라 멀리 아라비아 상인들하고도 무역을 활발히 하였는데, 당시 국제 무역항의 역할을 하였던 곳은?\n\n### 선택지: \n(A) 인천\n(B) 제주도\n(C) 벽란도\n(D) 완도\n(E) 강화도\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.68359375", "False"]], [["-5.48046875", "False"]], [["-6.90234375", "False"]], [["-6.7109375", "False"]], [["-8.2109375", "False"]]], "filtered_resps": [["-5.68359375", "False"], ["-5.48046875", "False"], ["-6.90234375", "False"], ["-6.7109375", "False"], ["-8.2109375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "7ed44d400a25a0d91cb47593565d2ad4149f13734744828775290131ecb28dd0", "prompt_hash": "bc2c8059df9a75e5f2d1c432421a513569e92501c2a94670dc3fd3e727efb840", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 27, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 시대 일본으로 보내던 사신으로 오늘날의 외교 사절에 해당하는 것은?\n\n### 선택지: \n(A) 영사\n(B) 조사\n(C) 당촌\n(D) 화통도감\n(E) 통신사\n\n### 정답:", "options": "['영사', '조사', '당촌', '화통도감', '통신사']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 시대 일본으로 보내던 사신으로 오늘날의 외교 사절에 해당하는 것은?\n\n### 선택지: \n(A) 영사\n(B) 조사\n(C) 당촌\n(D) 화통도감\n(E) 통신사\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 시대 일본으로 보내던 사신으로 오늘날의 외교 사절에 해당하는 것은?\n\n### 선택지: \n(A) 영사\n(B) 조사\n(C) 당촌\n(D) 화통도감\n(E) 통신사\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 시대 일본으로 보내던 사신으로 오늘날의 외교 사절에 해당하는 것은?\n\n### 선택지: \n(A) 영사\n(B) 조사\n(C) 당촌\n(D) 화통도감\n(E) 통신사\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 시대 일본으로 보내던 사신으로 오늘날의 외교 사절에 해당하는 것은?\n\n### 선택지: \n(A) 영사\n(B) 조사\n(C) 당촌\n(D) 화통도감\n(E) 통신사\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 시대 일본으로 보내던 사신으로 오늘날의 외교 사절에 해당하는 것은?\n\n### 선택지: \n(A) 영사\n(B) 조사\n(C) 당촌\n(D) 화통도감\n(E) 통신사\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.171875", "False"]], [["-6.28125", "False"]], [["-8.1875", "False"]], [["-7.39453125", "False"]], [["-9.09375", "False"]]], "filtered_resps": [["-6.171875", "False"], ["-6.28125", "False"], ["-8.1875", "False"], ["-7.39453125", "False"], ["-9.09375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "52469b8bddb4d4ddf54cfcf63919b05f925e1c41eb71d9d32f7c543867a9fcd0", "prompt_hash": "52ae7c0864bf4666eb6bae0afed0fa1daa10c0b36774d2fe2b556415e73f3abb", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 28, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 인조 때 제주도에 표착하여 귀화한 네덜란드인으로 조선 여인과 결혼하고 훈련도감에서 전술을 가르친 사람은?\n\n### 선택지: \n(A) 토마스\n(B) 쿤\n(C) 벨테브레\n(D) 제임스\n(E) 할버드\n\n### 정답:", "options": "['토마스', '쿤', '벨테브레', '제임스', '할버드']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 인조 때 제주도에 표착하여 귀화한 네덜란드인으로 조선 여인과 결혼하고 훈련도감에서 전술을 가르친 사람은?\n\n### 선택지: \n(A) 토마스\n(B) 쿤\n(C) 벨테브레\n(D) 제임스\n(E) 할버드\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 인조 때 제주도에 표착하여 귀화한 네덜란드인으로 조선 여인과 결혼하고 훈련도감에서 전술을 가르친 사람은?\n\n### 선택지: \n(A) 토마스\n(B) 쿤\n(C) 벨테브레\n(D) 제임스\n(E) 할버드\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 인조 때 제주도에 표착하여 귀화한 네덜란드인으로 조선 여인과 결혼하고 훈련도감에서 전술을 가르친 사람은?\n\n### 선택지: \n(A) 토마스\n(B) 쿤\n(C) 벨테브레\n(D) 제임스\n(E) 할버드\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 인조 때 제주도에 표착하여 귀화한 네덜란드인으로 조선 여인과 결혼하고 훈련도감에서 전술을 가르친 사람은?\n\n### 선택지: \n(A) 토마스\n(B) 쿤\n(C) 벨테브레\n(D) 제임스\n(E) 할버드\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 인조 때 제주도에 표착하여 귀화한 네덜란드인으로 조선 여인과 결혼하고 훈련도감에서 전술을 가르친 사람은?\n\n### 선택지: \n(A) 토마스\n(B) 쿤\n(C) 벨테브레\n(D) 제임스\n(E) 할버드\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-4.80078125", "False"]], [["-4.64453125", "False"]], [["-6.28125", "False"]], [["-5.52734375", "False"]], [["-7.3515625", "False"]]], "filtered_resps": [["-4.80078125", "False"], ["-4.64453125", "False"], ["-6.28125", "False"], ["-5.52734375", "False"], ["-7.3515625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "d3c85142e75b2aa7baac6be6e555cd64a0b56a0a1f1dbc6382a418dee39c3e80", "prompt_hash": "4286c92098385b6672d0871eb3bf8a611a839bd2c1d8970c05771b0bd64d6341", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 29, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n흥선 대원군은 천주교가 유교적 전통에 맞지 않는다고 하여 프랑스 신부들을 처형하였는데 이 사건을 무엇이라고 하는가?\n\n### 선택지: \n(A) 병인박해\n(B) 병인양요\n(C) 기해박해\n(D) 신미양요\n(E) 신유박해\n\n### 정답:", "options": "['병인박해', '병인양요', '기해박해', '신미양요', '신유박해']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n흥선 대원군은 천주교가 유교적 전통에 맞지 않는다고 하여 프랑스 신부들을 처형하였는데 이 사건을 무엇이라고 하는가?\n\n### 선택지: \n(A) 병인박해\n(B) 병인양요\n(C) 기해박해\n(D) 신미양요\n(E) 신유박해\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n흥선 대원군은 천주교가 유교적 전통에 맞지 않는다고 하여 프랑스 신부들을 처형하였는데 이 사건을 무엇이라고 하는가?\n\n### 선택지: \n(A) 병인박해\n(B) 병인양요\n(C) 기해박해\n(D) 신미양요\n(E) 신유박해\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n흥선 대원군은 천주교가 유교적 전통에 맞지 않는다고 하여 프랑스 신부들을 처형하였는데 이 사건을 무엇이라고 하는가?\n\n### 선택지: \n(A) 병인박해\n(B) 병인양요\n(C) 기해박해\n(D) 신미양요\n(E) 신유박해\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n흥선 대원군은 천주교가 유교적 전통에 맞지 않는다고 하여 프랑스 신부들을 처형하였는데 이 사건을 무엇이라고 하는가?\n\n### 선택지: \n(A) 병인박해\n(B) 병인양요\n(C) 기해박해\n(D) 신미양요\n(E) 신유박해\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n흥선 대원군은 천주교가 유교적 전통에 맞지 않는다고 하여 프랑스 신부들을 처형하였는데 이 사건을 무엇이라고 하는가?\n\n### 선택지: \n(A) 병인박해\n(B) 병인양요\n(C) 기해박해\n(D) 신미양요\n(E) 신유박해\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.89453125", "False"]], [["-6.11328125", "False"]], [["-7.58984375", "False"]], [["-6.8203125", "False"]], [["-8.3671875", "False"]]], "filtered_resps": [["-5.89453125", "False"], ["-6.11328125", "False"], ["-7.58984375", "False"], ["-6.8203125", "False"], ["-8.3671875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "4b770654b5a23e70729af158f1d3a884a011f6db0f7b6c0b2429bb5be6d8aa95", "prompt_hash": "fd128c937d158af94e55123ad1e1367eb11f5a777da72ce09fec4a6b36048605", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 30, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n흥선 대원군은 우리 나라 여러 곳에 서양과의 교섭을 금지하는 글을 적은 비석을 세웠는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 순수비\n(B) 척화비\n(C) 탕평비\n(D) 충주 고구려비\n(E) 교섭금지비\n\n### 정답:", "options": "['순수비', '척화비', '탕평비', '충주 고구려비', '교섭금지비']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n흥선 대원군은 우리 나라 여러 곳에 서양과의 교섭을 금지하는 글을 적은 비석을 세웠는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 순수비\n(B) 척화비\n(C) 탕평비\n(D) 충주 고구려비\n(E) 교섭금지비\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n흥선 대원군은 우리 나라 여러 곳에 서양과의 교섭을 금지하는 글을 적은 비석을 세웠는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 순수비\n(B) 척화비\n(C) 탕평비\n(D) 충주 고구려비\n(E) 교섭금지비\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n흥선 대원군은 우리 나라 여러 곳에 서양과의 교섭을 금지하는 글을 적은 비석을 세웠는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 순수비\n(B) 척화비\n(C) 탕평비\n(D) 충주 고구려비\n(E) 교섭금지비\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n흥선 대원군은 우리 나라 여러 곳에 서양과의 교섭을 금지하는 글을 적은 비석을 세웠는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 순수비\n(B) 척화비\n(C) 탕평비\n(D) 충주 고구려비\n(E) 교섭금지비\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n흥선 대원군은 우리 나라 여러 곳에 서양과의 교섭을 금지하는 글을 적은 비석을 세웠는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 순수비\n(B) 척화비\n(C) 탕평비\n(D) 충주 고구려비\n(E) 교섭금지비\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.61328125", "False"]], [["-6.41015625", "False"]], [["-8.1171875", "False"]], [["-7.72265625", "False"]], [["-8.5703125", "False"]]], "filtered_resps": [["-6.61328125", "False"], ["-6.41015625", "False"], ["-8.1171875", "False"], ["-7.72265625", "False"], ["-8.5703125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "5bf95875da28e74f97724dd3949b68989ec85c2780dcce227fe9a7da77e48f56", "prompt_hash": "b02caa094e26f0939fdd2b691feb7df3c83a43f3fe608e5b776657d8cf38ac93", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 31, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1871년 미국 상선 제너럴 셔먼호 사건을 이유로 함대를 동원하여 강화도를 공격해 온 사건은 무엇인가?\n\n### 선택지: \n(A) 신미양요\n(B) 정미호란\n(C) 병인양요\n(D) 6.25 전쟁\n(E) 임진왜란\n\n### 정답:", "options": "['신미양요', '정미호란', '병인양요', '6.25 전쟁', '임진왜란']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1871년 미국 상선 제너럴 셔먼호 사건을 이유로 함대를 동원하여 강화도를 공격해 온 사건은 무엇인가?\n\n### 선택지: \n(A) 신미양요\n(B) 정미호란\n(C) 병인양요\n(D) 6.25 전쟁\n(E) 임진왜란\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1871년 미국 상선 제너럴 셔먼호 사건을 이유로 함대를 동원하여 강화도를 공격해 온 사건은 무엇인가?\n\n### 선택지: \n(A) 신미양요\n(B) 정미호란\n(C) 병인양요\n(D) 6.25 전쟁\n(E) 임진왜란\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1871년 미국 상선 제너럴 셔먼호 사건을 이유로 함대를 동원하여 강화도를 공격해 온 사건은 무엇인가?\n\n### 선택지: \n(A) 신미양요\n(B) 정미호란\n(C) 병인양요\n(D) 6.25 전쟁\n(E) 임진왜란\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1871년 미국 상선 제너럴 셔먼호 사건을 이유로 함대를 동원하여 강화도를 공격해 온 사건은 무엇인가?\n\n### 선택지: \n(A) 신미양요\n(B) 정미호란\n(C) 병인양요\n(D) 6.25 전쟁\n(E) 임진왜란\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1871년 미국 상선 제너럴 셔먼호 사건을 이유로 함대를 동원하여 강화도를 공격해 온 사건은 무엇인가?\n\n### 선택지: \n(A) 신미양요\n(B) 정미호란\n(C) 병인양요\n(D) 6.25 전쟁\n(E) 임진왜란\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-4.765625", "False"]], [["-5.21484375", "False"]], [["-6.2421875", "False"]], [["-6.38671875", "False"]], [["-7.375", "False"]]], "filtered_resps": [["-4.765625", "False"], ["-5.21484375", "False"], ["-6.2421875", "False"], ["-6.38671875", "False"], ["-7.375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "abe950565d1afbc3c7cb479e01aaddd10e5187f7bb79351db45f0393c5f831d2", "prompt_hash": "7ee2a6beadb44e9be87f9a585438720f4538988dd5bde24a7e24b0ae78c19f34", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 32, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1876년 강화도에서 일본의 강압에 의해 맺어진 조약은?\n\n### 선택지: \n(A) 조독 수호 통상조약\n(B) 한일합병조약\n(C) 을사조약\n(D) 조미수호통상조약\n(E) 강화도 조약\n\n### 정답:", "options": "['조독 수호 통상조약', '한일합병조약', '을사조약', '조미수호통상조약', '강화도 조약']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1876년 강화도에서 일본의 강압에 의해 맺어진 조약은?\n\n### 선택지: \n(A) 조독 수호 통상조약\n(B) 한일합병조약\n(C) 을사조약\n(D) 조미수호통상조약\n(E) 강화도 조약\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1876년 강화도에서 일본의 강압에 의해 맺어진 조약은?\n\n### 선택지: \n(A) 조독 수호 통상조약\n(B) 한일합병조약\n(C) 을사조약\n(D) 조미수호통상조약\n(E) 강화도 조약\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1876년 강화도에서 일본의 강압에 의해 맺어진 조약은?\n\n### 선택지: \n(A) 조독 수호 통상조약\n(B) 한일합병조약\n(C) 을사조약\n(D) 조미수호통상조약\n(E) 강화도 조약\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1876년 강화도에서 일본의 강압에 의해 맺어진 조약은?\n\n### 선택지: \n(A) 조독 수호 통상조약\n(B) 한일합병조약\n(C) 을사조약\n(D) 조미수호통상조약\n(E) 강화도 조약\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1876년 강화도에서 일본의 강압에 의해 맺어진 조약은?\n\n### 선택지: \n(A) 조독 수호 통상조약\n(B) 한일합병조약\n(C) 을사조약\n(D) 조미수호통상조약\n(E) 강화도 조약\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.12109375", "False"]], [["-6.0234375", "False"]], [["-7.359375", "False"]], [["-6.80078125", "False"]], [["-7.8671875", "False"]]], "filtered_resps": [["-6.12109375", "False"], ["-6.0234375", "False"], ["-7.359375", "False"], ["-6.80078125", "False"], ["-7.8671875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "8ee57f2f0b836e38798ff2aff3ba0127b24c3bc1e6ca547d3604674990c9728a", "prompt_hash": "9b5142eac71d493ef3747f6880e19e8f34afa3dc7a78d7a193d125a106d0d4d2", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 33, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n외세의 침입으로부터 나라를 지키기 위해 근대적인 무기를 가지고 새로운 훈련을 받는 군대를 조직하였는데 이 군대의 이름은?\n\n### 선택지: \n(A) 친위대\n(B) 신기군\n(C) 별기군\n(D) 금군\n(E) 별동대\n\n### 정답:", "options": "['친위대', '신기군', '별기군', '금군', '별동대']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n외세의 침입으로부터 나라를 지키기 위해 근대적인 무기를 가지고 새로운 훈련을 받는 군대를 조직하였는데 이 군대의 이름은?\n\n### 선택지: \n(A) 친위대\n(B) 신기군\n(C) 별기군\n(D) 금군\n(E) 별동대\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n외세의 침입으로부터 나라를 지키기 위해 근대적인 무기를 가지고 새로운 훈련을 받는 군대를 조직하였는데 이 군대의 이름은?\n\n### 선택지: \n(A) 친위대\n(B) 신기군\n(C) 별기군\n(D) 금군\n(E) 별동대\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n외세의 침입으로부터 나라를 지키기 위해 근대적인 무기를 가지고 새로운 훈련을 받는 군대를 조직하였는데 이 군대의 이름은?\n\n### 선택지: \n(A) 친위대\n(B) 신기군\n(C) 별기군\n(D) 금군\n(E) 별동대\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n외세의 침입으로부터 나라를 지키기 위해 근대적인 무기를 가지고 새로운 훈련을 받는 군대를 조직하였는데 이 군대의 이름은?\n\n### 선택지: \n(A) 친위대\n(B) 신기군\n(C) 별기군\n(D) 금군\n(E) 별동대\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n외세의 침입으로부터 나라를 지키기 위해 근대적인 무기를 가지고 새로운 훈련을 받는 군대를 조직하였는데 이 군대의 이름은?\n\n### 선택지: \n(A) 친위대\n(B) 신기군\n(C) 별기군\n(D) 금군\n(E) 별동대\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.40234375", "False"]], [["-5.6640625", "False"]], [["-6.671875", "False"]], [["-6.3515625", "False"]], [["-7.8828125", "False"]]], "filtered_resps": [["-5.40234375", "False"], ["-5.6640625", "False"], ["-6.671875", "False"], ["-6.3515625", "False"], ["-7.8828125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "7a24686cbd52989fc4b9d7c2cae8a15bd8fb5a4ebba3750b524ebe8de4d3ece3", "prompt_hash": "5477f6785f94ffcc7166c6dacaf3e7d5c690376456fd945934c31586bfb8f3ff", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 34, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대우를 잘 받지 못하는 구식 군인들의 불만이 폭발하여 일어난 사건은 무엇인가?\n\n### 선택지: \n(A) 임오군란\n(B) 무오군란\n(C) 정묘군란\n(D) 병인군란\n(E) 감오군란\n\n### 정답:", "options": "['임오군란', '무오군란', '정묘군란', '병인군란', '감오군란']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대우를 잘 받지 못하는 구식 군인들의 불만이 폭발하여 일어난 사건은 무엇인가?\n\n### 선택지: \n(A) 임오군란\n(B) 무오군란\n(C) 정묘군란\n(D) 병인군란\n(E) 감오군란\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대우를 잘 받지 못하는 구식 군인들의 불만이 폭발하여 일어난 사건은 무엇인가?\n\n### 선택지: \n(A) 임오군란\n(B) 무오군란\n(C) 정묘군란\n(D) 병인군란\n(E) 감오군란\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대우를 잘 받지 못하는 구식 군인들의 불만이 폭발하여 일어난 사건은 무엇인가?\n\n### 선택지: \n(A) 임오군란\n(B) 무오군란\n(C) 정묘군란\n(D) 병인군란\n(E) 감오군란\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대우를 잘 받지 못하는 구식 군인들의 불만이 폭발하여 일어난 사건은 무엇인가?\n\n### 선택지: \n(A) 임오군란\n(B) 무오군란\n(C) 정묘군란\n(D) 병인군란\n(E) 감오군란\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대우를 잘 받지 못하는 구식 군인들의 불만이 폭발하여 일어난 사건은 무엇인가?\n\n### 선택지: \n(A) 임오군란\n(B) 무오군란\n(C) 정묘군란\n(D) 병인군란\n(E) 감오군란\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.8046875", "False"]], [["-6.01953125", "False"]], [["-7.796875", "False"]], [["-7.21875", "False"]], [["-9.09375", "False"]]], "filtered_resps": [["-5.8046875", "False"], ["-6.01953125", "False"], ["-7.796875", "False"], ["-7.21875", "False"], ["-9.09375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "8620e5faccb26e883577357eebee5ce6a7b23f38879272abc466c8ae09b48993", "prompt_hash": "0f914382efeaab2d852d5dfe07bc2c0602964670f65c604914afe7c8ce3cd4c3", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 35, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1884년 김옥균, 박영효, 홍영식, 서재필 등이 우정국 개설 축하연에서 일으킨 정변은 무엇인가?\n\n### 선택지: \n(A) 양무운동\n(B) 을사조약\n(C) 갑신정변\n(D) 을미사변\n(E) 임오군란\n\n### 정답:", "options": "['양무운동', '을사조약', '갑신정변', '을미사변', '임오군란']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1884년 김옥균, 박영효, 홍영식, 서재필 등이 우정국 개설 축하연에서 일으킨 정변은 무엇인가?\n\n### 선택지: \n(A) 양무운동\n(B) 을사조약\n(C) 갑신정변\n(D) 을미사변\n(E) 임오군란\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1884년 김옥균, 박영효, 홍영식, 서재필 등이 우정국 개설 축하연에서 일으킨 정변은 무엇인가?\n\n### 선택지: \n(A) 양무운동\n(B) 을사조약\n(C) 갑신정변\n(D) 을미사변\n(E) 임오군란\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1884년 김옥균, 박영효, 홍영식, 서재필 등이 우정국 개설 축하연에서 일으킨 정변은 무엇인가?\n\n### 선택지: \n(A) 양무운동\n(B) 을사조약\n(C) 갑신정변\n(D) 을미사변\n(E) 임오군란\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1884년 김옥균, 박영효, 홍영식, 서재필 등이 우정국 개설 축하연에서 일으킨 정변은 무엇인가?\n\n### 선택지: \n(A) 양무운동\n(B) 을사조약\n(C) 갑신정변\n(D) 을미사변\n(E) 임오군란\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1884년 김옥균, 박영효, 홍영식, 서재필 등이 우정국 개설 축하연에서 일으킨 정변은 무엇인가?\n\n### 선택지: \n(A) 양무운동\n(B) 을사조약\n(C) 갑신정변\n(D) 을미사변\n(E) 임오군란\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.51171875", "False"]], [["-5.7421875", "False"]], [["-7.1953125", "False"]], [["-6.375", "False"]], [["-7.3828125", "False"]]], "filtered_resps": [["-5.51171875", "False"], ["-5.7421875", "False"], ["-7.1953125", "False"], ["-6.375", "False"], ["-7.3828125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "c9140e3670061d51028133cdf53faf5ce062eb4a7038113cc911e3556d740f30", "prompt_hash": "fc9e74d8ac76b3ba6499ffad838d2cbc69830a31242698f6a8cb0bcb0a751058", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 36, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n전라도 고부 땅에서 동학 교도와 농민들이 일으킨 운동은?\n\n### 선택지: \n(A) 위정척사운동\n(B) 총파업\n(C) 동학농민운동\n(D) 일제불매운동\n(E) 독립운동\n\n### 정답:", "options": "['위정척사운동', '총파업', '동학농민운동', '일제불매운동', '독립운동']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n전라도 고부 땅에서 동학 교도와 농민들이 일으킨 운동은?\n\n### 선택지: \n(A) 위정척사운동\n(B) 총파업\n(C) 동학농민운동\n(D) 일제불매운동\n(E) 독립운동\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n전라도 고부 땅에서 동학 교도와 농민들이 일으킨 운동은?\n\n### 선택지: \n(A) 위정척사운동\n(B) 총파업\n(C) 동학농민운동\n(D) 일제불매운동\n(E) 독립운동\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n전라도 고부 땅에서 동학 교도와 농민들이 일으킨 운동은?\n\n### 선택지: \n(A) 위정척사운동\n(B) 총파업\n(C) 동학농민운동\n(D) 일제불매운동\n(E) 독립운동\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n전라도 고부 땅에서 동학 교도와 농민들이 일으킨 운동은?\n\n### 선택지: \n(A) 위정척사운동\n(B) 총파업\n(C) 동학농민운동\n(D) 일제불매운동\n(E) 독립운동\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n전라도 고부 땅에서 동학 교도와 농민들이 일으킨 운동은?\n\n### 선택지: \n(A) 위정척사운동\n(B) 총파업\n(C) 동학농민운동\n(D) 일제불매운동\n(E) 독립운동\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.875", "False"]], [["-6.265625", "False"]], [["-7.80078125", "False"]], [["-7.03125", "False"]], [["-8.5625", "False"]]], "filtered_resps": [["-5.875", "False"], ["-6.265625", "False"], ["-7.80078125", "False"], ["-7.03125", "False"], ["-8.5625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "d654f93abf5453ab621126141ac9976778adb12ceaaf3f636df635cde6dc334f", "prompt_hash": "8f55b1ec7441ab84dea79cbde266fabf0ed2186e83bc0b8ac1a6950ffe8f80c9", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 37, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n전체 4쪽 중 1쪽은 영어로 나머지는 한글로 쓰여진 민간인이 만든 최초의 신문은 무엇인가?\n\n### 선택지: \n(A) 매일신보\n(B) 조선일보\n(C) 동아일보\n(D) 황성신문\n(E) 독립 신문\n\n### 정답:", "options": "['매일신보', '조선일보', '동아일보', '황성신문', '독립 신문']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n전체 4쪽 중 1쪽은 영어로 나머지는 한글로 쓰여진 민간인이 만든 최초의 신문은 무엇인가?\n\n### 선택지: \n(A) 매일신보\n(B) 조선일보\n(C) 동아일보\n(D) 황성신문\n(E) 독립 신문\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n전체 4쪽 중 1쪽은 영어로 나머지는 한글로 쓰여진 민간인이 만든 최초의 신문은 무엇인가?\n\n### 선택지: \n(A) 매일신보\n(B) 조선일보\n(C) 동아일보\n(D) 황성신문\n(E) 독립 신문\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n전체 4쪽 중 1쪽은 영어로 나머지는 한글로 쓰여진 민간인이 만든 최초의 신문은 무엇인가?\n\n### 선택지: \n(A) 매일신보\n(B) 조선일보\n(C) 동아일보\n(D) 황성신문\n(E) 독립 신문\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n전체 4쪽 중 1쪽은 영어로 나머지는 한글로 쓰여진 민간인이 만든 최초의 신문은 무엇인가?\n\n### 선택지: \n(A) 매일신보\n(B) 조선일보\n(C) 동아일보\n(D) 황성신문\n(E) 독립 신문\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n전체 4쪽 중 1쪽은 영어로 나머지는 한글로 쓰여진 민간인이 만든 최초의 신문은 무엇인가?\n\n### 선택지: \n(A) 매일신보\n(B) 조선일보\n(C) 동아일보\n(D) 황성신문\n(E) 독립 신문\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.73828125", "False"]], [["-6.0234375", "False"]], [["-7.57421875", "False"]], [["-6.94140625", "False"]], [["-8.40625", "False"]]], "filtered_resps": [["-5.73828125", "False"], ["-6.0234375", "False"], ["-7.57421875", "False"], ["-6.94140625", "False"], ["-8.40625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "58dc26bb25811d2fe6762ab9b9a357f8d7f746f690c973d23d3178acd464c58b", "prompt_hash": "eb78458009999e50642de93314a3d16e34d710d3817c4c36e93d745b75f64dba", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 38, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년 몰래 궁궐에 침입하여 명성황후를 시해하는 야만스런 행동을 한 국가는 어디인가?\n\n### 선택지: \n(A) 미국\n(B) 일본\n(C) 러시아\n(D) 영국\n(E) 청\n\n### 정답:", "options": "['미국', '일본', '러시아', '영국', '청']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년 몰래 궁궐에 침입하여 명성황후를 시해하는 야만스런 행동을 한 국가는 어디인가?\n\n### 선택지: \n(A) 미국\n(B) 일본\n(C) 러시아\n(D) 영국\n(E) 청\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년 몰래 궁궐에 침입하여 명성황후를 시해하는 야만스런 행동을 한 국가는 어디인가?\n\n### 선택지: \n(A) 미국\n(B) 일본\n(C) 러시아\n(D) 영국\n(E) 청\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년 몰래 궁궐에 침입하여 명성황후를 시해하는 야만스런 행동을 한 국가는 어디인가?\n\n### 선택지: \n(A) 미국\n(B) 일본\n(C) 러시아\n(D) 영국\n(E) 청\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년 몰래 궁궐에 침입하여 명성황후를 시해하는 야만스런 행동을 한 국가는 어디인가?\n\n### 선택지: \n(A) 미국\n(B) 일본\n(C) 러시아\n(D) 영국\n(E) 청\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년 몰래 궁궐에 침입하여 명성황후를 시해하는 야만스런 행동을 한 국가는 어디인가?\n\n### 선택지: \n(A) 미국\n(B) 일본\n(C) 러시아\n(D) 영국\n(E) 청\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.26171875", "False"]], [["-5.74609375", "False"]], [["-6.80078125", "False"]], [["-6.58984375", "False"]], [["-7.75", "False"]]], "filtered_resps": [["-5.26171875", "False"], ["-5.74609375", "False"], ["-6.80078125", "False"], ["-6.58984375", "False"], ["-7.75", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "2dc3b63c8b124a3bc0a9bd2ef83e7b43284c5b56f0d998d9d4f6f1472117c98b", "prompt_hash": "b19923825b1ee4fe8d4775bb07872376964b5ad87467970e78d87662b8589152", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 39, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n미국 선교사로 언어학자이며 사학자였고, 육영 공원의 교수로 초빙되었으며, 우리 나라의 주권 회복 운동에 크게 활약한 사람은?\n\n### 선택지: \n(A) 제임스\n(B) 쿤\n(C) 헐버트\n(D) 언더우드\n(E) 토마스\n\n### 정답:", "options": "['제임스', '쿤', '헐버트', '언더우드', '토마스']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n미국 선교사로 언어학자이며 사학자였고, 육영 공원의 교수로 초빙되었으며, 우리 나라의 주권 회복 운동에 크게 활약한 사람은?\n\n### 선택지: \n(A) 제임스\n(B) 쿤\n(C) 헐버트\n(D) 언더우드\n(E) 토마스\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n미국 선교사로 언어학자이며 사학자였고, 육영 공원의 교수로 초빙되었으며, 우리 나라의 주권 회복 운동에 크게 활약한 사람은?\n\n### 선택지: \n(A) 제임스\n(B) 쿤\n(C) 헐버트\n(D) 언더우드\n(E) 토마스\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n미국 선교사로 언어학자이며 사학자였고, 육영 공원의 교수로 초빙되었으며, 우리 나라의 주권 회복 운동에 크게 활약한 사람은?\n\n### 선택지: \n(A) 제임스\n(B) 쿤\n(C) 헐버트\n(D) 언더우드\n(E) 토마스\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n미국 선교사로 언어학자이며 사학자였고, 육영 공원의 교수로 초빙되었으며, 우리 나라의 주권 회복 운동에 크게 활약한 사람은?\n\n### 선택지: \n(A) 제임스\n(B) 쿤\n(C) 헐버트\n(D) 언더우드\n(E) 토마스\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n미국 선교사로 언어학자이며 사학자였고, 육영 공원의 교수로 초빙되었으며, 우리 나라의 주권 회복 운동에 크게 활약한 사람은?\n\n### 선택지: \n(A) 제임스\n(B) 쿤\n(C) 헐버트\n(D) 언더우드\n(E) 토마스\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.640625", "False"]], [["-5.203125", "False"]], [["-6.8828125", "False"]], [["-6.3828125", "False"]], [["-8.0859375", "False"]]], "filtered_resps": [["-5.640625", "False"], ["-5.203125", "False"], ["-6.8828125", "False"], ["-6.3828125", "False"], ["-8.0859375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "c3607415645d6127a67e006560e681034b3685456c926f5cffb6999f4cd41e3b", "prompt_hash": "c7dc62828360aa9dc17e97de4dbbbf0a626dcaf72558d22ffc2fbeb480b0b34a", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 40, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1895년 고종 황제가 교육의 중요성을 강조하면서 발표한 것은 무엇인가?\n\n### 선택지: \n(A) 교육입국조서\n(B) 을사조약\n(C) 교육헌장\n(D) 국민교육헌장\n(E) 교육조서\n\n### 정답:", "options": "['교육입국조서', '을사조약', '교육헌장', '국민교육헌장', '교육조서']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1895년 고종 황제가 교육의 중요성을 강조하면서 발표한 것은 무엇인가?\n\n### 선택지: \n(A) 교육입국조서\n(B) 을사조약\n(C) 교육헌장\n(D) 국민교육헌장\n(E) 교육조서\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1895년 고종 황제가 교육의 중요성을 강조하면서 발표한 것은 무엇인가?\n\n### 선택지: \n(A) 교육입국조서\n(B) 을사조약\n(C) 교육헌장\n(D) 국민교육헌장\n(E) 교육조서\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1895년 고종 황제가 교육의 중요성을 강조하면서 발표한 것은 무엇인가?\n\n### 선택지: \n(A) 교육입국조서\n(B) 을사조약\n(C) 교육헌장\n(D) 국민교육헌장\n(E) 교육조서\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1895년 고종 황제가 교육의 중요성을 강조하면서 발표한 것은 무엇인가?\n\n### 선택지: \n(A) 교육입국조서\n(B) 을사조약\n(C) 교육헌장\n(D) 국민교육헌장\n(E) 교육조서\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1895년 고종 황제가 교육의 중요성을 강조하면서 발표한 것은 무엇인가?\n\n### 선택지: \n(A) 교육입국조서\n(B) 을사조약\n(C) 교육헌장\n(D) 국민교육헌장\n(E) 교육조서\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.45703125", "False"]], [["-6.453125", "False"]], [["-7.890625", "False"]], [["-7.01171875", "False"]], [["-7.8359375", "False"]]], "filtered_resps": [["-6.45703125", "False"], ["-6.453125", "False"], ["-7.890625", "False"], ["-7.01171875", "False"], ["-7.8359375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "2b5f30d22e39a0a6716d6ef54cb346c3b7dd7d84907793422710445c557bbd31", "prompt_hash": "2e5b3aa1f3810b8c4bcd7df7a883076ec327dd0fe514aa35ee535d630d99db85", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 41, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 의식을 교육할 새로운 학교를 세우자는 원산 주민들의 자발적인 성금으로 설립한 최초의 근대적 사립 학교는 무엇인가?\n\n### 선택지: \n(A) 이화학당\n(B) 광혜원\n(C) 육영 공원\n(D) 원산 학사\n(E) 배재 학당\n\n### 정답:", "options": "['이화학당', '광혜원', '육영 공원', '원산 학사', '배재 학당']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 의식을 교육할 새로운 학교를 세우자는 원산 주민들의 자발적인 성금으로 설립한 최초의 근대적 사립 학교는 무엇인가?\n\n### 선택지: \n(A) 이화학당\n(B) 광혜원\n(C) 육영 공원\n(D) 원산 학사\n(E) 배재 학당\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 의식을 교육할 새로운 학교를 세우자는 원산 주민들의 자발적인 성금으로 설립한 최초의 근대적 사립 학교는 무엇인가?\n\n### 선택지: \n(A) 이화학당\n(B) 광혜원\n(C) 육영 공원\n(D) 원산 학사\n(E) 배재 학당\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 의식을 교육할 새로운 학교를 세우자는 원산 주민들의 자발적인 성금으로 설립한 최초의 근대적 사립 학교는 무엇인가?\n\n### 선택지: \n(A) 이화학당\n(B) 광혜원\n(C) 육영 공원\n(D) 원산 학사\n(E) 배재 학당\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 의식을 교육할 새로운 학교를 세우자는 원산 주민들의 자발적인 성금으로 설립한 최초의 근대적 사립 학교는 무엇인가?\n\n### 선택지: \n(A) 이화학당\n(B) 광혜원\n(C) 육영 공원\n(D) 원산 학사\n(E) 배재 학당\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 의식을 교육할 새로운 학교를 세우자는 원산 주민들의 자발적인 성금으로 설립한 최초의 근대적 사립 학교는 무엇인가?\n\n### 선택지: \n(A) 이화학당\n(B) 광혜원\n(C) 육영 공원\n(D) 원산 학사\n(E) 배재 학당\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.890625", "False"]], [["-5.59375", "False"]], [["-6.875", "False"]], [["-6.6953125", "False"]], [["-7.71875", "False"]]], "filtered_resps": [["-5.890625", "False"], ["-5.59375", "False"], ["-6.875", "False"], ["-6.6953125", "False"], ["-7.71875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "63e6670f91c75753f786b7ff6ccfea0705796f3a64a623b87bde9c4a3000e35d", "prompt_hash": "406261780c1cc4b7f523a8986ece8ede0bd69cc7cca4e4708569ceeb82a438f3", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 42, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n감사, 보은하는 생활과 근면, 저축하는 생활 등 우리 민족의 자립 정신을 일깨운 종교는 무엇인가?\n\n### 선택지: \n(A) 기독교\n(B) 원불교\n(C) 천주교\n(D) 유교\n(E) 동학\n\n### 정답:", "options": "['기독교', '원불교', '천주교', '유교', '동학']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n감사, 보은하는 생활과 근면, 저축하는 생활 등 우리 민족의 자립 정신을 일깨운 종교는 무엇인가?\n\n### 선택지: \n(A) 기독교\n(B) 원불교\n(C) 천주교\n(D) 유교\n(E) 동학\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n감사, 보은하는 생활과 근면, 저축하는 생활 등 우리 민족의 자립 정신을 일깨운 종교는 무엇인가?\n\n### 선택지: \n(A) 기독교\n(B) 원불교\n(C) 천주교\n(D) 유교\n(E) 동학\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n감사, 보은하는 생활과 근면, 저축하는 생활 등 우리 민족의 자립 정신을 일깨운 종교는 무엇인가?\n\n### 선택지: \n(A) 기독교\n(B) 원불교\n(C) 천주교\n(D) 유교\n(E) 동학\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n감사, 보은하는 생활과 근면, 저축하는 생활 등 우리 민족의 자립 정신을 일깨운 종교는 무엇인가?\n\n### 선택지: \n(A) 기독교\n(B) 원불교\n(C) 천주교\n(D) 유교\n(E) 동학\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n감사, 보은하는 생활과 근면, 저축하는 생활 등 우리 민족의 자립 정신을 일깨운 종교는 무엇인가?\n\n### 선택지: \n(A) 기독교\n(B) 원불교\n(C) 천주교\n(D) 유교\n(E) 동학\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.30078125", "False"]], [["-6.046875", "False"]], [["-7.7265625", "False"]], [["-7.31640625", "False"]], [["-9.1484375", "False"]]], "filtered_resps": [["-6.30078125", "False"], ["-6.046875", "False"], ["-7.7265625", "False"], ["-7.31640625", "False"], ["-9.1484375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "a25c8b00fbcd3d21edd98cef9bfcf66a017cc531de1cbf880091bd86328b2a50", "prompt_hash": "2dbba06a964f8e7fdda395abd3bdf0dbe30506acff87e810ce6e22a5d241cc8a", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 43, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘사람이 곧 하늘이다.’라는 인간 중심 사상에 뿌리를 두고 국민들에게 애국심을 불어넣은 종교는 무엇인가?\n\n### 선택지: \n(A) 동학\n(B) 유교\n(C) 기독교\n(D) 천도교\n(E) 천주교\n\n### 정답:", "options": "['동학', '유교', '기독교', '천도교', '천주교']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘사람이 곧 하늘이다.’라는 인간 중심 사상에 뿌리를 두고 국민들에게 애국심을 불어넣은 종교는 무엇인가?\n\n### 선택지: \n(A) 동학\n(B) 유교\n(C) 기독교\n(D) 천도교\n(E) 천주교\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘사람이 곧 하늘이다.’라는 인간 중심 사상에 뿌리를 두고 국민들에게 애국심을 불어넣은 종교는 무엇인가?\n\n### 선택지: \n(A) 동학\n(B) 유교\n(C) 기독교\n(D) 천도교\n(E) 천주교\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘사람이 곧 하늘이다.’라는 인간 중심 사상에 뿌리를 두고 국민들에게 애국심을 불어넣은 종교는 무엇인가?\n\n### 선택지: \n(A) 동학\n(B) 유교\n(C) 기독교\n(D) 천도교\n(E) 천주교\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘사람이 곧 하늘이다.’라는 인간 중심 사상에 뿌리를 두고 국민들에게 애국심을 불어넣은 종교는 무엇인가?\n\n### 선택지: \n(A) 동학\n(B) 유교\n(C) 기독교\n(D) 천도교\n(E) 천주교\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘사람이 곧 하늘이다.’라는 인간 중심 사상에 뿌리를 두고 국민들에게 애국심을 불어넣은 종교는 무엇인가?\n\n### 선택지: \n(A) 동학\n(B) 유교\n(C) 기독교\n(D) 천도교\n(E) 천주교\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.21484375", "False"]], [["-7.0234375", "False"]], [["-8.5", "False"]], [["-7.7578125", "False"]], [["-9.6953125", "False"]]], "filtered_resps": [["-6.21484375", "False"], ["-7.0234375", "False"], ["-8.5", "False"], ["-7.7578125", "False"], ["-9.6953125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "61ddd3ddee5cd2c4641fedfac121261b6f12b3aed559b55d1afbd541f3e605b8", "prompt_hash": "72acf94c30406f4a7bf6582255456868e7b5b7e1db71a76bc1de5c1eaa1adcef", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 44, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나철이 단군 신앙을 바탕으로 창시한 민족 종교는 무엇인가?\n\n### 선택지: \n(A) 천도교\n(B) 대종교\n(C) 동학\n(D) 천주교\n(E) 기독교\n\n### 정답:", "options": "['천도교', '대종교', '동학', '천주교', '기독교']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나철이 단군 신앙을 바탕으로 창시한 민족 종교는 무엇인가?\n\n### 선택지: \n(A) 천도교\n(B) 대종교\n(C) 동학\n(D) 천주교\n(E) 기독교\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나철이 단군 신앙을 바탕으로 창시한 민족 종교는 무엇인가?\n\n### 선택지: \n(A) 천도교\n(B) 대종교\n(C) 동학\n(D) 천주교\n(E) 기독교\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나철이 단군 신앙을 바탕으로 창시한 민족 종교는 무엇인가?\n\n### 선택지: \n(A) 천도교\n(B) 대종교\n(C) 동학\n(D) 천주교\n(E) 기독교\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나철이 단군 신앙을 바탕으로 창시한 민족 종교는 무엇인가?\n\n### 선택지: \n(A) 천도교\n(B) 대종교\n(C) 동학\n(D) 천주교\n(E) 기독교\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나철이 단군 신앙을 바탕으로 창시한 민족 종교는 무엇인가?\n\n### 선택지: \n(A) 천도교\n(B) 대종교\n(C) 동학\n(D) 천주교\n(E) 기독교\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.296875", "False"]], [["-6.3046875", "False"]], [["-7.921875", "False"]], [["-7.62890625", "False"]], [["-9.46875", "False"]]], "filtered_resps": [["-6.296875", "False"], ["-6.3046875", "False"], ["-7.921875", "False"], ["-7.62890625", "False"], ["-9.46875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "ae19ef66e33eebb32cbd422656754615f5348d423de606ea269a08f3186d037a", "prompt_hash": "76de402d9fe154c6ed8ff012a7350c52a68494c84f8c6b1bb6b4ca3c51f59289", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 45, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n순 한글로 쓰여졌고, 서민 생활을 주제로 하는 소설은 무엇인가?\n\n### 선택지: \n(A) 시조\n(B) 국문학\n(C) 판소리\n(D) 과도기 소설\n(E) 신소설\n\n### 정답:", "options": "['시조', '국문학', '판소리', '과도기 소설', '신소설']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n순 한글로 쓰여졌고, 서민 생활을 주제로 하는 소설은 무엇인가?\n\n### 선택지: \n(A) 시조\n(B) 국문학\n(C) 판소리\n(D) 과도기 소설\n(E) 신소설\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n순 한글로 쓰여졌고, 서민 생활을 주제로 하는 소설은 무엇인가?\n\n### 선택지: \n(A) 시조\n(B) 국문학\n(C) 판소리\n(D) 과도기 소설\n(E) 신소설\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n순 한글로 쓰여졌고, 서민 생활을 주제로 하는 소설은 무엇인가?\n\n### 선택지: \n(A) 시조\n(B) 국문학\n(C) 판소리\n(D) 과도기 소설\n(E) 신소설\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n순 한글로 쓰여졌고, 서민 생활을 주제로 하는 소설은 무엇인가?\n\n### 선택지: \n(A) 시조\n(B) 국문학\n(C) 판소리\n(D) 과도기 소설\n(E) 신소설\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n순 한글로 쓰여졌고, 서민 생활을 주제로 하는 소설은 무엇인가?\n\n### 선택지: \n(A) 시조\n(B) 국문학\n(C) 판소리\n(D) 과도기 소설\n(E) 신소설\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.59375", "False"]], [["-6.21484375", "False"]], [["-8.125", "False"]], [["-8.3203125", "False"]], [["-9.171875", "False"]]], "filtered_resps": [["-6.59375", "False"], ["-6.21484375", "False"], ["-8.125", "False"], ["-8.3203125", "False"], ["-9.171875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "c066bdbd2aef34f4d51f2628137efc66bf8c74334733fa2845648f1ecc001893", "prompt_hash": "662661cdd6540d272ea0e2eee138c7e70f6ef7010fd895deff9e799442c4dc2d", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 46, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n한글 문법과 맞춤법의 과학적 연구에 몰두하여 ‘국어 문법’을 펴냈고, 조선어 학회를 만들 사람은 누구인가?\n\n### 선택지: \n(A) 윤동주\n(B) 주시경\n(C) 신채호\n(D) 세종대왕\n(E) 서재필\n\n### 정답:", "options": "['윤동주', '주시경', '신채호', '세종대왕', '서재필']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n한글 문법과 맞춤법의 과학적 연구에 몰두하여 ‘국어 문법’을 펴냈고, 조선어 학회를 만들 사람은 누구인가?\n\n### 선택지: \n(A) 윤동주\n(B) 주시경\n(C) 신채호\n(D) 세종대왕\n(E) 서재필\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n한글 문법과 맞춤법의 과학적 연구에 몰두하여 ‘국어 문법’을 펴냈고, 조선어 학회를 만들 사람은 누구인가?\n\n### 선택지: \n(A) 윤동주\n(B) 주시경\n(C) 신채호\n(D) 세종대왕\n(E) 서재필\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n한글 문법과 맞춤법의 과학적 연구에 몰두하여 ‘국어 문법’을 펴냈고, 조선어 학회를 만들 사람은 누구인가?\n\n### 선택지: \n(A) 윤동주\n(B) 주시경\n(C) 신채호\n(D) 세종대왕\n(E) 서재필\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n한글 문법과 맞춤법의 과학적 연구에 몰두하여 ‘국어 문법’을 펴냈고, 조선어 학회를 만들 사람은 누구인가?\n\n### 선택지: \n(A) 윤동주\n(B) 주시경\n(C) 신채호\n(D) 세종대왕\n(E) 서재필\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n한글 문법과 맞춤법의 과학적 연구에 몰두하여 ‘국어 문법’을 펴냈고, 조선어 학회를 만들 사람은 누구인가?\n\n### 선택지: \n(A) 윤동주\n(B) 주시경\n(C) 신채호\n(D) 세종대왕\n(E) 서재필\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.953125", "False"]], [["-6.21875", "False"]], [["-7.45703125", "False"]], [["-6.87109375", "False"]], [["-8.4453125", "False"]]], "filtered_resps": [["-5.953125", "False"], ["-6.21875", "False"], ["-7.45703125", "False"], ["-6.87109375", "False"], ["-8.4453125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "543cb4b6565e96b245f416a0a2fbbbbb473d0a9faded8f0f90afa66ed401a3be", "prompt_hash": "9ab7bd9f07d6b019138a201778bebb608c6ddaf6ab09f19edac3382df6f71246", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 47, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n집배원을 예전에는 무엇이라고 불렀는가?\n\n### 선택지: \n(A) 운반인\n(B) 배달원\n(C) 벙거지꾼\n(D) 물건옮김이\n(E) 전달원\n\n### 정답:", "options": "['운반인', '배달원', '벙거지꾼', '물건옮김이', '전달원']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n집배원을 예전에는 무엇이라고 불렀는가?\n\n### 선택지: \n(A) 운반인\n(B) 배달원\n(C) 벙거지꾼\n(D) 물건옮김이\n(E) 전달원\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n집배원을 예전에는 무엇이라고 불렀는가?\n\n### 선택지: \n(A) 운반인\n(B) 배달원\n(C) 벙거지꾼\n(D) 물건옮김이\n(E) 전달원\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n집배원을 예전에는 무엇이라고 불렀는가?\n\n### 선택지: \n(A) 운반인\n(B) 배달원\n(C) 벙거지꾼\n(D) 물건옮김이\n(E) 전달원\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n집배원을 예전에는 무엇이라고 불렀는가?\n\n### 선택지: \n(A) 운반인\n(B) 배달원\n(C) 벙거지꾼\n(D) 물건옮김이\n(E) 전달원\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n집배원을 예전에는 무엇이라고 불렀는가?\n\n### 선택지: \n(A) 운반인\n(B) 배달원\n(C) 벙거지꾼\n(D) 물건옮김이\n(E) 전달원\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.41796875", "False"]], [["-6.46875", "False"]], [["-8.046875", "False"]], [["-7.70703125", "False"]], [["-9.7265625", "False"]]], "filtered_resps": [["-6.41796875", "False"], ["-6.46875", "False"], ["-8.046875", "False"], ["-7.70703125", "False"], ["-9.7265625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "89075a1caa830c00424189a48f6f27d1d4e7c87c68a2165edf1815ab020aecc8", "prompt_hash": "e2f072b62a2ac81048bfa5893b4003cee3ccfb218550e835e5f5e82694b64db0", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 48, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1884년에 설치되어 근대적인 우편 사무를 담당한 곳은?\n\n### 선택지: \n(A) 조선총독부\n(B) 우정국\n(C) 광혜원\n(D) 우편국\n(E) 우체국\n\n### 정답:", "options": "['조선총독부', '우정국', '광혜원', '우편국', '우체국']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1884년에 설치되어 근대적인 우편 사무를 담당한 곳은?\n\n### 선택지: \n(A) 조선총독부\n(B) 우정국\n(C) 광혜원\n(D) 우편국\n(E) 우체국\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1884년에 설치되어 근대적인 우편 사무를 담당한 곳은?\n\n### 선택지: \n(A) 조선총독부\n(B) 우정국\n(C) 광혜원\n(D) 우편국\n(E) 우체국\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1884년에 설치되어 근대적인 우편 사무를 담당한 곳은?\n\n### 선택지: \n(A) 조선총독부\n(B) 우정국\n(C) 광혜원\n(D) 우편국\n(E) 우체국\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1884년에 설치되어 근대적인 우편 사무를 담당한 곳은?\n\n### 선택지: \n(A) 조선총독부\n(B) 우정국\n(C) 광혜원\n(D) 우편국\n(E) 우체국\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1884년에 설치되어 근대적인 우편 사무를 담당한 곳은?\n\n### 선택지: \n(A) 조선총독부\n(B) 우정국\n(C) 광혜원\n(D) 우편국\n(E) 우체국\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-4.79296875", "False"]], [["-5.05078125", "False"]], [["-6.1953125", "False"]], [["-5.828125", "False"]], [["-7.375", "False"]]], "filtered_resps": [["-4.79296875", "False"], ["-5.05078125", "False"], ["-6.1953125", "False"], ["-5.828125", "False"], ["-7.375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "2418970d0ef8c940ed61c3fe01e22c17ab5396d5b9ffc683933c9deb1346e847", "prompt_hash": "acc9a90e88c9e40cc11ad8b2f6973b9f6cca54a025eafea51a5675d04dc4fdc9", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 49, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n지석영의 노력으로 실시되어 보급된 천연두를 치료하는 의술은?\n\n### 선택지: \n(A) 우두법\n(B) 종두법\n(C) 백신\n(D) 코로나 19 백신\n(E) MMR 백신\n\n### 정답:", "options": "['우두법', '종두법', '백신', '코로나 19 백신', 'MMR 백신']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n지석영의 노력으로 실시되어 보급된 천연두를 치료하는 의술은?\n\n### 선택지: \n(A) 우두법\n(B) 종두법\n(C) 백신\n(D) 코로나 19 백신\n(E) MMR 백신\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n지석영의 노력으로 실시되어 보급된 천연두를 치료하는 의술은?\n\n### 선택지: \n(A) 우두법\n(B) 종두법\n(C) 백신\n(D) 코로나 19 백신\n(E) MMR 백신\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n지석영의 노력으로 실시되어 보급된 천연두를 치료하는 의술은?\n\n### 선택지: \n(A) 우두법\n(B) 종두법\n(C) 백신\n(D) 코로나 19 백신\n(E) MMR 백신\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n지석영의 노력으로 실시되어 보급된 천연두를 치료하는 의술은?\n\n### 선택지: \n(A) 우두법\n(B) 종두법\n(C) 백신\n(D) 코로나 19 백신\n(E) MMR 백신\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n지석영의 노력으로 실시되어 보급된 천연두를 치료하는 의술은?\n\n### 선택지: \n(A) 우두법\n(B) 종두법\n(C) 백신\n(D) 코로나 19 백신\n(E) MMR 백신\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.5546875", "False"]], [["-6.55859375", "False"]], [["-7.73828125", "False"]], [["-7.27734375", "False"]], [["-9.1484375", "False"]]], "filtered_resps": [["-6.5546875", "False"], ["-6.55859375", "False"], ["-7.73828125", "False"], ["-7.27734375", "False"], ["-9.1484375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "f62fe6cc462de530d860ced9f6beb450902f8c1165782b628afb097f396dc6a3", "prompt_hash": "e98dc301c44c3eb560eaed5c00a4f79e59827d753cf36de4b3b5173e20fec3b5", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 50, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년에 발행한 우리 나라 최초의 우두 총서로 지석영이 쓴 책은 무엇인가?\n\n### 선택지: \n(A) 자전석요\n(B) 동의보감\n(C) 우두 신서\n(D) 마과회통\n(E) 종두신서\n\n### 정답:", "options": "['자전석요', '동의보감', '우두 신서', '마과회통', '종두신서']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년에 발행한 우리 나라 최초의 우두 총서로 지석영이 쓴 책은 무엇인가?\n\n### 선택지: \n(A) 자전석요\n(B) 동의보감\n(C) 우두 신서\n(D) 마과회통\n(E) 종두신서\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년에 발행한 우리 나라 최초의 우두 총서로 지석영이 쓴 책은 무엇인가?\n\n### 선택지: \n(A) 자전석요\n(B) 동의보감\n(C) 우두 신서\n(D) 마과회통\n(E) 종두신서\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년에 발행한 우리 나라 최초의 우두 총서로 지석영이 쓴 책은 무엇인가?\n\n### 선택지: \n(A) 자전석요\n(B) 동의보감\n(C) 우두 신서\n(D) 마과회통\n(E) 종두신서\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년에 발행한 우리 나라 최초의 우두 총서로 지석영이 쓴 책은 무엇인가?\n\n### 선택지: \n(A) 자전석요\n(B) 동의보감\n(C) 우두 신서\n(D) 마과회통\n(E) 종두신서\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년에 발행한 우리 나라 최초의 우두 총서로 지석영이 쓴 책은 무엇인가?\n\n### 선택지: \n(A) 자전석요\n(B) 동의보감\n(C) 우두 신서\n(D) 마과회통\n(E) 종두신서\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.91015625", "False"]], [["-6.046875", "False"]], [["-7.2734375", "False"]], [["-6.625", "False"]], [["-8.0", "False"]]], "filtered_resps": [["-5.91015625", "False"], ["-6.046875", "False"], ["-7.2734375", "False"], ["-6.625", "False"], ["-8.0", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "02a0194b54bf0eb571f4c70c6b261206f0e943c2d323ad2ee664aa2f50e5fe14", "prompt_hash": "7e8684b0866070854a445b5a9579123d8693aab747e8f95e2f28cf591fb9b524", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 51, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 근대식 의료 기관은 무엇인가?\n\n### 선택지: \n(A) 활인서\n(B) 세브란스\n(C) 보구녀관\n(D) 혜민국\n(E) 광혜원\n\n### 정답:", "options": "['활인서', '세브란스', '보구녀관', '혜민국', '광혜원']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 근대식 의료 기관은 무엇인가?\n\n### 선택지: \n(A) 활인서\n(B) 세브란스\n(C) 보구녀관\n(D) 혜민국\n(E) 광혜원\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 근대식 의료 기관은 무엇인가?\n\n### 선택지: \n(A) 활인서\n(B) 세브란스\n(C) 보구녀관\n(D) 혜민국\n(E) 광혜원\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 근대식 의료 기관은 무엇인가?\n\n### 선택지: \n(A) 활인서\n(B) 세브란스\n(C) 보구녀관\n(D) 혜민국\n(E) 광혜원\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 근대식 의료 기관은 무엇인가?\n\n### 선택지: \n(A) 활인서\n(B) 세브란스\n(C) 보구녀관\n(D) 혜민국\n(E) 광혜원\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 근대식 의료 기관은 무엇인가?\n\n### 선택지: \n(A) 활인서\n(B) 세브란스\n(C) 보구녀관\n(D) 혜민국\n(E) 광혜원\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.37109375", "False"]], [["-6.3359375", "False"]], [["-7.94921875", "False"]], [["-7.390625", "False"]], [["-9.078125", "False"]]], "filtered_resps": [["-6.37109375", "False"], ["-6.3359375", "False"], ["-7.94921875", "False"], ["-7.390625", "False"], ["-9.078125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "cfb594d64119dd7fad0aea91ea9e1750905e405a7955387b32a19cfbb8ce579c", "prompt_hash": "9c3a0824803dbce9d6132b57c69d19acb23b8c594feaae9d711e56f2ea05d403", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 52, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라에서 최초로 만들어진 철교는 무엇인가?\n\n### 선택지: \n(A) 한강 철교\n(B) 동작대교\n(C) 성수대교\n(D) 반포대교\n(E) 마포대교\n\n### 정답:", "options": "['한강 철교', '동작대교', '성수대교', '반포대교', '마포대교']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라에서 최초로 만들어진 철교는 무엇인가?\n\n### 선택지: \n(A) 한강 철교\n(B) 동작대교\n(C) 성수대교\n(D) 반포대교\n(E) 마포대교\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라에서 최초로 만들어진 철교는 무엇인가?\n\n### 선택지: \n(A) 한강 철교\n(B) 동작대교\n(C) 성수대교\n(D) 반포대교\n(E) 마포대교\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라에서 최초로 만들어진 철교는 무엇인가?\n\n### 선택지: \n(A) 한강 철교\n(B) 동작대교\n(C) 성수대교\n(D) 반포대교\n(E) 마포대교\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라에서 최초로 만들어진 철교는 무엇인가?\n\n### 선택지: \n(A) 한강 철교\n(B) 동작대교\n(C) 성수대교\n(D) 반포대교\n(E) 마포대교\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라에서 최초로 만들어진 철교는 무엇인가?\n\n### 선택지: \n(A) 한강 철교\n(B) 동작대교\n(C) 성수대교\n(D) 반포대교\n(E) 마포대교\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.0390625", "False"]], [["-5.74609375", "False"]], [["-7.41796875", "False"]], [["-7.046875", "False"]], [["-8.890625", "False"]]], "filtered_resps": [["-6.0390625", "False"], ["-5.74609375", "False"], ["-7.41796875", "False"], ["-7.046875", "False"], ["-8.890625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "a5e3776e9232519a553db3b6c1a97d8912efb57ec21623c10f70ced9d8de381f", "prompt_hash": "bda7af5570cf264e49066ba1c633bb313719aac3b342b1e33071cacead48c38a", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 53, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나라를 지키기 위해 무기를 들고 일본군과 맞서 싸운 농민과 평민들을 무엇이라고 하는가?\n\n### 선택지: \n(A) 의용군\n(B) 관병\n(C) 빨치산\n(D) 평농군\n(E) 의병\n\n### 정답:", "options": "['의용군', '관병', '빨치산', '평농군', '의병']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나라를 지키기 위해 무기를 들고 일본군과 맞서 싸운 농민과 평민들을 무엇이라고 하는가?\n\n### 선택지: \n(A) 의용군\n(B) 관병\n(C) 빨치산\n(D) 평농군\n(E) 의병\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나라를 지키기 위해 무기를 들고 일본군과 맞서 싸운 농민과 평민들을 무엇이라고 하는가?\n\n### 선택지: \n(A) 의용군\n(B) 관병\n(C) 빨치산\n(D) 평농군\n(E) 의병\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나라를 지키기 위해 무기를 들고 일본군과 맞서 싸운 농민과 평민들을 무엇이라고 하는가?\n\n### 선택지: \n(A) 의용군\n(B) 관병\n(C) 빨치산\n(D) 평농군\n(E) 의병\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나라를 지키기 위해 무기를 들고 일본군과 맞서 싸운 농민과 평민들을 무엇이라고 하는가?\n\n### 선택지: \n(A) 의용군\n(B) 관병\n(C) 빨치산\n(D) 평농군\n(E) 의병\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나라를 지키기 위해 무기를 들고 일본군과 맞서 싸운 농민과 평민들을 무엇이라고 하는가?\n\n### 선택지: \n(A) 의용군\n(B) 관병\n(C) 빨치산\n(D) 평농군\n(E) 의병\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.37890625", "False"]], [["-5.6640625", "False"]], [["-7.421875", "False"]], [["-6.484375", "False"]], [["-8.109375", "False"]]], "filtered_resps": [["-5.37890625", "False"], ["-5.6640625", "False"], ["-7.421875", "False"], ["-6.484375", "False"], ["-8.109375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "604023c8db38f85156cb6706620954b6fa86206d7cef97caec85cfcd85c5201e", "prompt_hash": "ca3421b238adecbb9327290673c89bff4bef44b209ebb0f297538956f1112bbb", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 54, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리가 일본의 보호를 받아야 되며, 일본의 허락없이 다른 나라와 외교 관계를 맺을 수 없게 한 조약은 무엇인가?\n\n### 선택지: \n(A) 병오조약\n(B) 을사조약\n(C) 한일합병조약\n(D) 정미조약\n(E) 제물포조약\n\n### 정답:", "options": "['병오조약', '을사조약', '한일합병조약', '정미조약', '제물포조약']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리가 일본의 보호를 받아야 되며, 일본의 허락없이 다른 나라와 외교 관계를 맺을 수 없게 한 조약은 무엇인가?\n\n### 선택지: \n(A) 병오조약\n(B) 을사조약\n(C) 한일합병조약\n(D) 정미조약\n(E) 제물포조약\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리가 일본의 보호를 받아야 되며, 일본의 허락없이 다른 나라와 외교 관계를 맺을 수 없게 한 조약은 무엇인가?\n\n### 선택지: \n(A) 병오조약\n(B) 을사조약\n(C) 한일합병조약\n(D) 정미조약\n(E) 제물포조약\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리가 일본의 보호를 받아야 되며, 일본의 허락없이 다른 나라와 외교 관계를 맺을 수 없게 한 조약은 무엇인가?\n\n### 선택지: \n(A) 병오조약\n(B) 을사조약\n(C) 한일합병조약\n(D) 정미조약\n(E) 제물포조약\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리가 일본의 보호를 받아야 되며, 일본의 허락없이 다른 나라와 외교 관계를 맺을 수 없게 한 조약은 무엇인가?\n\n### 선택지: \n(A) 병오조약\n(B) 을사조약\n(C) 한일합병조약\n(D) 정미조약\n(E) 제물포조약\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리가 일본의 보호를 받아야 되며, 일본의 허락없이 다른 나라와 외교 관계를 맺을 수 없게 한 조약은 무엇인가?\n\n### 선택지: \n(A) 병오조약\n(B) 을사조약\n(C) 한일합병조약\n(D) 정미조약\n(E) 제물포조약\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.8671875", "False"]], [["-5.71484375", "False"]], [["-7.203125", "False"]], [["-6.4765625", "False"]], [["-7.91796875", "False"]]], "filtered_resps": [["-5.8671875", "False"], ["-5.71484375", "False"], ["-7.203125", "False"], ["-6.4765625", "False"], ["-7.91796875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "2b8eabf235ee01b97cdfa7f5aac2b2ecbdd8947aae36cfc8ba2be6eff84d0c37", "prompt_hash": "218fef5302a5ce4c9195506a9f794432af39e48ce2ee9cfad3d8e271c63d268b", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 55, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n군인으로서 나라를 지키지 못한 것을 부끄럽게 여겨 스스로 목숨을 끊은 우리 나라 군대의 대대장은 누구인가?\n\n### 선택지: \n(A) 안중근\n(B) 윤봉길\n(C) 홍범도\n(D) 김구\n(E) 박승환\n\n### 정답:", "options": "['안중근', '윤봉길', '홍범도', '김구', '박승환']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n군인으로서 나라를 지키지 못한 것을 부끄럽게 여겨 스스로 목숨을 끊은 우리 나라 군대의 대대장은 누구인가?\n\n### 선택지: \n(A) 안중근\n(B) 윤봉길\n(C) 홍범도\n(D) 김구\n(E) 박승환\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n군인으로서 나라를 지키지 못한 것을 부끄럽게 여겨 스스로 목숨을 끊은 우리 나라 군대의 대대장은 누구인가?\n\n### 선택지: \n(A) 안중근\n(B) 윤봉길\n(C) 홍범도\n(D) 김구\n(E) 박승환\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n군인으로서 나라를 지키지 못한 것을 부끄럽게 여겨 스스로 목숨을 끊은 우리 나라 군대의 대대장은 누구인가?\n\n### 선택지: \n(A) 안중근\n(B) 윤봉길\n(C) 홍범도\n(D) 김구\n(E) 박승환\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n군인으로서 나라를 지키지 못한 것을 부끄럽게 여겨 스스로 목숨을 끊은 우리 나라 군대의 대대장은 누구인가?\n\n### 선택지: \n(A) 안중근\n(B) 윤봉길\n(C) 홍범도\n(D) 김구\n(E) 박승환\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n군인으로서 나라를 지키지 못한 것을 부끄럽게 여겨 스스로 목숨을 끊은 우리 나라 군대의 대대장은 누구인가?\n\n### 선택지: \n(A) 안중근\n(B) 윤봉길\n(C) 홍범도\n(D) 김구\n(E) 박승환\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.546875", "False"]], [["-5.30078125", "False"]], [["-6.984375", "False"]], [["-6.40625", "False"]], [["-8.5859375", "False"]]], "filtered_resps": [["-5.546875", "False"], ["-5.30078125", "False"], ["-6.984375", "False"], ["-6.40625", "False"], ["-8.5859375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "68e386b0dff3c0813c5a0790613575f8bc2d1627c1b13c43f5cb6d6a99bb2fa2", "prompt_hash": "84d7fd04156fac4ec4904051fb8770e4c028f4b313f966cd9e1467441df84435", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 56, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년 우리 나라의 주권을 빼앗긴 역사적 사건은 무엇인가?\n\n### 선택지: \n(A) 이토 히로부미 암살\n(B) 정미조약\n(C) 제물포조약\n(D) 국권 침탈\n(E) 을사조약\n\n### 정답:", "options": "['이토 히로부미 암살', '정미조약', '제물포조약', '국권 침탈', '을사조약']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년 우리 나라의 주권을 빼앗긴 역사적 사건은 무엇인가?\n\n### 선택지: \n(A) 이토 히로부미 암살\n(B) 정미조약\n(C) 제물포조약\n(D) 국권 침탈\n(E) 을사조약\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년 우리 나라의 주권을 빼앗긴 역사적 사건은 무엇인가?\n\n### 선택지: \n(A) 이토 히로부미 암살\n(B) 정미조약\n(C) 제물포조약\n(D) 국권 침탈\n(E) 을사조약\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년 우리 나라의 주권을 빼앗긴 역사적 사건은 무엇인가?\n\n### 선택지: \n(A) 이토 히로부미 암살\n(B) 정미조약\n(C) 제물포조약\n(D) 국권 침탈\n(E) 을사조약\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년 우리 나라의 주권을 빼앗긴 역사적 사건은 무엇인가?\n\n### 선택지: \n(A) 이토 히로부미 암살\n(B) 정미조약\n(C) 제물포조약\n(D) 국권 침탈\n(E) 을사조약\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년 우리 나라의 주권을 빼앗긴 역사적 사건은 무엇인가?\n\n### 선택지: \n(A) 이토 히로부미 암살\n(B) 정미조약\n(C) 제물포조약\n(D) 국권 침탈\n(E) 을사조약\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.96875", "False"]], [["-5.74609375", "False"]], [["-7.71484375", "False"]], [["-6.66015625", "False"]], [["-7.734375", "False"]]], "filtered_resps": [["-5.96875", "False"], ["-5.74609375", "False"], ["-7.71484375", "False"], ["-6.66015625", "False"], ["-7.734375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "4ebb8016bd7d1ad2128cd1fa2adc196baa1fd2621a73e3e6360a9d3f6c74533a", "prompt_hash": "2ea442509e6d4b46d3147626e37968b5b7d86c5d489b660ef0febf7390a49e5f", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 57, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제에 의하여 우리 나라의 주권이 강탈되었던 때는 언제인가?\n\n### 선택지: \n(A) 1911년\n(B) 1908년\n(C) 1912년\n(D) 1910년\n(E) 1909년\n\n### 정답:", "options": "['1911년', '1908년', '1912년', '1910년', '1909년']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제에 의하여 우리 나라의 주권이 강탈되었던 때는 언제인가?\n\n### 선택지: \n(A) 1911년\n(B) 1908년\n(C) 1912년\n(D) 1910년\n(E) 1909년\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제에 의하여 우리 나라의 주권이 강탈되었던 때는 언제인가?\n\n### 선택지: \n(A) 1911년\n(B) 1908년\n(C) 1912년\n(D) 1910년\n(E) 1909년\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제에 의하여 우리 나라의 주권이 강탈되었던 때는 언제인가?\n\n### 선택지: \n(A) 1911년\n(B) 1908년\n(C) 1912년\n(D) 1910년\n(E) 1909년\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제에 의하여 우리 나라의 주권이 강탈되었던 때는 언제인가?\n\n### 선택지: \n(A) 1911년\n(B) 1908년\n(C) 1912년\n(D) 1910년\n(E) 1909년\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제에 의하여 우리 나라의 주권이 강탈되었던 때는 언제인가?\n\n### 선택지: \n(A) 1911년\n(B) 1908년\n(C) 1912년\n(D) 1910년\n(E) 1909년\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.40625", "False"]], [["-6.40625", "False"]], [["-7.83203125", "False"]], [["-7.08203125", "False"]], [["-8.90625", "False"]]], "filtered_resps": [["-6.40625", "False"], ["-6.40625", "False"], ["-7.83203125", "False"], ["-7.08203125", "False"], ["-8.90625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "87599cbdc8c39d4de24f6eba8672915a0614069aede93f367d09ff1467a8ace8", "prompt_hash": "0f1e1e92ead4945807319f0e49a86ca21cf89068f4848ba6792b51d16d3b03f5", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 58, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n3․1 운동 때 낭독한 독립 선언서를 작성한 사람은 누구인가?\n\n### 선택지: \n(A) 윤봉길\n(B) 안중근\n(C) 박승환\n(D) 최남선\n(E) 김구\n\n### 정답:", "options": "['윤봉길', '안중근', '박승환', '최남선', '김구']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n3․1 운동 때 낭독한 독립 선언서를 작성한 사람은 누구인가?\n\n### 선택지: \n(A) 윤봉길\n(B) 안중근\n(C) 박승환\n(D) 최남선\n(E) 김구\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n3․1 운동 때 낭독한 독립 선언서를 작성한 사람은 누구인가?\n\n### 선택지: \n(A) 윤봉길\n(B) 안중근\n(C) 박승환\n(D) 최남선\n(E) 김구\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n3․1 운동 때 낭독한 독립 선언서를 작성한 사람은 누구인가?\n\n### 선택지: \n(A) 윤봉길\n(B) 안중근\n(C) 박승환\n(D) 최남선\n(E) 김구\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n3․1 운동 때 낭독한 독립 선언서를 작성한 사람은 누구인가?\n\n### 선택지: \n(A) 윤봉길\n(B) 안중근\n(C) 박승환\n(D) 최남선\n(E) 김구\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n3․1 운동 때 낭독한 독립 선언서를 작성한 사람은 누구인가?\n\n### 선택지: \n(A) 윤봉길\n(B) 안중근\n(C) 박승환\n(D) 최남선\n(E) 김구\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.92578125", "False"]], [["-6.453125", "False"]], [["-8.1640625", "False"]], [["-7.74609375", "False"]], [["-9.796875", "False"]]], "filtered_resps": [["-6.92578125", "False"], ["-6.453125", "False"], ["-8.1640625", "False"], ["-7.74609375", "False"], ["-9.796875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "a747f1e4dc1700af19b325ac0ff9797c30d0f64a312146f4f3096e999dc77670", "prompt_hash": "b55f8242534ddc7c272069096cb876332804d6eb896ffea22dcad2f0bfe559e6", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 59, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n제 1차 세계 대전이 끝난 후, 파리 강화 회의에서 민족의 운명은 그 민족 스스로 결정한다는 말을 한 미국의 대통령은 누구인가?\n\n### 선택지: \n(A) 링컨\n(B) 바이든\n(C) 루스벨트\n(D) 윌슨\n(E) 트럼프\n\n### 정답:", "options": "['링컨', '바이든', '루스벨트', '윌슨', '트럼프']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n제 1차 세계 대전이 끝난 후, 파리 강화 회의에서 민족의 운명은 그 민족 스스로 결정한다는 말을 한 미국의 대통령은 누구인가?\n\n### 선택지: \n(A) 링컨\n(B) 바이든\n(C) 루스벨트\n(D) 윌슨\n(E) 트럼프\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n제 1차 세계 대전이 끝난 후, 파리 강화 회의에서 민족의 운명은 그 민족 스스로 결정한다는 말을 한 미국의 대통령은 누구인가?\n\n### 선택지: \n(A) 링컨\n(B) 바이든\n(C) 루스벨트\n(D) 윌슨\n(E) 트럼프\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n제 1차 세계 대전이 끝난 후, 파리 강화 회의에서 민족의 운명은 그 민족 스스로 결정한다는 말을 한 미국의 대통령은 누구인가?\n\n### 선택지: \n(A) 링컨\n(B) 바이든\n(C) 루스벨트\n(D) 윌슨\n(E) 트럼프\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n제 1차 세계 대전이 끝난 후, 파리 강화 회의에서 민족의 운명은 그 민족 스스로 결정한다는 말을 한 미국의 대통령은 누구인가?\n\n### 선택지: \n(A) 링컨\n(B) 바이든\n(C) 루스벨트\n(D) 윌슨\n(E) 트럼프\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n제 1차 세계 대전이 끝난 후, 파리 강화 회의에서 민족의 운명은 그 민족 스스로 결정한다는 말을 한 미국의 대통령은 누구인가?\n\n### 선택지: \n(A) 링컨\n(B) 바이든\n(C) 루스벨트\n(D) 윌슨\n(E) 트럼프\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.54296875", "False"]], [["-5.55078125", "False"]], [["-6.71484375", "False"]], [["-6.03125", "False"]], [["-7.953125", "False"]]], "filtered_resps": [["-5.54296875", "False"], ["-5.55078125", "False"], ["-6.71484375", "False"], ["-6.03125", "False"], ["-7.953125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "9641fb2e8c004d27dd809b2c562c110487269127fc8968694c714d19262c5a0f", "prompt_hash": "244911ec1b55d0943f50d12f5cdd5bcfcc678253cc45a361dff1861c85a56147", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 60, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 대표 33인이 독립 선언서를 낭독하고 만세 삼창을 한 곳은 어디인가?\n\n### 선택지: \n(A) 광화문 광장\n(B) 용산 공원\n(C) 탑골 공원\n(D) 독립문\n(E) 아우내 장터\n\n### 정답:", "options": "['광화문 광장', '용산 공원', '탑골 공원', '독립문', '아우내 장터']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 대표 33인이 독립 선언서를 낭독하고 만세 삼창을 한 곳은 어디인가?\n\n### 선택지: \n(A) 광화문 광장\n(B) 용산 공원\n(C) 탑골 공원\n(D) 독립문\n(E) 아우내 장터\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 대표 33인이 독립 선언서를 낭독하고 만세 삼창을 한 곳은 어디인가?\n\n### 선택지: \n(A) 광화문 광장\n(B) 용산 공원\n(C) 탑골 공원\n(D) 독립문\n(E) 아우내 장터\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 대표 33인이 독립 선언서를 낭독하고 만세 삼창을 한 곳은 어디인가?\n\n### 선택지: \n(A) 광화문 광장\n(B) 용산 공원\n(C) 탑골 공원\n(D) 독립문\n(E) 아우내 장터\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 대표 33인이 독립 선언서를 낭독하고 만세 삼창을 한 곳은 어디인가?\n\n### 선택지: \n(A) 광화문 광장\n(B) 용산 공원\n(C) 탑골 공원\n(D) 독립문\n(E) 아우내 장터\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 대표 33인이 독립 선언서를 낭독하고 만세 삼창을 한 곳은 어디인가?\n\n### 선택지: \n(A) 광화문 광장\n(B) 용산 공원\n(C) 탑골 공원\n(D) 독립문\n(E) 아우내 장터\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.9296875", "False"]], [["-5.55859375", "False"]], [["-7.5", "False"]], [["-6.40625", "False"]], [["-8.375", "False"]]], "filtered_resps": [["-5.9296875", "False"], ["-5.55859375", "False"], ["-7.5", "False"], ["-6.40625", "False"], ["-8.375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "e9e0b6608c4f4766d745364ee72bcda174ca5e6ccc26a072075f7993cf953706", "prompt_hash": "373c5e88349e44cf31841908ca72348833941b584dba9546a7b56635473947c4", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 61, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제는 3․1 운동을 통해 우리 민족을 무력으로만 지배할 수 없다는 것을 깨닫고, 식민 통치 정책을 바꾸었는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 통제 정치\n(B) 억압 정치\n(C) 회유 정치\n(D) 문화 정치\n(E) 밀실 정치\n\n### 정답:", "options": "['통제 정치', '억압 정치', '회유 정치', '문화 정치', '밀실 정치']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제는 3․1 운동을 통해 우리 민족을 무력으로만 지배할 수 없다는 것을 깨닫고, 식민 통치 정책을 바꾸었는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 통제 정치\n(B) 억압 정치\n(C) 회유 정치\n(D) 문화 정치\n(E) 밀실 정치\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제는 3․1 운동을 통해 우리 민족을 무력으로만 지배할 수 없다는 것을 깨닫고, 식민 통치 정책을 바꾸었는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 통제 정치\n(B) 억압 정치\n(C) 회유 정치\n(D) 문화 정치\n(E) 밀실 정치\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제는 3․1 운동을 통해 우리 민족을 무력으로만 지배할 수 없다는 것을 깨닫고, 식민 통치 정책을 바꾸었는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 통제 정치\n(B) 억압 정치\n(C) 회유 정치\n(D) 문화 정치\n(E) 밀실 정치\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제는 3․1 운동을 통해 우리 민족을 무력으로만 지배할 수 없다는 것을 깨닫고, 식민 통치 정책을 바꾸었는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 통제 정치\n(B) 억압 정치\n(C) 회유 정치\n(D) 문화 정치\n(E) 밀실 정치\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제는 3․1 운동을 통해 우리 민족을 무력으로만 지배할 수 없다는 것을 깨닫고, 식민 통치 정책을 바꾸었는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 통제 정치\n(B) 억압 정치\n(C) 회유 정치\n(D) 문화 정치\n(E) 밀실 정치\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.54296875", "False"]], [["-6.13671875", "False"]], [["-7.90625", "False"]], [["-7.2734375", "False"]], [["-9.125", "False"]]], "filtered_resps": [["-6.54296875", "False"], ["-6.13671875", "False"], ["-7.90625", "False"], ["-7.2734375", "False"], ["-9.125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "a72ff039fa3effbf1ff85deabfc7568a1a42fc385fa8ef058b27696669744bf2", "prompt_hash": "5b5da74b6aab532139b683bf592e78553e7831727e9cc3bb84e4045b2a5a6b8d", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 62, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n임시 정부의 주석으로 한인 애국단을 조직하여 독립 운동을 한 분은 누구인가?\n\n### 선택지: \n(A) 최남선\n(B) 김구\n(C) 박승환\n(D) 안중근\n(E) 윤봉길\n\n### 정답:", "options": "['최남선', '김구', '박승환', '안중근', '윤봉길']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n임시 정부의 주석으로 한인 애국단을 조직하여 독립 운동을 한 분은 누구인가?\n\n### 선택지: \n(A) 최남선\n(B) 김구\n(C) 박승환\n(D) 안중근\n(E) 윤봉길\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n임시 정부의 주석으로 한인 애국단을 조직하여 독립 운동을 한 분은 누구인가?\n\n### 선택지: \n(A) 최남선\n(B) 김구\n(C) 박승환\n(D) 안중근\n(E) 윤봉길\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n임시 정부의 주석으로 한인 애국단을 조직하여 독립 운동을 한 분은 누구인가?\n\n### 선택지: \n(A) 최남선\n(B) 김구\n(C) 박승환\n(D) 안중근\n(E) 윤봉길\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n임시 정부의 주석으로 한인 애국단을 조직하여 독립 운동을 한 분은 누구인가?\n\n### 선택지: \n(A) 최남선\n(B) 김구\n(C) 박승환\n(D) 안중근\n(E) 윤봉길\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n임시 정부의 주석으로 한인 애국단을 조직하여 독립 운동을 한 분은 누구인가?\n\n### 선택지: \n(A) 최남선\n(B) 김구\n(C) 박승환\n(D) 안중근\n(E) 윤봉길\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.15625", "False"]], [["-5.75", "False"]], [["-7.25", "False"]], [["-6.7421875", "False"]], [["-8.5", "False"]]], "filtered_resps": [["-6.15625", "False"], ["-5.75", "False"], ["-7.25", "False"], ["-6.7421875", "False"], ["-8.5", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "30388c9f6d5582ab9590683c268700c0d4750b672f7a425e802ab2d5001fab29", "prompt_hash": "dcac854c1c77bf33c5cbaed6eba3f4b3cbf1e42dc974a82e41c787b2c3f62dd7", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 63, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1919년 일제의 주요 기관을 파괴하고 일본 관리를 암살할 목적으로 만주 길림성에서 조직된 단체는 무엇인가?\n\n### 선택지: \n(A) 조선의용대\n(B) 의열단\n(C) 조선민족혁명당\n(D) 광복군\n(E) 한인애국단\n\n### 정답:", "options": "['조선의용대', '의열단', '조선민족혁명당', '광복군', '한인애국단']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1919년 일제의 주요 기관을 파괴하고 일본 관리를 암살할 목적으로 만주 길림성에서 조직된 단체는 무엇인가?\n\n### 선택지: \n(A) 조선의용대\n(B) 의열단\n(C) 조선민족혁명당\n(D) 광복군\n(E) 한인애국단\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1919년 일제의 주요 기관을 파괴하고 일본 관리를 암살할 목적으로 만주 길림성에서 조직된 단체는 무엇인가?\n\n### 선택지: \n(A) 조선의용대\n(B) 의열단\n(C) 조선민족혁명당\n(D) 광복군\n(E) 한인애국단\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1919년 일제의 주요 기관을 파괴하고 일본 관리를 암살할 목적으로 만주 길림성에서 조직된 단체는 무엇인가?\n\n### 선택지: \n(A) 조선의용대\n(B) 의열단\n(C) 조선민족혁명당\n(D) 광복군\n(E) 한인애국단\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1919년 일제의 주요 기관을 파괴하고 일본 관리를 암살할 목적으로 만주 길림성에서 조직된 단체는 무엇인가?\n\n### 선택지: \n(A) 조선의용대\n(B) 의열단\n(C) 조선민족혁명당\n(D) 광복군\n(E) 한인애국단\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1919년 일제의 주요 기관을 파괴하고 일본 관리를 암살할 목적으로 만주 길림성에서 조직된 단체는 무엇인가?\n\n### 선택지: \n(A) 조선의용대\n(B) 의열단\n(C) 조선민족혁명당\n(D) 광복군\n(E) 한인애국단\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.359375", "False"]], [["-5.921875", "False"]], [["-7.0625", "False"]], [["-6.0703125", "False"]], [["-7.5546875", "False"]]], "filtered_resps": [["-5.359375", "False"], ["-5.921875", "False"], ["-7.0625", "False"], ["-6.0703125", "False"], ["-7.5546875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "3c78abeb1637cc4008f1a21dc7a935704c0e308c91ba9bbe9b27a37ec00bca68", "prompt_hash": "e3a5a07c0850bd1ed338deb4cf229a7d485db3c077f873dab5596d7d265a4243", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 64, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n중국 상하이에서 일본 우두머리를 암살할 목적으로 김구가 조직하였으며 많은 독립 투사를 배출한 단체는 무엇인가?\n\n### 선택지: \n(A) 광복군\n(B) 의열단\n(C) 한인 애국단\n(D) 조선의용대\n(E) 조선민족혁명당\n\n### 정답:", "options": "['광복군', '의열단', '한인 애국단', '조선의용대', '조선민족혁명당']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n중국 상하이에서 일본 우두머리를 암살할 목적으로 김구가 조직하였으며 많은 독립 투사를 배출한 단체는 무엇인가?\n\n### 선택지: \n(A) 광복군\n(B) 의열단\n(C) 한인 애국단\n(D) 조선의용대\n(E) 조선민족혁명당\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n중국 상하이에서 일본 우두머리를 암살할 목적으로 김구가 조직하였으며 많은 독립 투사를 배출한 단체는 무엇인가?\n\n### 선택지: \n(A) 광복군\n(B) 의열단\n(C) 한인 애국단\n(D) 조선의용대\n(E) 조선민족혁명당\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n중국 상하이에서 일본 우두머리를 암살할 목적으로 김구가 조직하였으며 많은 독립 투사를 배출한 단체는 무엇인가?\n\n### 선택지: \n(A) 광복군\n(B) 의열단\n(C) 한인 애국단\n(D) 조선의용대\n(E) 조선민족혁명당\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n중국 상하이에서 일본 우두머리를 암살할 목적으로 김구가 조직하였으며 많은 독립 투사를 배출한 단체는 무엇인가?\n\n### 선택지: \n(A) 광복군\n(B) 의열단\n(C) 한인 애국단\n(D) 조선의용대\n(E) 조선민족혁명당\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n중국 상하이에서 일본 우두머리를 암살할 목적으로 김구가 조직하였으며 많은 독립 투사를 배출한 단체는 무엇인가?\n\n### 선택지: \n(A) 광복군\n(B) 의열단\n(C) 한인 애국단\n(D) 조선의용대\n(E) 조선민족혁명당\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.65625", "False"]], [["-5.66796875", "False"]], [["-7.05859375", "False"]], [["-6.48046875", "False"]], [["-7.77734375", "False"]]], "filtered_resps": [["-5.65625", "False"], ["-5.66796875", "False"], ["-7.05859375", "False"], ["-6.48046875", "False"], ["-7.77734375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "b878eaebdc7c6c0a65c5ba71cc64d91f220a8cda7d4b42039904fa85c8d02b8f", "prompt_hash": "5fe44b3ebecb2e38476aa09d6a58cd9b5ca86b07db32c8bc8fb65ab66c046975", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 65, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 일본 왕의 생일을 기념하는 행사에 도시락 폭탄을 던져 여러 중요 인물을 죽이거나 크게 다치게 하고 순국한 분은 누구인가?\n\n### 선택지: \n(A) 윤봉길\n(B) 최남선\n(C) 안중근\n(D) 박승환\n(E) 김구\n\n### 정답:", "options": "['윤봉길', '최남선', '안중근', '박승환', '김구']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 일본 왕의 생일을 기념하는 행사에 도시락 폭탄을 던져 여러 중요 인물을 죽이거나 크게 다치게 하고 순국한 분은 누구인가?\n\n### 선택지: \n(A) 윤봉길\n(B) 최남선\n(C) 안중근\n(D) 박승환\n(E) 김구\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 일본 왕의 생일을 기념하는 행사에 도시락 폭탄을 던져 여러 중요 인물을 죽이거나 크게 다치게 하고 순국한 분은 누구인가?\n\n### 선택지: \n(A) 윤봉길\n(B) 최남선\n(C) 안중근\n(D) 박승환\n(E) 김구\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 일본 왕의 생일을 기념하는 행사에 도시락 폭탄을 던져 여러 중요 인물을 죽이거나 크게 다치게 하고 순국한 분은 누구인가?\n\n### 선택지: \n(A) 윤봉길\n(B) 최남선\n(C) 안중근\n(D) 박승환\n(E) 김구\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 일본 왕의 생일을 기념하는 행사에 도시락 폭탄을 던져 여러 중요 인물을 죽이거나 크게 다치게 하고 순국한 분은 누구인가?\n\n### 선택지: \n(A) 윤봉길\n(B) 최남선\n(C) 안중근\n(D) 박승환\n(E) 김구\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n 일본 왕의 생일을 기념하는 행사에 도시락 폭탄을 던져 여러 중요 인물을 죽이거나 크게 다치게 하고 순국한 분은 누구인가?\n\n### 선택지: \n(A) 윤봉길\n(B) 최남선\n(C) 안중근\n(D) 박승환\n(E) 김구\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.95703125", "False"]], [["-5.6640625", "False"]], [["-7.234375", "False"]], [["-6.83984375", "False"]], [["-9.2421875", "False"]]], "filtered_resps": [["-5.95703125", "False"], ["-5.6640625", "False"], ["-7.234375", "False"], ["-6.83984375", "False"], ["-9.2421875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "6d29f456da1b4ff87094801e060ff4a05f0e32a86ff484231ca89dc7d6e1c210", "prompt_hash": "bc7cf7a21212c4a4d95cd23ed1493174835cf86077a2bf47ea32ced2f4dd7359", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 66, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대한민국 임시 정부가 중국의 여러 지역에 흩어져 싸우고 있던 독립군을 하나로 모아 만든 군대는 무엇인가?\n\n### 선택지: \n(A) 의열단\n(B) 광복군\n(C) 조선의용대\n(D) 조선민족혁명당\n(E) 한인애국단\n\n### 정답:", "options": "['의열단', '광복군', '조선의용대', '조선민족혁명당', '한인애국단']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대한민국 임시 정부가 중국의 여러 지역에 흩어져 싸우고 있던 독립군을 하나로 모아 만든 군대는 무엇인가?\n\n### 선택지: \n(A) 의열단\n(B) 광복군\n(C) 조선의용대\n(D) 조선민족혁명당\n(E) 한인애국단\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대한민국 임시 정부가 중국의 여러 지역에 흩어져 싸우고 있던 독립군을 하나로 모아 만든 군대는 무엇인가?\n\n### 선택지: \n(A) 의열단\n(B) 광복군\n(C) 조선의용대\n(D) 조선민족혁명당\n(E) 한인애국단\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대한민국 임시 정부가 중국의 여러 지역에 흩어져 싸우고 있던 독립군을 하나로 모아 만든 군대는 무엇인가?\n\n### 선택지: \n(A) 의열단\n(B) 광복군\n(C) 조선의용대\n(D) 조선민족혁명당\n(E) 한인애국단\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대한민국 임시 정부가 중국의 여러 지역에 흩어져 싸우고 있던 독립군을 하나로 모아 만든 군대는 무엇인가?\n\n### 선택지: \n(A) 의열단\n(B) 광복군\n(C) 조선의용대\n(D) 조선민족혁명당\n(E) 한인애국단\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대한민국 임시 정부가 중국의 여러 지역에 흩어져 싸우고 있던 독립군을 하나로 모아 만든 군대는 무엇인가?\n\n### 선택지: \n(A) 의열단\n(B) 광복군\n(C) 조선의용대\n(D) 조선민족혁명당\n(E) 한인애국단\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.46484375", "False"]], [["-5.8359375", "False"]], [["-7.0390625", "False"]], [["-6.1328125", "False"]], [["-7.328125", "False"]]], "filtered_resps": [["-5.46484375", "False"], ["-5.8359375", "False"], ["-7.0390625", "False"], ["-6.1328125", "False"], ["-7.328125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "869062a5b0efd0047bc7cf27d7f0cdd1e65ea33d7ffbe64b05bcd59fc7693a51", "prompt_hash": "261ed674cb9069e3c6319a58fc4169383f22e5cb953c226e3ea58e3432d6826a", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 67, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안창호 선생이 나라의 힘을 기르는 방법은 교육을 통해서 백성들을 깨우치는 것이라 생각하고 평양에 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 원산 학사\n(B) 대성 학교\n(C) 육영 공원\n(D) 배재 학당\n(E) 이화학당\n\n### 정답:", "options": "['원산 학사', '대성 학교', '육영 공원', '배재 학당', '이화학당']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안창호 선생이 나라의 힘을 기르는 방법은 교육을 통해서 백성들을 깨우치는 것이라 생각하고 평양에 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 원산 학사\n(B) 대성 학교\n(C) 육영 공원\n(D) 배재 학당\n(E) 이화학당\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안창호 선생이 나라의 힘을 기르는 방법은 교육을 통해서 백성들을 깨우치는 것이라 생각하고 평양에 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 원산 학사\n(B) 대성 학교\n(C) 육영 공원\n(D) 배재 학당\n(E) 이화학당\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안창호 선생이 나라의 힘을 기르는 방법은 교육을 통해서 백성들을 깨우치는 것이라 생각하고 평양에 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 원산 학사\n(B) 대성 학교\n(C) 육영 공원\n(D) 배재 학당\n(E) 이화학당\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안창호 선생이 나라의 힘을 기르는 방법은 교육을 통해서 백성들을 깨우치는 것이라 생각하고 평양에 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 원산 학사\n(B) 대성 학교\n(C) 육영 공원\n(D) 배재 학당\n(E) 이화학당\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안창호 선생이 나라의 힘을 기르는 방법은 교육을 통해서 백성들을 깨우치는 것이라 생각하고 평양에 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 원산 학사\n(B) 대성 학교\n(C) 육영 공원\n(D) 배재 학당\n(E) 이화학당\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.98828125", "False"]], [["-5.8984375", "False"]], [["-7.24609375", "False"]], [["-7.17578125", "False"]], [["-8.46875", "False"]]], "filtered_resps": [["-5.98828125", "False"], ["-5.8984375", "False"], ["-7.24609375", "False"], ["-7.17578125", "False"], ["-8.46875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "58726b61c4ddda8515802ad057c6926fc4d0e77b1b3f894e97c6d6a0288b7663", "prompt_hash": "d22382e65d625853f63b1971454336b2c8797d20e698754927b0822b6c8f1dd0", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 68, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안창호 선생이 우리 민족이 단결하고 독립 정신을 잃지 않도록 하기 위해 조직한 단체는 무엇인가?\n\n### 선택지: \n(A) 조선의용대\n(B) 의열단\n(C) 한인 애국단\n(D) 흥사단\n(E) 광복군\n\n### 정답:", "options": "['조선의용대', '의열단', '한인 애국단', '흥사단', '광복군']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안창호 선생이 우리 민족이 단결하고 독립 정신을 잃지 않도록 하기 위해 조직한 단체는 무엇인가?\n\n### 선택지: \n(A) 조선의용대\n(B) 의열단\n(C) 한인 애국단\n(D) 흥사단\n(E) 광복군\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안창호 선생이 우리 민족이 단결하고 독립 정신을 잃지 않도록 하기 위해 조직한 단체는 무엇인가?\n\n### 선택지: \n(A) 조선의용대\n(B) 의열단\n(C) 한인 애국단\n(D) 흥사단\n(E) 광복군\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안창호 선생이 우리 민족이 단결하고 독립 정신을 잃지 않도록 하기 위해 조직한 단체는 무엇인가?\n\n### 선택지: \n(A) 조선의용대\n(B) 의열단\n(C) 한인 애국단\n(D) 흥사단\n(E) 광복군\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안창호 선생이 우리 민족이 단결하고 독립 정신을 잃지 않도록 하기 위해 조직한 단체는 무엇인가?\n\n### 선택지: \n(A) 조선의용대\n(B) 의열단\n(C) 한인 애국단\n(D) 흥사단\n(E) 광복군\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안창호 선생이 우리 민족이 단결하고 독립 정신을 잃지 않도록 하기 위해 조직한 단체는 무엇인가?\n\n### 선택지: \n(A) 조선의용대\n(B) 의열단\n(C) 한인 애국단\n(D) 흥사단\n(E) 광복군\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.48828125", "False"]], [["-5.75", "False"]], [["-6.7578125", "False"]], [["-6.65234375", "False"]], [["-8.0390625", "False"]]], "filtered_resps": [["-5.48828125", "False"], ["-5.75", "False"], ["-6.7578125", "False"], ["-6.65234375", "False"], ["-8.0390625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "d6d8c65def45cf5f0b4c8baa9896481a5e42ec31265b758ebc285d015ca38904", "prompt_hash": "9051d61e3616abe525a0ee45c5fa5b5b0624f32c40643061a8bb3b4bae238c22", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 69, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일본에 주권을 빼앗긴 후, 우리 민족의 경제적 자립을 이루기 위해 ‘조선 물건 쓰기 운동’을 벌인 사람은 누구인가?\n\n### 선택지: \n(A) 최남선\n(B) 안중근\n(C) 윤봉길\n(D) 박승환\n(E) 조만식\n\n### 정답:", "options": "['최남선', '안중근', '윤봉길', '박승환', '조만식']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일본에 주권을 빼앗긴 후, 우리 민족의 경제적 자립을 이루기 위해 ‘조선 물건 쓰기 운동’을 벌인 사람은 누구인가?\n\n### 선택지: \n(A) 최남선\n(B) 안중근\n(C) 윤봉길\n(D) 박승환\n(E) 조만식\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일본에 주권을 빼앗긴 후, 우리 민족의 경제적 자립을 이루기 위해 ‘조선 물건 쓰기 운동’을 벌인 사람은 누구인가?\n\n### 선택지: \n(A) 최남선\n(B) 안중근\n(C) 윤봉길\n(D) 박승환\n(E) 조만식\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일본에 주권을 빼앗긴 후, 우리 민족의 경제적 자립을 이루기 위해 ‘조선 물건 쓰기 운동’을 벌인 사람은 누구인가?\n\n### 선택지: \n(A) 최남선\n(B) 안중근\n(C) 윤봉길\n(D) 박승환\n(E) 조만식\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일본에 주권을 빼앗긴 후, 우리 민족의 경제적 자립을 이루기 위해 ‘조선 물건 쓰기 운동’을 벌인 사람은 누구인가?\n\n### 선택지: \n(A) 최남선\n(B) 안중근\n(C) 윤봉길\n(D) 박승환\n(E) 조만식\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일본에 주권을 빼앗긴 후, 우리 민족의 경제적 자립을 이루기 위해 ‘조선 물건 쓰기 운동’을 벌인 사람은 누구인가?\n\n### 선택지: \n(A) 최남선\n(B) 안중근\n(C) 윤봉길\n(D) 박승환\n(E) 조만식\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.7421875", "False"]], [["-5.5234375", "False"]], [["-7.03515625", "False"]], [["-6.296875", "False"]], [["-8.2890625", "False"]]], "filtered_resps": [["-5.7421875", "False"], ["-5.5234375", "False"], ["-7.03515625", "False"], ["-6.296875", "False"], ["-8.2890625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "427ed0b4688276ea79585f8aca1a5ea0c05a2cdeb89c341aada9ca3289004ad1", "prompt_hash": "748e406eed3a33504d6c9c192ae5417e8066eb104afb9746aecd774e022b56b0", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 70, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 물건 쓰기 운동을 적극적으로 후원헀던 당시의 신문사는 어디였는가?\n\n### 선택지: \n(A) 매일신보\n(B) 동아 일보\n(C) 시대일보\n(D) 조선일보\n(E) 황성신문\n\n### 정답:", "options": "['매일신보', '동아 일보', '시대일보', '조선일보', '황성신문']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 물건 쓰기 운동을 적극적으로 후원헀던 당시의 신문사는 어디였는가?\n\n### 선택지: \n(A) 매일신보\n(B) 동아 일보\n(C) 시대일보\n(D) 조선일보\n(E) 황성신문\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 물건 쓰기 운동을 적극적으로 후원헀던 당시의 신문사는 어디였는가?\n\n### 선택지: \n(A) 매일신보\n(B) 동아 일보\n(C) 시대일보\n(D) 조선일보\n(E) 황성신문\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 물건 쓰기 운동을 적극적으로 후원헀던 당시의 신문사는 어디였는가?\n\n### 선택지: \n(A) 매일신보\n(B) 동아 일보\n(C) 시대일보\n(D) 조선일보\n(E) 황성신문\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 물건 쓰기 운동을 적극적으로 후원헀던 당시의 신문사는 어디였는가?\n\n### 선택지: \n(A) 매일신보\n(B) 동아 일보\n(C) 시대일보\n(D) 조선일보\n(E) 황성신문\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 물건 쓰기 운동을 적극적으로 후원헀던 당시의 신문사는 어디였는가?\n\n### 선택지: \n(A) 매일신보\n(B) 동아 일보\n(C) 시대일보\n(D) 조선일보\n(E) 황성신문\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.640625", "False"]], [["-5.98828125", "False"]], [["-7.75", "False"]], [["-6.96484375", "False"]], [["-8.65625", "False"]]], "filtered_resps": [["-5.640625", "False"], ["-5.98828125", "False"], ["-7.75", "False"], ["-6.96484375", "False"], ["-8.65625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "963636b677f7702a25720ced3bff67fa0c83b755ccce4386330051fa270f883d", "prompt_hash": "8a903b83aa62b53fb9a7571f5707ac9db8a90da0da3e70861fc224cb061be7be", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 71, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년부터 3년간 주시경 밑에서 한글과 문법을 배웠으며 ‘우리말본’을 지은 한글 학자는 누구인가?\n\n### 선택지: \n(A) 나운규\n(B) 최현배\n(C) 신익현\n(D) 신채호\n(E) 안익태\n\n### 정답:", "options": "['나운규', '최현배', '신익현', '신채호', '안익태']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년부터 3년간 주시경 밑에서 한글과 문법을 배웠으며 ‘우리말본’을 지은 한글 학자는 누구인가?\n\n### 선택지: \n(A) 나운규\n(B) 최현배\n(C) 신익현\n(D) 신채호\n(E) 안익태\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년부터 3년간 주시경 밑에서 한글과 문법을 배웠으며 ‘우리말본’을 지은 한글 학자는 누구인가?\n\n### 선택지: \n(A) 나운규\n(B) 최현배\n(C) 신익현\n(D) 신채호\n(E) 안익태\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년부터 3년간 주시경 밑에서 한글과 문법을 배웠으며 ‘우리말본’을 지은 한글 학자는 누구인가?\n\n### 선택지: \n(A) 나운규\n(B) 최현배\n(C) 신익현\n(D) 신채호\n(E) 안익태\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년부터 3년간 주시경 밑에서 한글과 문법을 배웠으며 ‘우리말본’을 지은 한글 학자는 누구인가?\n\n### 선택지: \n(A) 나운규\n(B) 최현배\n(C) 신익현\n(D) 신채호\n(E) 안익태\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년부터 3년간 주시경 밑에서 한글과 문법을 배웠으며 ‘우리말본’을 지은 한글 학자는 누구인가?\n\n### 선택지: \n(A) 나운규\n(B) 최현배\n(C) 신익현\n(D) 신채호\n(E) 안익태\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.921875", "False"]], [["-6.1171875", "False"]], [["-7.44921875", "False"]], [["-6.76171875", "False"]], [["-8.796875", "False"]]], "filtered_resps": [["-5.921875", "False"], ["-6.1171875", "False"], ["-7.44921875", "False"], ["-6.76171875", "False"], ["-8.796875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "26386327febbb8ea7734bf4d931160a8798fee1b011c6af7b9248f5228237a5d", "prompt_hash": "3900ed913c92131af40d889ded72324602aa33f85f11b765034ff69af7747cf4", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 72, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제 시대 때 음악 활동을 한 사람 중에서 애국가를 작곡한 사람은 누구인가?\n\n### 선택지: \n(A) 안익태\n(B) 신익현\n(C) 신채호\n(D) 안익태\n(E) 최현배\n\n### 정답:", "options": "['안익태', '신익현', '신채호', '안익태', '최현배']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제 시대 때 음악 활동을 한 사람 중에서 애국가를 작곡한 사람은 누구인가?\n\n### 선택지: \n(A) 안익태\n(B) 신익현\n(C) 신채호\n(D) 안익태\n(E) 최현배\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제 시대 때 음악 활동을 한 사람 중에서 애국가를 작곡한 사람은 누구인가?\n\n### 선택지: \n(A) 안익태\n(B) 신익현\n(C) 신채호\n(D) 안익태\n(E) 최현배\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제 시대 때 음악 활동을 한 사람 중에서 애국가를 작곡한 사람은 누구인가?\n\n### 선택지: \n(A) 안익태\n(B) 신익현\n(C) 신채호\n(D) 안익태\n(E) 최현배\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제 시대 때 음악 활동을 한 사람 중에서 애국가를 작곡한 사람은 누구인가?\n\n### 선택지: \n(A) 안익태\n(B) 신익현\n(C) 신채호\n(D) 안익태\n(E) 최현배\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제 시대 때 음악 활동을 한 사람 중에서 애국가를 작곡한 사람은 누구인가?\n\n### 선택지: \n(A) 안익태\n(B) 신익현\n(C) 신채호\n(D) 안익태\n(E) 최현배\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.0703125", "False"]], [["-6.078125", "False"]], [["-7.6171875", "False"]], [["-7.25", "False"]], [["-8.921875", "False"]]], "filtered_resps": [["-6.0703125", "False"], ["-6.078125", "False"], ["-7.6171875", "False"], ["-7.25", "False"], ["-8.921875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "12cfdd26390faa9a324f978ef0ab950f6fb8674c191d9d00ccbcc33abd955360", "prompt_hash": "b4c3908c0aa298ff958af25261f26f339da29879f9b9979088c8afe2699787e7", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 73, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제 침략기 때 연극 활동을 전개한 단체의 이름은 무엇인가?\n\n### 선택지: \n(A) 한인 애국단\n(B) 조선의용대\n(C) 광복군\n(D) 토월회\n(E) 의열단\n\n### 정답:", "options": "['한인 애국단', '조선의용대', '광복군', '토월회', '의열단']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제 침략기 때 연극 활동을 전개한 단체의 이름은 무엇인가?\n\n### 선택지: \n(A) 한인 애국단\n(B) 조선의용대\n(C) 광복군\n(D) 토월회\n(E) 의열단\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제 침략기 때 연극 활동을 전개한 단체의 이름은 무엇인가?\n\n### 선택지: \n(A) 한인 애국단\n(B) 조선의용대\n(C) 광복군\n(D) 토월회\n(E) 의열단\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제 침략기 때 연극 활동을 전개한 단체의 이름은 무엇인가?\n\n### 선택지: \n(A) 한인 애국단\n(B) 조선의용대\n(C) 광복군\n(D) 토월회\n(E) 의열단\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제 침략기 때 연극 활동을 전개한 단체의 이름은 무엇인가?\n\n### 선택지: \n(A) 한인 애국단\n(B) 조선의용대\n(C) 광복군\n(D) 토월회\n(E) 의열단\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제 침략기 때 연극 활동을 전개한 단체의 이름은 무엇인가?\n\n### 선택지: \n(A) 한인 애국단\n(B) 조선의용대\n(C) 광복군\n(D) 토월회\n(E) 의열단\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.625", "False"]], [["-5.453125", "False"]], [["-6.8515625", "False"]], [["-6.29296875", "False"]], [["-7.70703125", "False"]]], "filtered_resps": [["-5.625", "False"], ["-5.453125", "False"], ["-6.8515625", "False"], ["-6.29296875", "False"], ["-7.70703125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "5689d426672fc806696f5f9893cc18aee750028e92c815a31576eb125900a929", "prompt_hash": "f78155828194d2b71526585d6030779ac6f64d9c1332526592e8027db974560d", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 74, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n영화 ‘아리랑’을 제작하여 민족의 슬픔을 달래고, 일본에 대항하는 정신을 불러일으켰으며 한국 영화의 터전을 마련한 사람은 누구인가?\n\n### 선택지: \n(A) 최현배\n(B) 신익현\n(C) 안익태\n(D) 신채호\n(E) 나운규\n\n### 정답:", "options": "['최현배', '신익현', '안익태', '신채호', '나운규']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n영화 ‘아리랑’을 제작하여 민족의 슬픔을 달래고, 일본에 대항하는 정신을 불러일으켰으며 한국 영화의 터전을 마련한 사람은 누구인가?\n\n### 선택지: \n(A) 최현배\n(B) 신익현\n(C) 안익태\n(D) 신채호\n(E) 나운규\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n영화 ‘아리랑’을 제작하여 민족의 슬픔을 달래고, 일본에 대항하는 정신을 불러일으켰으며 한국 영화의 터전을 마련한 사람은 누구인가?\n\n### 선택지: \n(A) 최현배\n(B) 신익현\n(C) 안익태\n(D) 신채호\n(E) 나운규\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n영화 ‘아리랑’을 제작하여 민족의 슬픔을 달래고, 일본에 대항하는 정신을 불러일으켰으며 한국 영화의 터전을 마련한 사람은 누구인가?\n\n### 선택지: \n(A) 최현배\n(B) 신익현\n(C) 안익태\n(D) 신채호\n(E) 나운규\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n영화 ‘아리랑’을 제작하여 민족의 슬픔을 달래고, 일본에 대항하는 정신을 불러일으켰으며 한국 영화의 터전을 마련한 사람은 누구인가?\n\n### 선택지: \n(A) 최현배\n(B) 신익현\n(C) 안익태\n(D) 신채호\n(E) 나운규\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n영화 ‘아리랑’을 제작하여 민족의 슬픔을 달래고, 일본에 대항하는 정신을 불러일으켰으며 한국 영화의 터전을 마련한 사람은 누구인가?\n\n### 선택지: \n(A) 최현배\n(B) 신익현\n(C) 안익태\n(D) 신채호\n(E) 나운규\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.671875", "False"]], [["-5.6875", "False"]], [["-7.08984375", "False"]], [["-6.58984375", "False"]], [["-8.0625", "False"]]], "filtered_resps": [["-5.671875", "False"], ["-5.6875", "False"], ["-7.08984375", "False"], ["-6.58984375", "False"], ["-8.0625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "a754d8073aff4c8850ce7a4ec37e898ddb5be075bac2e53d64d93740ee075354", "prompt_hash": "cceacd179075cdaf5468ccbc92815a9bd5e2bc68bc6018978f532e892eff4a44", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 75, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘봉선화’를 작곡하여 망국의 슬픔과 분함을 독특한 선율로 나타낸 음악가는 누구인가?\n\n### 선택지: \n(A) 신익현\n(B) 신채호\n(C) 나운규\n(D) 최현배\n(E) 홍난파\n\n### 정답:", "options": "['신익현', '신채호', '나운규', '최현배', '홍난파']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘봉선화’를 작곡하여 망국의 슬픔과 분함을 독특한 선율로 나타낸 음악가는 누구인가?\n\n### 선택지: \n(A) 신익현\n(B) 신채호\n(C) 나운규\n(D) 최현배\n(E) 홍난파\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘봉선화’를 작곡하여 망국의 슬픔과 분함을 독특한 선율로 나타낸 음악가는 누구인가?\n\n### 선택지: \n(A) 신익현\n(B) 신채호\n(C) 나운규\n(D) 최현배\n(E) 홍난파\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘봉선화’를 작곡하여 망국의 슬픔과 분함을 독특한 선율로 나타낸 음악가는 누구인가?\n\n### 선택지: \n(A) 신익현\n(B) 신채호\n(C) 나운규\n(D) 최현배\n(E) 홍난파\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘봉선화’를 작곡하여 망국의 슬픔과 분함을 독특한 선율로 나타낸 음악가는 누구인가?\n\n### 선택지: \n(A) 신익현\n(B) 신채호\n(C) 나운규\n(D) 최현배\n(E) 홍난파\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘봉선화’를 작곡하여 망국의 슬픔과 분함을 독특한 선율로 나타낸 음악가는 누구인가?\n\n### 선택지: \n(A) 신익현\n(B) 신채호\n(C) 나운규\n(D) 최현배\n(E) 홍난파\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.2109375", "False"]], [["-6.23828125", "False"]], [["-7.91796875", "False"]], [["-7.578125", "False"]], [["-9.3515625", "False"]]], "filtered_resps": [["-6.2109375", "False"], ["-6.23828125", "False"], ["-7.91796875", "False"], ["-7.578125", "False"], ["-9.3515625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "4c4ec542ead068bde19a8dc1567f955ae9b495225c2c6ace6958aabd7e0dd705", "prompt_hash": "a39d7c11c1841ef4e2c5e3d72f2c8587f4172e99a80ab61f769a3b9a6c3e21c8", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 76, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고조선은 국가 통치를 위해 어떠한 법을 사용했는가?\n\n### 선택지: \n(A) 경국대전\n(B) 과거제\n(C) 시무 28조\n(D) 8조금법\n(E) 천거제\n\n### 정답:", "options": "['경국대전', '과거제', '시무 28조', '8조금법', '천거제']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고조선은 국가 통치를 위해 어떠한 법을 사용했는가?\n\n### 선택지: \n(A) 경국대전\n(B) 과거제\n(C) 시무 28조\n(D) 8조금법\n(E) 천거제\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고조선은 국가 통치를 위해 어떠한 법을 사용했는가?\n\n### 선택지: \n(A) 경국대전\n(B) 과거제\n(C) 시무 28조\n(D) 8조금법\n(E) 천거제\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고조선은 국가 통치를 위해 어떠한 법을 사용했는가?\n\n### 선택지: \n(A) 경국대전\n(B) 과거제\n(C) 시무 28조\n(D) 8조금법\n(E) 천거제\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고조선은 국가 통치를 위해 어떠한 법을 사용했는가?\n\n### 선택지: \n(A) 경국대전\n(B) 과거제\n(C) 시무 28조\n(D) 8조금법\n(E) 천거제\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고조선은 국가 통치를 위해 어떠한 법을 사용했는가?\n\n### 선택지: \n(A) 경국대전\n(B) 과거제\n(C) 시무 28조\n(D) 8조금법\n(E) 천거제\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.73828125", "False"]], [["-6.5625", "False"]], [["-8.4296875", "False"]], [["-7.62109375", "False"]], [["-8.8125", "False"]]], "filtered_resps": [["-6.73828125", "False"], ["-6.5625", "False"], ["-8.4296875", "False"], ["-7.62109375", "False"], ["-8.8125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "7cd578354468ffe19e3260e0ae627af98c6bcf7dccd21320a09fb38f6b9e3b15", "prompt_hash": "26d95861b918caf79c870b58a54ba02c41abaf0ff50b0f6e2b0c5df6fa0d1892", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 77, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 왕중에서 불교를 공인하고 중앙 집권 체제를 확립한 왕은?\n\n### 선택지: \n(A) 진흥왕\n(B) 침류왕\n(C) 법흥왕\n(D) 태종무열왕\n(E) 문무왕\n\n### 정답:", "options": "['진흥왕', '침류왕', '법흥왕', '태종무열왕', '문무왕']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 왕중에서 불교를 공인하고 중앙 집권 체제를 확립한 왕은?\n\n### 선택지: \n(A) 진흥왕\n(B) 침류왕\n(C) 법흥왕\n(D) 태종무열왕\n(E) 문무왕\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 왕중에서 불교를 공인하고 중앙 집권 체제를 확립한 왕은?\n\n### 선택지: \n(A) 진흥왕\n(B) 침류왕\n(C) 법흥왕\n(D) 태종무열왕\n(E) 문무왕\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 왕중에서 불교를 공인하고 중앙 집권 체제를 확립한 왕은?\n\n### 선택지: \n(A) 진흥왕\n(B) 침류왕\n(C) 법흥왕\n(D) 태종무열왕\n(E) 문무왕\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 왕중에서 불교를 공인하고 중앙 집권 체제를 확립한 왕은?\n\n### 선택지: \n(A) 진흥왕\n(B) 침류왕\n(C) 법흥왕\n(D) 태종무열왕\n(E) 문무왕\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 왕중에서 불교를 공인하고 중앙 집권 체제를 확립한 왕은?\n\n### 선택지: \n(A) 진흥왕\n(B) 침류왕\n(C) 법흥왕\n(D) 태종무열왕\n(E) 문무왕\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.03515625", "False"]], [["-6.078125", "False"]], [["-7.73828125", "False"]], [["-6.60546875", "False"]], [["-8.546875", "False"]]], "filtered_resps": [["-6.03515625", "False"], ["-6.078125", "False"], ["-7.73828125", "False"], ["-6.60546875", "False"], ["-8.546875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "9cbe0ed0859d82592e34d1ae86249dd3e357ad9b485e4f001d4076530c56bc4a", "prompt_hash": "4fd0e3763a1723da821aca1954ca93681561428c7a79a9b6f7a767dd00bbd613", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 78, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n견훤이 완산주(전주)에 도읍을 정하고 세운 나라는?\n\n### 선택지: \n(A) 고려\n(B) 통일신라\n(C) 후고구려\n(D) 발해\n(E) 후백제\n\n### 정답:", "options": "['고려', '통일신라', '후고구려', '발해', '후백제']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n견훤이 완산주(전주)에 도읍을 정하고 세운 나라는?\n\n### 선택지: \n(A) 고려\n(B) 통일신라\n(C) 후고구려\n(D) 발해\n(E) 후백제\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n견훤이 완산주(전주)에 도읍을 정하고 세운 나라는?\n\n### 선택지: \n(A) 고려\n(B) 통일신라\n(C) 후고구려\n(D) 발해\n(E) 후백제\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n견훤이 완산주(전주)에 도읍을 정하고 세운 나라는?\n\n### 선택지: \n(A) 고려\n(B) 통일신라\n(C) 후고구려\n(D) 발해\n(E) 후백제\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n견훤이 완산주(전주)에 도읍을 정하고 세운 나라는?\n\n### 선택지: \n(A) 고려\n(B) 통일신라\n(C) 후고구려\n(D) 발해\n(E) 후백제\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n견훤이 완산주(전주)에 도읍을 정하고 세운 나라는?\n\n### 선택지: \n(A) 고려\n(B) 통일신라\n(C) 후고구려\n(D) 발해\n(E) 후백제\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.58984375", "False"]], [["-5.9609375", "False"]], [["-6.87890625", "False"]], [["-6.4140625", "False"]], [["-7.94140625", "False"]]], "filtered_resps": [["-5.58984375", "False"], ["-5.9609375", "False"], ["-6.87890625", "False"], ["-6.4140625", "False"], ["-7.94140625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "a0ff794b548b0d3ed93d284bcf9d3fa7486c3639695a1f2b0e5e8616a250711f", "prompt_hash": "6a23540ae30140027e993f07313900b188ea05702a7b8bf89be84b36bb0aa455", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 79, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려는 유교 정치 강화를 위해 최승로를 통해서 무엇을 만들었는가?\n\n### 선택지: \n(A) 과거제\n(B) 시무 26조\n(C) 시무 28조\n(D) 경국대전\n(E) 천거제\n\n### 정답:", "options": "['과거제', '시무 26조', '시무 28조', '경국대전', '천거제']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려는 유교 정치 강화를 위해 최승로를 통해서 무엇을 만들었는가?\n\n### 선택지: \n(A) 과거제\n(B) 시무 26조\n(C) 시무 28조\n(D) 경국대전\n(E) 천거제\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려는 유교 정치 강화를 위해 최승로를 통해서 무엇을 만들었는가?\n\n### 선택지: \n(A) 과거제\n(B) 시무 26조\n(C) 시무 28조\n(D) 경국대전\n(E) 천거제\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려는 유교 정치 강화를 위해 최승로를 통해서 무엇을 만들었는가?\n\n### 선택지: \n(A) 과거제\n(B) 시무 26조\n(C) 시무 28조\n(D) 경국대전\n(E) 천거제\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려는 유교 정치 강화를 위해 최승로를 통해서 무엇을 만들었는가?\n\n### 선택지: \n(A) 과거제\n(B) 시무 26조\n(C) 시무 28조\n(D) 경국대전\n(E) 천거제\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려는 유교 정치 강화를 위해 최승로를 통해서 무엇을 만들었는가?\n\n### 선택지: \n(A) 과거제\n(B) 시무 26조\n(C) 시무 28조\n(D) 경국대전\n(E) 천거제\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.7734375", "False"]], [["-6.70703125", "False"]], [["-8.2109375", "False"]], [["-7.5546875", "False"]], [["-9.0234375", "False"]]], "filtered_resps": [["-6.7734375", "False"], ["-6.70703125", "False"], ["-8.2109375", "False"], ["-7.5546875", "False"], ["-9.0234375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "3fad9014cb52e6c02cf1311738aad634614a7879dbde811f8319c73c0996f6d2", "prompt_hash": "0233a4c020664843e5ba4f4dd36298b6da025bb479f4fc950b7aba0e58124d4e", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 80, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 후기 임금 중에서 친원파를 숙청하고 정방을 폐지했던 임금은?\n\n### 선택지: \n(A) 충선왕\n(B) 충렬왕\n(C) 원종\n(D) 충숙왕\n(E) 공민왕\n\n### 정답:", "options": "['충선왕', '충렬왕', '원종', '충숙왕', '공민왕']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 후기 임금 중에서 친원파를 숙청하고 정방을 폐지했던 임금은?\n\n### 선택지: \n(A) 충선왕\n(B) 충렬왕\n(C) 원종\n(D) 충숙왕\n(E) 공민왕\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 후기 임금 중에서 친원파를 숙청하고 정방을 폐지했던 임금은?\n\n### 선택지: \n(A) 충선왕\n(B) 충렬왕\n(C) 원종\n(D) 충숙왕\n(E) 공민왕\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 후기 임금 중에서 친원파를 숙청하고 정방을 폐지했던 임금은?\n\n### 선택지: \n(A) 충선왕\n(B) 충렬왕\n(C) 원종\n(D) 충숙왕\n(E) 공민왕\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 후기 임금 중에서 친원파를 숙청하고 정방을 폐지했던 임금은?\n\n### 선택지: \n(A) 충선왕\n(B) 충렬왕\n(C) 원종\n(D) 충숙왕\n(E) 공민왕\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 후기 임금 중에서 친원파를 숙청하고 정방을 폐지했던 임금은?\n\n### 선택지: \n(A) 충선왕\n(B) 충렬왕\n(C) 원종\n(D) 충숙왕\n(E) 공민왕\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.31640625", "False"]], [["-6.5546875", "False"]], [["-7.5234375", "False"]], [["-7.640625", "False"]], [["-9.0078125", "False"]]], "filtered_resps": [["-6.31640625", "False"], ["-6.5546875", "False"], ["-7.5234375", "False"], ["-7.640625", "False"], ["-9.0078125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "17a67c9d74f6e0c5cac6925ade6d709309c0b821882da8401addc9dd7a5435f2", "prompt_hash": "5655b975841923ac3461182e0bf59968c20e05ac880e7e5ebd788a4edeaddc44", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 81, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 왕권 강화 기구는 승정원과 또 하나는 무엇인가?\n\n### 선택지: \n(A) 중추부\n(B) 비변사\n(C) 의금부\n(D) 사헌부\n(E) 규장각\n\n### 정답:", "options": "['중추부', '비변사', '의금부', '사헌부', '규장각']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 왕권 강화 기구는 승정원과 또 하나는 무엇인가?\n\n### 선택지: \n(A) 중추부\n(B) 비변사\n(C) 의금부\n(D) 사헌부\n(E) 규장각\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 왕권 강화 기구는 승정원과 또 하나는 무엇인가?\n\n### 선택지: \n(A) 중추부\n(B) 비변사\n(C) 의금부\n(D) 사헌부\n(E) 규장각\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 왕권 강화 기구는 승정원과 또 하나는 무엇인가?\n\n### 선택지: \n(A) 중추부\n(B) 비변사\n(C) 의금부\n(D) 사헌부\n(E) 규장각\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 왕권 강화 기구는 승정원과 또 하나는 무엇인가?\n\n### 선택지: \n(A) 중추부\n(B) 비변사\n(C) 의금부\n(D) 사헌부\n(E) 규장각\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 왕권 강화 기구는 승정원과 또 하나는 무엇인가?\n\n### 선택지: \n(A) 중추부\n(B) 비변사\n(C) 의금부\n(D) 사헌부\n(E) 규장각\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.5390625", "False"]], [["-6.32421875", "False"]], [["-7.625", "False"]], [["-7.3046875", "False"]], [["-8.46875", "False"]]], "filtered_resps": [["-6.5390625", "False"], ["-6.32421875", "False"], ["-7.625", "False"], ["-7.3046875", "False"], ["-8.46875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "c8d349986017679cfc807c766458d609372dda4aa31a3b8fb4e27798d98ada40", "prompt_hash": "38f5826ab4256d89046c9380407b7092b172cf272e89b8013796e01a61929a2c", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 82, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선은 지방 8도에 어떤 관리를 파견하였는가?\n\n### 선택지: \n(A) 좌랑\n(B) 절도사\n(C) 관찰사\n(D) 절제사\n(E) 감찰사\n\n### 정답:", "options": "['좌랑', '절도사', '관찰사', '절제사', '감찰사']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선은 지방 8도에 어떤 관리를 파견하였는가?\n\n### 선택지: \n(A) 좌랑\n(B) 절도사\n(C) 관찰사\n(D) 절제사\n(E) 감찰사\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선은 지방 8도에 어떤 관리를 파견하였는가?\n\n### 선택지: \n(A) 좌랑\n(B) 절도사\n(C) 관찰사\n(D) 절제사\n(E) 감찰사\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선은 지방 8도에 어떤 관리를 파견하였는가?\n\n### 선택지: \n(A) 좌랑\n(B) 절도사\n(C) 관찰사\n(D) 절제사\n(E) 감찰사\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선은 지방 8도에 어떤 관리를 파견하였는가?\n\n### 선택지: \n(A) 좌랑\n(B) 절도사\n(C) 관찰사\n(D) 절제사\n(E) 감찰사\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선은 지방 8도에 어떤 관리를 파견하였는가?\n\n### 선택지: \n(A) 좌랑\n(B) 절도사\n(C) 관찰사\n(D) 절제사\n(E) 감찰사\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.296875", "False"]], [["-6.07421875", "False"]], [["-7.69140625", "False"]], [["-7.0", "False"]], [["-9.1640625", "False"]]], "filtered_resps": [["-6.296875", "False"], ["-6.07421875", "False"], ["-7.69140625", "False"], ["-7.0", "False"], ["-9.1640625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "80d470a98f47fe5768636a9e9704b1b778e85db61a6c5694faeade925877d4dc", "prompt_hash": "afcda78da032ba86333ea823afec073913c9ba914745821b127f651af6883dfd", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 83, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 붕당정치는 어느 임금부터 시작되었는가?\n\n### 선택지: \n(A) 효종\n(B) 광해군\n(C) 명종\n(D) 선조\n(E) 인조\n\n### 정답:", "options": "['효종', '광해군', '명종', '선조', '인조']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 붕당정치는 어느 임금부터 시작되었는가?\n\n### 선택지: \n(A) 효종\n(B) 광해군\n(C) 명종\n(D) 선조\n(E) 인조\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 붕당정치는 어느 임금부터 시작되었는가?\n\n### 선택지: \n(A) 효종\n(B) 광해군\n(C) 명종\n(D) 선조\n(E) 인조\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 붕당정치는 어느 임금부터 시작되었는가?\n\n### 선택지: \n(A) 효종\n(B) 광해군\n(C) 명종\n(D) 선조\n(E) 인조\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 붕당정치는 어느 임금부터 시작되었는가?\n\n### 선택지: \n(A) 효종\n(B) 광해군\n(C) 명종\n(D) 선조\n(E) 인조\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 붕당정치는 어느 임금부터 시작되었는가?\n\n### 선택지: \n(A) 효종\n(B) 광해군\n(C) 명종\n(D) 선조\n(E) 인조\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.13671875", "False"]], [["-6.21484375", "False"]], [["-8.2265625", "False"]], [["-7.390625", "False"]], [["-9.2734375", "False"]]], "filtered_resps": [["-6.13671875", "False"], ["-6.21484375", "False"], ["-8.2265625", "False"], ["-7.390625", "False"], ["-9.2734375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "36483bfff1cc3bd452dc5b9e53b1f05ce73a53cb8e40bac3f33fdfa05c941721", "prompt_hash": "cf9d2006bebf90eccb9b4c62036be202824580281f1cda215c2e851e2d95203d", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 84, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n후금이 청을 건국하고 조선에 군신관계를 요구한 것을 계기로 일어난 전쟁은?\n\n### 선택지: \n(A) 임진왜란\n(B) 병인양요\n(C) 신미양요\n(D) 병자호란\n(E) 정묘호란\n\n### 정답:", "options": "['임진왜란', '병인양요', '신미양요', '병자호란', '정묘호란']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n후금이 청을 건국하고 조선에 군신관계를 요구한 것을 계기로 일어난 전쟁은?\n\n### 선택지: \n(A) 임진왜란\n(B) 병인양요\n(C) 신미양요\n(D) 병자호란\n(E) 정묘호란\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n후금이 청을 건국하고 조선에 군신관계를 요구한 것을 계기로 일어난 전쟁은?\n\n### 선택지: \n(A) 임진왜란\n(B) 병인양요\n(C) 신미양요\n(D) 병자호란\n(E) 정묘호란\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n후금이 청을 건국하고 조선에 군신관계를 요구한 것을 계기로 일어난 전쟁은?\n\n### 선택지: \n(A) 임진왜란\n(B) 병인양요\n(C) 신미양요\n(D) 병자호란\n(E) 정묘호란\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n후금이 청을 건국하고 조선에 군신관계를 요구한 것을 계기로 일어난 전쟁은?\n\n### 선택지: \n(A) 임진왜란\n(B) 병인양요\n(C) 신미양요\n(D) 병자호란\n(E) 정묘호란\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n후금이 청을 건국하고 조선에 군신관계를 요구한 것을 계기로 일어난 전쟁은?\n\n### 선택지: \n(A) 임진왜란\n(B) 병인양요\n(C) 신미양요\n(D) 병자호란\n(E) 정묘호란\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.4140625", "False"]], [["-5.84765625", "False"]], [["-7.0625", "False"]], [["-5.953125", "False"]], [["-7.3359375", "False"]]], "filtered_resps": [["-5.4140625", "False"], ["-5.84765625", "False"], ["-7.0625", "False"], ["-5.953125", "False"], ["-7.3359375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "141adfa9b8cb1b9fca4355c83e4d25774d475ade5e21022c4ca16ce5cd4ced28", "prompt_hash": "b6071819d9c190c97e34c59adb28b9104b0f423b05942504db273eca26fb3bb0", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 85, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려의 무신들은 어떤 사건을 계기로 정권을 장악했는가?\n\n### 선택지: \n(A) 우정총국 개국연\n(B) 갑신정변\n(C) 의화단 사건\n(D) 몽고의 침입\n(E) 무신정변\n\n### 정답:", "options": "['우정총국 개국연', '갑신정변', '의화단 사건', '몽고의 침입', '무신정변']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려의 무신들은 어떤 사건을 계기로 정권을 장악했는가?\n\n### 선택지: \n(A) 우정총국 개국연\n(B) 갑신정변\n(C) 의화단 사건\n(D) 몽고의 침입\n(E) 무신정변\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려의 무신들은 어떤 사건을 계기로 정권을 장악했는가?\n\n### 선택지: \n(A) 우정총국 개국연\n(B) 갑신정변\n(C) 의화단 사건\n(D) 몽고의 침입\n(E) 무신정변\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려의 무신들은 어떤 사건을 계기로 정권을 장악했는가?\n\n### 선택지: \n(A) 우정총국 개국연\n(B) 갑신정변\n(C) 의화단 사건\n(D) 몽고의 침입\n(E) 무신정변\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려의 무신들은 어떤 사건을 계기로 정권을 장악했는가?\n\n### 선택지: \n(A) 우정총국 개국연\n(B) 갑신정변\n(C) 의화단 사건\n(D) 몽고의 침입\n(E) 무신정변\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려의 무신들은 어떤 사건을 계기로 정권을 장악했는가?\n\n### 선택지: \n(A) 우정총국 개국연\n(B) 갑신정변\n(C) 의화단 사건\n(D) 몽고의 침입\n(E) 무신정변\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.23828125", "False"]], [["-5.91796875", "False"]], [["-7.81640625", "False"]], [["-6.6953125", "False"]], [["-7.89453125", "False"]]], "filtered_resps": [["-6.23828125", "False"], ["-5.91796875", "False"], ["-7.81640625", "False"], ["-6.6953125", "False"], ["-7.89453125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "4e3f5707c36a6cb973fc1de5f30723f1255b3d8de79b3448bdd1a6f5a5a90236", "prompt_hash": "65b23c6c59a6da59221bc4878b433e7de569d833de4bcaaa086fe43dacf879c1", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 86, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n양반과 상민의 중간 신분 계층을 무엇이라 했는가?\n\n### 선택지: \n(A) 중인\n(B) 관민\n(C) 관리\n(D) 노비\n(E) 중민\n\n### 정답:", "options": "['중인', '관민', '관리', '노비', '중민']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n양반과 상민의 중간 신분 계층을 무엇이라 했는가?\n\n### 선택지: \n(A) 중인\n(B) 관민\n(C) 관리\n(D) 노비\n(E) 중민\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n양반과 상민의 중간 신분 계층을 무엇이라 했는가?\n\n### 선택지: \n(A) 중인\n(B) 관민\n(C) 관리\n(D) 노비\n(E) 중민\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n양반과 상민의 중간 신분 계층을 무엇이라 했는가?\n\n### 선택지: \n(A) 중인\n(B) 관민\n(C) 관리\n(D) 노비\n(E) 중민\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n양반과 상민의 중간 신분 계층을 무엇이라 했는가?\n\n### 선택지: \n(A) 중인\n(B) 관민\n(C) 관리\n(D) 노비\n(E) 중민\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n양반과 상민의 중간 신분 계층을 무엇이라 했는가?\n\n### 선택지: \n(A) 중인\n(B) 관민\n(C) 관리\n(D) 노비\n(E) 중민\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.27734375", "False"]], [["-6.11328125", "False"]], [["-8.09375", "False"]], [["-7.1640625", "False"]], [["-9.3671875", "False"]]], "filtered_resps": [["-6.27734375", "False"], ["-6.11328125", "False"], ["-8.09375", "False"], ["-7.1640625", "False"], ["-9.3671875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "a527f5a2f45d3bb41e11af6faa990c7aeb0f270aa2618f129194fbde9674e628", "prompt_hash": "f99705217a6d6a64c28a91ec1fb1ed811d411aca18ab72fec33a519e6c380bd4", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 87, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n인도와 중앙아시아의 여러나라의 풍물을 기록한 왕오천축국전은 누가 썼는가?\n\n### 선택지: \n(A) 의상\n(B) 화엄\n(C) 보덕\n(D) 혜초\n(E) 원효\n\n### 정답:", "options": "['의상', '화엄', '보덕', '혜초', '원효']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n인도와 중앙아시아의 여러나라의 풍물을 기록한 왕오천축국전은 누가 썼는가?\n\n### 선택지: \n(A) 의상\n(B) 화엄\n(C) 보덕\n(D) 혜초\n(E) 원효\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n인도와 중앙아시아의 여러나라의 풍물을 기록한 왕오천축국전은 누가 썼는가?\n\n### 선택지: \n(A) 의상\n(B) 화엄\n(C) 보덕\n(D) 혜초\n(E) 원효\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n인도와 중앙아시아의 여러나라의 풍물을 기록한 왕오천축국전은 누가 썼는가?\n\n### 선택지: \n(A) 의상\n(B) 화엄\n(C) 보덕\n(D) 혜초\n(E) 원효\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n인도와 중앙아시아의 여러나라의 풍물을 기록한 왕오천축국전은 누가 썼는가?\n\n### 선택지: \n(A) 의상\n(B) 화엄\n(C) 보덕\n(D) 혜초\n(E) 원효\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n인도와 중앙아시아의 여러나라의 풍물을 기록한 왕오천축국전은 누가 썼는가?\n\n### 선택지: \n(A) 의상\n(B) 화엄\n(C) 보덕\n(D) 혜초\n(E) 원효\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.08984375", "False"]], [["-5.66796875", "False"]], [["-7.47265625", "False"]], [["-7.0390625", "False"]], [["-8.8046875", "False"]]], "filtered_resps": [["-6.08984375", "False"], ["-5.66796875", "False"], ["-7.47265625", "False"], ["-7.0390625", "False"], ["-8.8046875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "98a58ce38622a9e71b6a74c483bf79425eb18790de20592592a0900875faf028", "prompt_hash": "ce830fa74149f9ec3ec6a2db786cebeb1b8293bb4f6e1f849e4ee8e9de137c69", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 88, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n세계에서 가장 오래된 목판 인쇄물은 무엇인가?\n\n### 선택지: \n(A) 무구정광다라니경\n(B) 금강삼매경론\n(C) 직지심체요절\n(D) 대승오온론\n(E) 팔만대장경\n\n### 정답:", "options": "['무구정광다라니경', '금강삼매경론', '직지심체요절', '대승오온론', '팔만대장경']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n세계에서 가장 오래된 목판 인쇄물은 무엇인가?\n\n### 선택지: \n(A) 무구정광다라니경\n(B) 금강삼매경론\n(C) 직지심체요절\n(D) 대승오온론\n(E) 팔만대장경\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n세계에서 가장 오래된 목판 인쇄물은 무엇인가?\n\n### 선택지: \n(A) 무구정광다라니경\n(B) 금강삼매경론\n(C) 직지심체요절\n(D) 대승오온론\n(E) 팔만대장경\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n세계에서 가장 오래된 목판 인쇄물은 무엇인가?\n\n### 선택지: \n(A) 무구정광다라니경\n(B) 금강삼매경론\n(C) 직지심체요절\n(D) 대승오온론\n(E) 팔만대장경\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n세계에서 가장 오래된 목판 인쇄물은 무엇인가?\n\n### 선택지: \n(A) 무구정광다라니경\n(B) 금강삼매경론\n(C) 직지심체요절\n(D) 대승오온론\n(E) 팔만대장경\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n세계에서 가장 오래된 목판 인쇄물은 무엇인가?\n\n### 선택지: \n(A) 무구정광다라니경\n(B) 금강삼매경론\n(C) 직지심체요절\n(D) 대승오온론\n(E) 팔만대장경\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.89453125", "False"]], [["-5.8671875", "False"]], [["-7.7109375", "False"]], [["-6.609375", "False"]], [["-8.6171875", "False"]]], "filtered_resps": [["-5.89453125", "False"], ["-5.8671875", "False"], ["-7.7109375", "False"], ["-6.609375", "False"], ["-8.6171875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "a3a46bbdaa2e8cb459e3a19b2409883447ae22da136bc35dddf4a2fa36ec78a7", "prompt_hash": "4acb610a920c759fb3ec785a7d1e5a9188e803fa3edb39b487df2a3c5cafbc79", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 89, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 미륵사지 석탑은 어떤 양식으로 만들어진 것인가?\n\n### 선택지: \n(A) 백제계 석탑양식\n(B) 목탑양식\n(C) 신라계 석탑 양식\n(D) 석탑양식\n(E) 고구려계 석탑양식\n\n### 정답:", "options": "['백제계 석탑양식', '목탑양식', '신라계 석탑 양식', '석탑양식', '고구려계 석탑양식']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 미륵사지 석탑은 어떤 양식으로 만들어진 것인가?\n\n### 선택지: \n(A) 백제계 석탑양식\n(B) 목탑양식\n(C) 신라계 석탑 양식\n(D) 석탑양식\n(E) 고구려계 석탑양식\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 미륵사지 석탑은 어떤 양식으로 만들어진 것인가?\n\n### 선택지: \n(A) 백제계 석탑양식\n(B) 목탑양식\n(C) 신라계 석탑 양식\n(D) 석탑양식\n(E) 고구려계 석탑양식\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 미륵사지 석탑은 어떤 양식으로 만들어진 것인가?\n\n### 선택지: \n(A) 백제계 석탑양식\n(B) 목탑양식\n(C) 신라계 석탑 양식\n(D) 석탑양식\n(E) 고구려계 석탑양식\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 미륵사지 석탑은 어떤 양식으로 만들어진 것인가?\n\n### 선택지: \n(A) 백제계 석탑양식\n(B) 목탑양식\n(C) 신라계 석탑 양식\n(D) 석탑양식\n(E) 고구려계 석탑양식\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n백제의 미륵사지 석탑은 어떤 양식으로 만들어진 것인가?\n\n### 선택지: \n(A) 백제계 석탑양식\n(B) 목탑양식\n(C) 신라계 석탑 양식\n(D) 석탑양식\n(E) 고구려계 석탑양식\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.19921875", "False"]], [["-5.76953125", "False"]], [["-7.69140625", "False"]], [["-6.73046875", "False"]], [["-8.265625", "False"]]], "filtered_resps": [["-6.19921875", "False"], ["-5.76953125", "False"], ["-7.69140625", "False"], ["-6.73046875", "False"], ["-8.265625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "d569b6fbccaeb50154fe76ac4d74b4f9e6e84ea12e8c9461cc8f4ace8af7356a", "prompt_hash": "22d56661343f66f5d8f86ea1049f325b3e86c3ffee1a94454ad7a7f713d12d21", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 90, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 세종시대에 충효 효자 열녀 등의 행적을 그림으로 그리고 설명한 책은?\n\n### 선택지: \n(A) 미인도\n(B) 모견도\n(C) 조충도\n(D) 삼강행실도\n(E) 진경산수화\n\n### 정답:", "options": "['미인도', '모견도', '조충도', '삼강행실도', '진경산수화']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 세종시대에 충효 효자 열녀 등의 행적을 그림으로 그리고 설명한 책은?\n\n### 선택지: \n(A) 미인도\n(B) 모견도\n(C) 조충도\n(D) 삼강행실도\n(E) 진경산수화\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 세종시대에 충효 효자 열녀 등의 행적을 그림으로 그리고 설명한 책은?\n\n### 선택지: \n(A) 미인도\n(B) 모견도\n(C) 조충도\n(D) 삼강행실도\n(E) 진경산수화\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 세종시대에 충효 효자 열녀 등의 행적을 그림으로 그리고 설명한 책은?\n\n### 선택지: \n(A) 미인도\n(B) 모견도\n(C) 조충도\n(D) 삼강행실도\n(E) 진경산수화\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 세종시대에 충효 효자 열녀 등의 행적을 그림으로 그리고 설명한 책은?\n\n### 선택지: \n(A) 미인도\n(B) 모견도\n(C) 조충도\n(D) 삼강행실도\n(E) 진경산수화\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 세종시대에 충효 효자 열녀 등의 행적을 그림으로 그리고 설명한 책은?\n\n### 선택지: \n(A) 미인도\n(B) 모견도\n(C) 조충도\n(D) 삼강행실도\n(E) 진경산수화\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.1796875", "False"]], [["-6.40625", "False"]], [["-7.9609375", "False"]], [["-7.046875", "False"]], [["-8.984375", "False"]]], "filtered_resps": [["-6.1796875", "False"], ["-6.40625", "False"], ["-7.9609375", "False"], ["-7.046875", "False"], ["-8.984375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "816cf2b5d38b1ec08d80d82d7958a1021cb11766c8712e7d7a2cdd06bd27d064", "prompt_hash": "21b21f72dc5c9c33dfca573e508e57f9dc6ebc30add8de6f5ff5689f366ea860", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 91, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n자유당의 부정과 3.15 부정 선거를 계기로 일어난 일은?\n\n### 선택지: \n(A) 6.25 전쟁\n(B) 5.18 민주화운동\n(C) 4.19혁명\n(D) 6월 민주 항쟁\n(E) 12.12 군사 사태\n\n### 정답:", "options": "['6.25 전쟁', '5.18 민주화운동', '4.19혁명', '6월 민주 항쟁', '12.12 군사 사태']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n자유당의 부정과 3.15 부정 선거를 계기로 일어난 일은?\n\n### 선택지: \n(A) 6.25 전쟁\n(B) 5.18 민주화운동\n(C) 4.19혁명\n(D) 6월 민주 항쟁\n(E) 12.12 군사 사태\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n자유당의 부정과 3.15 부정 선거를 계기로 일어난 일은?\n\n### 선택지: \n(A) 6.25 전쟁\n(B) 5.18 민주화운동\n(C) 4.19혁명\n(D) 6월 민주 항쟁\n(E) 12.12 군사 사태\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n자유당의 부정과 3.15 부정 선거를 계기로 일어난 일은?\n\n### 선택지: \n(A) 6.25 전쟁\n(B) 5.18 민주화운동\n(C) 4.19혁명\n(D) 6월 민주 항쟁\n(E) 12.12 군사 사태\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n자유당의 부정과 3.15 부정 선거를 계기로 일어난 일은?\n\n### 선택지: \n(A) 6.25 전쟁\n(B) 5.18 민주화운동\n(C) 4.19혁명\n(D) 6월 민주 항쟁\n(E) 12.12 군사 사태\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n자유당의 부정과 3.15 부정 선거를 계기로 일어난 일은?\n\n### 선택지: \n(A) 6.25 전쟁\n(B) 5.18 민주화운동\n(C) 4.19혁명\n(D) 6월 민주 항쟁\n(E) 12.12 군사 사태\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.75390625", "False"]], [["-6.3984375", "False"]], [["-7.64453125", "False"]], [["-7.06640625", "False"]], [["-8.1328125", "False"]]], "filtered_resps": [["-5.75390625", "False"], ["-6.3984375", "False"], ["-7.64453125", "False"], ["-7.06640625", "False"], ["-8.1328125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "2fa9ea104635401192a779e22e3bec3c507d31d158b73079ebd889beb8ba850c", "prompt_hash": "8d6fd8db9a169189fd83de75c212c874ca3a6c5d3e62cbc3b774783cb2e7edf7", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 92, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대통령 직선제를 요구하였고, 광주항쟁 진상규명과 책임자 처벌 등을 요구하며 일어났던 국민적 항행은?\n\n### 선택지: \n(A) 4.19 혁명\n(B) 5.18 민주화운동\n(C) 6월 민주항쟁\n(D) 12.12 군사 사태\n(E) 6.25 전쟁\n\n### 정답:", "options": "['4.19 혁명', '5.18 민주화운동', '6월 민주항쟁', '12.12 군사 사태', '6.25 전쟁']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대통령 직선제를 요구하였고, 광주항쟁 진상규명과 책임자 처벌 등을 요구하며 일어났던 국민적 항행은?\n\n### 선택지: \n(A) 4.19 혁명\n(B) 5.18 민주화운동\n(C) 6월 민주항쟁\n(D) 12.12 군사 사태\n(E) 6.25 전쟁\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대통령 직선제를 요구하였고, 광주항쟁 진상규명과 책임자 처벌 등을 요구하며 일어났던 국민적 항행은?\n\n### 선택지: \n(A) 4.19 혁명\n(B) 5.18 민주화운동\n(C) 6월 민주항쟁\n(D) 12.12 군사 사태\n(E) 6.25 전쟁\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대통령 직선제를 요구하였고, 광주항쟁 진상규명과 책임자 처벌 등을 요구하며 일어났던 국민적 항행은?\n\n### 선택지: \n(A) 4.19 혁명\n(B) 5.18 민주화운동\n(C) 6월 민주항쟁\n(D) 12.12 군사 사태\n(E) 6.25 전쟁\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대통령 직선제를 요구하였고, 광주항쟁 진상규명과 책임자 처벌 등을 요구하며 일어났던 국민적 항행은?\n\n### 선택지: \n(A) 4.19 혁명\n(B) 5.18 민주화운동\n(C) 6월 민주항쟁\n(D) 12.12 군사 사태\n(E) 6.25 전쟁\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n대통령 직선제를 요구하였고, 광주항쟁 진상규명과 책임자 처벌 등을 요구하며 일어났던 국민적 항행은?\n\n### 선택지: \n(A) 4.19 혁명\n(B) 5.18 민주화운동\n(C) 6월 민주항쟁\n(D) 12.12 군사 사태\n(E) 6.25 전쟁\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.50390625", "False"]], [["-6.234375", "False"]], [["-7.21484375", "False"]], [["-6.81640625", "False"]], [["-8.15625", "False"]]], "filtered_resps": [["-5.50390625", "False"], ["-6.234375", "False"], ["-7.21484375", "False"], ["-6.81640625", "False"], ["-8.15625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "d3ff96364d73db81f3ec4d0a1c0ed996dfb602b3a59115ae9a30c9380072ce1d", "prompt_hash": "34ac0bf42555977f263930f79977c2fb57f4bec3465e4c4009f380a43180d155", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 93, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n국제 통화기금(IMF)의 긴급 지원을 요청했던 정부는?\n\n### 선택지: \n(A) 노무현 정부\n(B) 전두환 정부\n(C) 김영삼정부\n(D) 김대중 정부\n(E) 노태우 정부\n\n### 정답:", "options": "['노무현 정부', '전두환 정부', '김영삼정부', '김대중 정부', '노태우 정부']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n국제 통화기금(IMF)의 긴급 지원을 요청했던 정부는?\n\n### 선택지: \n(A) 노무현 정부\n(B) 전두환 정부\n(C) 김영삼정부\n(D) 김대중 정부\n(E) 노태우 정부\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n국제 통화기금(IMF)의 긴급 지원을 요청했던 정부는?\n\n### 선택지: \n(A) 노무현 정부\n(B) 전두환 정부\n(C) 김영삼정부\n(D) 김대중 정부\n(E) 노태우 정부\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n국제 통화기금(IMF)의 긴급 지원을 요청했던 정부는?\n\n### 선택지: \n(A) 노무현 정부\n(B) 전두환 정부\n(C) 김영삼정부\n(D) 김대중 정부\n(E) 노태우 정부\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n국제 통화기금(IMF)의 긴급 지원을 요청했던 정부는?\n\n### 선택지: \n(A) 노무현 정부\n(B) 전두환 정부\n(C) 김영삼정부\n(D) 김대중 정부\n(E) 노태우 정부\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n국제 통화기금(IMF)의 긴급 지원을 요청했던 정부는?\n\n### 선택지: \n(A) 노무현 정부\n(B) 전두환 정부\n(C) 김영삼정부\n(D) 김대중 정부\n(E) 노태우 정부\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.75", "False"]], [["-5.99609375", "False"]], [["-7.28125", "False"]], [["-6.734375", "False"]], [["-9.0390625", "False"]]], "filtered_resps": [["-5.75", "False"], ["-5.99609375", "False"], ["-7.28125", "False"], ["-6.734375", "False"], ["-9.0390625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "bbc65138ce56a2e334c625f53618cecb172d0901f5f11c1aa708ff7459dde5f3", "prompt_hash": "02fa5fda3b367354b005e5fe9bc6d49f4cb879aa08bff2e4806b65d4c1b6dda9", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 94, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n주몽의 아들인 온조가 세운 나라의 이름은?\n\n### 선택지: \n(A) 고구려\n(B) 발해\n(C) 신라\n(D) 고려\n(E) 백제\n\n### 정답:", "options": "['고구려', '발해', '신라', '고려', '백제']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n주몽의 아들인 온조가 세운 나라의 이름은?\n\n### 선택지: \n(A) 고구려\n(B) 발해\n(C) 신라\n(D) 고려\n(E) 백제\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n주몽의 아들인 온조가 세운 나라의 이름은?\n\n### 선택지: \n(A) 고구려\n(B) 발해\n(C) 신라\n(D) 고려\n(E) 백제\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n주몽의 아들인 온조가 세운 나라의 이름은?\n\n### 선택지: \n(A) 고구려\n(B) 발해\n(C) 신라\n(D) 고려\n(E) 백제\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n주몽의 아들인 온조가 세운 나라의 이름은?\n\n### 선택지: \n(A) 고구려\n(B) 발해\n(C) 신라\n(D) 고려\n(E) 백제\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n주몽의 아들인 온조가 세운 나라의 이름은?\n\n### 선택지: \n(A) 고구려\n(B) 발해\n(C) 신라\n(D) 고려\n(E) 백제\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.921875", "False"]], [["-6.44140625", "False"]], [["-7.796875", "False"]], [["-7.3046875", "False"]], [["-8.7734375", "False"]]], "filtered_resps": [["-5.921875", "False"], ["-6.44140625", "False"], ["-7.796875", "False"], ["-7.3046875", "False"], ["-8.7734375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "dd76d4503e45a1d8b9b003eb45a90d99d8f93f1c71d1aeea43fa886d36d5183e", "prompt_hash": "ae5cffe5d0d1d34c587792ca01e43fc58933141050d0e6c5a713a0eeda33d846", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 95, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라를 세운 사람은 누구인가?\n\n### 선택지: \n(A) 온조\n(B) 김유신\n(C) 박혁거세\n(D) 주몽\n(E) 온달\n\n### 정답:", "options": "['온조', '김유신', '박혁거세', '주몽', '온달']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라를 세운 사람은 누구인가?\n\n### 선택지: \n(A) 온조\n(B) 김유신\n(C) 박혁거세\n(D) 주몽\n(E) 온달\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라를 세운 사람은 누구인가?\n\n### 선택지: \n(A) 온조\n(B) 김유신\n(C) 박혁거세\n(D) 주몽\n(E) 온달\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라를 세운 사람은 누구인가?\n\n### 선택지: \n(A) 온조\n(B) 김유신\n(C) 박혁거세\n(D) 주몽\n(E) 온달\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라를 세운 사람은 누구인가?\n\n### 선택지: \n(A) 온조\n(B) 김유신\n(C) 박혁거세\n(D) 주몽\n(E) 온달\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라를 세운 사람은 누구인가?\n\n### 선택지: \n(A) 온조\n(B) 김유신\n(C) 박혁거세\n(D) 주몽\n(E) 온달\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.7421875", "False"]], [["-6.66015625", "False"]], [["-8.0625", "False"]], [["-7.74609375", "False"]], [["-9.609375", "False"]]], "filtered_resps": [["-6.7421875", "False"], ["-6.66015625", "False"], ["-8.0625", "False"], ["-7.74609375", "False"], ["-9.609375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "d5708811e7de0550a6d9ad617800bdb4c86f160e496ea4e04b939d79a5fc0c42", "prompt_hash": "ce406bdcce081fdd1f84d2fc93c4c8e1b279f40ebca5337191a1a28f4ae442ee", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 96, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n삼국을 하나로 통일한 나라의 이름은?\n\n### 선택지: \n(A) 발해\n(B) 신라\n(C) 백제\n(D) 고려\n(E) 고구려-당 전쟁\n\n### 정답:", "options": "['발해', '신라', '백제', '고려', '고구려-당 전쟁']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n삼국을 하나로 통일한 나라의 이름은?\n\n### 선택지: \n(A) 발해\n(B) 신라\n(C) 백제\n(D) 고려\n(E) 고구려-당 전쟁\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n삼국을 하나로 통일한 나라의 이름은?\n\n### 선택지: \n(A) 발해\n(B) 신라\n(C) 백제\n(D) 고려\n(E) 고구려-당 전쟁\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n삼국을 하나로 통일한 나라의 이름은?\n\n### 선택지: \n(A) 발해\n(B) 신라\n(C) 백제\n(D) 고려\n(E) 고구려-당 전쟁\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n삼국을 하나로 통일한 나라의 이름은?\n\n### 선택지: \n(A) 발해\n(B) 신라\n(C) 백제\n(D) 고려\n(E) 고구려-당 전쟁\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n삼국을 하나로 통일한 나라의 이름은?\n\n### 선택지: \n(A) 발해\n(B) 신라\n(C) 백제\n(D) 고려\n(E) 고구려-당 전쟁\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.7734375", "False"]], [["-5.98046875", "False"]], [["-7.37109375", "False"]], [["-6.65625", "False"]], [["-8.15625", "False"]]], "filtered_resps": [["-5.7734375", "False"], ["-5.98046875", "False"], ["-7.37109375", "False"], ["-6.65625", "False"], ["-8.15625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "b411cc75264f7514ab8401af62f26fe40e675a34a64ac4b890296418b927e076", "prompt_hash": "023bab17cf690d0ca7d7e0dfe7d9942692297eb2945459c187595ad347dd7db5", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 97, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 왕으로 백제와 힘을 합하여 고구려를 공격하고 한강 유역을 차지하였으며, 화랑도라는 제도를 만든 사람은?\n\n### 선택지: \n(A) 침류왕\n(B) 법흥왕\n(C) 문무왕\n(D) 진흥왕\n(E) 태종무열왕\n\n### 정답:", "options": "['침류왕', '법흥왕', '문무왕', '진흥왕', '태종무열왕']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 왕으로 백제와 힘을 합하여 고구려를 공격하고 한강 유역을 차지하였으며, 화랑도라는 제도를 만든 사람은?\n\n### 선택지: \n(A) 침류왕\n(B) 법흥왕\n(C) 문무왕\n(D) 진흥왕\n(E) 태종무열왕\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 왕으로 백제와 힘을 합하여 고구려를 공격하고 한강 유역을 차지하였으며, 화랑도라는 제도를 만든 사람은?\n\n### 선택지: \n(A) 침류왕\n(B) 법흥왕\n(C) 문무왕\n(D) 진흥왕\n(E) 태종무열왕\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 왕으로 백제와 힘을 합하여 고구려를 공격하고 한강 유역을 차지하였으며, 화랑도라는 제도를 만든 사람은?\n\n### 선택지: \n(A) 침류왕\n(B) 법흥왕\n(C) 문무왕\n(D) 진흥왕\n(E) 태종무열왕\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 왕으로 백제와 힘을 합하여 고구려를 공격하고 한강 유역을 차지하였으며, 화랑도라는 제도를 만든 사람은?\n\n### 선택지: \n(A) 침류왕\n(B) 법흥왕\n(C) 문무왕\n(D) 진흥왕\n(E) 태종무열왕\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 왕으로 백제와 힘을 합하여 고구려를 공격하고 한강 유역을 차지하였으며, 화랑도라는 제도를 만든 사람은?\n\n### 선택지: \n(A) 침류왕\n(B) 법흥왕\n(C) 문무왕\n(D) 진흥왕\n(E) 태종무열왕\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.703125", "False"]], [["-6.05859375", "False"]], [["-6.9296875", "False"]], [["-6.15234375", "False"]], [["-7.9453125", "False"]]], "filtered_resps": [["-5.703125", "False"], ["-6.05859375", "False"], ["-6.9296875", "False"], ["-6.15234375", "False"], ["-7.9453125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "edcdae328bbcc564a156487c44e803265dc7a54310a37676069986bf38802576", "prompt_hash": "e3715eaa8435a8b2be41f6095551beb6a6de7c8058b0b24d446759fad057f552", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 98, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n화랑도 출신으로 무열왕을 도와 고구려와 백제를 무찌르는 데 큰 공을 세워 삼국 통일의 기틀을 마련한 사람은?\n\n### 선택지: \n(A) 김춘추\n(B) 김법민\n(C) 박혁거세\n(D) 김유신\n(E) 온조\n\n### 정답:", "options": "['김춘추', '김법민', '박혁거세', '김유신', '온조']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n화랑도 출신으로 무열왕을 도와 고구려와 백제를 무찌르는 데 큰 공을 세워 삼국 통일의 기틀을 마련한 사람은?\n\n### 선택지: \n(A) 김춘추\n(B) 김법민\n(C) 박혁거세\n(D) 김유신\n(E) 온조\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n화랑도 출신으로 무열왕을 도와 고구려와 백제를 무찌르는 데 큰 공을 세워 삼국 통일의 기틀을 마련한 사람은?\n\n### 선택지: \n(A) 김춘추\n(B) 김법민\n(C) 박혁거세\n(D) 김유신\n(E) 온조\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n화랑도 출신으로 무열왕을 도와 고구려와 백제를 무찌르는 데 큰 공을 세워 삼국 통일의 기틀을 마련한 사람은?\n\n### 선택지: \n(A) 김춘추\n(B) 김법민\n(C) 박혁거세\n(D) 김유신\n(E) 온조\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n화랑도 출신으로 무열왕을 도와 고구려와 백제를 무찌르는 데 큰 공을 세워 삼국 통일의 기틀을 마련한 사람은?\n\n### 선택지: \n(A) 김춘추\n(B) 김법민\n(C) 박혁거세\n(D) 김유신\n(E) 온조\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n화랑도 출신으로 무열왕을 도와 고구려와 백제를 무찌르는 데 큰 공을 세워 삼국 통일의 기틀을 마련한 사람은?\n\n### 선택지: \n(A) 김춘추\n(B) 김법민\n(C) 박혁거세\n(D) 김유신\n(E) 온조\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.54296875", "False"]], [["-6.19140625", "False"]], [["-7.09375", "False"]], [["-6.5546875", "False"]], [["-8.390625", "False"]]], "filtered_resps": [["-5.54296875", "False"], ["-6.19140625", "False"], ["-7.09375", "False"], ["-6.5546875", "False"], ["-8.390625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "557eeec298e97a2d9cbe621d58ed79b0eb01306e42026604b7a7341501f9de38", "prompt_hash": "0b6872564d129fff9e848c4a5eea3f75227dd808aed2097b0d6c8eb654720ea0", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 99, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n후고구려의 장군으로 다시 삼국을 통일하였고, 고구려의 기상을 이어받아 나라 이름을 고려라고 한 사람은?\n\n### 선택지: \n(A) 궁예\n(B) 박혁거세\n(C) 왕건\n(D) 문무왕\n(E) 견훤\n\n### 정답:", "options": "['궁예', '박혁거세', '왕건', '문무왕', '견훤']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n후고구려의 장군으로 다시 삼국을 통일하였고, 고구려의 기상을 이어받아 나라 이름을 고려라고 한 사람은?\n\n### 선택지: \n(A) 궁예\n(B) 박혁거세\n(C) 왕건\n(D) 문무왕\n(E) 견훤\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n후고구려의 장군으로 다시 삼국을 통일하였고, 고구려의 기상을 이어받아 나라 이름을 고려라고 한 사람은?\n\n### 선택지: \n(A) 궁예\n(B) 박혁거세\n(C) 왕건\n(D) 문무왕\n(E) 견훤\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n후고구려의 장군으로 다시 삼국을 통일하였고, 고구려의 기상을 이어받아 나라 이름을 고려라고 한 사람은?\n\n### 선택지: \n(A) 궁예\n(B) 박혁거세\n(C) 왕건\n(D) 문무왕\n(E) 견훤\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n후고구려의 장군으로 다시 삼국을 통일하였고, 고구려의 기상을 이어받아 나라 이름을 고려라고 한 사람은?\n\n### 선택지: \n(A) 궁예\n(B) 박혁거세\n(C) 왕건\n(D) 문무왕\n(E) 견훤\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n후고구려의 장군으로 다시 삼국을 통일하였고, 고구려의 기상을 이어받아 나라 이름을 고려라고 한 사람은?\n\n### 선택지: \n(A) 궁예\n(B) 박혁거세\n(C) 왕건\n(D) 문무왕\n(E) 견훤\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.51953125", "False"]], [["-5.8203125", "False"]], [["-6.5859375", "False"]], [["-6.48046875", "False"]], [["-7.96484375", "False"]]], "filtered_resps": [["-5.51953125", "False"], ["-5.8203125", "False"], ["-6.5859375", "False"], ["-6.48046875", "False"], ["-7.96484375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "c72c28baf0591630a097ee1756eb303690509b2ca1645f0a45e5c9040fbb0034", "prompt_hash": "6df2636eb281a8eb456a65e60b5bbfb2e1b431ec7bcb9bcc5b7965f459a8ea28", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 100, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려가 도읍지로 정한 곳은 어디인가?\n\n### 선택지: \n(A) 개경\n(B) 부산\n(C) 한성\n(D) 평양\n(E) 경주\n\n### 정답:", "options": "['개경', '부산', '한성', '평양', '경주']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려가 도읍지로 정한 곳은 어디인가?\n\n### 선택지: \n(A) 개경\n(B) 부산\n(C) 한성\n(D) 평양\n(E) 경주\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려가 도읍지로 정한 곳은 어디인가?\n\n### 선택지: \n(A) 개경\n(B) 부산\n(C) 한성\n(D) 평양\n(E) 경주\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려가 도읍지로 정한 곳은 어디인가?\n\n### 선택지: \n(A) 개경\n(B) 부산\n(C) 한성\n(D) 평양\n(E) 경주\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려가 도읍지로 정한 곳은 어디인가?\n\n### 선택지: \n(A) 개경\n(B) 부산\n(C) 한성\n(D) 평양\n(E) 경주\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려가 도읍지로 정한 곳은 어디인가?\n\n### 선택지: \n(A) 개경\n(B) 부산\n(C) 한성\n(D) 평양\n(E) 경주\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.515625", "False"]], [["-6.04296875", "False"]], [["-7.4296875", "False"]], [["-6.77734375", "False"]], [["-8.9296875", "False"]]], "filtered_resps": [["-5.515625", "False"], ["-6.04296875", "False"], ["-7.4296875", "False"], ["-6.77734375", "False"], ["-8.9296875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "9e91853939ebad109ab2ee21555ce54e2ffd8bcdd599ffdd2666b9238b94df2b", "prompt_hash": "d777277c691e911344115918c49b007884a788fc53ca0333da0c655529169380", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 101, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n명나라 정벌을 위해 군사를 이끌고 위화도에 이른 이성계는 군사를 돌려 개경으로 돌아왔는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 한산도대첩\n(B) 노량해전\n(C) 위화도회군\n(D) 귀주대첩\n(E) 영종도회군\n\n### 정답:", "options": "['한산도대첩', '노량해전', '위화도회군', '귀주대첩', '영종도회군']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n명나라 정벌을 위해 군사를 이끌고 위화도에 이른 이성계는 군사를 돌려 개경으로 돌아왔는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 한산도대첩\n(B) 노량해전\n(C) 위화도회군\n(D) 귀주대첩\n(E) 영종도회군\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n명나라 정벌을 위해 군사를 이끌고 위화도에 이른 이성계는 군사를 돌려 개경으로 돌아왔는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 한산도대첩\n(B) 노량해전\n(C) 위화도회군\n(D) 귀주대첩\n(E) 영종도회군\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n명나라 정벌을 위해 군사를 이끌고 위화도에 이른 이성계는 군사를 돌려 개경으로 돌아왔는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 한산도대첩\n(B) 노량해전\n(C) 위화도회군\n(D) 귀주대첩\n(E) 영종도회군\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n명나라 정벌을 위해 군사를 이끌고 위화도에 이른 이성계는 군사를 돌려 개경으로 돌아왔는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 한산도대첩\n(B) 노량해전\n(C) 위화도회군\n(D) 귀주대첩\n(E) 영종도회군\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n명나라 정벌을 위해 군사를 이끌고 위화도에 이른 이성계는 군사를 돌려 개경으로 돌아왔는데 이를 무엇이라고 하는가?\n\n### 선택지: \n(A) 한산도대첩\n(B) 노량해전\n(C) 위화도회군\n(D) 귀주대첩\n(E) 영종도회군\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.84765625", "False"]], [["-5.40625", "False"]], [["-7.5390625", "False"]], [["-6.4375", "False"]], [["-7.5", "False"]]], "filtered_resps": [["-5.84765625", "False"], ["-5.40625", "False"], ["-7.5390625", "False"], ["-6.4375", "False"], ["-7.5", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "60173db5f1bbd186efccc730853176fa6abe2685ed0a9cd747d56c8c7fafa28f", "prompt_hash": "ffb4e129b3e0461f47842a83d7465976dbf328d7a95a2570d1ac985b948a39d2", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 102, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라의 영토가 오늘날과 같이 압록강과 두만강 유역까지 정해진 시대는?\n\n### 선택지: \n(A) 삼국시대\n(B) 조선시대\n(C) 고려시대\n(D) 고조선시대\n(E) 통일신라시대\n\n### 정답:", "options": "['삼국시대', '조선시대', '고려시대', '고조선시대', '통일신라시대']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라의 영토가 오늘날과 같이 압록강과 두만강 유역까지 정해진 시대는?\n\n### 선택지: \n(A) 삼국시대\n(B) 조선시대\n(C) 고려시대\n(D) 고조선시대\n(E) 통일신라시대\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라의 영토가 오늘날과 같이 압록강과 두만강 유역까지 정해진 시대는?\n\n### 선택지: \n(A) 삼국시대\n(B) 조선시대\n(C) 고려시대\n(D) 고조선시대\n(E) 통일신라시대\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라의 영토가 오늘날과 같이 압록강과 두만강 유역까지 정해진 시대는?\n\n### 선택지: \n(A) 삼국시대\n(B) 조선시대\n(C) 고려시대\n(D) 고조선시대\n(E) 통일신라시대\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라의 영토가 오늘날과 같이 압록강과 두만강 유역까지 정해진 시대는?\n\n### 선택지: \n(A) 삼국시대\n(B) 조선시대\n(C) 고려시대\n(D) 고조선시대\n(E) 통일신라시대\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라의 영토가 오늘날과 같이 압록강과 두만강 유역까지 정해진 시대는?\n\n### 선택지: \n(A) 삼국시대\n(B) 조선시대\n(C) 고려시대\n(D) 고조선시대\n(E) 통일신라시대\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.984375", "False"]], [["-6.16015625", "False"]], [["-7.8046875", "False"]], [["-6.65234375", "False"]], [["-8.3125", "False"]]], "filtered_resps": [["-5.984375", "False"], ["-6.16015625", "False"], ["-7.8046875", "False"], ["-6.65234375", "False"], ["-8.3125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "c401d6a4c71fc7e10846044415c7450586ef059a78aea1703374bdad74f08e82", "prompt_hash": "aa9e4946823992fb7d3ce0539f26d01856a17235bb6f50b7761dce821fb0dd8e", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 103, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 성문 법전으로, 세조 때 엮어지기 시작하여 1485년 성종 때 완성된 것은?\n\n### 선택지: \n(A) 시무28조\n(B) 속대전\n(C) 대전회통\n(D) 조선경국전\n(E) 경국대전\n\n### 정답:", "options": "['시무28조', '속대전', '대전회통', '조선경국전', '경국대전']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 성문 법전으로, 세조 때 엮어지기 시작하여 1485년 성종 때 완성된 것은?\n\n### 선택지: \n(A) 시무28조\n(B) 속대전\n(C) 대전회통\n(D) 조선경국전\n(E) 경국대전\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 성문 법전으로, 세조 때 엮어지기 시작하여 1485년 성종 때 완성된 것은?\n\n### 선택지: \n(A) 시무28조\n(B) 속대전\n(C) 대전회통\n(D) 조선경국전\n(E) 경국대전\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 성문 법전으로, 세조 때 엮어지기 시작하여 1485년 성종 때 완성된 것은?\n\n### 선택지: \n(A) 시무28조\n(B) 속대전\n(C) 대전회통\n(D) 조선경국전\n(E) 경국대전\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 성문 법전으로, 세조 때 엮어지기 시작하여 1485년 성종 때 완성된 것은?\n\n### 선택지: \n(A) 시무28조\n(B) 속대전\n(C) 대전회통\n(D) 조선경국전\n(E) 경국대전\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 성문 법전으로, 세조 때 엮어지기 시작하여 1485년 성종 때 완성된 것은?\n\n### 선택지: \n(A) 시무28조\n(B) 속대전\n(C) 대전회통\n(D) 조선경국전\n(E) 경국대전\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.109375", "False"]], [["-6.57421875", "False"]], [["-7.81640625", "False"]], [["-7.0546875", "False"]], [["-8.625", "False"]]], "filtered_resps": [["-6.109375", "False"], ["-6.57421875", "False"], ["-7.81640625", "False"], ["-7.0546875", "False"], ["-8.625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "4c0f16eb3fee865bf84f2e499b4f83092eb28f5830597cb47d356b043dcee761", "prompt_hash": "71445a6f86df06ec2d5684aa6f05e004def5a994a5f48fdbec87fedc86c6014a", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 104, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안시성 싸움에서 당나라 군사들을 크게 무찌른 사람은 누구인가?\n\n### 선택지: \n(A) 양만춘\n(B) 서희\n(C) 김유신\n(D) 강감찬\n(E) 윤관\n\n### 정답:", "options": "['양만춘', '서희', '김유신', '강감찬', '윤관']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안시성 싸움에서 당나라 군사들을 크게 무찌른 사람은 누구인가?\n\n### 선택지: \n(A) 양만춘\n(B) 서희\n(C) 김유신\n(D) 강감찬\n(E) 윤관\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안시성 싸움에서 당나라 군사들을 크게 무찌른 사람은 누구인가?\n\n### 선택지: \n(A) 양만춘\n(B) 서희\n(C) 김유신\n(D) 강감찬\n(E) 윤관\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안시성 싸움에서 당나라 군사들을 크게 무찌른 사람은 누구인가?\n\n### 선택지: \n(A) 양만춘\n(B) 서희\n(C) 김유신\n(D) 강감찬\n(E) 윤관\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안시성 싸움에서 당나라 군사들을 크게 무찌른 사람은 누구인가?\n\n### 선택지: \n(A) 양만춘\n(B) 서희\n(C) 김유신\n(D) 강감찬\n(E) 윤관\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n안시성 싸움에서 당나라 군사들을 크게 무찌른 사람은 누구인가?\n\n### 선택지: \n(A) 양만춘\n(B) 서희\n(C) 김유신\n(D) 강감찬\n(E) 윤관\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.8359375", "False"]], [["-6.15234375", "False"]], [["-7.90234375", "False"]], [["-6.8828125", "False"]], [["-8.890625", "False"]]], "filtered_resps": [["-5.8359375", "False"], ["-6.15234375", "False"], ["-7.90234375", "False"], ["-6.8828125", "False"], ["-8.890625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "581d59c5a0651feb9f3f009819ee36a66a4adc6b34aa5aedb247bec57ed8aba7", "prompt_hash": "4a7f669ebb500353e918afc86212c585747ec66d461d1c7b2d49a815e8381462", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 105, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거란족이 첫 번째 침략하였을 때 능숙한 외교 솜씨를 발휘하여 이들을 돌려 보낸 사람은 누구인가?\n\n### 선택지: \n(A) 윤관\n(B) 김유신\n(C) 서희\n(D) 강감찬\n(E) 양만춘\n\n### 정답:", "options": "['윤관', '김유신', '서희', '강감찬', '양만춘']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거란족이 첫 번째 침략하였을 때 능숙한 외교 솜씨를 발휘하여 이들을 돌려 보낸 사람은 누구인가?\n\n### 선택지: \n(A) 윤관\n(B) 김유신\n(C) 서희\n(D) 강감찬\n(E) 양만춘\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거란족이 첫 번째 침략하였을 때 능숙한 외교 솜씨를 발휘하여 이들을 돌려 보낸 사람은 누구인가?\n\n### 선택지: \n(A) 윤관\n(B) 김유신\n(C) 서희\n(D) 강감찬\n(E) 양만춘\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거란족이 첫 번째 침략하였을 때 능숙한 외교 솜씨를 발휘하여 이들을 돌려 보낸 사람은 누구인가?\n\n### 선택지: \n(A) 윤관\n(B) 김유신\n(C) 서희\n(D) 강감찬\n(E) 양만춘\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거란족이 첫 번째 침략하였을 때 능숙한 외교 솜씨를 발휘하여 이들을 돌려 보낸 사람은 누구인가?\n\n### 선택지: \n(A) 윤관\n(B) 김유신\n(C) 서희\n(D) 강감찬\n(E) 양만춘\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거란족이 첫 번째 침략하였을 때 능숙한 외교 솜씨를 발휘하여 이들을 돌려 보낸 사람은 누구인가?\n\n### 선택지: \n(A) 윤관\n(B) 김유신\n(C) 서희\n(D) 강감찬\n(E) 양만춘\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.4921875", "False"]], [["-5.48828125", "False"]], [["-7.30078125", "False"]], [["-6.40234375", "False"]], [["-8.3359375", "False"]]], "filtered_resps": [["-5.4921875", "False"], ["-5.48828125", "False"], ["-7.30078125", "False"], ["-6.40234375", "False"], ["-8.3359375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "b315131f70ad257fcb2c646a1c5134888f1ff7460d8b656b1695a4065ef87a9f", "prompt_hash": "4903ca9cbfb4d3ac4fa0aecd92235a8a6b607cd5cadbfb08f3e91d1fd2b77883", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 106, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거란의 10만 대군을 귀주에서 크게 무찌른 사람은 누구인가?\n\n### 선택지: \n(A) 윤관\n(B) 강감찬\n(C) 서희\n(D) 양만춘\n(E) 김유신\n\n### 정답:", "options": "['윤관', '강감찬', '서희', '양만춘', '김유신']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거란의 10만 대군을 귀주에서 크게 무찌른 사람은 누구인가?\n\n### 선택지: \n(A) 윤관\n(B) 강감찬\n(C) 서희\n(D) 양만춘\n(E) 김유신\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거란의 10만 대군을 귀주에서 크게 무찌른 사람은 누구인가?\n\n### 선택지: \n(A) 윤관\n(B) 강감찬\n(C) 서희\n(D) 양만춘\n(E) 김유신\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거란의 10만 대군을 귀주에서 크게 무찌른 사람은 누구인가?\n\n### 선택지: \n(A) 윤관\n(B) 강감찬\n(C) 서희\n(D) 양만춘\n(E) 김유신\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거란의 10만 대군을 귀주에서 크게 무찌른 사람은 누구인가?\n\n### 선택지: \n(A) 윤관\n(B) 강감찬\n(C) 서희\n(D) 양만춘\n(E) 김유신\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거란의 10만 대군을 귀주에서 크게 무찌른 사람은 누구인가?\n\n### 선택지: \n(A) 윤관\n(B) 강감찬\n(C) 서희\n(D) 양만춘\n(E) 김유신\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.67578125", "False"]], [["-5.80078125", "False"]], [["-7.3671875", "False"]], [["-6.7109375", "False"]], [["-8.3359375", "False"]]], "filtered_resps": [["-5.67578125", "False"], ["-5.80078125", "False"], ["-7.3671875", "False"], ["-6.7109375", "False"], ["-8.3359375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "53f6fe90d5a209494455bcf75d2dda92264a4118db9beb3c31e8333d6b12d17a", "prompt_hash": "c6ebaf7834e4386f18cdfee957e43b5ca50a6e3ee83309f962274753d3ac3414", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 107, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n함경도 지방의 여러 곳에 성을 쌓아 여진족이 쳐들어오지 못하도록 하였고 별무반을 조직한 사람은 누구인가?\n\n### 선택지: \n(A) 강감찬\n(B) 김유신\n(C) 서희\n(D) 양만춘\n(E) 윤관\n\n### 정답:", "options": "['강감찬', '김유신', '서희', '양만춘', '윤관']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n함경도 지방의 여러 곳에 성을 쌓아 여진족이 쳐들어오지 못하도록 하였고 별무반을 조직한 사람은 누구인가?\n\n### 선택지: \n(A) 강감찬\n(B) 김유신\n(C) 서희\n(D) 양만춘\n(E) 윤관\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n함경도 지방의 여러 곳에 성을 쌓아 여진족이 쳐들어오지 못하도록 하였고 별무반을 조직한 사람은 누구인가?\n\n### 선택지: \n(A) 강감찬\n(B) 김유신\n(C) 서희\n(D) 양만춘\n(E) 윤관\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n함경도 지방의 여러 곳에 성을 쌓아 여진족이 쳐들어오지 못하도록 하였고 별무반을 조직한 사람은 누구인가?\n\n### 선택지: \n(A) 강감찬\n(B) 김유신\n(C) 서희\n(D) 양만춘\n(E) 윤관\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n함경도 지방의 여러 곳에 성을 쌓아 여진족이 쳐들어오지 못하도록 하였고 별무반을 조직한 사람은 누구인가?\n\n### 선택지: \n(A) 강감찬\n(B) 김유신\n(C) 서희\n(D) 양만춘\n(E) 윤관\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n함경도 지방의 여러 곳에 성을 쌓아 여진족이 쳐들어오지 못하도록 하였고 별무반을 조직한 사람은 누구인가?\n\n### 선택지: \n(A) 강감찬\n(B) 김유신\n(C) 서희\n(D) 양만춘\n(E) 윤관\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.578125", "False"]], [["-5.79296875", "False"]], [["-6.94921875", "False"]], [["-6.4140625", "False"]], [["-8.4296875", "False"]]], "filtered_resps": [["-5.578125", "False"], ["-5.79296875", "False"], ["-6.94921875", "False"], ["-6.4140625", "False"], ["-8.4296875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "be1143f97b41fd86972bcd2b77ebb9438e572f785d953087e900cd2a95f70bdc", "prompt_hash": "7ee0010f84f9184ea38d17500f643aa6ea585ad5da71a9bf4cfcb1eeebc4863b", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 108, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n몽고의 침략에 굴하지 않고 근거지를 강화도, 진도, 제주도로 옮겨 가며 끝까지 항쟁한 부대는?\n\n### 선택지: \n(A) 의병\n(B) 금군\n(C) 별기군\n(D) 백년초\n(E) 삼별초\n\n### 정답:", "options": "['의병', '금군', '별기군', '백년초', '삼별초']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n몽고의 침략에 굴하지 않고 근거지를 강화도, 진도, 제주도로 옮겨 가며 끝까지 항쟁한 부대는?\n\n### 선택지: \n(A) 의병\n(B) 금군\n(C) 별기군\n(D) 백년초\n(E) 삼별초\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n몽고의 침략에 굴하지 않고 근거지를 강화도, 진도, 제주도로 옮겨 가며 끝까지 항쟁한 부대는?\n\n### 선택지: \n(A) 의병\n(B) 금군\n(C) 별기군\n(D) 백년초\n(E) 삼별초\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n몽고의 침략에 굴하지 않고 근거지를 강화도, 진도, 제주도로 옮겨 가며 끝까지 항쟁한 부대는?\n\n### 선택지: \n(A) 의병\n(B) 금군\n(C) 별기군\n(D) 백년초\n(E) 삼별초\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n몽고의 침략에 굴하지 않고 근거지를 강화도, 진도, 제주도로 옮겨 가며 끝까지 항쟁한 부대는?\n\n### 선택지: \n(A) 의병\n(B) 금군\n(C) 별기군\n(D) 백년초\n(E) 삼별초\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n몽고의 침략에 굴하지 않고 근거지를 강화도, 진도, 제주도로 옮겨 가며 끝까지 항쟁한 부대는?\n\n### 선택지: \n(A) 의병\n(B) 금군\n(C) 별기군\n(D) 백년초\n(E) 삼별초\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-4.8515625", "False"]], [["-5.3828125", "False"]], [["-6.72265625", "False"]], [["-5.66796875", "False"]], [["-7.23046875", "False"]]], "filtered_resps": [["-4.8515625", "False"], ["-5.3828125", "False"], ["-6.72265625", "False"], ["-5.66796875", "False"], ["-7.23046875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "67330122ca5744645d9fb3b32dbd2c08178378210278fd4898527dfeaa129125", "prompt_hash": "29f0b0afce45a7dd90edcae9032b9a9b93eb56cbf12b894e1e3b633bfafeef25", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 109, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n허준이 한국과 중국의 의학 서적을 정리하여 25권으로 새롭게 정리한 의학 백과 사전은 무엇인가?\n\n### 선택지: \n(A) 건국대전\n(B) 재간본\n(C) 동의보감\n(D) 경세유표\n(E) 기측제의\n\n### 정답:", "options": "['건국대전', '재간본', '동의보감', '경세유표', '기측제의']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n허준이 한국과 중국의 의학 서적을 정리하여 25권으로 새롭게 정리한 의학 백과 사전은 무엇인가?\n\n### 선택지: \n(A) 건국대전\n(B) 재간본\n(C) 동의보감\n(D) 경세유표\n(E) 기측제의\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n허준이 한국과 중국의 의학 서적을 정리하여 25권으로 새롭게 정리한 의학 백과 사전은 무엇인가?\n\n### 선택지: \n(A) 건국대전\n(B) 재간본\n(C) 동의보감\n(D) 경세유표\n(E) 기측제의\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n허준이 한국과 중국의 의학 서적을 정리하여 25권으로 새롭게 정리한 의학 백과 사전은 무엇인가?\n\n### 선택지: \n(A) 건국대전\n(B) 재간본\n(C) 동의보감\n(D) 경세유표\n(E) 기측제의\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n허준이 한국과 중국의 의학 서적을 정리하여 25권으로 새롭게 정리한 의학 백과 사전은 무엇인가?\n\n### 선택지: \n(A) 건국대전\n(B) 재간본\n(C) 동의보감\n(D) 경세유표\n(E) 기측제의\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n허준이 한국과 중국의 의학 서적을 정리하여 25권으로 새롭게 정리한 의학 백과 사전은 무엇인가?\n\n### 선택지: \n(A) 건국대전\n(B) 재간본\n(C) 동의보감\n(D) 경세유표\n(E) 기측제의\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.8203125", "False"]], [["-6.609375", "False"]], [["-8.453125", "False"]], [["-7.60546875", "False"]], [["-8.6953125", "False"]]], "filtered_resps": [["-6.8203125", "False"], ["-6.609375", "False"], ["-8.453125", "False"], ["-7.60546875", "False"], ["-8.6953125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "291841c8968126c16b25fb0b924448a5d5c26d8c9a2ba1d88b4a1d4b4f8ba989", "prompt_hash": "15640649d738ecfcc7696bd771b48d1dd4c142ee49a9cc5abf62ec98fe1ec698", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 110, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n청나라에 다녀와서 보고 느낀 것을 글로 썼으며 농사짓는 일, 장사하는 일과 기술을 익히는 일 등을 강조한 실학자는?\n\n### 선택지: \n(A) 김정호\n(B) 박지원\n(C) 최무선\n(D) 정약용\n(E) 홍대용\n\n### 정답:", "options": "['김정호', '박지원', '최무선', '정약용', '홍대용']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n청나라에 다녀와서 보고 느낀 것을 글로 썼으며 농사짓는 일, 장사하는 일과 기술을 익히는 일 등을 강조한 실학자는?\n\n### 선택지: \n(A) 김정호\n(B) 박지원\n(C) 최무선\n(D) 정약용\n(E) 홍대용\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n청나라에 다녀와서 보고 느낀 것을 글로 썼으며 농사짓는 일, 장사하는 일과 기술을 익히는 일 등을 강조한 실학자는?\n\n### 선택지: \n(A) 김정호\n(B) 박지원\n(C) 최무선\n(D) 정약용\n(E) 홍대용\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n청나라에 다녀와서 보고 느낀 것을 글로 썼으며 농사짓는 일, 장사하는 일과 기술을 익히는 일 등을 강조한 실학자는?\n\n### 선택지: \n(A) 김정호\n(B) 박지원\n(C) 최무선\n(D) 정약용\n(E) 홍대용\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n청나라에 다녀와서 보고 느낀 것을 글로 썼으며 농사짓는 일, 장사하는 일과 기술을 익히는 일 등을 강조한 실학자는?\n\n### 선택지: \n(A) 김정호\n(B) 박지원\n(C) 최무선\n(D) 정약용\n(E) 홍대용\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n청나라에 다녀와서 보고 느낀 것을 글로 썼으며 농사짓는 일, 장사하는 일과 기술을 익히는 일 등을 강조한 실학자는?\n\n### 선택지: \n(A) 김정호\n(B) 박지원\n(C) 최무선\n(D) 정약용\n(E) 홍대용\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.9609375", "False"]], [["-5.74609375", "False"]], [["-7.484375", "False"]], [["-6.84375", "False"]], [["-7.921875", "False"]]], "filtered_resps": [["-5.9609375", "False"], ["-5.74609375", "False"], ["-7.484375", "False"], ["-6.84375", "False"], ["-7.921875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "a4eca58dd3994ef00b59010077aff797d24e25d072544bb39cb4660df7edffcd", "prompt_hash": "aa1801f73f0e6eec156eccc4d2c178fc1fbd22ff04190003d2af2e1cb810a7fc", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 111, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거중기를 이용하여 화성(수원성)을 쌓은 사람은 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 홍대용\n(C) 김정호\n(D) 최무선\n(E) 박지원\n\n### 정답:", "options": "['정약용', '홍대용', '김정호', '최무선', '박지원']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거중기를 이용하여 화성(수원성)을 쌓은 사람은 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 홍대용\n(C) 김정호\n(D) 최무선\n(E) 박지원\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거중기를 이용하여 화성(수원성)을 쌓은 사람은 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 홍대용\n(C) 김정호\n(D) 최무선\n(E) 박지원\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거중기를 이용하여 화성(수원성)을 쌓은 사람은 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 홍대용\n(C) 김정호\n(D) 최무선\n(E) 박지원\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거중기를 이용하여 화성(수원성)을 쌓은 사람은 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 홍대용\n(C) 김정호\n(D) 최무선\n(E) 박지원\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n거중기를 이용하여 화성(수원성)을 쌓은 사람은 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 홍대용\n(C) 김정호\n(D) 최무선\n(E) 박지원\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.4296875", "False"]], [["-6.57421875", "False"]], [["-8.3359375", "False"]], [["-7.60546875", "False"]], [["-9.453125", "False"]]], "filtered_resps": [["-6.4296875", "False"], ["-6.57421875", "False"], ["-8.3359375", "False"], ["-7.60546875", "False"], ["-9.453125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "e23a69d8db2ca4c5d6ba627fe457183239ac60f594b8cf3b832698db39071db3", "prompt_hash": "16a7c3cce0ed53579b3c9e6a7a15900e71c0e6e4ade439dd6f02a862b9dbe5ce", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 112, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n천문 과학 기구인 혼천의를 이용하여 지동설을 주장한 사람은 누구인가?\n\n### 선택지: \n(A) 김정호\n(B) 박지원\n(C) 최무선\n(D) 홍대용\n(E) 정약용\n\n### 정답:", "options": "['김정호', '박지원', '최무선', '홍대용', '정약용']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n천문 과학 기구인 혼천의를 이용하여 지동설을 주장한 사람은 누구인가?\n\n### 선택지: \n(A) 김정호\n(B) 박지원\n(C) 최무선\n(D) 홍대용\n(E) 정약용\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n천문 과학 기구인 혼천의를 이용하여 지동설을 주장한 사람은 누구인가?\n\n### 선택지: \n(A) 김정호\n(B) 박지원\n(C) 최무선\n(D) 홍대용\n(E) 정약용\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n천문 과학 기구인 혼천의를 이용하여 지동설을 주장한 사람은 누구인가?\n\n### 선택지: \n(A) 김정호\n(B) 박지원\n(C) 최무선\n(D) 홍대용\n(E) 정약용\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n천문 과학 기구인 혼천의를 이용하여 지동설을 주장한 사람은 누구인가?\n\n### 선택지: \n(A) 김정호\n(B) 박지원\n(C) 최무선\n(D) 홍대용\n(E) 정약용\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n천문 과학 기구인 혼천의를 이용하여 지동설을 주장한 사람은 누구인가?\n\n### 선택지: \n(A) 김정호\n(B) 박지원\n(C) 최무선\n(D) 홍대용\n(E) 정약용\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.26953125", "False"]], [["-6.2265625", "False"]], [["-7.94921875", "False"]], [["-7.3515625", "False"]], [["-9.4453125", "False"]]], "filtered_resps": [["-6.26953125", "False"], ["-6.2265625", "False"], ["-7.94921875", "False"], ["-7.3515625", "False"], ["-9.4453125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "17a6a33a0f51b0edffda67c327571fdff4eca234aac2388d510b305232782a8e", "prompt_hash": "b5f1f0ea000a2d418c7c23391e2b9791839e6ceb635ae38581d2e80b687035a0", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 113, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n국토를 사랑하는 마음으로 나라 곳곳을 두루 살펴서, 우리 나라의 지도인 대동여지도를 만든 사람은 누구인가?\n\n### 선택지: \n(A) 홍대용\n(B) 김정호\n(C) 최무선\n(D) 정약용\n(E) 박지원\n\n### 정답:", "options": "['홍대용', '김정호', '최무선', '정약용', '박지원']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n국토를 사랑하는 마음으로 나라 곳곳을 두루 살펴서, 우리 나라의 지도인 대동여지도를 만든 사람은 누구인가?\n\n### 선택지: \n(A) 홍대용\n(B) 김정호\n(C) 최무선\n(D) 정약용\n(E) 박지원\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n국토를 사랑하는 마음으로 나라 곳곳을 두루 살펴서, 우리 나라의 지도인 대동여지도를 만든 사람은 누구인가?\n\n### 선택지: \n(A) 홍대용\n(B) 김정호\n(C) 최무선\n(D) 정약용\n(E) 박지원\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n국토를 사랑하는 마음으로 나라 곳곳을 두루 살펴서, 우리 나라의 지도인 대동여지도를 만든 사람은 누구인가?\n\n### 선택지: \n(A) 홍대용\n(B) 김정호\n(C) 최무선\n(D) 정약용\n(E) 박지원\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n국토를 사랑하는 마음으로 나라 곳곳을 두루 살펴서, 우리 나라의 지도인 대동여지도를 만든 사람은 누구인가?\n\n### 선택지: \n(A) 홍대용\n(B) 김정호\n(C) 최무선\n(D) 정약용\n(E) 박지원\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n국토를 사랑하는 마음으로 나라 곳곳을 두루 살펴서, 우리 나라의 지도인 대동여지도를 만든 사람은 누구인가?\n\n### 선택지: \n(A) 홍대용\n(B) 김정호\n(C) 최무선\n(D) 정약용\n(E) 박지원\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.8359375", "False"]], [["-5.30859375", "False"]], [["-7.21484375", "False"]], [["-6.671875", "False"]], [["-8.34375", "False"]]], "filtered_resps": [["-5.8359375", "False"], ["-5.30859375", "False"], ["-7.21484375", "False"], ["-6.671875", "False"], ["-8.34375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "f2e9e47c8c56cee4d2be63a6ed3c63c9352c5f5749de18dca627b3c50af7fa02", "prompt_hash": "577fc13d973dfbb88a9b60610bff25d02b31b3fabb9147b0304661c961f425e0", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 114, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n금강 하구에 침략해 온 왜구를 자신이 만든 화포와 화통으로 크게 무찌른 고려의 장군은 누구인가?\n\n### 선택지: \n(A) 홍대용\n(B) 최무선\n(C) 정약용\n(D) 김정호\n(E) 박지원\n\n### 정답:", "options": "['홍대용', '최무선', '정약용', '김정호', '박지원']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n금강 하구에 침략해 온 왜구를 자신이 만든 화포와 화통으로 크게 무찌른 고려의 장군은 누구인가?\n\n### 선택지: \n(A) 홍대용\n(B) 최무선\n(C) 정약용\n(D) 김정호\n(E) 박지원\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n금강 하구에 침략해 온 왜구를 자신이 만든 화포와 화통으로 크게 무찌른 고려의 장군은 누구인가?\n\n### 선택지: \n(A) 홍대용\n(B) 최무선\n(C) 정약용\n(D) 김정호\n(E) 박지원\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n금강 하구에 침략해 온 왜구를 자신이 만든 화포와 화통으로 크게 무찌른 고려의 장군은 누구인가?\n\n### 선택지: \n(A) 홍대용\n(B) 최무선\n(C) 정약용\n(D) 김정호\n(E) 박지원\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n금강 하구에 침략해 온 왜구를 자신이 만든 화포와 화통으로 크게 무찌른 고려의 장군은 누구인가?\n\n### 선택지: \n(A) 홍대용\n(B) 최무선\n(C) 정약용\n(D) 김정호\n(E) 박지원\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n금강 하구에 침략해 온 왜구를 자신이 만든 화포와 화통으로 크게 무찌른 고려의 장군은 누구인가?\n\n### 선택지: \n(A) 홍대용\n(B) 최무선\n(C) 정약용\n(D) 김정호\n(E) 박지원\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.640625", "False"]], [["-5.703125", "False"]], [["-7.1953125", "False"]], [["-6.375", "False"]], [["-8.3828125", "False"]]], "filtered_resps": [["-5.640625", "False"], ["-5.703125", "False"], ["-7.1953125", "False"], ["-6.375", "False"], ["-8.3828125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "6410237a4effb8569059f8c2c0c4963cf7be8a36b40e0ba029ccdff6b751c1ad", "prompt_hash": "48cf71bc993b5e582cd1204ea02cc18de100f5f415edbfe5a6e9d0ca5fb0a27f", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 115, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n천자문과 논어를 가지고 일본에 건너가 학문과 유학을 가르쳐 많은 제자를 길러 낸 백제의 사람은 누구인가?\n\n### 선택지: \n(A) 최무선\n(B) 왕인\n(C) 김정호\n(D) 담징\n(E) 홍대용\n\n### 정답:", "options": "['최무선', '왕인', '김정호', '담징', '홍대용']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n천자문과 논어를 가지고 일본에 건너가 학문과 유학을 가르쳐 많은 제자를 길러 낸 백제의 사람은 누구인가?\n\n### 선택지: \n(A) 최무선\n(B) 왕인\n(C) 김정호\n(D) 담징\n(E) 홍대용\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n천자문과 논어를 가지고 일본에 건너가 학문과 유학을 가르쳐 많은 제자를 길러 낸 백제의 사람은 누구인가?\n\n### 선택지: \n(A) 최무선\n(B) 왕인\n(C) 김정호\n(D) 담징\n(E) 홍대용\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n천자문과 논어를 가지고 일본에 건너가 학문과 유학을 가르쳐 많은 제자를 길러 낸 백제의 사람은 누구인가?\n\n### 선택지: \n(A) 최무선\n(B) 왕인\n(C) 김정호\n(D) 담징\n(E) 홍대용\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n천자문과 논어를 가지고 일본에 건너가 학문과 유학을 가르쳐 많은 제자를 길러 낸 백제의 사람은 누구인가?\n\n### 선택지: \n(A) 최무선\n(B) 왕인\n(C) 김정호\n(D) 담징\n(E) 홍대용\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n천자문과 논어를 가지고 일본에 건너가 학문과 유학을 가르쳐 많은 제자를 길러 낸 백제의 사람은 누구인가?\n\n### 선택지: \n(A) 최무선\n(B) 왕인\n(C) 김정호\n(D) 담징\n(E) 홍대용\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.0234375", "False"]], [["-6.1015625", "False"]], [["-7.60546875", "False"]], [["-6.890625", "False"]], [["-8.9453125", "False"]]], "filtered_resps": [["-6.0234375", "False"], ["-6.1015625", "False"], ["-7.60546875", "False"], ["-6.890625", "False"], ["-8.9453125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "b250433fe8974a094f8f522ce9fee690cb940fbc8604950a797a2ad55687e7f1", "prompt_hash": "839f4a7ab09a075c8119e429640a6595d3d560bdd485f5d815c357917f0bf4c0", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 116, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고구려 영양왕 때의 사람으로 일본에 건너가 호류사에 금당 벽화를 그린 사람은 누구인가?\n\n### 선택지: \n(A) 담징\n(B) 홍대용\n(C) 정약용\n(D) 김정호\n(E) 왕인\n\n### 정답:", "options": "['담징', '홍대용', '정약용', '김정호', '왕인']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고구려 영양왕 때의 사람으로 일본에 건너가 호류사에 금당 벽화를 그린 사람은 누구인가?\n\n### 선택지: \n(A) 담징\n(B) 홍대용\n(C) 정약용\n(D) 김정호\n(E) 왕인\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고구려 영양왕 때의 사람으로 일본에 건너가 호류사에 금당 벽화를 그린 사람은 누구인가?\n\n### 선택지: \n(A) 담징\n(B) 홍대용\n(C) 정약용\n(D) 김정호\n(E) 왕인\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고구려 영양왕 때의 사람으로 일본에 건너가 호류사에 금당 벽화를 그린 사람은 누구인가?\n\n### 선택지: \n(A) 담징\n(B) 홍대용\n(C) 정약용\n(D) 김정호\n(E) 왕인\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고구려 영양왕 때의 사람으로 일본에 건너가 호류사에 금당 벽화를 그린 사람은 누구인가?\n\n### 선택지: \n(A) 담징\n(B) 홍대용\n(C) 정약용\n(D) 김정호\n(E) 왕인\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고구려 영양왕 때의 사람으로 일본에 건너가 호류사에 금당 벽화를 그린 사람은 누구인가?\n\n### 선택지: \n(A) 담징\n(B) 홍대용\n(C) 정약용\n(D) 김정호\n(E) 왕인\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.70703125", "False"]], [["-5.39453125", "False"]], [["-7.2734375", "False"]], [["-6.27734375", "False"]], [["-8.0546875", "False"]]], "filtered_resps": [["-5.70703125", "False"], ["-5.39453125", "False"], ["-7.2734375", "False"], ["-6.27734375", "False"], ["-8.0546875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "57eaabadbe873eb4411a3247dff49fa22d3d9f92304d16a0ba617152b37ec0dd", "prompt_hash": "6812f2e86d3d1cbd82630204beab68e5a5acc837c55ac048dd901f77fb30ca26", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 117, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라와 문물의 교류를 활발히 하였으며, 유학생, 승려, 상인, 사신 등이 오고 간 나라는?\n\n### 선택지: \n(A) 일본\n(B) 우산국\n(C) 당나라\n(D) 원나라\n(E) 고구려\n\n### 정답:", "options": "['일본', '우산국', '당나라', '원나라', '고구려']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라와 문물의 교류를 활발히 하였으며, 유학생, 승려, 상인, 사신 등이 오고 간 나라는?\n\n### 선택지: \n(A) 일본\n(B) 우산국\n(C) 당나라\n(D) 원나라\n(E) 고구려\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라와 문물의 교류를 활발히 하였으며, 유학생, 승려, 상인, 사신 등이 오고 간 나라는?\n\n### 선택지: \n(A) 일본\n(B) 우산국\n(C) 당나라\n(D) 원나라\n(E) 고구려\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라와 문물의 교류를 활발히 하였으며, 유학생, 승려, 상인, 사신 등이 오고 간 나라는?\n\n### 선택지: \n(A) 일본\n(B) 우산국\n(C) 당나라\n(D) 원나라\n(E) 고구려\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라와 문물의 교류를 활발히 하였으며, 유학생, 승려, 상인, 사신 등이 오고 간 나라는?\n\n### 선택지: \n(A) 일본\n(B) 우산국\n(C) 당나라\n(D) 원나라\n(E) 고구려\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라와 문물의 교류를 활발히 하였으며, 유학생, 승려, 상인, 사신 등이 오고 간 나라는?\n\n### 선택지: \n(A) 일본\n(B) 우산국\n(C) 당나라\n(D) 원나라\n(E) 고구려\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.62109375", "False"]], [["-5.71875", "False"]], [["-7.03125", "False"]], [["-6.390625", "False"]], [["-8.703125", "False"]]], "filtered_resps": [["-5.62109375", "False"], ["-5.71875", "False"], ["-7.03125", "False"], ["-6.390625", "False"], ["-8.703125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "ee280b8f4705c787c2229e4f57bf7b3f8335a3491075dfc1f573f27011815583", "prompt_hash": "0a6fc4b99b76a96f628364174ab890b1b0f699bfe690f93c8d4a568ebe32fc4c", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 118, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n수군을 거느리고 해적들을 소탕하여, 신란인들은 물론 당나라 상인들까지도 편안히 항해할 수 있게 한 신라의 장군은?\n\n### 선택지: \n(A) 김춘추\n(B) 양만춘\n(C) 장보고\n(D) 이순신\n(E) 김유신\n\n### 정답:", "options": "['김춘추', '양만춘', '장보고', '이순신', '김유신']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n수군을 거느리고 해적들을 소탕하여, 신란인들은 물론 당나라 상인들까지도 편안히 항해할 수 있게 한 신라의 장군은?\n\n### 선택지: \n(A) 김춘추\n(B) 양만춘\n(C) 장보고\n(D) 이순신\n(E) 김유신\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n수군을 거느리고 해적들을 소탕하여, 신란인들은 물론 당나라 상인들까지도 편안히 항해할 수 있게 한 신라의 장군은?\n\n### 선택지: \n(A) 김춘추\n(B) 양만춘\n(C) 장보고\n(D) 이순신\n(E) 김유신\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n수군을 거느리고 해적들을 소탕하여, 신란인들은 물론 당나라 상인들까지도 편안히 항해할 수 있게 한 신라의 장군은?\n\n### 선택지: \n(A) 김춘추\n(B) 양만춘\n(C) 장보고\n(D) 이순신\n(E) 김유신\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n수군을 거느리고 해적들을 소탕하여, 신란인들은 물론 당나라 상인들까지도 편안히 항해할 수 있게 한 신라의 장군은?\n\n### 선택지: \n(A) 김춘추\n(B) 양만춘\n(C) 장보고\n(D) 이순신\n(E) 김유신\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n수군을 거느리고 해적들을 소탕하여, 신란인들은 물론 당나라 상인들까지도 편안히 항해할 수 있게 한 신라의 장군은?\n\n### 선택지: \n(A) 김춘추\n(B) 양만춘\n(C) 장보고\n(D) 이순신\n(E) 김유신\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.81640625", "False"]], [["-5.9296875", "False"]], [["-7.3046875", "False"]], [["-6.78515625", "False"]], [["-8.59375", "False"]]], "filtered_resps": [["-5.81640625", "False"], ["-5.9296875", "False"], ["-7.3046875", "False"], ["-6.78515625", "False"], ["-8.59375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "6699dda80498b3eefa66817cd7c05ffac73d4bc1f741f86e702a354557db7b98", "prompt_hash": "960d4831da0c917b2976bef8a97a9ddbbe5be24e76e32b7363fa247d08306a91", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 119, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n임진왜란 후 우리 나라와 다시 국교를 맺기를 간청한 일본의 새로운 지배자는 누구인가?\n\n### 선택지: \n(A) 도쿠가와 이에야스\n(B) 이토 히로부미\n(C) 마에다 켄지\n(D) 아베 신조\n(E) 도요토미 히데요시\n\n### 정답:", "options": "['도쿠가와 이에야스', '이토 히로부미', '마에다 켄지', '아베 신조', '도요토미 히데요시']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n임진왜란 후 우리 나라와 다시 국교를 맺기를 간청한 일본의 새로운 지배자는 누구인가?\n\n### 선택지: \n(A) 도쿠가와 이에야스\n(B) 이토 히로부미\n(C) 마에다 켄지\n(D) 아베 신조\n(E) 도요토미 히데요시\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n임진왜란 후 우리 나라와 다시 국교를 맺기를 간청한 일본의 새로운 지배자는 누구인가?\n\n### 선택지: \n(A) 도쿠가와 이에야스\n(B) 이토 히로부미\n(C) 마에다 켄지\n(D) 아베 신조\n(E) 도요토미 히데요시\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n임진왜란 후 우리 나라와 다시 국교를 맺기를 간청한 일본의 새로운 지배자는 누구인가?\n\n### 선택지: \n(A) 도쿠가와 이에야스\n(B) 이토 히로부미\n(C) 마에다 켄지\n(D) 아베 신조\n(E) 도요토미 히데요시\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n임진왜란 후 우리 나라와 다시 국교를 맺기를 간청한 일본의 새로운 지배자는 누구인가?\n\n### 선택지: \n(A) 도쿠가와 이에야스\n(B) 이토 히로부미\n(C) 마에다 켄지\n(D) 아베 신조\n(E) 도요토미 히데요시\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n임진왜란 후 우리 나라와 다시 국교를 맺기를 간청한 일본의 새로운 지배자는 누구인가?\n\n### 선택지: \n(A) 도쿠가와 이에야스\n(B) 이토 히로부미\n(C) 마에다 켄지\n(D) 아베 신조\n(E) 도요토미 히데요시\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.47265625", "False"]], [["-5.296875", "False"]], [["-7.12109375", "False"]], [["-6.359375", "False"]], [["-7.8515625", "False"]]], "filtered_resps": [["-5.47265625", "False"], ["-5.296875", "False"], ["-7.12109375", "False"], ["-6.359375", "False"], ["-7.8515625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "2cb74a05cc0e2419a3a2fac23079f8c30556915a47b2976f78004fa2ca2605e2", "prompt_hash": "86813fa738226097d7deddc7c9dee36fc305de806f04f971dfc382af332c9be0", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 120, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n원나라가 차지했던 북동쪽의 우리 나라 땅을 찾고, 우리 나라로 들어오는 홍건적과 왜구를 막아 낸 고려의 장군은?\n\n### 선택지: \n(A) 이순신\n(B) 최영\n(C) 이성계\n(D) 강감찬\n(E) 양만춘\n\n### 정답:", "options": "['이순신', '최영', '이성계', '강감찬', '양만춘']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n원나라가 차지했던 북동쪽의 우리 나라 땅을 찾고, 우리 나라로 들어오는 홍건적과 왜구를 막아 낸 고려의 장군은?\n\n### 선택지: \n(A) 이순신\n(B) 최영\n(C) 이성계\n(D) 강감찬\n(E) 양만춘\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n원나라가 차지했던 북동쪽의 우리 나라 땅을 찾고, 우리 나라로 들어오는 홍건적과 왜구를 막아 낸 고려의 장군은?\n\n### 선택지: \n(A) 이순신\n(B) 최영\n(C) 이성계\n(D) 강감찬\n(E) 양만춘\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n원나라가 차지했던 북동쪽의 우리 나라 땅을 찾고, 우리 나라로 들어오는 홍건적과 왜구를 막아 낸 고려의 장군은?\n\n### 선택지: \n(A) 이순신\n(B) 최영\n(C) 이성계\n(D) 강감찬\n(E) 양만춘\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n원나라가 차지했던 북동쪽의 우리 나라 땅을 찾고, 우리 나라로 들어오는 홍건적과 왜구를 막아 낸 고려의 장군은?\n\n### 선택지: \n(A) 이순신\n(B) 최영\n(C) 이성계\n(D) 강감찬\n(E) 양만춘\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n원나라가 차지했던 북동쪽의 우리 나라 땅을 찾고, 우리 나라로 들어오는 홍건적과 왜구를 막아 낸 고려의 장군은?\n\n### 선택지: \n(A) 이순신\n(B) 최영\n(C) 이성계\n(D) 강감찬\n(E) 양만춘\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.5", "False"]], [["-5.8671875", "False"]], [["-6.94921875", "False"]], [["-5.80078125", "False"]], [["-7.4140625", "False"]]], "filtered_resps": [["-5.5", "False"], ["-5.8671875", "False"], ["-6.94921875", "False"], ["-5.80078125", "False"], ["-7.4140625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "91b0ec9f1260818716eae08c8ae2b5902b9f165642709ed8ea609d6580cbb5c0", "prompt_hash": "20b88a54fe572c97d2de1e09456bda905b706243371a7a5ca4e4d3cf2dd955f7", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 121, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n중국의 공자에 견주어 우리 나라의 공자라는 뜻으로 해동 공자라고 불린 고려 시대의 학자는 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 정몽주\n(C) 이성계\n(D) 최영\n(E) 최충\n\n### 정답:", "options": "['정약용', '정몽주', '이성계', '최영', '최충']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n중국의 공자에 견주어 우리 나라의 공자라는 뜻으로 해동 공자라고 불린 고려 시대의 학자는 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 정몽주\n(C) 이성계\n(D) 최영\n(E) 최충\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n중국의 공자에 견주어 우리 나라의 공자라는 뜻으로 해동 공자라고 불린 고려 시대의 학자는 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 정몽주\n(C) 이성계\n(D) 최영\n(E) 최충\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n중국의 공자에 견주어 우리 나라의 공자라는 뜻으로 해동 공자라고 불린 고려 시대의 학자는 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 정몽주\n(C) 이성계\n(D) 최영\n(E) 최충\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n중국의 공자에 견주어 우리 나라의 공자라는 뜻으로 해동 공자라고 불린 고려 시대의 학자는 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 정몽주\n(C) 이성계\n(D) 최영\n(E) 최충\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n중국의 공자에 견주어 우리 나라의 공자라는 뜻으로 해동 공자라고 불린 고려 시대의 학자는 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 정몽주\n(C) 이성계\n(D) 최영\n(E) 최충\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.66015625", "False"]], [["-5.6796875", "False"]], [["-7.16796875", "False"]], [["-6.4609375", "False"]], [["-8.25", "False"]]], "filtered_resps": [["-5.66015625", "False"], ["-5.6796875", "False"], ["-7.16796875", "False"], ["-6.4609375", "False"], ["-8.25", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "9e28df28f4b3b70e238df3f56b26d72b2be32f5dcd03e345cfe11a3e594329e6", "prompt_hash": "01ecc83f3ae913f1414746c66d38ba9dd131bbe2913f9f1a24bb87007f76031d", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 122, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 사신으로 원나라에 가서 목화씨를 붓두껍에 넣어 가지고 와서 이를 심고 가꾸어 무명옷을 입게 한 사람은 누구인가?\n\n### 선택지: \n(A) 정몽주\n(B) 문익점\n(C) 강감찬\n(D) 최충\n(E) 최영\n\n### 정답:", "options": "['정몽주', '문익점', '강감찬', '최충', '최영']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 사신으로 원나라에 가서 목화씨를 붓두껍에 넣어 가지고 와서 이를 심고 가꾸어 무명옷을 입게 한 사람은 누구인가?\n\n### 선택지: \n(A) 정몽주\n(B) 문익점\n(C) 강감찬\n(D) 최충\n(E) 최영\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 사신으로 원나라에 가서 목화씨를 붓두껍에 넣어 가지고 와서 이를 심고 가꾸어 무명옷을 입게 한 사람은 누구인가?\n\n### 선택지: \n(A) 정몽주\n(B) 문익점\n(C) 강감찬\n(D) 최충\n(E) 최영\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 사신으로 원나라에 가서 목화씨를 붓두껍에 넣어 가지고 와서 이를 심고 가꾸어 무명옷을 입게 한 사람은 누구인가?\n\n### 선택지: \n(A) 정몽주\n(B) 문익점\n(C) 강감찬\n(D) 최충\n(E) 최영\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 사신으로 원나라에 가서 목화씨를 붓두껍에 넣어 가지고 와서 이를 심고 가꾸어 무명옷을 입게 한 사람은 누구인가?\n\n### 선택지: \n(A) 정몽주\n(B) 문익점\n(C) 강감찬\n(D) 최충\n(E) 최영\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려 사신으로 원나라에 가서 목화씨를 붓두껍에 넣어 가지고 와서 이를 심고 가꾸어 무명옷을 입게 한 사람은 누구인가?\n\n### 선택지: \n(A) 정몽주\n(B) 문익점\n(C) 강감찬\n(D) 최충\n(E) 최영\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.83984375", "False"]], [["-5.62890625", "False"]], [["-7.0234375", "False"]], [["-6.796875", "False"]], [["-8.8046875", "False"]]], "filtered_resps": [["-5.83984375", "False"], ["-5.62890625", "False"], ["-7.0234375", "False"], ["-6.796875", "False"], ["-8.8046875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "2c53fef678eda1b6d07ad77a719ceb731f6a2bfe42562e148fd1fb482cf41cc1", "prompt_hash": "89c4db7dac68763e8c7b37b4807e7d97dd4783f4c0ea8bb436cfb1a43ed2c01a", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 123, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1866년 프랑스가 강화도를 공격하였을 때 이를 물리친 조선의 장군은 누구인가?\n\n### 선택지: \n(A) 양헌수\n(B) 이순신\n(C) 강감찬\n(D) 이성계\n(E) 양만춘\n\n### 정답:", "options": "['양헌수', '이순신', '강감찬', '이성계', '양만춘']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1866년 프랑스가 강화도를 공격하였을 때 이를 물리친 조선의 장군은 누구인가?\n\n### 선택지: \n(A) 양헌수\n(B) 이순신\n(C) 강감찬\n(D) 이성계\n(E) 양만춘\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1866년 프랑스가 강화도를 공격하였을 때 이를 물리친 조선의 장군은 누구인가?\n\n### 선택지: \n(A) 양헌수\n(B) 이순신\n(C) 강감찬\n(D) 이성계\n(E) 양만춘\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1866년 프랑스가 강화도를 공격하였을 때 이를 물리친 조선의 장군은 누구인가?\n\n### 선택지: \n(A) 양헌수\n(B) 이순신\n(C) 강감찬\n(D) 이성계\n(E) 양만춘\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1866년 프랑스가 강화도를 공격하였을 때 이를 물리친 조선의 장군은 누구인가?\n\n### 선택지: \n(A) 양헌수\n(B) 이순신\n(C) 강감찬\n(D) 이성계\n(E) 양만춘\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1866년 프랑스가 강화도를 공격하였을 때 이를 물리친 조선의 장군은 누구인가?\n\n### 선택지: \n(A) 양헌수\n(B) 이순신\n(C) 강감찬\n(D) 이성계\n(E) 양만춘\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.2578125", "False"]], [["-5.7109375", "False"]], [["-7.2265625", "False"]], [["-6.44921875", "False"]], [["-7.6015625", "False"]]], "filtered_resps": [["-5.2578125", "False"], ["-5.7109375", "False"], ["-7.2265625", "False"], ["-6.44921875", "False"], ["-7.6015625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "61cfd2a11fa5323124eb9ab94249c9a790665516afdc606167832899a4f98ae7", "prompt_hash": "959f9963b5f91647ef6922d0536cece59e84cfdae2e9ac87977938c18cac9d43", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 124, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n서양의 문물은 주로 어느 나라를 통해 우리 나라에 전달되었는가?\n\n### 선택지: \n(A) 러시아\n(B) 원나라\n(C) 일본\n(D) 명나라\n(E) 청나라\n\n### 정답:", "options": "['러시아', '원나라', '일본', '명나라', '청나라']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n서양의 문물은 주로 어느 나라를 통해 우리 나라에 전달되었는가?\n\n### 선택지: \n(A) 러시아\n(B) 원나라\n(C) 일본\n(D) 명나라\n(E) 청나라\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n서양의 문물은 주로 어느 나라를 통해 우리 나라에 전달되었는가?\n\n### 선택지: \n(A) 러시아\n(B) 원나라\n(C) 일본\n(D) 명나라\n(E) 청나라\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n서양의 문물은 주로 어느 나라를 통해 우리 나라에 전달되었는가?\n\n### 선택지: \n(A) 러시아\n(B) 원나라\n(C) 일본\n(D) 명나라\n(E) 청나라\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n서양의 문물은 주로 어느 나라를 통해 우리 나라에 전달되었는가?\n\n### 선택지: \n(A) 러시아\n(B) 원나라\n(C) 일본\n(D) 명나라\n(E) 청나라\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n서양의 문물은 주로 어느 나라를 통해 우리 나라에 전달되었는가?\n\n### 선택지: \n(A) 러시아\n(B) 원나라\n(C) 일본\n(D) 명나라\n(E) 청나라\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.1015625", "False"]], [["-5.88671875", "False"]], [["-7.4921875", "False"]], [["-7.21875", "False"]], [["-8.6484375", "False"]]], "filtered_resps": [["-6.1015625", "False"], ["-5.88671875", "False"], ["-7.4921875", "False"], ["-7.21875", "False"], ["-8.6484375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "0748fbc41a9e6596d5c9bdf03d2a1bb8c09926256768f299860b49d66736b12e", "prompt_hash": "c97e0f18ff00bfbe57043c0568237c1cc432022d0b4a4f7ed26db5e9689bcd8c", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 125, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 천주교 신자는 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 이승훈\n(C) 정원지\n(D) 베드로\n(E) 흥선대원군\n\n### 정답:", "options": "['정약용', '이승훈', '정원지', '베드로', '흥선대원군']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 천주교 신자는 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 이승훈\n(C) 정원지\n(D) 베드로\n(E) 흥선대원군\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 천주교 신자는 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 이승훈\n(C) 정원지\n(D) 베드로\n(E) 흥선대원군\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 천주교 신자는 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 이승훈\n(C) 정원지\n(D) 베드로\n(E) 흥선대원군\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 천주교 신자는 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 이승훈\n(C) 정원지\n(D) 베드로\n(E) 흥선대원군\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 천주교 신자는 누구인가?\n\n### 선택지: \n(A) 정약용\n(B) 이승훈\n(C) 정원지\n(D) 베드로\n(E) 흥선대원군\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.54296875", "False"]], [["-6.0078125", "False"]], [["-8.1640625", "False"]], [["-6.99609375", "False"]], [["-9.140625", "False"]]], "filtered_resps": [["-6.54296875", "False"], ["-6.0078125", "False"], ["-8.1640625", "False"], ["-6.99609375", "False"], ["-9.140625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "722f155069c1eaac4ea3d9155a3991aa2cef8f89e68da4e0cf59218c1de8b317", "prompt_hash": "72d1c9fdc900e55bbf1f678538cb84dd293e525fdfddd54421ecb07313fb9307", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 126, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 중기의 학자 이수광이 편찬한 백과전서로 천주교와 서구문물을 소개한 책 이름은 무엇인가?\n\n### 선택지: \n(A) 직지심체요절\n(B) 동의보감\n(C) 용비어천가\n(D) 지봉유설\n(E) 조선왕조실록\n\n### 정답:", "options": "['직지심체요절', '동의보감', '용비어천가', '지봉유설', '조선왕조실록']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 중기의 학자 이수광이 편찬한 백과전서로 천주교와 서구문물을 소개한 책 이름은 무엇인가?\n\n### 선택지: \n(A) 직지심체요절\n(B) 동의보감\n(C) 용비어천가\n(D) 지봉유설\n(E) 조선왕조실록\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 중기의 학자 이수광이 편찬한 백과전서로 천주교와 서구문물을 소개한 책 이름은 무엇인가?\n\n### 선택지: \n(A) 직지심체요절\n(B) 동의보감\n(C) 용비어천가\n(D) 지봉유설\n(E) 조선왕조실록\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 중기의 학자 이수광이 편찬한 백과전서로 천주교와 서구문물을 소개한 책 이름은 무엇인가?\n\n### 선택지: \n(A) 직지심체요절\n(B) 동의보감\n(C) 용비어천가\n(D) 지봉유설\n(E) 조선왕조실록\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 중기의 학자 이수광이 편찬한 백과전서로 천주교와 서구문물을 소개한 책 이름은 무엇인가?\n\n### 선택지: \n(A) 직지심체요절\n(B) 동의보감\n(C) 용비어천가\n(D) 지봉유설\n(E) 조선왕조실록\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 중기의 학자 이수광이 편찬한 백과전서로 천주교와 서구문물을 소개한 책 이름은 무엇인가?\n\n### 선택지: \n(A) 직지심체요절\n(B) 동의보감\n(C) 용비어천가\n(D) 지봉유설\n(E) 조선왕조실록\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.23046875", "False"]], [["-6.41015625", "False"]], [["-7.953125", "False"]], [["-7.1015625", "False"]], [["-8.3046875", "False"]]], "filtered_resps": [["-6.23046875", "False"], ["-6.41015625", "False"], ["-7.953125", "False"], ["-7.1015625", "False"], ["-8.3046875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "3b1469dbc322f3b7e07880586817e080d2f47a2a16a6626f62d06542fed66fe7", "prompt_hash": "19d4ace27d450df6e6d8e120fadd26a6f26b7b6349b9ae296c3a610fd3f5595a", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 127, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1630년 청나라에서 천리경, 자명종, 천문 지리 서적 등을 들여온 사람은 누구인가?\n\n### 선택지: \n(A) 최영\n(B) 문익점\n(C) 강감찬\n(D) 정몽주\n(E) 정두원\n\n### 정답:", "options": "['최영', '문익점', '강감찬', '정몽주', '정두원']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1630년 청나라에서 천리경, 자명종, 천문 지리 서적 등을 들여온 사람은 누구인가?\n\n### 선택지: \n(A) 최영\n(B) 문익점\n(C) 강감찬\n(D) 정몽주\n(E) 정두원\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1630년 청나라에서 천리경, 자명종, 천문 지리 서적 등을 들여온 사람은 누구인가?\n\n### 선택지: \n(A) 최영\n(B) 문익점\n(C) 강감찬\n(D) 정몽주\n(E) 정두원\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1630년 청나라에서 천리경, 자명종, 천문 지리 서적 등을 들여온 사람은 누구인가?\n\n### 선택지: \n(A) 최영\n(B) 문익점\n(C) 강감찬\n(D) 정몽주\n(E) 정두원\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1630년 청나라에서 천리경, 자명종, 천문 지리 서적 등을 들여온 사람은 누구인가?\n\n### 선택지: \n(A) 최영\n(B) 문익점\n(C) 강감찬\n(D) 정몽주\n(E) 정두원\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1630년 청나라에서 천리경, 자명종, 천문 지리 서적 등을 들여온 사람은 누구인가?\n\n### 선택지: \n(A) 최영\n(B) 문익점\n(C) 강감찬\n(D) 정몽주\n(E) 정두원\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.70703125", "False"]], [["-5.3359375", "False"]], [["-6.93359375", "False"]], [["-6.73046875", "False"]], [["-7.97265625", "False"]]], "filtered_resps": [["-5.70703125", "False"], ["-5.3359375", "False"], ["-6.93359375", "False"], ["-6.73046875", "False"], ["-7.97265625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "f1b3b1bc492f73b5c912bad707c6aa0b367648500074dbab9f9e7a5bc57d0187", "prompt_hash": "9d41ef242c4eb8f3c4023c6dec3fa48eae2f93d3fe19b348d18ca343535b3258", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 128, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n단발령, 과거 제도 폐지, 노비 제도 폐지 등과 같은 내용으로 이루어진 개혁은?\n\n### 선택지: \n(A) 을미개혁\n(B) 양무운동\n(C) 광무개혁\n(D) 갑오개혁\n(E) 갑신개혁\n\n### 정답:", "options": "['을미개혁', '양무운동', '광무개혁', '갑오개혁', '갑신개혁']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n단발령, 과거 제도 폐지, 노비 제도 폐지 등과 같은 내용으로 이루어진 개혁은?\n\n### 선택지: \n(A) 을미개혁\n(B) 양무운동\n(C) 광무개혁\n(D) 갑오개혁\n(E) 갑신개혁\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n단발령, 과거 제도 폐지, 노비 제도 폐지 등과 같은 내용으로 이루어진 개혁은?\n\n### 선택지: \n(A) 을미개혁\n(B) 양무운동\n(C) 광무개혁\n(D) 갑오개혁\n(E) 갑신개혁\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n단발령, 과거 제도 폐지, 노비 제도 폐지 등과 같은 내용으로 이루어진 개혁은?\n\n### 선택지: \n(A) 을미개혁\n(B) 양무운동\n(C) 광무개혁\n(D) 갑오개혁\n(E) 갑신개혁\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n단발령, 과거 제도 폐지, 노비 제도 폐지 등과 같은 내용으로 이루어진 개혁은?\n\n### 선택지: \n(A) 을미개혁\n(B) 양무운동\n(C) 광무개혁\n(D) 갑오개혁\n(E) 갑신개혁\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n단발령, 과거 제도 폐지, 노비 제도 폐지 등과 같은 내용으로 이루어진 개혁은?\n\n### 선택지: \n(A) 을미개혁\n(B) 양무운동\n(C) 광무개혁\n(D) 갑오개혁\n(E) 갑신개혁\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.02734375", "False"]], [["-6.53125", "False"]], [["-7.578125", "False"]], [["-6.73046875", "False"]], [["-7.7265625", "False"]]], "filtered_resps": [["-6.02734375", "False"], ["-6.53125", "False"], ["-7.578125", "False"], ["-6.73046875", "False"], ["-7.7265625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "2b255efbe6080ba68116959e8dc86d81e7efc87a91dc98a3f808d35d7b779f69", "prompt_hash": "e6ade37ee2ebba18372f3c2e07da4d1922a6400573c89a54749d6c5bdabc062f", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 129, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 신문을 간행하는데 중심적인 역할을 한 인물은 누구인가?\n\n### 선택지: \n(A) 이승훈\n(B) 신채호\n(C) 서재필\n(D) 이승만\n(E) 김구\n\n### 정답:", "options": "['이승훈', '신채호', '서재필', '이승만', '김구']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 신문을 간행하는데 중심적인 역할을 한 인물은 누구인가?\n\n### 선택지: \n(A) 이승훈\n(B) 신채호\n(C) 서재필\n(D) 이승만\n(E) 김구\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 신문을 간행하는데 중심적인 역할을 한 인물은 누구인가?\n\n### 선택지: \n(A) 이승훈\n(B) 신채호\n(C) 서재필\n(D) 이승만\n(E) 김구\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 신문을 간행하는데 중심적인 역할을 한 인물은 누구인가?\n\n### 선택지: \n(A) 이승훈\n(B) 신채호\n(C) 서재필\n(D) 이승만\n(E) 김구\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 신문을 간행하는데 중심적인 역할을 한 인물은 누구인가?\n\n### 선택지: \n(A) 이승훈\n(B) 신채호\n(C) 서재필\n(D) 이승만\n(E) 김구\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 신문을 간행하는데 중심적인 역할을 한 인물은 누구인가?\n\n### 선택지: \n(A) 이승훈\n(B) 신채호\n(C) 서재필\n(D) 이승만\n(E) 김구\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.91015625", "False"]], [["-6.28125", "False"]], [["-7.99609375", "False"]], [["-7.3046875", "False"]], [["-9.140625", "False"]]], "filtered_resps": [["-6.91015625", "False"], ["-6.28125", "False"], ["-7.99609375", "False"], ["-7.3046875", "False"], ["-9.140625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "956af55f81182fde499e2481b2b021ed3b5ad5037b0f38590217f3e5c86c23e0", "prompt_hash": "000bba8e5a323e2972686c712fb9f5d256ad9188c1ff5fb125294ba1d7b7d565", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 130, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 협회에서 중국 사신을 맞아들였던 영은문을 헐고 우리 나라의 자주 독립을 나타내기 위해 세운 것은 무엇인가?\n\n### 선택지: \n(A) 독립문\n(B) 동대문\n(C) 서대문\n(D) 남대문\n(E) 광화문\n\n### 정답:", "options": "['독립문', '동대문', '서대문', '남대문', '광화문']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 협회에서 중국 사신을 맞아들였던 영은문을 헐고 우리 나라의 자주 독립을 나타내기 위해 세운 것은 무엇인가?\n\n### 선택지: \n(A) 독립문\n(B) 동대문\n(C) 서대문\n(D) 남대문\n(E) 광화문\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 협회에서 중국 사신을 맞아들였던 영은문을 헐고 우리 나라의 자주 독립을 나타내기 위해 세운 것은 무엇인가?\n\n### 선택지: \n(A) 독립문\n(B) 동대문\n(C) 서대문\n(D) 남대문\n(E) 광화문\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 협회에서 중국 사신을 맞아들였던 영은문을 헐고 우리 나라의 자주 독립을 나타내기 위해 세운 것은 무엇인가?\n\n### 선택지: \n(A) 독립문\n(B) 동대문\n(C) 서대문\n(D) 남대문\n(E) 광화문\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 협회에서 중국 사신을 맞아들였던 영은문을 헐고 우리 나라의 자주 독립을 나타내기 위해 세운 것은 무엇인가?\n\n### 선택지: \n(A) 독립문\n(B) 동대문\n(C) 서대문\n(D) 남대문\n(E) 광화문\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 협회에서 중국 사신을 맞아들였던 영은문을 헐고 우리 나라의 자주 독립을 나타내기 위해 세운 것은 무엇인가?\n\n### 선택지: \n(A) 독립문\n(B) 동대문\n(C) 서대문\n(D) 남대문\n(E) 광화문\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.8515625", "False"]], [["-5.5625", "False"]], [["-7.3125", "False"]], [["-6.4765625", "False"]], [["-8.3046875", "False"]]], "filtered_resps": [["-5.8515625", "False"], ["-5.5625", "False"], ["-7.3125", "False"], ["-6.4765625", "False"], ["-8.3046875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "b9f8104f89741b8349cb6ead367f916a1cb3065be994c4052cc722e9e1ea7e11", "prompt_hash": "624026b215689cf1ec63cee342d5a8d4546be5522776e75fa63a9ce597332720", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 131, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n종로 네거리에서 여러 일에 종사하는 사람들이 모여 자유롭게 발언하고 토론하던 모임의 이름은?\n\n### 선택지: \n(A) 독립운동\n(B) 촛불집회\n(C) 황국협회\n(D) 자유토론회\n(E) 만민 공동회\n\n### 정답:", "options": "['독립운동', '촛불집회', '황국협회', '자유토론회', '만민 공동회']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n종로 네거리에서 여러 일에 종사하는 사람들이 모여 자유롭게 발언하고 토론하던 모임의 이름은?\n\n### 선택지: \n(A) 독립운동\n(B) 촛불집회\n(C) 황국협회\n(D) 자유토론회\n(E) 만민 공동회\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n종로 네거리에서 여러 일에 종사하는 사람들이 모여 자유롭게 발언하고 토론하던 모임의 이름은?\n\n### 선택지: \n(A) 독립운동\n(B) 촛불집회\n(C) 황국협회\n(D) 자유토론회\n(E) 만민 공동회\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n종로 네거리에서 여러 일에 종사하는 사람들이 모여 자유롭게 발언하고 토론하던 모임의 이름은?\n\n### 선택지: \n(A) 독립운동\n(B) 촛불집회\n(C) 황국협회\n(D) 자유토론회\n(E) 만민 공동회\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n종로 네거리에서 여러 일에 종사하는 사람들이 모여 자유롭게 발언하고 토론하던 모임의 이름은?\n\n### 선택지: \n(A) 독립운동\n(B) 촛불집회\n(C) 황국협회\n(D) 자유토론회\n(E) 만민 공동회\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n종로 네거리에서 여러 일에 종사하는 사람들이 모여 자유롭게 발언하고 토론하던 모임의 이름은?\n\n### 선택지: \n(A) 독립운동\n(B) 촛불집회\n(C) 황국협회\n(D) 자유토론회\n(E) 만민 공동회\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.80859375", "False"]], [["-6.03125", "False"]], [["-7.375", "False"]], [["-6.6015625", "False"]], [["-8.203125", "False"]]], "filtered_resps": [["-5.80859375", "False"], ["-6.03125", "False"], ["-7.375", "False"], ["-6.6015625", "False"], ["-8.203125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "788d110ac0ae06e86633cc87dd38bc359c45fad27aa6fde55c18034e6fe6e6b1", "prompt_hash": "16d19a2523ecf87b2f0a958c6f2a6bb69f53a8f57bc7f56e30e21322f5b893dd", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 132, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n최초의 근대 국립 학교로 나라에서 직접 학생들을 선발하여 기숙사를 마련하고 외국인 교사도 채용한 학교는?\n\n### 선택지: \n(A) 육영 공원\n(B) 원산 학사\n(C) 이화학당\n(D) 대성 학교\n(E) 배재 학당\n\n### 정답:", "options": "['육영 공원', '원산 학사', '이화학당', '대성 학교', '배재 학당']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n최초의 근대 국립 학교로 나라에서 직접 학생들을 선발하여 기숙사를 마련하고 외국인 교사도 채용한 학교는?\n\n### 선택지: \n(A) 육영 공원\n(B) 원산 학사\n(C) 이화학당\n(D) 대성 학교\n(E) 배재 학당\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n최초의 근대 국립 학교로 나라에서 직접 학생들을 선발하여 기숙사를 마련하고 외국인 교사도 채용한 학교는?\n\n### 선택지: \n(A) 육영 공원\n(B) 원산 학사\n(C) 이화학당\n(D) 대성 학교\n(E) 배재 학당\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n최초의 근대 국립 학교로 나라에서 직접 학생들을 선발하여 기숙사를 마련하고 외국인 교사도 채용한 학교는?\n\n### 선택지: \n(A) 육영 공원\n(B) 원산 학사\n(C) 이화학당\n(D) 대성 학교\n(E) 배재 학당\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n최초의 근대 국립 학교로 나라에서 직접 학생들을 선발하여 기숙사를 마련하고 외국인 교사도 채용한 학교는?\n\n### 선택지: \n(A) 육영 공원\n(B) 원산 학사\n(C) 이화학당\n(D) 대성 학교\n(E) 배재 학당\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n최초의 근대 국립 학교로 나라에서 직접 학생들을 선발하여 기숙사를 마련하고 외국인 교사도 채용한 학교는?\n\n### 선택지: \n(A) 육영 공원\n(B) 원산 학사\n(C) 이화학당\n(D) 대성 학교\n(E) 배재 학당\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.59375", "False"]], [["-5.4765625", "False"]], [["-6.33203125", "False"]], [["-6.83203125", "False"]], [["-8.2265625", "False"]]], "filtered_resps": [["-5.59375", "False"], ["-5.4765625", "False"], ["-6.33203125", "False"], ["-6.83203125", "False"], ["-8.2265625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "3e74cd78c36e7897ab92244e48ebc3f6d19004329e86b2d87317a94e9d4a8b56", "prompt_hash": "cef2a42aef05c003723b05797a07e0dc12d8516570608e0cb2ca24b97bea051c", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 133, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n오늘날의 초등학교로서 수신, 역사, 지리, 산술, 미술, 체조와 애국심을 기르는 것이 중요하다고 한글을 가르친 학교는?\n\n### 선택지: \n(A) 소학교\n(B) 고등학교\n(C) 중학교\n(D) 초등학교\n(E) 중등학교\n\n### 정답:", "options": "['소학교', '고등학교', '중학교', '초등학교', '중등학교']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n오늘날의 초등학교로서 수신, 역사, 지리, 산술, 미술, 체조와 애국심을 기르는 것이 중요하다고 한글을 가르친 학교는?\n\n### 선택지: \n(A) 소학교\n(B) 고등학교\n(C) 중학교\n(D) 초등학교\n(E) 중등학교\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n오늘날의 초등학교로서 수신, 역사, 지리, 산술, 미술, 체조와 애국심을 기르는 것이 중요하다고 한글을 가르친 학교는?\n\n### 선택지: \n(A) 소학교\n(B) 고등학교\n(C) 중학교\n(D) 초등학교\n(E) 중등학교\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n오늘날의 초등학교로서 수신, 역사, 지리, 산술, 미술, 체조와 애국심을 기르는 것이 중요하다고 한글을 가르친 학교는?\n\n### 선택지: \n(A) 소학교\n(B) 고등학교\n(C) 중학교\n(D) 초등학교\n(E) 중등학교\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n오늘날의 초등학교로서 수신, 역사, 지리, 산술, 미술, 체조와 애국심을 기르는 것이 중요하다고 한글을 가르친 학교는?\n\n### 선택지: \n(A) 소학교\n(B) 고등학교\n(C) 중학교\n(D) 초등학교\n(E) 중등학교\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n오늘날의 초등학교로서 수신, 역사, 지리, 산술, 미술, 체조와 애국심을 기르는 것이 중요하다고 한글을 가르친 학교는?\n\n### 선택지: \n(A) 소학교\n(B) 고등학교\n(C) 중학교\n(D) 초등학교\n(E) 중등학교\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.07421875", "False"]], [["-5.890625", "False"]], [["-7.11328125", "False"]], [["-6.56640625", "False"]], [["-8.484375", "False"]]], "filtered_resps": [["-6.07421875", "False"], ["-5.890625", "False"], ["-7.11328125", "False"], ["-6.56640625", "False"], ["-8.484375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "c801e475502b8a68747bf8df22f65f73379b0af89b68db74b918b232ae8a657a", "prompt_hash": "bff4d293502b34ba2d6d31e073f08a48f66c56b459af720d4db70b68bd23eab0", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 134, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년 미국인 선교사 아펜젤러가 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 배재 학당\n(B) 이화학당\n(C) 대성 학교\n(D) 원산 학사\n(E) 육영 공원\n\n### 정답:", "options": "['배재 학당', '이화학당', '대성 학교', '원산 학사', '육영 공원']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년 미국인 선교사 아펜젤러가 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 배재 학당\n(B) 이화학당\n(C) 대성 학교\n(D) 원산 학사\n(E) 육영 공원\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년 미국인 선교사 아펜젤러가 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 배재 학당\n(B) 이화학당\n(C) 대성 학교\n(D) 원산 학사\n(E) 육영 공원\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년 미국인 선교사 아펜젤러가 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 배재 학당\n(B) 이화학당\n(C) 대성 학교\n(D) 원산 학사\n(E) 육영 공원\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년 미국인 선교사 아펜젤러가 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 배재 학당\n(B) 이화학당\n(C) 대성 학교\n(D) 원산 학사\n(E) 육영 공원\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1885년 미국인 선교사 아펜젤러가 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 배재 학당\n(B) 이화학당\n(C) 대성 학교\n(D) 원산 학사\n(E) 육영 공원\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.66015625", "False"]], [["-5.84375", "False"]], [["-6.96875", "False"]], [["-6.4609375", "False"]], [["-7.0390625", "False"]]], "filtered_resps": [["-5.66015625", "False"], ["-5.84375", "False"], ["-6.96875", "False"], ["-6.4609375", "False"], ["-7.0390625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "ab3b629fdbc0b2daa23cd1d897972ee3227a7609b565cca8dff6fb9da49cd033", "prompt_hash": "199a6bf7ed5320920e58187cc1a651ed4f4bc1231d14a7e81fb8ff2c65cc8567", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 135, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n북감리교 선교사 스크랜튼 부인이 여성 교육을 위해 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 배재 학당\n(B) 이화 학당\n(C) 대성 학교\n(D) 육영 공원\n(E) 원산 학사\n\n### 정답:", "options": "['배재 학당', '이화 학당', '대성 학교', '육영 공원', '원산 학사']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n북감리교 선교사 스크랜튼 부인이 여성 교육을 위해 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 배재 학당\n(B) 이화 학당\n(C) 대성 학교\n(D) 육영 공원\n(E) 원산 학사\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n북감리교 선교사 스크랜튼 부인이 여성 교육을 위해 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 배재 학당\n(B) 이화 학당\n(C) 대성 학교\n(D) 육영 공원\n(E) 원산 학사\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n북감리교 선교사 스크랜튼 부인이 여성 교육을 위해 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 배재 학당\n(B) 이화 학당\n(C) 대성 학교\n(D) 육영 공원\n(E) 원산 학사\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n북감리교 선교사 스크랜튼 부인이 여성 교육을 위해 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 배재 학당\n(B) 이화 학당\n(C) 대성 학교\n(D) 육영 공원\n(E) 원산 학사\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n북감리교 선교사 스크랜튼 부인이 여성 교육을 위해 세운 학교는 무엇인가?\n\n### 선택지: \n(A) 배재 학당\n(B) 이화 학당\n(C) 대성 학교\n(D) 육영 공원\n(E) 원산 학사\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.81640625", "False"]], [["-5.34375", "False"]], [["-6.91796875", "False"]], [["-7.1484375", "False"]], [["-7.73828125", "False"]]], "filtered_resps": [["-5.81640625", "False"], ["-5.34375", "False"], ["-6.91796875", "False"], ["-7.1484375", "False"], ["-7.73828125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "12584cc1151ce5fff31b6c2311232e1b3274b2fa43aa8e4e66430a9da3391207", "prompt_hash": "7ea69de44e567a22961430e5a849af696f9153bc651a6db71c39564ba8b9ee15", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 136, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n새로운 제도의 교육 방식에 따른 학교를 세우기 시작하였는데 교사를 양성하는 학교를 무엇이라고 불렀는가?\n\n### 선택지: \n(A) 교육 학교\n(B) 고등학교\n(C) 사범 학교\n(D) 사관학교\n(E) 교사 학교\n\n### 정답:", "options": "['교육 학교', '고등학교', '사범 학교', '사관학교', '교사 학교']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n새로운 제도의 교육 방식에 따른 학교를 세우기 시작하였는데 교사를 양성하는 학교를 무엇이라고 불렀는가?\n\n### 선택지: \n(A) 교육 학교\n(B) 고등학교\n(C) 사범 학교\n(D) 사관학교\n(E) 교사 학교\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n새로운 제도의 교육 방식에 따른 학교를 세우기 시작하였는데 교사를 양성하는 학교를 무엇이라고 불렀는가?\n\n### 선택지: \n(A) 교육 학교\n(B) 고등학교\n(C) 사범 학교\n(D) 사관학교\n(E) 교사 학교\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n새로운 제도의 교육 방식에 따른 학교를 세우기 시작하였는데 교사를 양성하는 학교를 무엇이라고 불렀는가?\n\n### 선택지: \n(A) 교육 학교\n(B) 고등학교\n(C) 사범 학교\n(D) 사관학교\n(E) 교사 학교\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n새로운 제도의 교육 방식에 따른 학교를 세우기 시작하였는데 교사를 양성하는 학교를 무엇이라고 불렀는가?\n\n### 선택지: \n(A) 교육 학교\n(B) 고등학교\n(C) 사범 학교\n(D) 사관학교\n(E) 교사 학교\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n새로운 제도의 교육 방식에 따른 학교를 세우기 시작하였는데 교사를 양성하는 학교를 무엇이라고 불렀는가?\n\n### 선택지: \n(A) 교육 학교\n(B) 고등학교\n(C) 사범 학교\n(D) 사관학교\n(E) 교사 학교\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.421875", "False"]], [["-6.0390625", "False"]], [["-7.37109375", "False"]], [["-7.35546875", "False"]], [["-9.109375", "False"]]], "filtered_resps": [["-6.421875", "False"], ["-6.0390625", "False"], ["-7.37109375", "False"], ["-7.35546875", "False"], ["-9.109375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "0ed50a03d67bcae5e86c2db04ff73783a92ae75b92a21fab6ed67f625ac3cb4d", "prompt_hash": "7390316e421adc52df245a1bdc5103b2ca7ea111fbab678d44f45e71f1589b4d", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 137, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n여러 장군들의 영웅전을 썼으며, ‘조선 상고사’ 등을 펴내어 우리 민족의 우수성을 깨닫게 하고 민족혼을 불러일으킨 사람은 누구인가?\n\n### 선택지: \n(A) 신채호\n(B) 이상\n(C) 한용운\n(D) 이상화\n(E) 이인직\n\n### 정답:", "options": "['신채호', '이상', '한용운', '이상화', '이인직']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n여러 장군들의 영웅전을 썼으며, ‘조선 상고사’ 등을 펴내어 우리 민족의 우수성을 깨닫게 하고 민족혼을 불러일으킨 사람은 누구인가?\n\n### 선택지: \n(A) 신채호\n(B) 이상\n(C) 한용운\n(D) 이상화\n(E) 이인직\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n여러 장군들의 영웅전을 썼으며, ‘조선 상고사’ 등을 펴내어 우리 민족의 우수성을 깨닫게 하고 민족혼을 불러일으킨 사람은 누구인가?\n\n### 선택지: \n(A) 신채호\n(B) 이상\n(C) 한용운\n(D) 이상화\n(E) 이인직\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n여러 장군들의 영웅전을 썼으며, ‘조선 상고사’ 등을 펴내어 우리 민족의 우수성을 깨닫게 하고 민족혼을 불러일으킨 사람은 누구인가?\n\n### 선택지: \n(A) 신채호\n(B) 이상\n(C) 한용운\n(D) 이상화\n(E) 이인직\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n여러 장군들의 영웅전을 썼으며, ‘조선 상고사’ 등을 펴내어 우리 민족의 우수성을 깨닫게 하고 민족혼을 불러일으킨 사람은 누구인가?\n\n### 선택지: \n(A) 신채호\n(B) 이상\n(C) 한용운\n(D) 이상화\n(E) 이인직\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n여러 장군들의 영웅전을 썼으며, ‘조선 상고사’ 등을 펴내어 우리 민족의 우수성을 깨닫게 하고 민족혼을 불러일으킨 사람은 누구인가?\n\n### 선택지: \n(A) 신채호\n(B) 이상\n(C) 한용운\n(D) 이상화\n(E) 이인직\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.6953125", "False"]], [["-5.875", "False"]], [["-7.40234375", "False"]], [["-6.60546875", "False"]], [["-8.3125", "False"]]], "filtered_resps": [["-5.6953125", "False"], ["-5.875", "False"], ["-7.40234375", "False"], ["-6.60546875", "False"], ["-8.3125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "90c21e471417018b157d1dab1e7a5ebe33614313e7e80e37e619a22266397294", "prompt_hash": "1e554bbc516977078cea844ae3b22571a800154644372fc4fcfb4dce68092663", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 138, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n유럽 여러 나라를 돌아보고 온 유길준이 쓴 서구 문물 소개서는 무엇인가?\n\n### 선택지: \n(A) 서유기\n(B) 난중일기\n(C) 경국대전\n(D) 서유견문\n(E) 동경대전\n\n### 정답:", "options": "['서유기', '난중일기', '경국대전', '서유견문', '동경대전']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n유럽 여러 나라를 돌아보고 온 유길준이 쓴 서구 문물 소개서는 무엇인가?\n\n### 선택지: \n(A) 서유기\n(B) 난중일기\n(C) 경국대전\n(D) 서유견문\n(E) 동경대전\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n유럽 여러 나라를 돌아보고 온 유길준이 쓴 서구 문물 소개서는 무엇인가?\n\n### 선택지: \n(A) 서유기\n(B) 난중일기\n(C) 경국대전\n(D) 서유견문\n(E) 동경대전\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n유럽 여러 나라를 돌아보고 온 유길준이 쓴 서구 문물 소개서는 무엇인가?\n\n### 선택지: \n(A) 서유기\n(B) 난중일기\n(C) 경국대전\n(D) 서유견문\n(E) 동경대전\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n유럽 여러 나라를 돌아보고 온 유길준이 쓴 서구 문물 소개서는 무엇인가?\n\n### 선택지: \n(A) 서유기\n(B) 난중일기\n(C) 경국대전\n(D) 서유견문\n(E) 동경대전\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n유럽 여러 나라를 돌아보고 온 유길준이 쓴 서구 문물 소개서는 무엇인가?\n\n### 선택지: \n(A) 서유기\n(B) 난중일기\n(C) 경국대전\n(D) 서유견문\n(E) 동경대전\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.4140625", "False"]], [["-6.3984375", "False"]], [["-8.1484375", "False"]], [["-7.5234375", "False"]], [["-8.484375", "False"]]], "filtered_resps": [["-6.4140625", "False"], ["-6.3984375", "False"], ["-8.1484375", "False"], ["-7.5234375", "False"], ["-8.484375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "6e5b180dc1bf93fa9e780da78c1a307b255ef019ee06be981e58e6ef360914c6", "prompt_hash": "708dd2aa6f753c0ecea7112005f352b0f1ead245707deb93283f3eb46f20d878", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 139, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 신소설은 ‘혈의 누’를 지은 사람은 누구인가?\n\n### 선택지: \n(A) 이상\n(B) 한용운\n(C) 신채호\n(D) 이인직\n(E) 이상화\n\n### 정답:", "options": "['이상', '한용운', '신채호', '이인직', '이상화']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 신소설은 ‘혈의 누’를 지은 사람은 누구인가?\n\n### 선택지: \n(A) 이상\n(B) 한용운\n(C) 신채호\n(D) 이인직\n(E) 이상화\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 신소설은 ‘혈의 누’를 지은 사람은 누구인가?\n\n### 선택지: \n(A) 이상\n(B) 한용운\n(C) 신채호\n(D) 이인직\n(E) 이상화\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 신소설은 ‘혈의 누’를 지은 사람은 누구인가?\n\n### 선택지: \n(A) 이상\n(B) 한용운\n(C) 신채호\n(D) 이인직\n(E) 이상화\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 신소설은 ‘혈의 누’를 지은 사람은 누구인가?\n\n### 선택지: \n(A) 이상\n(B) 한용운\n(C) 신채호\n(D) 이인직\n(E) 이상화\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라 최초의 신소설은 ‘혈의 누’를 지은 사람은 누구인가?\n\n### 선택지: \n(A) 이상\n(B) 한용운\n(C) 신채호\n(D) 이인직\n(E) 이상화\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.75", "False"]], [["-5.9140625", "False"]], [["-7.2421875", "False"]], [["-6.82421875", "False"]], [["-8.484375", "False"]]], "filtered_resps": [["-5.75", "False"], ["-5.9140625", "False"], ["-7.2421875", "False"], ["-6.82421875", "False"], ["-8.484375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "12410e3615fd51e59bfb2b8b360c62c35eb67810663e3ba591025b8e9b4978a8", "prompt_hash": "803df73aca28cb5ca36d1e91ae69d638853b0272df600955821bed2482ae6879", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 140, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n높은 산에 올라가 불을 피워 불빛이나 연기에 의해 신호를 전달한 방법을 무엇이라고 하는가?\n\n### 선택지: \n(A) 전보\n(B) 매화\n(C) 봉화\n(D) 전갈\n(E) 파발\n\n### 정답:", "options": "['전보', '매화', '봉화', '전갈', '파발']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n높은 산에 올라가 불을 피워 불빛이나 연기에 의해 신호를 전달한 방법을 무엇이라고 하는가?\n\n### 선택지: \n(A) 전보\n(B) 매화\n(C) 봉화\n(D) 전갈\n(E) 파발\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n높은 산에 올라가 불을 피워 불빛이나 연기에 의해 신호를 전달한 방법을 무엇이라고 하는가?\n\n### 선택지: \n(A) 전보\n(B) 매화\n(C) 봉화\n(D) 전갈\n(E) 파발\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n높은 산에 올라가 불을 피워 불빛이나 연기에 의해 신호를 전달한 방법을 무엇이라고 하는가?\n\n### 선택지: \n(A) 전보\n(B) 매화\n(C) 봉화\n(D) 전갈\n(E) 파발\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n높은 산에 올라가 불을 피워 불빛이나 연기에 의해 신호를 전달한 방법을 무엇이라고 하는가?\n\n### 선택지: \n(A) 전보\n(B) 매화\n(C) 봉화\n(D) 전갈\n(E) 파발\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n높은 산에 올라가 불을 피워 불빛이나 연기에 의해 신호를 전달한 방법을 무엇이라고 하는가?\n\n### 선택지: \n(A) 전보\n(B) 매화\n(C) 봉화\n(D) 전갈\n(E) 파발\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.76953125", "False"]], [["-5.796875", "False"]], [["-7.30078125", "False"]], [["-6.94140625", "False"]], [["-8.65625", "False"]]], "filtered_resps": [["-5.76953125", "False"], ["-5.796875", "False"], ["-7.30078125", "False"], ["-6.94140625", "False"], ["-8.65625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "90bbfb5441cacb0a4b9f32db5b0de0f4f59b244ff4f5d2aecbc52dbb2b31cdb9", "prompt_hash": "3bc4c794241aef69f148f409e3d483991ff25b91820ff05e87d909a2cdf96b2a", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 141, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n사람이 말을 타거나 달려서 소식을 전달하는 방법을 무엇이라고 하는가?\n\n### 선택지: \n(A) 파발\n(B) 전보\n(C) 봉화\n(D) 전갈\n(E) 매화\n\n### 정답:", "options": "['파발', '전보', '봉화', '전갈', '매화']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n사람이 말을 타거나 달려서 소식을 전달하는 방법을 무엇이라고 하는가?\n\n### 선택지: \n(A) 파발\n(B) 전보\n(C) 봉화\n(D) 전갈\n(E) 매화\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n사람이 말을 타거나 달려서 소식을 전달하는 방법을 무엇이라고 하는가?\n\n### 선택지: \n(A) 파발\n(B) 전보\n(C) 봉화\n(D) 전갈\n(E) 매화\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n사람이 말을 타거나 달려서 소식을 전달하는 방법을 무엇이라고 하는가?\n\n### 선택지: \n(A) 파발\n(B) 전보\n(C) 봉화\n(D) 전갈\n(E) 매화\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n사람이 말을 타거나 달려서 소식을 전달하는 방법을 무엇이라고 하는가?\n\n### 선택지: \n(A) 파발\n(B) 전보\n(C) 봉화\n(D) 전갈\n(E) 매화\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n사람이 말을 타거나 달려서 소식을 전달하는 방법을 무엇이라고 하는가?\n\n### 선택지: \n(A) 파발\n(B) 전보\n(C) 봉화\n(D) 전갈\n(E) 매화\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.23046875", "False"]], [["-6.34375", "False"]], [["-8.3203125", "False"]], [["-7.61328125", "False"]], [["-9.3515625", "False"]]], "filtered_resps": [["-6.23046875", "False"], ["-6.34375", "False"], ["-8.3203125", "False"], ["-7.61328125", "False"], ["-9.3515625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "7b8829940809cc7c35b8b5df4bd866ac30e16ba3801a3219e23cb9ff7ed38e1f", "prompt_hash": "bd1487a126741c8e7876a8970ec57d4a511b5ffe8c5694e33552a0e976e8a406", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 142, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n광혜원을 세우고 의료 활동을 시작한 사람은 누구인가?\n\n### 선택지: \n(A) 알렌\n(B) 이완용\n(C) 언더우드\n(D) 헐버트\n(E) 에비슨\n\n### 정답:", "options": "['알렌', '이완용', '언더우드', '헐버트', '에비슨']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n광혜원을 세우고 의료 활동을 시작한 사람은 누구인가?\n\n### 선택지: \n(A) 알렌\n(B) 이완용\n(C) 언더우드\n(D) 헐버트\n(E) 에비슨\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n광혜원을 세우고 의료 활동을 시작한 사람은 누구인가?\n\n### 선택지: \n(A) 알렌\n(B) 이완용\n(C) 언더우드\n(D) 헐버트\n(E) 에비슨\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n광혜원을 세우고 의료 활동을 시작한 사람은 누구인가?\n\n### 선택지: \n(A) 알렌\n(B) 이완용\n(C) 언더우드\n(D) 헐버트\n(E) 에비슨\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n광혜원을 세우고 의료 활동을 시작한 사람은 누구인가?\n\n### 선택지: \n(A) 알렌\n(B) 이완용\n(C) 언더우드\n(D) 헐버트\n(E) 에비슨\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n광혜원을 세우고 의료 활동을 시작한 사람은 누구인가?\n\n### 선택지: \n(A) 알렌\n(B) 이완용\n(C) 언더우드\n(D) 헐버트\n(E) 에비슨\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.6640625", "False"]], [["-6.26171875", "False"]], [["-7.9453125", "False"]], [["-7.71875", "False"]], [["-9.171875", "False"]]], "filtered_resps": [["-6.6640625", "False"], ["-6.26171875", "False"], ["-7.9453125", "False"], ["-7.71875", "False"], ["-9.171875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "892365434be10917374afd3f32f31d1d6df614ca7b28b8497dd2581c6c8ad490", "prompt_hash": "4e350ed5a568ffa438f47a0a7d5090f7f7e2b6330005a4f90d71b93255e3eef5", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 143, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1903년 서울에 설립되었으며 치료와 함께 의료 요원을 양성한 기관은 무엇인가?\n\n### 선택지: \n(A) 의과대학\n(B) 제중원\n(C) 세브란스\n(D) 광혜원\n(E) 대한 의원\n\n### 정답:", "options": "['의과대학', '제중원', '세브란스', '광혜원', '대한 의원']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1903년 서울에 설립되었으며 치료와 함께 의료 요원을 양성한 기관은 무엇인가?\n\n### 선택지: \n(A) 의과대학\n(B) 제중원\n(C) 세브란스\n(D) 광혜원\n(E) 대한 의원\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1903년 서울에 설립되었으며 치료와 함께 의료 요원을 양성한 기관은 무엇인가?\n\n### 선택지: \n(A) 의과대학\n(B) 제중원\n(C) 세브란스\n(D) 광혜원\n(E) 대한 의원\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1903년 서울에 설립되었으며 치료와 함께 의료 요원을 양성한 기관은 무엇인가?\n\n### 선택지: \n(A) 의과대학\n(B) 제중원\n(C) 세브란스\n(D) 광혜원\n(E) 대한 의원\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1903년 서울에 설립되었으며 치료와 함께 의료 요원을 양성한 기관은 무엇인가?\n\n### 선택지: \n(A) 의과대학\n(B) 제중원\n(C) 세브란스\n(D) 광혜원\n(E) 대한 의원\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1903년 서울에 설립되었으며 치료와 함께 의료 요원을 양성한 기관은 무엇인가?\n\n### 선택지: \n(A) 의과대학\n(B) 제중원\n(C) 세브란스\n(D) 광혜원\n(E) 대한 의원\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.3359375", "False"]], [["-5.72265625", "False"]], [["-6.9921875", "False"]], [["-6.59375", "False"]], [["-8.5546875", "False"]]], "filtered_resps": [["-5.3359375", "False"], ["-5.72265625", "False"], ["-6.9921875", "False"], ["-6.59375", "False"], ["-8.5546875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "dd385a1739d28f8782a41e0b160780c9713d3af70ca9552de919423fddab79ba", "prompt_hash": "5f0ad152a3e57d178e05ce4d11f6e7a35b3fedc64b947dd619eb245babdf5b8d", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 144, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘도깨비불’, ‘묘화’, ‘괴화’, ‘건달불’이라고도 불린 것의 이름은 무엇인가?\n\n### 선택지: \n(A) 사진기\n(B) 촛불\n(C) 전화\n(D) 전등\n(E) 영사기\n\n### 정답:", "options": "['사진기', '촛불', '전화', '전등', '영사기']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘도깨비불’, ‘묘화’, ‘괴화’, ‘건달불’이라고도 불린 것의 이름은 무엇인가?\n\n### 선택지: \n(A) 사진기\n(B) 촛불\n(C) 전화\n(D) 전등\n(E) 영사기\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘도깨비불’, ‘묘화’, ‘괴화’, ‘건달불’이라고도 불린 것의 이름은 무엇인가?\n\n### 선택지: \n(A) 사진기\n(B) 촛불\n(C) 전화\n(D) 전등\n(E) 영사기\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘도깨비불’, ‘묘화’, ‘괴화’, ‘건달불’이라고도 불린 것의 이름은 무엇인가?\n\n### 선택지: \n(A) 사진기\n(B) 촛불\n(C) 전화\n(D) 전등\n(E) 영사기\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘도깨비불’, ‘묘화’, ‘괴화’, ‘건달불’이라고도 불린 것의 이름은 무엇인가?\n\n### 선택지: \n(A) 사진기\n(B) 촛불\n(C) 전화\n(D) 전등\n(E) 영사기\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘도깨비불’, ‘묘화’, ‘괴화’, ‘건달불’이라고도 불린 것의 이름은 무엇인가?\n\n### 선택지: \n(A) 사진기\n(B) 촛불\n(C) 전화\n(D) 전등\n(E) 영사기\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.77734375", "False"]], [["-6.21875", "False"]], [["-7.83984375", "False"]], [["-7.41015625", "False"]], [["-9.203125", "False"]]], "filtered_resps": [["-5.77734375", "False"], ["-6.21875", "False"], ["-7.83984375", "False"], ["-7.41015625", "False"], ["-9.203125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "b9774159423f8ddc6bc89982ddf112621adb52a08ff5ccbef03305845d56db84", "prompt_hash": "cef5acf2813b092b1a8580d23fa82b6cba7cc653fbb98f3777764fa7e1a489fc", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 145, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라에서 최초로 건설된 철도 이름은 무엇인가?\n\n### 선택지: \n(A) 경춘선\n(B) 경인선\n(C) 경부선\n(D) 경의선\n(E) 호남선\n\n### 정답:", "options": "['경춘선', '경인선', '경부선', '경의선', '호남선']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라에서 최초로 건설된 철도 이름은 무엇인가?\n\n### 선택지: \n(A) 경춘선\n(B) 경인선\n(C) 경부선\n(D) 경의선\n(E) 호남선\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라에서 최초로 건설된 철도 이름은 무엇인가?\n\n### 선택지: \n(A) 경춘선\n(B) 경인선\n(C) 경부선\n(D) 경의선\n(E) 호남선\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라에서 최초로 건설된 철도 이름은 무엇인가?\n\n### 선택지: \n(A) 경춘선\n(B) 경인선\n(C) 경부선\n(D) 경의선\n(E) 호남선\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라에서 최초로 건설된 철도 이름은 무엇인가?\n\n### 선택지: \n(A) 경춘선\n(B) 경인선\n(C) 경부선\n(D) 경의선\n(E) 호남선\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 나라에서 최초로 건설된 철도 이름은 무엇인가?\n\n### 선택지: \n(A) 경춘선\n(B) 경인선\n(C) 경부선\n(D) 경의선\n(E) 호남선\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.9140625", "False"]], [["-6.1484375", "False"]], [["-7.3984375", "False"]], [["-6.83203125", "False"]], [["-8.734375", "False"]]], "filtered_resps": [["-5.9140625", "False"], ["-6.1484375", "False"], ["-7.3984375", "False"], ["-6.83203125", "False"], ["-8.734375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "1b3ffa4b9e6c245fa868a93f1d7ead6e2843ceed0d2d7b01acb73b2b917dc53b", "prompt_hash": "56ca0cb548683eaf336c201b63b7035caf8554c9939dee9527cd75e7c94bb678", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 146, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘덕률풍’, ‘다리풍’이라고 불린 것의 이름은 무엇인가?\n\n### 선택지: \n(A) 전차\n(B) 사진기\n(C) 영사기\n(D) 전화\n(E) 전등\n\n### 정답:", "options": "['전차', '사진기', '영사기', '전화', '전등']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘덕률풍’, ‘다리풍’이라고 불린 것의 이름은 무엇인가?\n\n### 선택지: \n(A) 전차\n(B) 사진기\n(C) 영사기\n(D) 전화\n(E) 전등\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘덕률풍’, ‘다리풍’이라고 불린 것의 이름은 무엇인가?\n\n### 선택지: \n(A) 전차\n(B) 사진기\n(C) 영사기\n(D) 전화\n(E) 전등\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘덕률풍’, ‘다리풍’이라고 불린 것의 이름은 무엇인가?\n\n### 선택지: \n(A) 전차\n(B) 사진기\n(C) 영사기\n(D) 전화\n(E) 전등\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘덕률풍’, ‘다리풍’이라고 불린 것의 이름은 무엇인가?\n\n### 선택지: \n(A) 전차\n(B) 사진기\n(C) 영사기\n(D) 전화\n(E) 전등\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n‘덕률풍’, ‘다리풍’이라고 불린 것의 이름은 무엇인가?\n\n### 선택지: \n(A) 전차\n(B) 사진기\n(C) 영사기\n(D) 전화\n(E) 전등\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.8046875", "False"]], [["-6.3984375", "False"]], [["-7.45703125", "False"]], [["-7.07421875", "False"]], [["-8.90625", "False"]]], "filtered_resps": [["-5.8046875", "False"], ["-6.3984375", "False"], ["-7.45703125", "False"], ["-7.07421875", "False"], ["-8.90625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "08eb98a16335a7b5da3c4dfea95836f774d09eaaf13aec12ef239ecd1dfe966e", "prompt_hash": "2ff3cdc4b413f3a08b1a2f71baeb1a8b69cc6dbcf395a3c43e4b2a33aa4a848b", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 147, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n의병장 중에서 평민 출신으로 ‘태백산 호랑이’라는 별명으로 불리면서 일본인들에게 두려움을 준 사람은 누구인가?\n\n### 선택지: \n(A) 안중근\n(B) 신돌석\n(C) 장지연\n(D) 최익현\n(E) 민영환\n\n### 정답:", "options": "['안중근', '신돌석', '장지연', '최익현', '민영환']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n의병장 중에서 평민 출신으로 ‘태백산 호랑이’라는 별명으로 불리면서 일본인들에게 두려움을 준 사람은 누구인가?\n\n### 선택지: \n(A) 안중근\n(B) 신돌석\n(C) 장지연\n(D) 최익현\n(E) 민영환\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n의병장 중에서 평민 출신으로 ‘태백산 호랑이’라는 별명으로 불리면서 일본인들에게 두려움을 준 사람은 누구인가?\n\n### 선택지: \n(A) 안중근\n(B) 신돌석\n(C) 장지연\n(D) 최익현\n(E) 민영환\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n의병장 중에서 평민 출신으로 ‘태백산 호랑이’라는 별명으로 불리면서 일본인들에게 두려움을 준 사람은 누구인가?\n\n### 선택지: \n(A) 안중근\n(B) 신돌석\n(C) 장지연\n(D) 최익현\n(E) 민영환\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n의병장 중에서 평민 출신으로 ‘태백산 호랑이’라는 별명으로 불리면서 일본인들에게 두려움을 준 사람은 누구인가?\n\n### 선택지: \n(A) 안중근\n(B) 신돌석\n(C) 장지연\n(D) 최익현\n(E) 민영환\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n의병장 중에서 평민 출신으로 ‘태백산 호랑이’라는 별명으로 불리면서 일본인들에게 두려움을 준 사람은 누구인가?\n\n### 선택지: \n(A) 안중근\n(B) 신돌석\n(C) 장지연\n(D) 최익현\n(E) 민영환\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.76171875", "False"]], [["-6.0390625", "False"]], [["-7.82421875", "False"]], [["-6.98828125", "False"]], [["-8.8203125", "False"]]], "filtered_resps": [["-5.76171875", "False"], ["-6.0390625", "False"], ["-7.82421875", "False"], ["-6.98828125", "False"], ["-8.8203125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "ff2a7399fe5d1768cb9457ffcb23a04f86b6d657a36cc0146d8c15c0dbb3863e", "prompt_hash": "9aa788a92a412209247091c9f31e23e533394418bed832aa317c152f76e2bdf1", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 148, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n만주 하얼빈에서 침략자의 우두머리인 이토 히로부미를 암살하고 순국한 독립 운동가는 누구인가?\n\n### 선택지: \n(A) 장지연\n(B) 신돌석\n(C) 최익현\n(D) 민영환\n(E) 안중근\n\n### 정답:", "options": "['장지연', '신돌석', '최익현', '민영환', '안중근']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n만주 하얼빈에서 침략자의 우두머리인 이토 히로부미를 암살하고 순국한 독립 운동가는 누구인가?\n\n### 선택지: \n(A) 장지연\n(B) 신돌석\n(C) 최익현\n(D) 민영환\n(E) 안중근\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n만주 하얼빈에서 침략자의 우두머리인 이토 히로부미를 암살하고 순국한 독립 운동가는 누구인가?\n\n### 선택지: \n(A) 장지연\n(B) 신돌석\n(C) 최익현\n(D) 민영환\n(E) 안중근\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n만주 하얼빈에서 침략자의 우두머리인 이토 히로부미를 암살하고 순국한 독립 운동가는 누구인가?\n\n### 선택지: \n(A) 장지연\n(B) 신돌석\n(C) 최익현\n(D) 민영환\n(E) 안중근\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n만주 하얼빈에서 침략자의 우두머리인 이토 히로부미를 암살하고 순국한 독립 운동가는 누구인가?\n\n### 선택지: \n(A) 장지연\n(B) 신돌석\n(C) 최익현\n(D) 민영환\n(E) 안중근\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n만주 하얼빈에서 침략자의 우두머리인 이토 히로부미를 암살하고 순국한 독립 운동가는 누구인가?\n\n### 선택지: \n(A) 장지연\n(B) 신돌석\n(C) 최익현\n(D) 민영환\n(E) 안중근\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.42578125", "False"]], [["-5.609375", "False"]], [["-7.0703125", "False"]], [["-6.98828125", "False"]], [["-8.5703125", "False"]]], "filtered_resps": [["-5.42578125", "False"], ["-5.609375", "False"], ["-7.0703125", "False"], ["-6.98828125", "False"], ["-8.5703125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "d1d10c54905dde54d9aab5bfc0bf72de2c33e606fd5835f6d1bc9850da954309", "prompt_hash": "d9bba089830934ce84dec081dc9791a365ef4d9b7598bb7045697b08812fd2f7", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 149, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n처음으로 의병을 조직한 사람은 누구인가?\n\n### 선택지: \n(A) 최익현\n(B) 안중근\n(C) 신돌석\n(D) 장지연\n(E) 민영환\n\n### 정답:", "options": "['최익현', '안중근', '신돌석', '장지연', '민영환']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n처음으로 의병을 조직한 사람은 누구인가?\n\n### 선택지: \n(A) 최익현\n(B) 안중근\n(C) 신돌석\n(D) 장지연\n(E) 민영환\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n처음으로 의병을 조직한 사람은 누구인가?\n\n### 선택지: \n(A) 최익현\n(B) 안중근\n(C) 신돌석\n(D) 장지연\n(E) 민영환\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n처음으로 의병을 조직한 사람은 누구인가?\n\n### 선택지: \n(A) 최익현\n(B) 안중근\n(C) 신돌석\n(D) 장지연\n(E) 민영환\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n처음으로 의병을 조직한 사람은 누구인가?\n\n### 선택지: \n(A) 최익현\n(B) 안중근\n(C) 신돌석\n(D) 장지연\n(E) 민영환\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n처음으로 의병을 조직한 사람은 누구인가?\n\n### 선택지: \n(A) 최익현\n(B) 안중근\n(C) 신돌석\n(D) 장지연\n(E) 민영환\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.48046875", "False"]], [["-6.37890625", "False"]], [["-7.8203125", "False"]], [["-7.375", "False"]], [["-9.2890625", "False"]]], "filtered_resps": [["-6.48046875", "False"], ["-6.37890625", "False"], ["-7.8203125", "False"], ["-7.375", "False"], ["-9.2890625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "27060c2d63474ad79140e18593fbc4ff8a393fded13308ff8fe1610ea089afaa", "prompt_hash": "2929da5768bc2e846f60f7cae9b93bcaf66d26ed421fff12ead2baac53995c77", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 150, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 민족에게 일본에 대항하여 싸울 것을 당부하고 유서를 남기고 자결한 사람은 누구인가?\n\n### 선택지: \n(A) 민영환\n(B) 장지연\n(C) 신돌석\n(D) 안중근\n(E) 최익현\n\n### 정답:", "options": "['민영환', '장지연', '신돌석', '안중근', '최익현']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 민족에게 일본에 대항하여 싸울 것을 당부하고 유서를 남기고 자결한 사람은 누구인가?\n\n### 선택지: \n(A) 민영환\n(B) 장지연\n(C) 신돌석\n(D) 안중근\n(E) 최익현\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 민족에게 일본에 대항하여 싸울 것을 당부하고 유서를 남기고 자결한 사람은 누구인가?\n\n### 선택지: \n(A) 민영환\n(B) 장지연\n(C) 신돌석\n(D) 안중근\n(E) 최익현\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 민족에게 일본에 대항하여 싸울 것을 당부하고 유서를 남기고 자결한 사람은 누구인가?\n\n### 선택지: \n(A) 민영환\n(B) 장지연\n(C) 신돌석\n(D) 안중근\n(E) 최익현\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 민족에게 일본에 대항하여 싸울 것을 당부하고 유서를 남기고 자결한 사람은 누구인가?\n\n### 선택지: \n(A) 민영환\n(B) 장지연\n(C) 신돌석\n(D) 안중근\n(E) 최익현\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n우리 민족에게 일본에 대항하여 싸울 것을 당부하고 유서를 남기고 자결한 사람은 누구인가?\n\n### 선택지: \n(A) 민영환\n(B) 장지연\n(C) 신돌석\n(D) 안중근\n(E) 최익현\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.72265625", "False"]], [["-5.6328125", "False"]], [["-7.27734375", "False"]], [["-6.734375", "False"]], [["-8.25", "False"]]], "filtered_resps": [["-5.72265625", "False"], ["-5.6328125", "False"], ["-7.27734375", "False"], ["-6.734375", "False"], ["-8.25", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "078c482fb47e608aa4181a9183f38dd7cb74b5f3e21c7537719cbd1816f5887d", "prompt_hash": "3a947179d1147755ed399ef707d4512252bfd9b55dc93038d29dbe93c6771852", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 151, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n을사조약의 부당성에 대해 황성 신문에 ‘시일야방성대곡’이라는 글을 실은 사람은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 최익현\n(C) 안중근\n(D) 민영환\n(E) 장지연\n\n### 정답:", "options": "['신돌석', '최익현', '안중근', '민영환', '장지연']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n을사조약의 부당성에 대해 황성 신문에 ‘시일야방성대곡’이라는 글을 실은 사람은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 최익현\n(C) 안중근\n(D) 민영환\n(E) 장지연\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n을사조약의 부당성에 대해 황성 신문에 ‘시일야방성대곡’이라는 글을 실은 사람은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 최익현\n(C) 안중근\n(D) 민영환\n(E) 장지연\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n을사조약의 부당성에 대해 황성 신문에 ‘시일야방성대곡’이라는 글을 실은 사람은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 최익현\n(C) 안중근\n(D) 민영환\n(E) 장지연\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n을사조약의 부당성에 대해 황성 신문에 ‘시일야방성대곡’이라는 글을 실은 사람은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 최익현\n(C) 안중근\n(D) 민영환\n(E) 장지연\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n을사조약의 부당성에 대해 황성 신문에 ‘시일야방성대곡’이라는 글을 실은 사람은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 최익현\n(C) 안중근\n(D) 민영환\n(E) 장지연\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.3203125", "False"]], [["-5.47265625", "False"]], [["-7.1953125", "False"]], [["-6.484375", "False"]], [["-8.3828125", "False"]]], "filtered_resps": [["-5.3203125", "False"], ["-5.47265625", "False"], ["-7.1953125", "False"], ["-6.484375", "False"], ["-8.3828125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "3130ab2506acd736924930560ceed3c25ece29f1e8c0a50794efaeaede558b0c", "prompt_hash": "6d04e38ce81f54fc5f35a8070aeaa08550146a6b6f1fd6379e54b81d834e7189", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 152, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n16세의 나이로 시위 운동에 참여하여 만세를 부르고, 아우내 장터에서 독립 만세를 주도한 사람은 누구인가?\n\n### 선택지: \n(A) 민영환\n(B) 최익현\n(C) 안중근\n(D) 신돌석\n(E) 유관순\n\n### 정답:", "options": "['민영환', '최익현', '안중근', '신돌석', '유관순']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n16세의 나이로 시위 운동에 참여하여 만세를 부르고, 아우내 장터에서 독립 만세를 주도한 사람은 누구인가?\n\n### 선택지: \n(A) 민영환\n(B) 최익현\n(C) 안중근\n(D) 신돌석\n(E) 유관순\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n16세의 나이로 시위 운동에 참여하여 만세를 부르고, 아우내 장터에서 독립 만세를 주도한 사람은 누구인가?\n\n### 선택지: \n(A) 민영환\n(B) 최익현\n(C) 안중근\n(D) 신돌석\n(E) 유관순\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n16세의 나이로 시위 운동에 참여하여 만세를 부르고, 아우내 장터에서 독립 만세를 주도한 사람은 누구인가?\n\n### 선택지: \n(A) 민영환\n(B) 최익현\n(C) 안중근\n(D) 신돌석\n(E) 유관순\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n16세의 나이로 시위 운동에 참여하여 만세를 부르고, 아우내 장터에서 독립 만세를 주도한 사람은 누구인가?\n\n### 선택지: \n(A) 민영환\n(B) 최익현\n(C) 안중근\n(D) 신돌석\n(E) 유관순\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n16세의 나이로 시위 운동에 참여하여 만세를 부르고, 아우내 장터에서 독립 만세를 주도한 사람은 누구인가?\n\n### 선택지: \n(A) 민영환\n(B) 최익현\n(C) 안중근\n(D) 신돌석\n(E) 유관순\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.04296875", "False"]], [["-5.80078125", "False"]], [["-7.33203125", "False"]], [["-6.8125", "False"]], [["-8.5546875", "False"]]], "filtered_resps": [["-6.04296875", "False"], ["-5.80078125", "False"], ["-7.33203125", "False"], ["-6.8125", "False"], ["-8.5546875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "beca835bc68c4f40d2c4a33ae416129b94bc5c93e7bee4c7e5beb00794c40d30", "prompt_hash": "81515ea56e4fceef99443992bd4b3e09b83343c24b49ae19d509f7d4ca2cf25a", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 153, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제가 한 마을 사람들을 모두 교회에 모아 놓고 불을 질러 죽게 했던 사건은 무엇인가?\n\n### 선택지: \n(A) 운양호 사건\n(B) 청산리대첩\n(C) 병인박해\n(D) 제암리 사건\n(E) 을미사변\n\n### 정답:", "options": "['운양호 사건', '청산리대첩', '병인박해', '제암리 사건', '을미사변']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제가 한 마을 사람들을 모두 교회에 모아 놓고 불을 질러 죽게 했던 사건은 무엇인가?\n\n### 선택지: \n(A) 운양호 사건\n(B) 청산리대첩\n(C) 병인박해\n(D) 제암리 사건\n(E) 을미사변\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제가 한 마을 사람들을 모두 교회에 모아 놓고 불을 질러 죽게 했던 사건은 무엇인가?\n\n### 선택지: \n(A) 운양호 사건\n(B) 청산리대첩\n(C) 병인박해\n(D) 제암리 사건\n(E) 을미사변\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제가 한 마을 사람들을 모두 교회에 모아 놓고 불을 질러 죽게 했던 사건은 무엇인가?\n\n### 선택지: \n(A) 운양호 사건\n(B) 청산리대첩\n(C) 병인박해\n(D) 제암리 사건\n(E) 을미사변\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제가 한 마을 사람들을 모두 교회에 모아 놓고 불을 질러 죽게 했던 사건은 무엇인가?\n\n### 선택지: \n(A) 운양호 사건\n(B) 청산리대첩\n(C) 병인박해\n(D) 제암리 사건\n(E) 을미사변\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일제가 한 마을 사람들을 모두 교회에 모아 놓고 불을 질러 죽게 했던 사건은 무엇인가?\n\n### 선택지: \n(A) 운양호 사건\n(B) 청산리대첩\n(C) 병인박해\n(D) 제암리 사건\n(E) 을미사변\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.6015625", "False"]], [["-5.8828125", "False"]], [["-7.26953125", "False"]], [["-6.703125", "False"]], [["-8.5", "False"]]], "filtered_resps": [["-5.6015625", "False"], ["-5.8828125", "False"], ["-7.26953125", "False"], ["-6.703125", "False"], ["-8.5", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "f08eabfea15c13273ba71c42f8f08666ba26549b140f6c3ab33e9d364eae3411", "prompt_hash": "51b1358f077fe805f6f07714839df78913edba1d270229cc0ee40eddcaaa9cb4", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 154, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 지도자들이 독립 운동을 보다 효과적으로 펴기 위하여 중국 상하이에 세운 것은?\n\n### 선택지: \n(A) 대사관\n(B) 대한민국임시정부\n(C) 독립군\n(D) 독립협회\n(E) 독립운동본부\n\n### 정답:", "options": "['대사관', '대한민국임시정부', '독립군', '독립협회', '독립운동본부']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 지도자들이 독립 운동을 보다 효과적으로 펴기 위하여 중국 상하이에 세운 것은?\n\n### 선택지: \n(A) 대사관\n(B) 대한민국임시정부\n(C) 독립군\n(D) 독립협회\n(E) 독립운동본부\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 지도자들이 독립 운동을 보다 효과적으로 펴기 위하여 중국 상하이에 세운 것은?\n\n### 선택지: \n(A) 대사관\n(B) 대한민국임시정부\n(C) 독립군\n(D) 독립협회\n(E) 독립운동본부\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 지도자들이 독립 운동을 보다 효과적으로 펴기 위하여 중국 상하이에 세운 것은?\n\n### 선택지: \n(A) 대사관\n(B) 대한민국임시정부\n(C) 독립군\n(D) 독립협회\n(E) 독립운동본부\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 지도자들이 독립 운동을 보다 효과적으로 펴기 위하여 중국 상하이에 세운 것은?\n\n### 선택지: \n(A) 대사관\n(B) 대한민국임시정부\n(C) 독립군\n(D) 독립협회\n(E) 독립운동본부\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n민족 지도자들이 독립 운동을 보다 효과적으로 펴기 위하여 중국 상하이에 세운 것은?\n\n### 선택지: \n(A) 대사관\n(B) 대한민국임시정부\n(C) 독립군\n(D) 독립협회\n(E) 독립운동본부\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.234375", "False"]], [["-6.328125", "False"]], [["-7.76171875", "False"]], [["-6.94140625", "False"]], [["-8.6015625", "False"]]], "filtered_resps": [["-6.234375", "False"], ["-6.328125", "False"], ["-7.76171875", "False"], ["-6.94140625", "False"], ["-8.6015625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "b749d429d8304f2ddaa5336f4cc3fac4a7d011856123e8e702a65402949f05ce", "prompt_hash": "06c83e68d6f9a9278aa04f5325f8ca2c4c25d1fa493f394684c0290d52b66993", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 155, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n특히 외국에서 독립 활동이 두드러졌던 나라는 프랑스와 어느 나라인가?\n\n### 선택지: \n(A) 영국\n(B) 러시아\n(C) 중국\n(D) 일본\n(E) 미국\n\n### 정답:", "options": "['영국', '러시아', '중국', '일본', '미국']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n특히 외국에서 독립 활동이 두드러졌던 나라는 프랑스와 어느 나라인가?\n\n### 선택지: \n(A) 영국\n(B) 러시아\n(C) 중국\n(D) 일본\n(E) 미국\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n특히 외국에서 독립 활동이 두드러졌던 나라는 프랑스와 어느 나라인가?\n\n### 선택지: \n(A) 영국\n(B) 러시아\n(C) 중국\n(D) 일본\n(E) 미국\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n특히 외국에서 독립 활동이 두드러졌던 나라는 프랑스와 어느 나라인가?\n\n### 선택지: \n(A) 영국\n(B) 러시아\n(C) 중국\n(D) 일본\n(E) 미국\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n특히 외국에서 독립 활동이 두드러졌던 나라는 프랑스와 어느 나라인가?\n\n### 선택지: \n(A) 영국\n(B) 러시아\n(C) 중국\n(D) 일본\n(E) 미국\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n특히 외국에서 독립 활동이 두드러졌던 나라는 프랑스와 어느 나라인가?\n\n### 선택지: \n(A) 영국\n(B) 러시아\n(C) 중국\n(D) 일본\n(E) 미국\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.890625", "False"]], [["-6.1171875", "False"]], [["-7.7265625", "False"]], [["-7.73828125", "False"]], [["-9.78125", "False"]]], "filtered_resps": [["-6.890625", "False"], ["-6.1171875", "False"], ["-7.7265625", "False"], ["-7.73828125", "False"], ["-9.78125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "59f876e947c2d3caf658e50d3e43297e4911e692285429cf59d6349b494f0215", "prompt_hash": "7e5714230cafe97c292c51aaeb8e33f888b6bfe0832fcbdde657461d5df7ad64", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 156, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나라와 민족을 위하여 의로운 일을 하다가 돌아가신 분을 부르는 말은 무엇인가?\n\n### 선택지: \n(A) 의사\n(B) 검사\n(C) 간호사\n(D) 변호사\n(E) 판사\n\n### 정답:", "options": "['의사', '검사', '간호사', '변호사', '판사']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나라와 민족을 위하여 의로운 일을 하다가 돌아가신 분을 부르는 말은 무엇인가?\n\n### 선택지: \n(A) 의사\n(B) 검사\n(C) 간호사\n(D) 변호사\n(E) 판사\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나라와 민족을 위하여 의로운 일을 하다가 돌아가신 분을 부르는 말은 무엇인가?\n\n### 선택지: \n(A) 의사\n(B) 검사\n(C) 간호사\n(D) 변호사\n(E) 판사\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나라와 민족을 위하여 의로운 일을 하다가 돌아가신 분을 부르는 말은 무엇인가?\n\n### 선택지: \n(A) 의사\n(B) 검사\n(C) 간호사\n(D) 변호사\n(E) 판사\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나라와 민족을 위하여 의로운 일을 하다가 돌아가신 분을 부르는 말은 무엇인가?\n\n### 선택지: \n(A) 의사\n(B) 검사\n(C) 간호사\n(D) 변호사\n(E) 판사\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n나라와 민족을 위하여 의로운 일을 하다가 돌아가신 분을 부르는 말은 무엇인가?\n\n### 선택지: \n(A) 의사\n(B) 검사\n(C) 간호사\n(D) 변호사\n(E) 판사\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.1484375", "False"]], [["-6.0234375", "False"]], [["-7.8046875", "False"]], [["-7.234375", "False"]], [["-8.8046875", "False"]]], "filtered_resps": [["-6.1484375", "False"], ["-6.0234375", "False"], ["-7.8046875", "False"], ["-7.234375", "False"], ["-8.8046875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "dad9464a13ad6b36a7655c130dd145f057340f86f2489d5becb817f6f9627743", "prompt_hash": "a66a8d603add19782eded7967c287c9d4a4657dda08711244b325264b4df2c2c", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 157, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n상하이에서 국내로 잠입하여 1923년 1월 12일 종로 경찰서에 폭탄을 던지고 이를 쫓는 일본 경찰을 다수 사살한 분은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 최익현\n(C) 안중근\n(D) 김상옥\n(E) 민영환\n\n### 정답:", "options": "['신돌석', '최익현', '안중근', '김상옥', '민영환']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n상하이에서 국내로 잠입하여 1923년 1월 12일 종로 경찰서에 폭탄을 던지고 이를 쫓는 일본 경찰을 다수 사살한 분은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 최익현\n(C) 안중근\n(D) 김상옥\n(E) 민영환\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n상하이에서 국내로 잠입하여 1923년 1월 12일 종로 경찰서에 폭탄을 던지고 이를 쫓는 일본 경찰을 다수 사살한 분은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 최익현\n(C) 안중근\n(D) 김상옥\n(E) 민영환\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n상하이에서 국내로 잠입하여 1923년 1월 12일 종로 경찰서에 폭탄을 던지고 이를 쫓는 일본 경찰을 다수 사살한 분은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 최익현\n(C) 안중근\n(D) 김상옥\n(E) 민영환\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n상하이에서 국내로 잠입하여 1923년 1월 12일 종로 경찰서에 폭탄을 던지고 이를 쫓는 일본 경찰을 다수 사살한 분은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 최익현\n(C) 안중근\n(D) 김상옥\n(E) 민영환\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n상하이에서 국내로 잠입하여 1923년 1월 12일 종로 경찰서에 폭탄을 던지고 이를 쫓는 일본 경찰을 다수 사살한 분은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 최익현\n(C) 안중근\n(D) 김상옥\n(E) 민영환\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.265625", "False"]], [["-5.47265625", "False"]], [["-7.01953125", "False"]], [["-6.62109375", "False"]], [["-8.53125", "False"]]], "filtered_resps": [["-5.265625", "False"], ["-5.47265625", "False"], ["-7.01953125", "False"], ["-6.62109375", "False"], ["-8.53125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "ca0292957671245cf098ac12cdf7187c137faf3218da42a260d2b37eb51041a6", "prompt_hash": "cfadf1f8d58650934569e7bf0ae061492da816b9cc705365ba090c013d995f1a", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 158, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립군은 주로 간도와 어느 곳을 근거지로 조직되었는가?\n\n### 선택지: \n(A) 상하이\n(B) 도쿄\n(C) 산둥반도\n(D) 북경\n(E) 연해주\n\n### 정답:", "options": "['상하이', '도쿄', '산둥반도', '북경', '연해주']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립군은 주로 간도와 어느 곳을 근거지로 조직되었는가?\n\n### 선택지: \n(A) 상하이\n(B) 도쿄\n(C) 산둥반도\n(D) 북경\n(E) 연해주\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립군은 주로 간도와 어느 곳을 근거지로 조직되었는가?\n\n### 선택지: \n(A) 상하이\n(B) 도쿄\n(C) 산둥반도\n(D) 북경\n(E) 연해주\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립군은 주로 간도와 어느 곳을 근거지로 조직되었는가?\n\n### 선택지: \n(A) 상하이\n(B) 도쿄\n(C) 산둥반도\n(D) 북경\n(E) 연해주\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립군은 주로 간도와 어느 곳을 근거지로 조직되었는가?\n\n### 선택지: \n(A) 상하이\n(B) 도쿄\n(C) 산둥반도\n(D) 북경\n(E) 연해주\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립군은 주로 간도와 어느 곳을 근거지로 조직되었는가?\n\n### 선택지: \n(A) 상하이\n(B) 도쿄\n(C) 산둥반도\n(D) 북경\n(E) 연해주\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.71875", "False"]], [["-5.6875", "False"]], [["-7.22265625", "False"]], [["-6.59765625", "False"]], [["-8.265625", "False"]]], "filtered_resps": [["-5.71875", "False"], ["-5.6875", "False"], ["-7.22265625", "False"], ["-6.59765625", "False"], ["-8.265625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "350166b1c873fc1d9a954c8f6c36ed888ae4554fe65b1ec08403c3451e54624d", "prompt_hash": "09d6efa7fe1e5d1d5531e1eac5952c6d0fa647352d47ede8b2d956ab1d3e7b16", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 159, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n봉오동 전투를 승리로 이끌어 독립군의 사기를 크게 올린 사람은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 민영환\n(C) 안중근\n(D) 최익현\n(E) 홍범도\n\n### 정답:", "options": "['신돌석', '민영환', '안중근', '최익현', '홍범도']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n봉오동 전투를 승리로 이끌어 독립군의 사기를 크게 올린 사람은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 민영환\n(C) 안중근\n(D) 최익현\n(E) 홍범도\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n봉오동 전투를 승리로 이끌어 독립군의 사기를 크게 올린 사람은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 민영환\n(C) 안중근\n(D) 최익현\n(E) 홍범도\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n봉오동 전투를 승리로 이끌어 독립군의 사기를 크게 올린 사람은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 민영환\n(C) 안중근\n(D) 최익현\n(E) 홍범도\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n봉오동 전투를 승리로 이끌어 독립군의 사기를 크게 올린 사람은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 민영환\n(C) 안중근\n(D) 최익현\n(E) 홍범도\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n봉오동 전투를 승리로 이끌어 독립군의 사기를 크게 올린 사람은 누구인가?\n\n### 선택지: \n(A) 신돌석\n(B) 민영환\n(C) 안중근\n(D) 최익현\n(E) 홍범도\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.60546875", "False"]], [["-5.51953125", "False"]], [["-7.3671875", "False"]], [["-6.578125", "False"]], [["-8.5546875", "False"]]], "filtered_resps": [["-5.60546875", "False"], ["-5.51953125", "False"], ["-7.3671875", "False"], ["-6.578125", "False"], ["-8.5546875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "1aeccc5318ab4ff1cc6ab1462b9eb8863220cb9d2e84da5e07709d606effbd55", "prompt_hash": "fc4875647bb4fb8af38303a89c3e2089e680667af367f033ab243a7cb14af20b", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 160, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n김좌진 장군이 크게 활약하여 독립군의 사기를 드높였던 전투의 이름은 무엇인가?\n\n### 선택지: \n(A) 만세운동\n(B) 국내대진공작전\n(C) 봉오동전투\n(D) 청산리 대첩\n(E) 홍커우공언 폭탄투척 사건\n\n### 정답:", "options": "['만세운동', '국내대진공작전', '봉오동전투', '청산리 대첩', '홍커우공언 폭탄투척 사건']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n김좌진 장군이 크게 활약하여 독립군의 사기를 드높였던 전투의 이름은 무엇인가?\n\n### 선택지: \n(A) 만세운동\n(B) 국내대진공작전\n(C) 봉오동전투\n(D) 청산리 대첩\n(E) 홍커우공언 폭탄투척 사건\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n김좌진 장군이 크게 활약하여 독립군의 사기를 드높였던 전투의 이름은 무엇인가?\n\n### 선택지: \n(A) 만세운동\n(B) 국내대진공작전\n(C) 봉오동전투\n(D) 청산리 대첩\n(E) 홍커우공언 폭탄투척 사건\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n김좌진 장군이 크게 활약하여 독립군의 사기를 드높였던 전투의 이름은 무엇인가?\n\n### 선택지: \n(A) 만세운동\n(B) 국내대진공작전\n(C) 봉오동전투\n(D) 청산리 대첩\n(E) 홍커우공언 폭탄투척 사건\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n김좌진 장군이 크게 활약하여 독립군의 사기를 드높였던 전투의 이름은 무엇인가?\n\n### 선택지: \n(A) 만세운동\n(B) 국내대진공작전\n(C) 봉오동전투\n(D) 청산리 대첩\n(E) 홍커우공언 폭탄투척 사건\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n김좌진 장군이 크게 활약하여 독립군의 사기를 드높였던 전투의 이름은 무엇인가?\n\n### 선택지: \n(A) 만세운동\n(B) 국내대진공작전\n(C) 봉오동전투\n(D) 청산리 대첩\n(E) 홍커우공언 폭탄투척 사건\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.078125", "False"]], [["-5.96484375", "False"]], [["-7.9765625", "False"]], [["-7.19140625", "False"]], [["-8.0859375", "False"]]], "filtered_resps": [["-6.078125", "False"], ["-5.96484375", "False"], ["-7.9765625", "False"], ["-7.19140625", "False"], ["-8.0859375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "5b6fc084376495c8ee9af69b1eeb2bb3ebce8de2a8032d187c524c6e10607a0d", "prompt_hash": "766aa0de28a30f15b47c26b35915f7d1d3b8d165afd91178e9bf82da4064843a", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 161, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n3․1 운동 이후 국어 연구에 뜻을 둔 사람들이 우리 민족의 문화를 지키고 한글을 연구하기 위하여 세운 단체는 무엇인가?\n\n### 선택지: \n(A) 대한민국임시정부\n(B) 독립협회\n(C) 한국어연구소\n(D) 조선어 학회\n(E) 세종대왕연구소\n\n### 정답:", "options": "['대한민국임시정부', '독립협회', '한국어연구소', '조선어 학회', '세종대왕연구소']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n3․1 운동 이후 국어 연구에 뜻을 둔 사람들이 우리 민족의 문화를 지키고 한글을 연구하기 위하여 세운 단체는 무엇인가?\n\n### 선택지: \n(A) 대한민국임시정부\n(B) 독립협회\n(C) 한국어연구소\n(D) 조선어 학회\n(E) 세종대왕연구소\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n3․1 운동 이후 국어 연구에 뜻을 둔 사람들이 우리 민족의 문화를 지키고 한글을 연구하기 위하여 세운 단체는 무엇인가?\n\n### 선택지: \n(A) 대한민국임시정부\n(B) 독립협회\n(C) 한국어연구소\n(D) 조선어 학회\n(E) 세종대왕연구소\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n3․1 운동 이후 국어 연구에 뜻을 둔 사람들이 우리 민족의 문화를 지키고 한글을 연구하기 위하여 세운 단체는 무엇인가?\n\n### 선택지: \n(A) 대한민국임시정부\n(B) 독립협회\n(C) 한국어연구소\n(D) 조선어 학회\n(E) 세종대왕연구소\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n3․1 운동 이후 국어 연구에 뜻을 둔 사람들이 우리 민족의 문화를 지키고 한글을 연구하기 위하여 세운 단체는 무엇인가?\n\n### 선택지: \n(A) 대한민국임시정부\n(B) 독립협회\n(C) 한국어연구소\n(D) 조선어 학회\n(E) 세종대왕연구소\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n3․1 운동 이후 국어 연구에 뜻을 둔 사람들이 우리 민족의 문화를 지키고 한글을 연구하기 위하여 세운 단체는 무엇인가?\n\n### 선택지: \n(A) 대한민국임시정부\n(B) 독립협회\n(C) 한국어연구소\n(D) 조선어 학회\n(E) 세종대왕연구소\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.16015625", "False"]], [["-5.890625", "False"]], [["-7.26171875", "False"]], [["-6.96875", "False"]], [["-8.3046875", "False"]]], "filtered_resps": [["-6.16015625", "False"], ["-5.890625", "False"], ["-7.26171875", "False"], ["-6.96875", "False"], ["-8.3046875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "365089b3647200c837b64aad5642558861dad3f98ed5e9b11764927af8375ca7", "prompt_hash": "9761206e156c0bf5acc2035f37cf4392ff8ff9f80afedba8479e8ba9b3b98596", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 162, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선어 학회 회원들은 세종 대왕이 훈민정음을 반포한 날을 무엇이라 정하고 기념하였는가?\n\n### 선택지: \n(A) 한글날\n(B) 석가탄신일\n(C) 개천절\n(D) 가갸날\n(E) 어린이날\n\n### 정답:", "options": "['한글날', '석가탄신일', '개천절', '가갸날', '어린이날']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선어 학회 회원들은 세종 대왕이 훈민정음을 반포한 날을 무엇이라 정하고 기념하였는가?\n\n### 선택지: \n(A) 한글날\n(B) 석가탄신일\n(C) 개천절\n(D) 가갸날\n(E) 어린이날\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선어 학회 회원들은 세종 대왕이 훈민정음을 반포한 날을 무엇이라 정하고 기념하였는가?\n\n### 선택지: \n(A) 한글날\n(B) 석가탄신일\n(C) 개천절\n(D) 가갸날\n(E) 어린이날\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선어 학회 회원들은 세종 대왕이 훈민정음을 반포한 날을 무엇이라 정하고 기념하였는가?\n\n### 선택지: \n(A) 한글날\n(B) 석가탄신일\n(C) 개천절\n(D) 가갸날\n(E) 어린이날\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선어 학회 회원들은 세종 대왕이 훈민정음을 반포한 날을 무엇이라 정하고 기념하였는가?\n\n### 선택지: \n(A) 한글날\n(B) 석가탄신일\n(C) 개천절\n(D) 가갸날\n(E) 어린이날\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선어 학회 회원들은 세종 대왕이 훈민정음을 반포한 날을 무엇이라 정하고 기념하였는가?\n\n### 선택지: \n(A) 한글날\n(B) 석가탄신일\n(C) 개천절\n(D) 가갸날\n(E) 어린이날\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.86328125", "False"]], [["-5.8984375", "False"]], [["-7.2578125", "False"]], [["-6.93359375", "False"]], [["-9.328125", "False"]]], "filtered_resps": [["-5.86328125", "False"], ["-5.8984375", "False"], ["-7.2578125", "False"], ["-6.93359375", "False"], ["-9.328125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "64df69c1c22ca69a622a6fd3e38342ecf86032c3c7085bf070dc630345dc9dbb", "prompt_hash": "bf5259fc58e4b7097b3f437c8ccb5e420c500f9177651ff09209627f9ec14abe", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 163, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 운동가이며 학자이고 항일 운동과 역사 연구로 민족 사상을 일깨운 사람은 누구인가?\n\n### 선택지: \n(A) 신채호\n(B) 박은식\n(C) 이상화\n(D) 이상\n(E) 이인직\n\n### 정답:", "options": "['신채호', '박은식', '이상화', '이상', '이인직']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 운동가이며 학자이고 항일 운동과 역사 연구로 민족 사상을 일깨운 사람은 누구인가?\n\n### 선택지: \n(A) 신채호\n(B) 박은식\n(C) 이상화\n(D) 이상\n(E) 이인직\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 운동가이며 학자이고 항일 운동과 역사 연구로 민족 사상을 일깨운 사람은 누구인가?\n\n### 선택지: \n(A) 신채호\n(B) 박은식\n(C) 이상화\n(D) 이상\n(E) 이인직\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 운동가이며 학자이고 항일 운동과 역사 연구로 민족 사상을 일깨운 사람은 누구인가?\n\n### 선택지: \n(A) 신채호\n(B) 박은식\n(C) 이상화\n(D) 이상\n(E) 이인직\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 운동가이며 학자이고 항일 운동과 역사 연구로 민족 사상을 일깨운 사람은 누구인가?\n\n### 선택지: \n(A) 신채호\n(B) 박은식\n(C) 이상화\n(D) 이상\n(E) 이인직\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 운동가이며 학자이고 항일 운동과 역사 연구로 민족 사상을 일깨운 사람은 누구인가?\n\n### 선택지: \n(A) 신채호\n(B) 박은식\n(C) 이상화\n(D) 이상\n(E) 이인직\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.98828125", "False"]], [["-5.86328125", "False"]], [["-7.56640625", "False"]], [["-6.92578125", "False"]], [["-8.6796875", "False"]]], "filtered_resps": [["-5.98828125", "False"], ["-5.86328125", "False"], ["-7.56640625", "False"], ["-6.92578125", "False"], ["-8.6796875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "37f63f5e66cf15ed5c3dc0fcab9f5203d1c95d09822d0113107ff0cda99a4df5", "prompt_hash": "31048a3a5ea2fc9d297852dc0fd441bef63c3d43192a63c1db549d0cda46cf7a", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 164, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일본이 우리 나라를 침략해 온 과정을 자세하게 밝힌 박은식이 쓴 역사책은 무엇인가?\n\n### 선택지: \n(A) 한국 통사\n(B) 난중일기\n(C) 삼국유사\n(D) 조선왕조실록\n(E) 삼국사기\n\n### 정답:", "options": "['한국 통사', '난중일기', '삼국유사', '조선왕조실록', '삼국사기']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일본이 우리 나라를 침략해 온 과정을 자세하게 밝힌 박은식이 쓴 역사책은 무엇인가?\n\n### 선택지: \n(A) 한국 통사\n(B) 난중일기\n(C) 삼국유사\n(D) 조선왕조실록\n(E) 삼국사기\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일본이 우리 나라를 침략해 온 과정을 자세하게 밝힌 박은식이 쓴 역사책은 무엇인가?\n\n### 선택지: \n(A) 한국 통사\n(B) 난중일기\n(C) 삼국유사\n(D) 조선왕조실록\n(E) 삼국사기\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일본이 우리 나라를 침략해 온 과정을 자세하게 밝힌 박은식이 쓴 역사책은 무엇인가?\n\n### 선택지: \n(A) 한국 통사\n(B) 난중일기\n(C) 삼국유사\n(D) 조선왕조실록\n(E) 삼국사기\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일본이 우리 나라를 침략해 온 과정을 자세하게 밝힌 박은식이 쓴 역사책은 무엇인가?\n\n### 선택지: \n(A) 한국 통사\n(B) 난중일기\n(C) 삼국유사\n(D) 조선왕조실록\n(E) 삼국사기\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n일본이 우리 나라를 침략해 온 과정을 자세하게 밝힌 박은식이 쓴 역사책은 무엇인가?\n\n### 선택지: \n(A) 한국 통사\n(B) 난중일기\n(C) 삼국유사\n(D) 조선왕조실록\n(E) 삼국사기\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.671875", "False"]], [["-5.83984375", "False"]], [["-7.71875", "False"]], [["-7.0", "False"]], [["-8.34375", "False"]]], "filtered_resps": [["-5.671875", "False"], ["-5.83984375", "False"], ["-7.71875", "False"], ["-7.0", "False"], ["-8.34375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "a13918fecef4389b5ad2135079b53e3c7689431d3fc701ef94bfe528fd41ea20", "prompt_hash": "2583f29b9bf7885753cd099208afb4599fcbe800fab004f18477ecf92de1d5b6", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 165, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년 중국으로 건너가 동양학을 연구하면서 박은식, 신채호 등과 더불어 동제사를 조직하여 독립 운동에 이바지한 사람은 누구인가?\n\n### 선택지: \n(A) 이상화\n(B) 정인보\n(C) 김구\n(D) 한용운\n(E) 이승만\n\n### 정답:", "options": "['이상화', '정인보', '김구', '한용운', '이승만']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년 중국으로 건너가 동양학을 연구하면서 박은식, 신채호 등과 더불어 동제사를 조직하여 독립 운동에 이바지한 사람은 누구인가?\n\n### 선택지: \n(A) 이상화\n(B) 정인보\n(C) 김구\n(D) 한용운\n(E) 이승만\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년 중국으로 건너가 동양학을 연구하면서 박은식, 신채호 등과 더불어 동제사를 조직하여 독립 운동에 이바지한 사람은 누구인가?\n\n### 선택지: \n(A) 이상화\n(B) 정인보\n(C) 김구\n(D) 한용운\n(E) 이승만\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년 중국으로 건너가 동양학을 연구하면서 박은식, 신채호 등과 더불어 동제사를 조직하여 독립 운동에 이바지한 사람은 누구인가?\n\n### 선택지: \n(A) 이상화\n(B) 정인보\n(C) 김구\n(D) 한용운\n(E) 이승만\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년 중국으로 건너가 동양학을 연구하면서 박은식, 신채호 등과 더불어 동제사를 조직하여 독립 운동에 이바지한 사람은 누구인가?\n\n### 선택지: \n(A) 이상화\n(B) 정인보\n(C) 김구\n(D) 한용운\n(E) 이승만\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n1910년 중국으로 건너가 동양학을 연구하면서 박은식, 신채호 등과 더불어 동제사를 조직하여 독립 운동에 이바지한 사람은 누구인가?\n\n### 선택지: \n(A) 이상화\n(B) 정인보\n(C) 김구\n(D) 한용운\n(E) 이승만\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.74609375", "False"]], [["-5.8984375", "False"]], [["-7.24609375", "False"]], [["-6.859375", "False"]], [["-8.515625", "False"]]], "filtered_resps": [["-5.74609375", "False"], ["-5.8984375", "False"], ["-7.24609375", "False"], ["-6.859375", "False"], ["-8.515625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "536af2769b087a89edf4ef2fab65ccc5858496d6ad0e0fd2674ddf0ac40efa19", "prompt_hash": "f174819aca0fdcdb9ad5dadf323615f978db75fe187dffafcec4570ecd475db1", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 166, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 운동가, 시인, 승려로 ‘님의 침묵’을 지어 저항 문학에 앞장선 사람은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 윤동주\n(C) 이상화\n(D) 심훈\n(E) 한용운\n\n### 정답:", "options": "['심훈', '윤동주', '이상화', '심훈', '한용운']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 운동가, 시인, 승려로 ‘님의 침묵’을 지어 저항 문학에 앞장선 사람은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 윤동주\n(C) 이상화\n(D) 심훈\n(E) 한용운\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 운동가, 시인, 승려로 ‘님의 침묵’을 지어 저항 문학에 앞장선 사람은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 윤동주\n(C) 이상화\n(D) 심훈\n(E) 한용운\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 운동가, 시인, 승려로 ‘님의 침묵’을 지어 저항 문학에 앞장선 사람은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 윤동주\n(C) 이상화\n(D) 심훈\n(E) 한용운\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 운동가, 시인, 승려로 ‘님의 침묵’을 지어 저항 문학에 앞장선 사람은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 윤동주\n(C) 이상화\n(D) 심훈\n(E) 한용운\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n독립 운동가, 시인, 승려로 ‘님의 침묵’을 지어 저항 문학에 앞장선 사람은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 윤동주\n(C) 이상화\n(D) 심훈\n(E) 한용운\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.02734375", "False"]], [["-5.80078125", "False"]], [["-7.14453125", "False"]], [["-6.703125", "False"]], [["-8.3515625", "False"]]], "filtered_resps": [["-6.02734375", "False"], ["-5.80078125", "False"], ["-7.14453125", "False"], ["-6.703125", "False"], ["-8.3515625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "f1bde25f8634a6043054ab8d270e8c03531b0dba3cee8e9914e0dd27c0155ac9", "prompt_hash": "828d00c5dc3f1e0608861178e4860957b13e1581b9a7a8f1b066f16118f30fe8", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 167, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n소설가, 영화인으로 농촌 계몽 소설인 ‘상록수’를 지은 사람은 누구인가?\n\n### 선택지: \n(A) 김소월\n(B) 한용운\n(C) 이상화\n(D) 심훈\n(E) 심훈\n\n### 정답:", "options": "['김소월', '한용운', '이상화', '심훈', '심훈']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n소설가, 영화인으로 농촌 계몽 소설인 ‘상록수’를 지은 사람은 누구인가?\n\n### 선택지: \n(A) 김소월\n(B) 한용운\n(C) 이상화\n(D) 심훈\n(E) 심훈\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n소설가, 영화인으로 농촌 계몽 소설인 ‘상록수’를 지은 사람은 누구인가?\n\n### 선택지: \n(A) 김소월\n(B) 한용운\n(C) 이상화\n(D) 심훈\n(E) 심훈\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n소설가, 영화인으로 농촌 계몽 소설인 ‘상록수’를 지은 사람은 누구인가?\n\n### 선택지: \n(A) 김소월\n(B) 한용운\n(C) 이상화\n(D) 심훈\n(E) 심훈\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n소설가, 영화인으로 농촌 계몽 소설인 ‘상록수’를 지은 사람은 누구인가?\n\n### 선택지: \n(A) 김소월\n(B) 한용운\n(C) 이상화\n(D) 심훈\n(E) 심훈\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n소설가, 영화인으로 농촌 계몽 소설인 ‘상록수’를 지은 사람은 누구인가?\n\n### 선택지: \n(A) 김소월\n(B) 한용운\n(C) 이상화\n(D) 심훈\n(E) 심훈\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.67578125", "False"]], [["-5.578125", "False"]], [["-7.0234375", "False"]], [["-6.86328125", "False"]], [["-8.3125", "False"]]], "filtered_resps": [["-5.67578125", "False"], ["-5.578125", "False"], ["-7.0234375", "False"], ["-6.86328125", "False"], ["-8.3125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "bb8140b16eb8cc52697fa853a42f617483f760a23693ef0ecb1a1e03537c5f41", "prompt_hash": "4bc921e27b9bc4e3d3ab714822fd48629039cbf1f49a56e0c1664917cafebc67", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 168, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시인이며 ‘금잔디’, ‘엄마야 누나야’, ‘진달래꽃’, ‘산유화’ 등 한국의 전통적인 한을 노래한 사람은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 윤동주\n(C) 이상화\n(D) 김소월\n(E) 한용운\n\n### 정답:", "options": "['심훈', '윤동주', '이상화', '김소월', '한용운']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시인이며 ‘금잔디’, ‘엄마야 누나야’, ‘진달래꽃’, ‘산유화’ 등 한국의 전통적인 한을 노래한 사람은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 윤동주\n(C) 이상화\n(D) 김소월\n(E) 한용운\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시인이며 ‘금잔디’, ‘엄마야 누나야’, ‘진달래꽃’, ‘산유화’ 등 한국의 전통적인 한을 노래한 사람은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 윤동주\n(C) 이상화\n(D) 김소월\n(E) 한용운\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시인이며 ‘금잔디’, ‘엄마야 누나야’, ‘진달래꽃’, ‘산유화’ 등 한국의 전통적인 한을 노래한 사람은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 윤동주\n(C) 이상화\n(D) 김소월\n(E) 한용운\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시인이며 ‘금잔디’, ‘엄마야 누나야’, ‘진달래꽃’, ‘산유화’ 등 한국의 전통적인 한을 노래한 사람은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 윤동주\n(C) 이상화\n(D) 김소월\n(E) 한용운\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시인이며 ‘금잔디’, ‘엄마야 누나야’, ‘진달래꽃’, ‘산유화’ 등 한국의 전통적인 한을 노래한 사람은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 윤동주\n(C) 이상화\n(D) 김소월\n(E) 한용운\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.7265625", "False"]], [["-5.77734375", "False"]], [["-7.2265625", "False"]], [["-6.7109375", "False"]], [["-8.46875", "False"]]], "filtered_resps": [["-5.7265625", "False"], ["-5.77734375", "False"], ["-7.2265625", "False"], ["-6.7109375", "False"], ["-8.46875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "ec55c0e46aaf3253134f47efc89a0a7b221d1a5a519a1ac14783e77828bb6c2f", "prompt_hash": "b2d3836633c09a35dc1427438da145d225a29eee34f08489a65aca59434de838", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 169, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시인이며 ‘서시’, ‘또 다른 고향’, ‘별 헤는 밤’ 등을 지은 사람은 누구인가?\n\n### 선택지: \n(A) 한용운\n(B) 이육사\n(C) 윤동주\n(D) 이상화\n(E) 심훈\n\n### 정답:", "options": "['한용운', '이육사', '윤동주', '이상화', '심훈']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시인이며 ‘서시’, ‘또 다른 고향’, ‘별 헤는 밤’ 등을 지은 사람은 누구인가?\n\n### 선택지: \n(A) 한용운\n(B) 이육사\n(C) 윤동주\n(D) 이상화\n(E) 심훈\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시인이며 ‘서시’, ‘또 다른 고향’, ‘별 헤는 밤’ 등을 지은 사람은 누구인가?\n\n### 선택지: \n(A) 한용운\n(B) 이육사\n(C) 윤동주\n(D) 이상화\n(E) 심훈\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시인이며 ‘서시’, ‘또 다른 고향’, ‘별 헤는 밤’ 등을 지은 사람은 누구인가?\n\n### 선택지: \n(A) 한용운\n(B) 이육사\n(C) 윤동주\n(D) 이상화\n(E) 심훈\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시인이며 ‘서시’, ‘또 다른 고향’, ‘별 헤는 밤’ 등을 지은 사람은 누구인가?\n\n### 선택지: \n(A) 한용운\n(B) 이육사\n(C) 윤동주\n(D) 이상화\n(E) 심훈\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시인이며 ‘서시’, ‘또 다른 고향’, ‘별 헤는 밤’ 등을 지은 사람은 누구인가?\n\n### 선택지: \n(A) 한용운\n(B) 이육사\n(C) 윤동주\n(D) 이상화\n(E) 심훈\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.171875", "False"]], [["-5.97265625", "False"]], [["-7.27734375", "False"]], [["-7.16015625", "False"]], [["-8.6015625", "False"]]], "filtered_resps": [["-6.171875", "False"], ["-5.97265625", "False"], ["-7.27734375", "False"], ["-7.16015625", "False"], ["-8.6015625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "d2289c37e3714cbb9aabe5ed60c90b71ad380fdc38e6e55d60b96a4c99c61005", "prompt_hash": "52c32a79fd6b41e705224614b189972a0a5540fcfbfbeb5953b693ad9be43336", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 170, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n본명은 원록이고 ‘광야’, ‘자오선’ 등을 지었으며, 끝까지 민족의 양심을 지키며 죽음으로서 일제에 항거한 시인은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 한용운\n(C) 이상화\n(D) 윤동주\n(E) 이육사\n\n### 정답:", "options": "['심훈', '한용운', '이상화', '윤동주', '이육사']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n본명은 원록이고 ‘광야’, ‘자오선’ 등을 지었으며, 끝까지 민족의 양심을 지키며 죽음으로서 일제에 항거한 시인은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 한용운\n(C) 이상화\n(D) 윤동주\n(E) 이육사\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n본명은 원록이고 ‘광야’, ‘자오선’ 등을 지었으며, 끝까지 민족의 양심을 지키며 죽음으로서 일제에 항거한 시인은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 한용운\n(C) 이상화\n(D) 윤동주\n(E) 이육사\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n본명은 원록이고 ‘광야’, ‘자오선’ 등을 지었으며, 끝까지 민족의 양심을 지키며 죽음으로서 일제에 항거한 시인은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 한용운\n(C) 이상화\n(D) 윤동주\n(E) 이육사\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n본명은 원록이고 ‘광야’, ‘자오선’ 등을 지었으며, 끝까지 민족의 양심을 지키며 죽음으로서 일제에 항거한 시인은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 한용운\n(C) 이상화\n(D) 윤동주\n(E) 이육사\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n본명은 원록이고 ‘광야’, ‘자오선’ 등을 지었으며, 끝까지 민족의 양심을 지키며 죽음으로서 일제에 항거한 시인은 누구인가?\n\n### 선택지: \n(A) 심훈\n(B) 한용운\n(C) 이상화\n(D) 윤동주\n(E) 이육사\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.88671875", "False"]], [["-5.6328125", "False"]], [["-7.04296875", "False"]], [["-6.68359375", "False"]], [["-8.203125", "False"]]], "filtered_resps": [["-5.88671875", "False"], ["-5.6328125", "False"], ["-7.04296875", "False"], ["-6.68359375", "False"], ["-8.203125", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "a1ed17ed9e9585fc477552b081546789edc0e3aa3576eac5bc1c9c103c6b7159", "prompt_hash": "a62c9d53345d88a4d9d246e15eee635005003fd2af50a0741f280598542bbe7c", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 171, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n경기도 연천 전곡리는 어느 시대의 유물과 유적이인가?\n\n### 선택지: \n(A) 청동기시대\n(B) 신석기시대\n(C) 정보화시대\n(D) 철기시대\n(E) 구석기시대\n\n### 정답:", "options": "['청동기시대', '신석기시대', '정보화시대', '철기시대', '구석기시대']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n경기도 연천 전곡리는 어느 시대의 유물과 유적이인가?\n\n### 선택지: \n(A) 청동기시대\n(B) 신석기시대\n(C) 정보화시대\n(D) 철기시대\n(E) 구석기시대\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n경기도 연천 전곡리는 어느 시대의 유물과 유적이인가?\n\n### 선택지: \n(A) 청동기시대\n(B) 신석기시대\n(C) 정보화시대\n(D) 철기시대\n(E) 구석기시대\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n경기도 연천 전곡리는 어느 시대의 유물과 유적이인가?\n\n### 선택지: \n(A) 청동기시대\n(B) 신석기시대\n(C) 정보화시대\n(D) 철기시대\n(E) 구석기시대\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n경기도 연천 전곡리는 어느 시대의 유물과 유적이인가?\n\n### 선택지: \n(A) 청동기시대\n(B) 신석기시대\n(C) 정보화시대\n(D) 철기시대\n(E) 구석기시대\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n경기도 연천 전곡리는 어느 시대의 유물과 유적이인가?\n\n### 선택지: \n(A) 청동기시대\n(B) 신석기시대\n(C) 정보화시대\n(D) 철기시대\n(E) 구석기시대\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.59375", "False"]], [["-5.8125", "False"]], [["-7.16015625", "False"]], [["-6.8515625", "False"]], [["-8.3046875", "False"]]], "filtered_resps": [["-5.59375", "False"], ["-5.8125", "False"], ["-7.16015625", "False"], ["-6.8515625", "False"], ["-8.3046875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "9de0ac4b3f2b82ef8f8799c0d313b5575626ce691622da86d43871084a943808", "prompt_hash": "a70f4d1fef1d0ed3654a74987feb814d4a81843d98827e106e181ee84cb3df53", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 172, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 왕으로 우산국을 복속하고 국호를 신라로 바꾼 임금은?\n\n### 선택지: \n(A) 태종무열왕\n(B) 문무왕\n(C) 법흥왕\n(D) 지증왕\n(E) 선덕여왕\n\n### 정답:", "options": "['태종무열왕', '문무왕', '법흥왕', '지증왕', '선덕여왕']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 왕으로 우산국을 복속하고 국호를 신라로 바꾼 임금은?\n\n### 선택지: \n(A) 태종무열왕\n(B) 문무왕\n(C) 법흥왕\n(D) 지증왕\n(E) 선덕여왕\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 왕으로 우산국을 복속하고 국호를 신라로 바꾼 임금은?\n\n### 선택지: \n(A) 태종무열왕\n(B) 문무왕\n(C) 법흥왕\n(D) 지증왕\n(E) 선덕여왕\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 왕으로 우산국을 복속하고 국호를 신라로 바꾼 임금은?\n\n### 선택지: \n(A) 태종무열왕\n(B) 문무왕\n(C) 법흥왕\n(D) 지증왕\n(E) 선덕여왕\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 왕으로 우산국을 복속하고 국호를 신라로 바꾼 임금은?\n\n### 선택지: \n(A) 태종무열왕\n(B) 문무왕\n(C) 법흥왕\n(D) 지증왕\n(E) 선덕여왕\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 왕으로 우산국을 복속하고 국호를 신라로 바꾼 임금은?\n\n### 선택지: \n(A) 태종무열왕\n(B) 문무왕\n(C) 법흥왕\n(D) 지증왕\n(E) 선덕여왕\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.87890625", "False"]], [["-6.19140625", "False"]], [["-7.328125", "False"]], [["-6.921875", "False"]], [["-8.671875", "False"]]], "filtered_resps": [["-5.87890625", "False"], ["-6.19140625", "False"], ["-7.328125", "False"], ["-6.921875", "False"], ["-8.671875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "80530587cdd881daf02382e46f013852d4273b1198ed6d00fb1def4849ae09f7", "prompt_hash": "50b9bb2bc522842f6ddae839818a774033711381961199a2e002509182d7d668", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 173, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려의 문벌들의 향락과 실정 그리고 무신의 차별로인해 무신 정권을 일으킨 사람은?\n\n### 선택지: \n(A) 최항\n(B) 최충헌\n(C) 최우\n(D) 최의\n(E) 정몽주\n\n### 정답:", "options": "['최항', '최충헌', '최우', '최의', '정몽주']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려의 문벌들의 향락과 실정 그리고 무신의 차별로인해 무신 정권을 일으킨 사람은?\n\n### 선택지: \n(A) 최항\n(B) 최충헌\n(C) 최우\n(D) 최의\n(E) 정몽주\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려의 문벌들의 향락과 실정 그리고 무신의 차별로인해 무신 정권을 일으킨 사람은?\n\n### 선택지: \n(A) 최항\n(B) 최충헌\n(C) 최우\n(D) 최의\n(E) 정몽주\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려의 문벌들의 향락과 실정 그리고 무신의 차별로인해 무신 정권을 일으킨 사람은?\n\n### 선택지: \n(A) 최항\n(B) 최충헌\n(C) 최우\n(D) 최의\n(E) 정몽주\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려의 문벌들의 향락과 실정 그리고 무신의 차별로인해 무신 정권을 일으킨 사람은?\n\n### 선택지: \n(A) 최항\n(B) 최충헌\n(C) 최우\n(D) 최의\n(E) 정몽주\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n고려의 문벌들의 향락과 실정 그리고 무신의 차별로인해 무신 정권을 일으킨 사람은?\n\n### 선택지: \n(A) 최항\n(B) 최충헌\n(C) 최우\n(D) 최의\n(E) 정몽주\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.921875", "False"]], [["-6.3203125", "False"]], [["-7.32421875", "False"]], [["-6.734375", "False"]], [["-8.3359375", "False"]]], "filtered_resps": [["-5.921875", "False"], ["-6.3203125", "False"], ["-7.32421875", "False"], ["-6.734375", "False"], ["-8.3359375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "d3c81a88db2d0c4404c0f27d19711d199655911f8d91da2b1c32601661632f7b", "prompt_hash": "38d794cb6d0294daf29940c38e1c2ce2580dcf77c8604c8508a061bf095f158b", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 174, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n위화도 회군을 일으킨 이성계는 정권을 장악한 후 사대부들에게도 이 법을 시행하였다. 이 법은 어떤 법인가?\n\n### 선택지: \n(A) 수신전\n(B) 관수관급제\n(C) 휼양전\n(D) 과전법\n(E) 직전법\n\n### 정답:", "options": "['수신전', '관수관급제', '휼양전', '과전법', '직전법']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n위화도 회군을 일으킨 이성계는 정권을 장악한 후 사대부들에게도 이 법을 시행하였다. 이 법은 어떤 법인가?\n\n### 선택지: \n(A) 수신전\n(B) 관수관급제\n(C) 휼양전\n(D) 과전법\n(E) 직전법\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n위화도 회군을 일으킨 이성계는 정권을 장악한 후 사대부들에게도 이 법을 시행하였다. 이 법은 어떤 법인가?\n\n### 선택지: \n(A) 수신전\n(B) 관수관급제\n(C) 휼양전\n(D) 과전법\n(E) 직전법\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n위화도 회군을 일으킨 이성계는 정권을 장악한 후 사대부들에게도 이 법을 시행하였다. 이 법은 어떤 법인가?\n\n### 선택지: \n(A) 수신전\n(B) 관수관급제\n(C) 휼양전\n(D) 과전법\n(E) 직전법\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n위화도 회군을 일으킨 이성계는 정권을 장악한 후 사대부들에게도 이 법을 시행하였다. 이 법은 어떤 법인가?\n\n### 선택지: \n(A) 수신전\n(B) 관수관급제\n(C) 휼양전\n(D) 과전법\n(E) 직전법\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n위화도 회군을 일으킨 이성계는 정권을 장악한 후 사대부들에게도 이 법을 시행하였다. 이 법은 어떤 법인가?\n\n### 선택지: \n(A) 수신전\n(B) 관수관급제\n(C) 휼양전\n(D) 과전법\n(E) 직전법\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.1328125", "False"]], [["-5.99609375", "False"]], [["-7.46875", "False"]], [["-6.77734375", "False"]], [["-8.1484375", "False"]]], "filtered_resps": [["-6.1328125", "False"], ["-5.99609375", "False"], ["-7.46875", "False"], ["-6.77734375", "False"], ["-8.1484375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "9373a92efc14a569f24c9f39ce52541e90eae33669442db6b436df437c15fc65", "prompt_hash": "438c496f039aa1b031c5adae9c5753e8f214780a3b762e9adfaaa49775c39944", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 175, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n이 사람은 조선의 통치 기준을 마련하였고 재상 정치를 주장하였다. 누구인가?\n\n### 선택지: \n(A) 이성계\n(B) 이방원\n(C) 정도전\n(D) 정몽주\n(E) 이색\n\n### 정답:", "options": "['이성계', '이방원', '정도전', '정몽주', '이색']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n이 사람은 조선의 통치 기준을 마련하였고 재상 정치를 주장하였다. 누구인가?\n\n### 선택지: \n(A) 이성계\n(B) 이방원\n(C) 정도전\n(D) 정몽주\n(E) 이색\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n이 사람은 조선의 통치 기준을 마련하였고 재상 정치를 주장하였다. 누구인가?\n\n### 선택지: \n(A) 이성계\n(B) 이방원\n(C) 정도전\n(D) 정몽주\n(E) 이색\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n이 사람은 조선의 통치 기준을 마련하였고 재상 정치를 주장하였다. 누구인가?\n\n### 선택지: \n(A) 이성계\n(B) 이방원\n(C) 정도전\n(D) 정몽주\n(E) 이색\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n이 사람은 조선의 통치 기준을 마련하였고 재상 정치를 주장하였다. 누구인가?\n\n### 선택지: \n(A) 이성계\n(B) 이방원\n(C) 정도전\n(D) 정몽주\n(E) 이색\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n이 사람은 조선의 통치 기준을 마련하였고 재상 정치를 주장하였다. 누구인가?\n\n### 선택지: \n(A) 이성계\n(B) 이방원\n(C) 정도전\n(D) 정몽주\n(E) 이색\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.3359375", "False"]], [["-6.515625", "False"]], [["-8.2265625", "False"]], [["-7.0390625", "False"]], [["-8.7421875", "False"]]], "filtered_resps": [["-6.3359375", "False"], ["-6.515625", "False"], ["-8.2265625", "False"], ["-7.0390625", "False"], ["-8.7421875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "bf53d412839b52d9b9505c3589f17e29034c28d87b482a80470b53f57aa2c765", "prompt_hash": "d1bc002df1497e3997d7e2d038a9f92d761579199a02d92c7783987c72819014", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 176, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선은 여진과의 관계에서 강경책을 실시하였는데 이 때 국경 근방에 세워진 것은 무엇인가?\n\n### 선택지: \n(A) 부곡\n(B) 봉화\n(C) 4군 6진\n(D) 이십삼부\n(E) 8군 12진\n\n### 정답:", "options": "['부곡', '봉화', '4군 6진', '이십삼부', '8군 12진']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선은 여진과의 관계에서 강경책을 실시하였는데 이 때 국경 근방에 세워진 것은 무엇인가?\n\n### 선택지: \n(A) 부곡\n(B) 봉화\n(C) 4군 6진\n(D) 이십삼부\n(E) 8군 12진\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선은 여진과의 관계에서 강경책을 실시하였는데 이 때 국경 근방에 세워진 것은 무엇인가?\n\n### 선택지: \n(A) 부곡\n(B) 봉화\n(C) 4군 6진\n(D) 이십삼부\n(E) 8군 12진\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선은 여진과의 관계에서 강경책을 실시하였는데 이 때 국경 근방에 세워진 것은 무엇인가?\n\n### 선택지: \n(A) 부곡\n(B) 봉화\n(C) 4군 6진\n(D) 이십삼부\n(E) 8군 12진\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선은 여진과의 관계에서 강경책을 실시하였는데 이 때 국경 근방에 세워진 것은 무엇인가?\n\n### 선택지: \n(A) 부곡\n(B) 봉화\n(C) 4군 6진\n(D) 이십삼부\n(E) 8군 12진\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선은 여진과의 관계에서 강경책을 실시하였는데 이 때 국경 근방에 세워진 것은 무엇인가?\n\n### 선택지: \n(A) 부곡\n(B) 봉화\n(C) 4군 6진\n(D) 이십삼부\n(E) 8군 12진\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-5.6171875", "False"]], [["-5.859375", "False"]], [["-7.1796875", "False"]], [["-5.6875", "False"]], [["-7.7109375", "False"]]], "filtered_resps": [["-5.6171875", "False"], ["-5.859375", "False"], ["-7.1796875", "False"], ["-5.6875", "False"], ["-7.7109375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "567cfdd42a075490b62f003ea5fb025baae8d4d297c244c874a6750f4c0f6dd7", "prompt_hash": "9e351db2f0b2fdcb88b997d6d3dfe0faeb7f87e4c8d2f0355c1f6e3fffda2b05", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 177, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 광해군은 명과 후금 사이에서 어떤 외교 정책을 펼쳤는가?\n\n### 선택지: \n(A) 친일 정책\n(B) 중립 외교\n(C) 친 후금 정책\n(D) 친미 정책\n(E) 친명 정책\n\n### 정답:", "options": "['친일 정책', '중립 외교', '친 후금 정책', '친미 정책', '친명 정책']", "answer": "(B)"}, "target": "(B)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 광해군은 명과 후금 사이에서 어떤 외교 정책을 펼쳤는가?\n\n### 선택지: \n(A) 친일 정책\n(B) 중립 외교\n(C) 친 후금 정책\n(D) 친미 정책\n(E) 친명 정책\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 광해군은 명과 후금 사이에서 어떤 외교 정책을 펼쳤는가?\n\n### 선택지: \n(A) 친일 정책\n(B) 중립 외교\n(C) 친 후금 정책\n(D) 친미 정책\n(E) 친명 정책\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 광해군은 명과 후금 사이에서 어떤 외교 정책을 펼쳤는가?\n\n### 선택지: \n(A) 친일 정책\n(B) 중립 외교\n(C) 친 후금 정책\n(D) 친미 정책\n(E) 친명 정책\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 광해군은 명과 후금 사이에서 어떤 외교 정책을 펼쳤는가?\n\n### 선택지: \n(A) 친일 정책\n(B) 중립 외교\n(C) 친 후금 정책\n(D) 친미 정책\n(E) 친명 정책\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선의 광해군은 명과 후금 사이에서 어떤 외교 정책을 펼쳤는가?\n\n### 선택지: \n(A) 친일 정책\n(B) 중립 외교\n(C) 친 후금 정책\n(D) 친미 정책\n(E) 친명 정책\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.16796875", "False"]], [["-6.29296875", "False"]], [["-7.484375", "False"]], [["-6.7109375", "False"]], [["-8.5859375", "False"]]], "filtered_resps": [["-6.16796875", "False"], ["-6.29296875", "False"], ["-7.484375", "False"], ["-6.7109375", "False"], ["-8.5859375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "d89405058233f68060bd22eef46d14ee4d59f11a895ffa050b13f4930ab5d793", "prompt_hash": "bbc1f1cd49749148771ece97ef1fd54525d7618efa698e96ba835e1e086588ea", "target_hash": "79398e2d8cadfc05f0152f92591166a1f81ebeeb0156179ef1a0f6c55ebc9af9", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 178, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 영조 임금은 붕당정치가 변질되자 붕당을 없앨 것을 내세워 이 정책 이론을 실시하였다. 무엇인가?\n\n### 선택지: \n(A) 평탕론\n(B) 향약\n(C) 세도정치\n(D) 탕평론\n(E) 신문고 제도\n\n### 정답:", "options": "['평탕론', '향약', '세도정치', '탕평론', '신문고 제도']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 영조 임금은 붕당정치가 변질되자 붕당을 없앨 것을 내세워 이 정책 이론을 실시하였다. 무엇인가?\n\n### 선택지: \n(A) 평탕론\n(B) 향약\n(C) 세도정치\n(D) 탕평론\n(E) 신문고 제도\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 영조 임금은 붕당정치가 변질되자 붕당을 없앨 것을 내세워 이 정책 이론을 실시하였다. 무엇인가?\n\n### 선택지: \n(A) 평탕론\n(B) 향약\n(C) 세도정치\n(D) 탕평론\n(E) 신문고 제도\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 영조 임금은 붕당정치가 변질되자 붕당을 없앨 것을 내세워 이 정책 이론을 실시하였다. 무엇인가?\n\n### 선택지: \n(A) 평탕론\n(B) 향약\n(C) 세도정치\n(D) 탕평론\n(E) 신문고 제도\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 영조 임금은 붕당정치가 변질되자 붕당을 없앨 것을 내세워 이 정책 이론을 실시하였다. 무엇인가?\n\n### 선택지: \n(A) 평탕론\n(B) 향약\n(C) 세도정치\n(D) 탕평론\n(E) 신문고 제도\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 영조 임금은 붕당정치가 변질되자 붕당을 없앨 것을 내세워 이 정책 이론을 실시하였다. 무엇인가?\n\n### 선택지: \n(A) 평탕론\n(B) 향약\n(C) 세도정치\n(D) 탕평론\n(E) 신문고 제도\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.3984375", "False"]], [["-6.54296875", "False"]], [["-8.0390625", "False"]], [["-7.3984375", "False"]], [["-8.7890625", "False"]]], "filtered_resps": [["-6.3984375", "False"], ["-6.54296875", "False"], ["-8.0390625", "False"], ["-7.3984375", "False"], ["-8.7890625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "68d5348adba2d1c86ed6b846517bb81f6e1f3c9a00340f51623073ced44d85ac", "prompt_hash": "77ba13e5d8ac6fd1bf0dab15d64637c0a5cc6d3bbf3a319311efbb020399fb9f", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 179, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n탕평정치로 왕에게 넘어갔던 권력이 외척세력으로 넘어간 정치를 무엇이라고 하는가?\n\n### 선택지: \n(A) 대비 정치\n(B) 탕평 정치\n(C) 세도정치\n(D) 비선실세\n(E) 붕당정치\n\n### 정답:", "options": "['대비 정치', '탕평 정치', '세도정치', '비선실세', '붕당정치']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n탕평정치로 왕에게 넘어갔던 권력이 외척세력으로 넘어간 정치를 무엇이라고 하는가?\n\n### 선택지: \n(A) 대비 정치\n(B) 탕평 정치\n(C) 세도정치\n(D) 비선실세\n(E) 붕당정치\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n탕평정치로 왕에게 넘어갔던 권력이 외척세력으로 넘어간 정치를 무엇이라고 하는가?\n\n### 선택지: \n(A) 대비 정치\n(B) 탕평 정치\n(C) 세도정치\n(D) 비선실세\n(E) 붕당정치\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n탕평정치로 왕에게 넘어갔던 권력이 외척세력으로 넘어간 정치를 무엇이라고 하는가?\n\n### 선택지: \n(A) 대비 정치\n(B) 탕평 정치\n(C) 세도정치\n(D) 비선실세\n(E) 붕당정치\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n탕평정치로 왕에게 넘어갔던 권력이 외척세력으로 넘어간 정치를 무엇이라고 하는가?\n\n### 선택지: \n(A) 대비 정치\n(B) 탕평 정치\n(C) 세도정치\n(D) 비선실세\n(E) 붕당정치\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n탕평정치로 왕에게 넘어갔던 권력이 외척세력으로 넘어간 정치를 무엇이라고 하는가?\n\n### 선택지: \n(A) 대비 정치\n(B) 탕평 정치\n(C) 세도정치\n(D) 비선실세\n(E) 붕당정치\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.2578125", "False"]], [["-6.14453125", "False"]], [["-7.8359375", "False"]], [["-7.19140625", "False"]], [["-8.9375", "False"]]], "filtered_resps": [["-6.2578125", "False"], ["-6.14453125", "False"], ["-7.8359375", "False"], ["-7.19140625", "False"], ["-8.9375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "834a319be6b48f90b1c2199f3e7b98e461cb20abc4fefe0ffe56f0b22f79e88c", "prompt_hash": "816f1426f915c15df90bc57248464a9c0f6bf5aea8065677f7a773a1fd65e6fd", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 180, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 만장일치의 귀족 합의제로 왕권 견제 기능을 한 이것은 무엇인가?\n\n### 선택지: \n(A) 제가회의\n(B) 정사암회의\n(C) 국무회의\n(D) 화백회의\n(E) 붕당회의\n\n### 정답:", "options": "['제가회의', '정사암회의', '국무회의', '화백회의', '붕당회의']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 만장일치의 귀족 합의제로 왕권 견제 기능을 한 이것은 무엇인가?\n\n### 선택지: \n(A) 제가회의\n(B) 정사암회의\n(C) 국무회의\n(D) 화백회의\n(E) 붕당회의\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 만장일치의 귀족 합의제로 왕권 견제 기능을 한 이것은 무엇인가?\n\n### 선택지: \n(A) 제가회의\n(B) 정사암회의\n(C) 국무회의\n(D) 화백회의\n(E) 붕당회의\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 만장일치의 귀족 합의제로 왕권 견제 기능을 한 이것은 무엇인가?\n\n### 선택지: \n(A) 제가회의\n(B) 정사암회의\n(C) 국무회의\n(D) 화백회의\n(E) 붕당회의\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 만장일치의 귀족 합의제로 왕권 견제 기능을 한 이것은 무엇인가?\n\n### 선택지: \n(A) 제가회의\n(B) 정사암회의\n(C) 국무회의\n(D) 화백회의\n(E) 붕당회의\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라의 만장일치의 귀족 합의제로 왕권 견제 기능을 한 이것은 무엇인가?\n\n### 선택지: \n(A) 제가회의\n(B) 정사암회의\n(C) 국무회의\n(D) 화백회의\n(E) 붕당회의\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.23828125", "False"]], [["-6.11328125", "False"]], [["-7.55859375", "False"]], [["-7.12890625", "False"]], [["-8.5859375", "False"]]], "filtered_resps": [["-6.23828125", "False"], ["-6.11328125", "False"], ["-7.55859375", "False"], ["-7.12890625", "False"], ["-8.5859375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "d51f32d3b4b9410b16758f530bc1da4aa10f1821d12f5929cf1b13d63f7b8975", "prompt_hash": "106a528445a91a39b6672c41c581bb98f95075fb065d8a156187401aebe245d5", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 181, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라 불교의 화엄 사상을 확립했던 사람은 누구인가?\n\n### 선택지: \n(A) 보덕\n(B) 원효\n(C) 화엄\n(D) 혜초\n(E) 의상\n\n### 정답:", "options": "['보덕', '원효', '화엄', '혜초', '의상']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라 불교의 화엄 사상을 확립했던 사람은 누구인가?\n\n### 선택지: \n(A) 보덕\n(B) 원효\n(C) 화엄\n(D) 혜초\n(E) 의상\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라 불교의 화엄 사상을 확립했던 사람은 누구인가?\n\n### 선택지: \n(A) 보덕\n(B) 원효\n(C) 화엄\n(D) 혜초\n(E) 의상\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라 불교의 화엄 사상을 확립했던 사람은 누구인가?\n\n### 선택지: \n(A) 보덕\n(B) 원효\n(C) 화엄\n(D) 혜초\n(E) 의상\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라 불교의 화엄 사상을 확립했던 사람은 누구인가?\n\n### 선택지: \n(A) 보덕\n(B) 원효\n(C) 화엄\n(D) 혜초\n(E) 의상\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n신라 불교의 화엄 사상을 확립했던 사람은 누구인가?\n\n### 선택지: \n(A) 보덕\n(B) 원효\n(C) 화엄\n(D) 혜초\n(E) 의상\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.27734375", "False"]], [["-5.8828125", "False"]], [["-7.59765625", "False"]], [["-7.06640625", "False"]], [["-9.3671875", "False"]]], "filtered_resps": [["-6.27734375", "False"], ["-5.8828125", "False"], ["-7.59765625", "False"], ["-7.06640625", "False"], ["-9.3671875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "506ff15649bb44f6c0967de6071207cc9a915383180bbdba162731ad565a1c5e", "prompt_hash": "b96ee733409f3010193b8de2c08178b141637d9dcd5addab8cf41181a5c18cfa", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 182, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n몽고의 침입을 막기 위한 염원으로 만든 이것은 무엇인가?\n\n### 선택지: \n(A) 석가탑\n(B) 독립문\n(C) 팔만대장경\n(D) 다보탑\n(E) 경복궁\n\n### 정답:", "options": "['석가탑', '독립문', '팔만대장경', '다보탑', '경복궁']", "answer": "(C)"}, "target": "(C)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n몽고의 침입을 막기 위한 염원으로 만든 이것은 무엇인가?\n\n### 선택지: \n(A) 석가탑\n(B) 독립문\n(C) 팔만대장경\n(D) 다보탑\n(E) 경복궁\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n몽고의 침입을 막기 위한 염원으로 만든 이것은 무엇인가?\n\n### 선택지: \n(A) 석가탑\n(B) 독립문\n(C) 팔만대장경\n(D) 다보탑\n(E) 경복궁\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n몽고의 침입을 막기 위한 염원으로 만든 이것은 무엇인가?\n\n### 선택지: \n(A) 석가탑\n(B) 독립문\n(C) 팔만대장경\n(D) 다보탑\n(E) 경복궁\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n몽고의 침입을 막기 위한 염원으로 만든 이것은 무엇인가?\n\n### 선택지: \n(A) 석가탑\n(B) 독립문\n(C) 팔만대장경\n(D) 다보탑\n(E) 경복궁\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n몽고의 침입을 막기 위한 염원으로 만든 이것은 무엇인가?\n\n### 선택지: \n(A) 석가탑\n(B) 독립문\n(C) 팔만대장경\n(D) 다보탑\n(E) 경복궁\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.66796875", "False"]], [["-6.58984375", "False"]], [["-8.6796875", "False"]], [["-7.62109375", "False"]], [["-9.296875", "False"]]], "filtered_resps": [["-6.66796875", "False"], ["-6.58984375", "False"], ["-8.6796875", "False"], ["-7.62109375", "False"], ["-9.296875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "d2fe829e27958fa9d0bedc7a594a73d01376a01cbd27383ab5ac105bfb10b1da", "prompt_hash": "4078b3fe617c2c05b67e03de4758d84560f03dbd82515c9adcdb86c30a32a2dd", "target_hash": "ab0531c9d89473e8c5af60d4621a5d5bfaa6a5b1f1ebf3cc69e20814fee801cc", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 183, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n사람이 곧 하늘이다 라는 인내천 사상으로 동학을 창시한 사람은?\n\n### 선택지: \n(A) 최재우\n(B) 손병희\n(C) 최시형\n(D) 박인호\n(E) 최제우\n\n### 정답:", "options": "['최재우', '손병희', '최시형', '박인호', '최제우']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n사람이 곧 하늘이다 라는 인내천 사상으로 동학을 창시한 사람은?\n\n### 선택지: \n(A) 최재우\n(B) 손병희\n(C) 최시형\n(D) 박인호\n(E) 최제우\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n사람이 곧 하늘이다 라는 인내천 사상으로 동학을 창시한 사람은?\n\n### 선택지: \n(A) 최재우\n(B) 손병희\n(C) 최시형\n(D) 박인호\n(E) 최제우\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n사람이 곧 하늘이다 라는 인내천 사상으로 동학을 창시한 사람은?\n\n### 선택지: \n(A) 최재우\n(B) 손병희\n(C) 최시형\n(D) 박인호\n(E) 최제우\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n사람이 곧 하늘이다 라는 인내천 사상으로 동학을 창시한 사람은?\n\n### 선택지: \n(A) 최재우\n(B) 손병희\n(C) 최시형\n(D) 박인호\n(E) 최제우\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n사람이 곧 하늘이다 라는 인내천 사상으로 동학을 창시한 사람은?\n\n### 선택지: \n(A) 최재우\n(B) 손병희\n(C) 최시형\n(D) 박인호\n(E) 최제우\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.34375", "False"]], [["-7.12890625", "False"]], [["-8.421875", "False"]], [["-7.2890625", "False"]], [["-9.4609375", "False"]]], "filtered_resps": [["-6.34375", "False"], ["-7.12890625", "False"], ["-8.421875", "False"], ["-7.2890625", "False"], ["-9.4609375", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "0249d9c76102b7ffe801dc3c395e18cb3f9bf8deb7e3a501cc6c357c8e976aeb", "prompt_hash": "f16dd2dc073b178a4cbe3a14c1ddce15dd27a1640773eb33df239e4d803d51b5", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 184, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 식민지화를 위힌 기초 작업으로 실시했던 것은? \n\n### 선택지: \n(A) 토지약탈\n(B) 황국신민화정책\n(C) 징병\n(D) 일본어 교육\n(E) 독립운동 탄압\n\n### 정답:", "options": "['토지약탈', '황국신민화정책', '징병', '일본어 교육', '독립운동 탄압']", "answer": "(A)"}, "target": "(A)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 식민지화를 위힌 기초 작업으로 실시했던 것은? \n\n### 선택지: \n(A) 토지약탈\n(B) 황국신민화정책\n(C) 징병\n(D) 일본어 교육\n(E) 독립운동 탄압\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 식민지화를 위힌 기초 작업으로 실시했던 것은? \n\n### 선택지: \n(A) 토지약탈\n(B) 황국신민화정책\n(C) 징병\n(D) 일본어 교육\n(E) 독립운동 탄압\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 식민지화를 위힌 기초 작업으로 실시했던 것은? \n\n### 선택지: \n(A) 토지약탈\n(B) 황국신민화정책\n(C) 징병\n(D) 일본어 교육\n(E) 독립운동 탄압\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 식민지화를 위힌 기초 작업으로 실시했던 것은? \n\n### 선택지: \n(A) 토지약탈\n(B) 황국신민화정책\n(C) 징병\n(D) 일본어 교육\n(E) 독립운동 탄압\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n조선 식민지화를 위힌 기초 작업으로 실시했던 것은? \n\n### 선택지: \n(A) 토지약탈\n(B) 황국신민화정책\n(C) 징병\n(D) 일본어 교육\n(E) 독립운동 탄압\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.84765625", "False"]], [["-7.3515625", "False"]], [["-8.8828125", "False"]], [["-8.21875", "False"]], [["-9.7265625", "False"]]], "filtered_resps": [["-6.84765625", "False"], ["-7.3515625", "False"], ["-8.8828125", "False"], ["-8.21875", "False"], ["-9.7265625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "8483cfd3ce4d19357bb4af6c92c929490f5b5cb276f1d4f2f793ab6fc3fbbef4", "prompt_hash": "ef3c74c018779ce1d83a2acbe6a9f821bb2c7f16473bc1b6bb16af914b8327e6", "target_hash": "2e5b320c4307603615d67098d9e1459ea7b6705b7d553049197d1f1e3a750840", "acc": 1.0, "acc_norm": 1.0}
|
||||
{"doc_id": 185, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시일야방성대곡을 게재했던 신문은?\n\n### 선택지: \n(A) 시대일보\n(B) 동아일보\n(C) 조선일보\n(D) 매일신보\n(E) 황성신문\n\n### 정답:", "options": "['시대일보', '동아일보', '조선일보', '매일신보', '황성신문']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시일야방성대곡을 게재했던 신문은?\n\n### 선택지: \n(A) 시대일보\n(B) 동아일보\n(C) 조선일보\n(D) 매일신보\n(E) 황성신문\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시일야방성대곡을 게재했던 신문은?\n\n### 선택지: \n(A) 시대일보\n(B) 동아일보\n(C) 조선일보\n(D) 매일신보\n(E) 황성신문\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시일야방성대곡을 게재했던 신문은?\n\n### 선택지: \n(A) 시대일보\n(B) 동아일보\n(C) 조선일보\n(D) 매일신보\n(E) 황성신문\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시일야방성대곡을 게재했던 신문은?\n\n### 선택지: \n(A) 시대일보\n(B) 동아일보\n(C) 조선일보\n(D) 매일신보\n(E) 황성신문\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n시일야방성대곡을 게재했던 신문은?\n\n### 선택지: \n(A) 시대일보\n(B) 동아일보\n(C) 조선일보\n(D) 매일신보\n(E) 황성신문\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.28515625", "False"]], [["-6.37109375", "False"]], [["-7.9765625", "False"]], [["-7.390625", "False"]], [["-9.3671875", "False"]]], "filtered_resps": [["-6.28515625", "False"], ["-6.37109375", "False"], ["-7.9765625", "False"], ["-7.390625", "False"], ["-9.3671875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "c7f8f2dd4a59bf0a34d2374b98ac0c270c137cd3d75369f3bd5c28419f0d22be", "prompt_hash": "cb60988cd4c69be3aa511b5566f675a2aa78ca0570ea40226d7ea67c0ba42a64", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 186, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n경제개발 5개년 계획은 몇 년도부터 시작되었는가?\n\n### 선택지: \n(A) 1967년\n(B) 1952년\n(C) 1957년\n(D) 1962년\n(E) 1972년\n\n### 정답:", "options": "['1967년', '1952년', '1957년', '1962년', '1972년']", "answer": "(D)"}, "target": "(D)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n경제개발 5개년 계획은 몇 년도부터 시작되었는가?\n\n### 선택지: \n(A) 1967년\n(B) 1952년\n(C) 1957년\n(D) 1962년\n(E) 1972년\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n경제개발 5개년 계획은 몇 년도부터 시작되었는가?\n\n### 선택지: \n(A) 1967년\n(B) 1952년\n(C) 1957년\n(D) 1962년\n(E) 1972년\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n경제개발 5개년 계획은 몇 년도부터 시작되었는가?\n\n### 선택지: \n(A) 1967년\n(B) 1952년\n(C) 1957년\n(D) 1962년\n(E) 1972년\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n경제개발 5개년 계획은 몇 년도부터 시작되었는가?\n\n### 선택지: \n(A) 1967년\n(B) 1952년\n(C) 1957년\n(D) 1962년\n(E) 1972년\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n경제개발 5개년 계획은 몇 년도부터 시작되었는가?\n\n### 선택지: \n(A) 1967년\n(B) 1952년\n(C) 1957년\n(D) 1962년\n(E) 1972년\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.36328125", "False"]], [["-5.95703125", "False"]], [["-7.4140625", "False"]], [["-7.4453125", "False"]], [["-9.4921875", "False"]]], "filtered_resps": [["-6.36328125", "False"], ["-5.95703125", "False"], ["-7.4140625", "False"], ["-7.4453125", "False"], ["-9.4921875", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "6abc4b38a5155a4573825ec6dc99aa56ed6a1c9be40bb711e6533f2e41d8ab22", "prompt_hash": "09e3f56c1d85d7be4b70347559a2eb9ce763b94226785994d226c38b5ef364f4", "target_hash": "bf97bdceb17f2739335afb287573b4a3d50f25b57916b12cab5829ee8cd768c1", "acc": 0.0, "acc_norm": 0.0}
|
||||
{"doc_id": 187, "doc": {"query": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n노사정 협의회와 신자유주의 경제정책을 실시했던 정부는?\n\n### 선택지: \n(A) 김종필 정부\n(B) 이명박 정부\n(C) 노무현 정부\n(D) 김영삼 정부\n(E) 김대중 정부\n\n### 정답:", "options": "['김종필 정부', '이명박 정부', '노무현 정부', '김영삼 정부', '김대중 정부']", "answer": "(E)"}, "target": "(E)", "arguments": {"gen_args_0": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n노사정 협의회와 신자유주의 경제정책을 실시했던 정부는?\n\n### 선택지: \n(A) 김종필 정부\n(B) 이명박 정부\n(C) 노무현 정부\n(D) 김영삼 정부\n(E) 김대중 정부\n\n### 정답:", "arg_1": " (A)"}, "gen_args_1": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n노사정 협의회와 신자유주의 경제정책을 실시했던 정부는?\n\n### 선택지: \n(A) 김종필 정부\n(B) 이명박 정부\n(C) 노무현 정부\n(D) 김영삼 정부\n(E) 김대중 정부\n\n### 정답:", "arg_1": " (B)"}, "gen_args_2": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n노사정 협의회와 신자유주의 경제정책을 실시했던 정부는?\n\n### 선택지: \n(A) 김종필 정부\n(B) 이명박 정부\n(C) 노무현 정부\n(D) 김영삼 정부\n(E) 김대중 정부\n\n### 정답:", "arg_1": " (C)"}, "gen_args_3": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n노사정 협의회와 신자유주의 경제정책을 실시했던 정부는?\n\n### 선택지: \n(A) 김종필 정부\n(B) 이명박 정부\n(C) 노무현 정부\n(D) 김영삼 정부\n(E) 김대중 정부\n\n### 정답:", "arg_1": " (D)"}, "gen_args_4": {"arg_0": "다음 질문을 읽고 정답으로 가장 알맞은 것을 고르시요.\n \n### 질문: \n노사정 협의회와 신자유주의 경제정책을 실시했던 정부는?\n\n### 선택지: \n(A) 김종필 정부\n(B) 이명박 정부\n(C) 노무현 정부\n(D) 김영삼 정부\n(E) 김대중 정부\n\n### 정답:", "arg_1": " (E)"}}, "resps": [[["-6.14453125", "False"]], [["-6.5", "False"]], [["-7.79296875", "False"]], [["-7.234375", "False"]], [["-8.8515625", "False"]]], "filtered_resps": [["-6.14453125", "False"], ["-6.5", "False"], ["-7.79296875", "False"], ["-7.234375", "False"], ["-8.8515625", "False"]], "filter": "none", "metrics": ["acc", "acc_norm"], "doc_hash": "ca9cd2065121f7eaeb33719c1849fb12523cc92349318594a6a9151b973560a4", "prompt_hash": "c4bfbb3f7f344c7f4720e71906fded3bf2b8220d3a152c9a07c771aac043d147", "target_hash": "cf725bc17907cc5e0c950fd9c2fca1042dc19a8f4b54be5de5cb545244fdd32c", "acc": 0.0, "acc_norm": 0.0}
|
||||
File diff suppressed because it is too large
Load Diff
File diff suppressed because it is too large
Load Diff
File diff suppressed because it is too large
Load Diff
60
source/eval/outputs/quick_sft_v2_best/eval.log
Normal file
60
source/eval/outputs/quick_sft_v2_best/eval.log
Normal file
File diff suppressed because one or more lines are too long
Reference in New Issue
Block a user