diff --git a/.github/ISSUE_TEMPLATE/config.yml b/.github/ISSUE_TEMPLATE/config.yml new file mode 100644 index 0000000..5230e8f --- /dev/null +++ b/.github/ISSUE_TEMPLATE/config.yml @@ -0,0 +1,8 @@ +blank_issues_enabled: false +issue_templates: + - name: Experiment Template + description: For new experiments + file: experiment.md + - name: Feature Template + description: For new features + file: feature.md diff --git a/.github/ISSUE_TEMPLATE/experiment.md b/.github/ISSUE_TEMPLATE/experiment.md new file mode 100644 index 0000000..f6b6b04 --- /dev/null +++ b/.github/ISSUE_TEMPLATE/experiment.md @@ -0,0 +1,26 @@ +--- +name: Experiment Issue +about: For new experiments +title: "[EXP]" +labels: +assignees: '' +--- + +# ISSUE: Experiment + +## 노션 링크 + + +## 실험 목적 + +- 목적 1 +- 목적 2 + +## 체크리스트 + +- [ ] 할일 1 +- [ ] 할일 2 +- [ ] 할일 3 + +## 실험 내용 + diff --git a/.github/ISSUE_TEMPLATE/feature.md b/.github/ISSUE_TEMPLATE/feature.md new file mode 100644 index 0000000..595f8b6 --- /dev/null +++ b/.github/ISSUE_TEMPLATE/feature.md @@ -0,0 +1,26 @@ +--- +name: Feature Request +about: Suggest a new feature for this project +title: "[FEAT]" +labels: +assignees: '' +--- + +# ISSUE: Feature + +## 노션 링크 + + +## 기능 목적 + +- 목적 1 +- 목적 2 + +## 체크리스트 + +- [ ] 할일 1 +- [ ] 할일 2 +- [ ] 할일 3 + +## 기능 내용 + diff --git a/.github/pull_request_template.md b/.github/pull_request_template.md new file mode 100644 index 0000000..4b18f7d --- /dev/null +++ b/.github/pull_request_template.md @@ -0,0 +1,13 @@ +## PR 정보 + +- 목적: +- 이슈 번호: +- 노션 작업 카드 링크: + +## 변경 사항 + +- 이번 PR에서 작업한 내용을 간략히 설명 + +## 리뷰 참고사항 + +- 리뷰어에게 필요한 설명이나 특별히 봐주었으면 하는 부분을 작성 diff --git a/.gitignore b/.gitignore new file mode 100644 index 0000000..637d1f9 --- /dev/null +++ b/.gitignore @@ -0,0 +1,35 @@ +# Byte-compiled / optimized / DLL files +__pycache__/ +*.py[cod] +*$py.class + +# Environments +.env +.venv +env/ +venv/ +ENV/ +env.bak/ +venv.bak/ +.idea/ +# macOS +*DS_Store + +# custom +data/* +!data/.gitkeep +wandb +models +outputs +/eda/eda_ignore/ +ensemble/results_hard +ensemble/results_soft + +**/.ipynb_checkpoints +**/lightning_logs +*.ckpt +*.pt +*.arrow +*.bin +*/nohup.out +code/config/exp/* \ No newline at end of file diff --git a/README.md b/README.md new file mode 100644 index 0000000..f7bb80a --- /dev/null +++ b/README.md @@ -0,0 +1,136 @@ +# ODQA(Open-Domain Question Answering Competition) + +## 개요 + +| 항목 | 내용 | +| --- | --- | +| 프로젝트 주제 | MRC(기계독해) 데이터셋으로 ODQA(Open-Domain Question Answering)를 수행합니다.
RAG(Retrieval-Augmented Generation)로 더 많이 알려져 있습니다. | +| 프로젝트 구성 | 질문에 관련된 문서를 찾는 Retriever와 찾아온 문서에서 질문에 대한 정답을 찾는 Reader로 구성됩니다. | +| 평가 지표 | Exact Match (EM) Score를 사용하여 모델의 예측과, 실제 답이 정확하게 일치할 때만 점수가 주어집니다.
F1 Score는 참고용으로만 활용됩니다. | +| 진행 기간 | 2024년 10월 2일 ~ 2024년 10월 24일 | + +## 최종 리더보드 (Private) +image + +## 팀원 + +|[이예서](https://github.com/yeseoLee)|[김수진](https://github.com/Sujinkim-625)|[김민서](https://github.com/nevertmr)|[홍성재](https://github.com/koreannn)|[양가연](https://github.com/Effyee)|[홍성민](https://github.com/hsmin9809)| +|:-:|:-:|:-:|:-:|:-:|:-:| +||||||| + +## 역할 + +| 이름 | 역할 | +| --- | --- | +| 김민서 | 데이터분석, LLM기반 데이터 증강, 모델실험(증강 데이터 비교), 앙상블 | +| 김수진 | 외부데이터 리서치 및 학습, 데이터 전처리, 모델 리서치, 모델 개선, 모델 실험,
Retrieval 구현 및 실험(ColBERT), 앙상블 | +| 양가연 | Retrieval(BM25) 구현 및 실험, 모델 리서치, 모델 개선(Custom Layer, Distillation),
모델 실험, 앙상블(hard ensemble, soft ensemble, weighted ensemble) | +| 이예서 | PM(마일스톤 및 이슈 관리), 인프라 담당(개발환경 구성 스크립트화),
베이스라인 코드 템플릿화, 데이터 전처리(cleansing), 데이터 증강(negative passage),
Retrieval 구현 및 실험(Elasticsearch, Reranking), 앙상블 (merged ensemble) | +| 홍성민 | 모델 리서치, 모델 실험, Retrieval 구현 및 실험(Dense), 앙상블 | +| 홍성재 | EDA, 데이터 전처리, Reader성능 개선 관련 조사(Retrospective Reader), 앙상블 | + +## Wrap-Up Report +### [MRC_NLP_리포트(04조).pdf](./assets/MRC_NLP_04_report.pdf) +데이터 EDA부터 앙상블까지 프로젝트 전반의 시행착오와 솔루션 및 회고는 렙업 리포트를 통해 확인할 수 있습니다. + +## 폴더 구조 +```bash +level2-mrc-nlp-04 +├── code +│ ├── BertEncoder.py +│ ├── README.MD +│ ├── arguments.py +│ ├── config +│ │ ├── elastic_setting.json +│ │ ├── eval.json +│ │ ├── inference.json +│ │ ├── inference_with_rerank.json +│ │ ├── integration.json +│ │ └── train.json +│ ├── custom_model.py +│ ├── dense_train.py +│ ├── inference.py +│ ├── integration_pipeline.py +│ ├── retrieval +│ │ ├── __init__.py +│ │ ├── base.py +│ │ ├── bm25.py +│ │ ├── dense.py +│ │ ├── dense_encoder +│ │ ├── elastic.py +│ │ ├── reranker.py +│ │ └── tdidf.py +│ ├── train.py +│ └── utils +│ ├── __init__.py +│ ├── trainer_qa.py +│ └── utils_qa.py +├── data +├── ensemble +│ ├── gpt_voting.ipynb +│ ├── hard_voting.py +│ ├── results_hard +│ ├── results_soft +│ └── soft_voting.py +├── external_dataset_processing +│ ├── arrow_to_csv.py +│ ├── csv_to_arrow.py +│ ├── find_answer_start.py +│ └── train_for_training.py +├── notebooks +│ ├── EDA_train,test.ipynb +│ ├── EDA_wiki.ipynb +│ ├── add_question_augmentation_GPT.ipynb +│ ├── analyze_test_difficulty.ipynb +│ ├── data_info1.png +│ ├── dense_top-k_confirm.ipynb +│ ├── eda_for_data_cleaning.ipynb +│ ├── elasticsearch.ipynb +│ ├── question_classification_GPT.ipynb +│ ├── retriever_base_dataset.ipynb +│ ├── retriever_evaluation.ipynb +│ ├── shuffle_data.ipynb +│ └── synonym_questions_augmentation_GPT.ipynb +└── setup + ├── requirements.txt + ├── setup-elasticsearch.bash + ├── setup-git.bash + └── setup-gpu-server.bash +``` + +- code: 학습 및 추론에 사용되는 코드 전반을 관리합니다. +- data: 학습 및 추론에 필요한 데이터를 관리합니다. +- ensemble: 추론 결과 파일을 이용한 앙상블을 수행하는 코드를 관리합니다. +- external_dataset_processing: 외부 데이터셋 사용을 위한 전처리 코드를 관리합니다. +- notebooks: 데이터 분석 및 전처리, 증강 방법 소개와 구현 코드 사용법 안내 등의 주피터 노트북 파일을 관리합니다. +- setup: GPU 서버 개발 환경 세팅을 위한 스크립트를 관리합니다. + +## Dependencies +```angular2html +# Data manipulation and analysis +pandas +numpy==1.24.1 + +# Machine Learning libraries +scikit-learn +torch==1.13 +datasets==2.15.0 +transformers==4.25.1 +faiss-gpu + +# Progress and logging utilities +tqdm +wandb + +# Information retrieval libraries +rank_bm25 +elasticsearch +``` + +## Usage +1. Settings +```angular2html +pip install -r setup/requirements.txt +``` +2. Train & Inference +[학습 및 추론 코드 사용 방법](code/README.MD) diff --git a/assets/MRC_NLP_04_report.pdf b/assets/MRC_NLP_04_report.pdf new file mode 100644 index 0000000..0a389ef Binary files /dev/null and b/assets/MRC_NLP_04_report.pdf differ diff --git a/assets/leaderboard.png b/assets/leaderboard.png new file mode 100644 index 0000000..c10f9d9 Binary files /dev/null and b/assets/leaderboard.png differ diff --git a/code/BertEncoder.py b/code/BertEncoder.py new file mode 100644 index 0000000..0e19101 --- /dev/null +++ b/code/BertEncoder.py @@ -0,0 +1,27 @@ +from transformers import BertModel, BertPreTrainedModel + +class BertEncoder(BertPreTrainedModel): + + def __init__(self, + config + ): + super(BertEncoder, self).__init__(config) + + self.bert = BertModel(config) + self.init_weights() + + + def forward(self, + input_ids, + attention_mask=None, + token_type_ids=None + ): + + outputs = self.bert( + input_ids, + attention_mask=attention_mask, + token_type_ids=token_type_ids + ) + + pooled_output = outputs[1] + return pooled_output \ No newline at end of file diff --git a/code/README.MD b/code/README.MD new file mode 100644 index 0000000..33c88bf --- /dev/null +++ b/code/README.MD @@ -0,0 +1,70 @@ +# 실행 방법 +## 통합 파이프라인으로 실행 +```bash +# train-eval-inference 통합 파이프라인 +python integration_pipline.py ./config/integration.json +``` + +## config.json으로 실행 +```bash +# 학습 +python train.py ./config/train.json +# 평가 +python train.py ./config/eval.json +# 추론 +python inference.py ./config/inference.json +``` + +## 쉘 스크립트로 실행 +### 학습 또는 평가 방법 +```bash +python train.py \ + --model_name_or_path klue/bert-base \ + --config_name None \ + --tokenizer_name None \ + \ + --dataset_name ../data/train_dataset \ + --max_seq_length 384 \ + --pad_to_max_length False \ + --doc_stride 128 \ + --max_answer_length 30 \ + --overwrite_cache True \ + --preprocessing_num_workers None \ + \ + --output_dir ../models/train_dataset \ + --overwrite_output_dir True \ + --do_train True \ + --do_eval True \ + --per_device_train_batch_size 8 \ + --per_device_eval_batch_size 8 \ + --learning_rate 5e-5 \ + --weight_decay 0.0 \ + --num_train_epochs 5.0 \ + --warmup_ratio 0.0 \ + --logging_steps 500 \ + --save_steps 500 \ + --seed 42 +``` + +### 추론 방법 +```bash +python inference.py \ + --model_name_or_path ../models/train_dataset/ \ + \ + --dataset_name ../data/test_dataset/ \ + --overwrite_cache True \ + --max_seq_length 384 \ + --pad_to_max_length False \ + --doc_stride 128 \ + --max_answer_length 30 \ + --eval_retrieval True \ + --num_clusters 64 \ + --top_k_retrieval 20 \ + --use_faiss False \ + \ + --output_dir code/outputs/test_dataset/ \ + --overwrite_output_dir True \ + --do_eval False \ + --do_predict True \ + --seed 42 +``` \ No newline at end of file diff --git a/code/arguments.py b/code/arguments.py new file mode 100644 index 0000000..0a0cc32 --- /dev/null +++ b/code/arguments.py @@ -0,0 +1,256 @@ +from dataclasses import dataclass, field +from typing import Optional, Union +from transformers import TrainingArguments +from transformers.trainer_utils import IntervalStrategy + + +@dataclass +class ModelArguments: + """ + Arguments pertaining to which model/config/tokenizer we are going to fine-tune from. + """ + + model_name_or_path: str = field( + default="klue/bert-base", + metadata={ + "help": "Path to pretrained model or model identifier from huggingface.co/models" + }, + ) + config_name: Optional[str] = field( + default=None, + metadata={ + "help": "Pretrained config name or path if not the same as model_name" + }, + ) + tokenizer_name: Optional[str] = field( + default=None, + metadata={ + "help": "Pretrained tokenizer name or path if not the same as model_name" + }, + ) + model_class: str = field( + default="AutoModelForQuestionAnswering", + metadata={"help": "model class. default: AutoModelForQuestionAnswering"}, + ) + token_type_ids: bool = field( + default=False, + metadata={ + "help": "model이 BERT이면 True, RoBERTa 등은 False. RoBERTa는 BERT와 달리 token_type_ids(문장 간 구분을 위한 역할을 수행)를 사용하지 않음" + }, + ) + use_checkpoint: bool = field( + default=True, + metadata={ + "help": "전이 학습이면 False, 아니라면 True 사용하여 checkpoint 명시적으로 사용 여부를 지정할 수 있음" + }, + ) + + +@dataclass +class DataTrainingArguments: + """ + Arguments pertaining to what data we are going to input our model for training and eval. + """ + + dataset_name: Optional[str] = field( + default="../data/train_dataset", + metadata={"help": "The name of the dataset to use."}, + ) + overwrite_cache: bool = field( + default=False, + metadata={"help": "Overwrite the cached training and evaluation sets"}, + ) + preprocessing_num_workers: Optional[int] = field( + default=None, + metadata={"help": "The number of processes to use for the preprocessing."}, + ) + max_seq_length: int = field( + default=384, + metadata={ + "help": "The maximum total input sequence length after tokenization. Sequences longer " + "than this will be truncated, sequences shorter will be padded." + }, + ) + pad_to_max_length: bool = field( + default=False, + metadata={ + "help": "Whether to pad all samples to `max_seq_length`. " + "If False, will pad the samples dynamically when batching to the maximum length in the batch (which can " + "be faster on GPU but will be slower on TPU)." + }, + ) + doc_stride: int = field( + default=128, + metadata={ + "help": "When splitting up a long document into chunks, how much stride to take between chunks." + }, + ) + max_answer_length: int = field( + default=30, + metadata={ + "help": "The maximum length of an answer that can be generated. This is needed because the start " + "and end predictions are not conditioned on one another." + }, + ) + num_clusters: int = field( + default=64, metadata={"help": "Define how many clusters to use for faiss."} + ) + top_k_retrieval: int = field( + default=10, + metadata={ + "help": "Define how many top-k passages to retrieve based on similarity." + }, + ) + use_faiss: bool = field( + default=False, metadata={"help": "Whether to build with faiss"} + ) + retriever_from_file: Optional[str] = field( + default=None, metadata={"help": "load retreiver results from df file."} + ) + retriever_class: str = field( + default="TfidfRetrieval", + metadata={ + "help": "The name of the retriever to use. Options include 'TfidfRetrieval', 'BM25Retrieval', 'ElasticRetrieval', etc." + }, + ) + index_name: str = field( + default="origin-wiki", + metadata={"help": "Define the name if index when using Elasticsearch"}, + ) + setting_path: str = field( + default="./config/elastic_setting.json", + metadata={"help": "set setting_path if index when using Elasticsearch"}, + ) + + +@dataclass +class CustomTrainingArguments(TrainingArguments): + """ + TrainingArguments is the subset of the arguments we use in our example scripts **which relate to the training loop + itself**. + """ + + output_dir: str = field( + metadata={ + "help": "The output directory where the model predictions and checkpoints will be written." + }, + ) + overwrite_output_dir: bool = field( + default=False, + metadata={ + "help": ( + "Overwrite the content of the output directory. " + "Use this to continue training if output_dir points to a checkpoint directory." + ) + }, + ) + do_train: bool = field(default=False, metadata={"help": "Whether to run training."}) + do_eval: bool = field( + default=False, metadata={"help": "Whether to run eval on the dev set."} + ) + do_predict: bool = field( + default=False, metadata={"help": "Whether to run predictions on the test set."} + ) + + per_device_train_batch_size: int = field( + default=8, + metadata={"help": "Batch size per GPU/TPU/MPS/NPU core/CPU for training."}, + ) + per_device_eval_batch_size: int = field( + default=8, + metadata={"help": "Batch size per GPU/TPU/MPS/NPU core/CPU for evaluation."}, + ) + + learning_rate: float = field( + default=5e-5, metadata={"help": "The initial learning rate for AdamW."} + ) + weight_decay: float = field( + default=0.0, metadata={"help": "Weight decay for AdamW if we apply some."} + ) + + num_train_epochs: float = field( + default=3.0, metadata={"help": "Total number of training epochs to perform."} + ) + + warmup_ratio: float = field( + default=0.0, + metadata={"help": "Linear warmup over warmup_ratio fraction of total steps."}, + ) + + logging_steps: float = field( + default=500, + metadata={ + "help": ( + "Log every X updates steps. Should be an integer or a float in range `[0,1)`. " + "If smaller than 1, will be interpreted as ratio of total training steps." + ) + }, + ) + + save_total_limit: Optional[int] = field( + default=None, + metadata={ + "help": ( + "If a value is passed, will limit the total amount of checkpoints. Deletes the older checkpoints in" + " `output_dir`. When `load_best_model_at_end` is enabled, the 'best' checkpoint according to" + " `metric_for_best_model` will always be retained in addition to the most recent ones. For example," + " for `save_total_limit=5` and `load_best_model_at_end=True`, the four last checkpoints will always be" + " retained alongside the best model. When `save_total_limit=1` and `load_best_model_at_end=True`," + " it is possible that two checkpoints are saved: the last one and the best one (if they are different)." + " Default is unlimited checkpoints" + ) + }, + ) + + eval_strategy: Union[IntervalStrategy, str] = field( + default="no", + metadata={"help": "The evaluation strategy to use."}, + ) + + save_steps: float = field( + default=500, + metadata={ + "help": ( + "Save checkpoint every X updates steps. Should be an integer or a float in range `[0,1)`. " + "If smaller than 1, will be interpreted as ratio of total training steps." + ) + }, + ) + + eval_steps: Optional[float] = field( + default=None, + metadata={ + "help": ( + "Run an evaluation every X steps. Should be an integer or a float in range `[0,1)`. " + "If smaller than 1, will be interpreted as ratio of total training steps." + ) + }, + ) + + load_best_model_at_end: Optional[bool] = field( + default=False, + metadata={ + "help": ( + "Whether or not to load the best model found during training at the end of training. When this option" + " is enabled, the best checkpoint will always be saved. See `save_total_limit` for more." + ) + }, + ) + + metric_for_best_model: Optional[str] = field( + default=None, + metadata={"help": "The metric to use to compare two different models."}, + ) + + greater_is_better: Optional[bool] = field( + default=None, + metadata={ + "help": "Whether the `metric_for_best_model` should be maximized or not." + }, + ) + gradient_accumulation_steps: int = field( + default=4, + metadata={ + "help": "Number of update steps to accumulate before performing a backward/update pass." + }, + ) diff --git a/code/config/elastic_setting.json b/code/config/elastic_setting.json new file mode 100644 index 0000000..40c1635 --- /dev/null +++ b/code/config/elastic_setting.json @@ -0,0 +1,33 @@ +{ + "settings": { + "analysis": { + "filter": { + "my_shingle": { + "type": "shingle" + } + }, + "analyzer": { + "my_analyzer": { + "type": "custom", + "tokenizer": "nori_tokenizer", + "decompound_mode": "mixed", + "filter": ["my_shingle"] + } + }, + "similarity": { + "my_similarity": { + "type": "BM25" + } + } + } + }, + + "mappings": { + "properties": { + "document_text": { + "type": "text", + "analyzer": "my_analyzer" + } + } + } +} \ No newline at end of file diff --git a/code/config/eval.json b/code/config/eval.json new file mode 100644 index 0000000..dc21d5a --- /dev/null +++ b/code/config/eval.json @@ -0,0 +1,7 @@ +{ + "model_name_or_path": "./models/bert/", + "output_dir": "./outputs/bert", + "dataset_name": "../data/train_dataset", + "overwrite_output_dir": true, + "do_eval": true +} \ No newline at end of file diff --git a/code/config/inference.json b/code/config/inference.json new file mode 100644 index 0000000..40c17e6 --- /dev/null +++ b/code/config/inference.json @@ -0,0 +1,10 @@ +{ + "model_name_or_path": "./models/bert/", + "output_dir": "./outputs/bert", + "dataset_name": "../data/test_dataset/", + "num_train_epochs": 1, + "per_device_eval_batch_size": 16, + "retriever_class": "ElasticRetrieval", + "overwrite_output_dir": true, + "do_predict": true +} \ No newline at end of file diff --git a/code/config/inference_with_rerank.json b/code/config/inference_with_rerank.json new file mode 100644 index 0000000..efe44a0 --- /dev/null +++ b/code/config/inference_with_rerank.json @@ -0,0 +1,11 @@ +{ + "model_name_or_path": "./models/roberta_large_e3", + "output_dir": "./outputs/roberta_large_e3_rerank_20to5", + "dataset_name": "../data/test_dataset/", + "per_device_eval_batch_size": 16, + "retriever_from_file": "../data/retriever/es_20_rerank_5.csv", + "retriever_class": "ElasticRetrieval", + "top_k_retrieval": 20, + "overwrite_output_dir": true, + "do_predict": true +} \ No newline at end of file diff --git a/code/config/integration.json b/code/config/integration.json new file mode 100644 index 0000000..89cd27b --- /dev/null +++ b/code/config/integration.json @@ -0,0 +1,37 @@ +{ + "model_name_or_path": "klue/roberta-small", + "model_class":"AutoModelForQuestionAnswering", + "token_type_ids": false, + + "dataset_name": "../data/train_dataset", + "max_seq_length": 384, + "pad_to_max_length": false, + "doc_stride": 128, + "max_answer_length": 30, + + "top_k_retrieval": 10, + "retriever_class": "ElasticRetrieval", + "index_name": "origin-wiki", + "setting_path": "./config/elastic_setting.json", + + "output_dir": "./models/roberta_small", + "overwrite_output_dir": true, + "do_train": true, + "do_eval": false, + "do_predict": false, + + "per_device_train_batch_size": 16, + "per_device_eval_batch_size": 16, + "learning_rate": 5e-5, + "weight_decay": 0.0, + "num_train_epochs": 1, + "warmup_ratio": 0.0, + "gradient_accumulation_steps": 1, + + "save_strategy": "epoch", + "eval_strategy": "epoch", + "logging_steps": 500, + "save_steps": 500, + "eval_steps": 500, + "save_total_limit": 5 +} \ No newline at end of file diff --git a/code/config/train.json b/code/config/train.json new file mode 100644 index 0000000..9d48be5 --- /dev/null +++ b/code/config/train.json @@ -0,0 +1,11 @@ +{ + "model_name_or_path": "klue/bert-base", + "output_dir": "./models/bert", + "dataset_name": "../data/train_dataset", + "num_train_epochs": 1, + "per_device_train_batch_size": 16, + "gradient_accumulation_steps": 1, + "save_steps": 0, + "overwrite_output_dir": true, + "do_train": true +} \ No newline at end of file diff --git a/code/custom_model.py b/code/custom_model.py new file mode 100644 index 0000000..bc1a7f7 --- /dev/null +++ b/code/custom_model.py @@ -0,0 +1,107 @@ +import torch +import torch.nn as nn +from torch.nn import CrossEntropyLoss +from transformers import RobertaPreTrainedModel +from transformers.modeling_outputs import QuestionAnsweringModelOutput +from transformers.models.roberta.modeling_roberta import RobertaModel + +class CNN_block(nn.Module): + def __init__(self, hidden_size, dropout_rate=0.1): + super(CNN_block, self).__init__() + self.conv1 = nn.Conv1d(in_channels=hidden_size, out_channels=hidden_size * 2, kernel_size=3, padding=1) + self.conv2 = nn.Conv1d(in_channels=hidden_size * 2, out_channels=hidden_size, kernel_size=1) + self.relu = nn.ReLU() + self.layer_norm = nn.LayerNorm(hidden_size) + self.dropout = nn.Dropout(dropout_rate) + + def forward(self, x): + output = self.conv1(x) + output = self.conv2(output) + output = self.dropout(output) # Dropout 추가 + output = x + self.relu(output) + output = output.transpose(1, 2) + output = self.layer_norm(output) + output = output.transpose(1, 2) + return output + +class CNN_RobertaForQuestionAnswering(RobertaPreTrainedModel): + def __init__(self, config): + super().__init__(config) + self.num_labels = config.num_labels + self.roberta = RobertaModel(config, add_pooling_layer=False) + + # CNN 블록 수를 3개로 줄임 + self.cnn_blocks = nn.ModuleList([CNN_block(config.hidden_size) for _ in range(3)]) + + self.qa_outputs = nn.Linear(config.hidden_size, config.num_labels) + self.dropout = nn.Dropout(config.hidden_dropout_prob) + + self.post_init() + + def forward( + self, + input_ids=None, + attention_mask=None, + token_type_ids=None, + position_ids=None, + head_mask=None, + inputs_embeds=None, + start_positions=None, + end_positions=None, + output_attentions=None, + output_hidden_states=None, + return_dict=None, + ): + return_dict = return_dict if return_dict is not None else self.config.use_return_dict + + outputs = self.roberta( + input_ids, + attention_mask=attention_mask, + token_type_ids=token_type_ids, + position_ids=position_ids, + head_mask=head_mask, + inputs_embeds=inputs_embeds, + output_attentions=output_attentions, + output_hidden_states=output_hidden_states, + return_dict=return_dict, + ) + + sequence_output = outputs[0] + sequence_output = sequence_output.transpose(1, 2) + + for cnn_block in self.cnn_blocks: + sequence_output = cnn_block(sequence_output) + + sequence_output = self.dropout(sequence_output.transpose(1, 2)) + logits = self.qa_outputs(sequence_output) + + start_logits, end_logits = logits.split(1, dim=-1) + start_logits = start_logits.squeeze(-1).contiguous() + end_logits = end_logits.squeeze(-1).contiguous() + + total_loss = None + if start_positions is not None and end_positions is not None: + if len(start_positions.size()) > 1: + start_positions = start_positions.squeeze(-1) + if len(end_positions.size()) > 1: + end_positions = end_positions.squeeze(-1) + ignored_index = start_logits.size(1) + start_positions = start_positions.clamp(0, ignored_index) + end_positions = end_positions.clamp(0, ignored_index) + + loss_fct = CrossEntropyLoss(ignore_index=ignored_index) + start_loss = loss_fct(start_logits, start_positions) + end_loss = loss_fct(end_logits, end_positions) + total_loss = (start_loss + end_loss) / 2 + + if not return_dict: + output = (start_logits, end_logits) + outputs[2:] + return ((total_loss,) + output) if total_loss is not None else output + + return QuestionAnsweringModelOutput( + loss=total_loss, + start_logits=start_logits, + end_logits=end_logits, + hidden_states=outputs.hidden_states, + attentions=outputs.attentions, + ) diff --git a/code/dense_train.py b/code/dense_train.py new file mode 100644 index 0000000..e56471b --- /dev/null +++ b/code/dense_train.py @@ -0,0 +1,329 @@ +import json +import os +import numpy as np +import random +from datetime import datetime +from tqdm import tqdm, trange +import pickle +import wandb + +import torch +import torch.nn.functional as F +from torch.utils.data import DataLoader, TensorDataset +from sklearn.metrics import f1_score + +from datasets import load_from_disk +from transformers import ( + AutoTokenizer, + TrainingArguments, + AdamW, get_linear_schedule_with_warmup +) +from BertEncoder import BertEncoder + + +class DenseRetrieval: + def __init__(self, + args, + dataset, + val_dataset, + num_neg, + tokenizer, + p_encoder, + q_encoder + ): + self.args = args + self.dataset = dataset + self.num_neg = num_neg + + self.tokenizer = tokenizer + self.p_encoder = p_encoder.to(args.device) + self.q_encoder = q_encoder.to(args.device) + + self.prepare_in_batch_negative(num_neg=num_neg) + self.prepare_validation_dataloader(val_dataset) + + def prepare_in_batch_negative(self, + dataset=None, + num_neg=2, + tokenizer=None + ): + # negative sampling + training_dataset = list(set([example for example in self.dataset["context"]])) + + corpus = np.array(training_dataset) + p_with_neg = [] + + for c in self.dataset["context"]: + while True: + neg_idxs = np.random.randint(len(corpus), size=num_neg) + + if not c in corpus[neg_idxs]: + p_with_neg.append(c) + p_with_neg.extend(corpus[neg_idxs]) + break + + # tokenizer + q_seqs = self.tokenizer( + self.dataset["question"], + padding="max_length", + truncation=True, + return_tensors="pt" + ) + p_seqs = self.tokenizer( + p_with_neg, + padding="max_length", + truncation=True, + return_tensors="pt" + ) + + max_len = p_seqs["input_ids"].size(-1) + p_seqs["input_ids"] = p_seqs["input_ids"].view(-1, num_neg + 1, max_len) + p_seqs["attention_mask"] = p_seqs["attention_mask"].view(-1, num_neg + 1, max_len) + p_seqs["token_type_ids"] = p_seqs["token_type_ids"].view(-1, num_neg + 1, max_len) + + train_dataset = TensorDataset( + p_seqs["input_ids"], p_seqs["attention_mask"], p_seqs["token_type_ids"], + q_seqs["input_ids"], q_seqs["attention_mask"], q_seqs["token_type_ids"] + ) + + self.batch_size = self.args.per_device_train_batch_size + # Dataloader + self.train_dataloader = DataLoader(train_dataset, batch_size=self.batch_size, drop_last=True) + + + # Validation 데이터 전처리 및 dataloader 만들기 + def prepare_validation_dataloader(self, dataset): + # negative sampling은 하지 않고, 검증 데이터의 question과 context를 사용 + q_seqs = self.tokenizer( + dataset["question"], + padding="max_length", + truncation=True, + return_tensors="pt" + ) + p_seqs = self.tokenizer( + dataset["context"], + padding="max_length", + truncation=True, + return_tensors="pt" + ) + + val_dataset = TensorDataset( + p_seqs["input_ids"], p_seqs["attention_mask"], p_seqs["token_type_ids"], + q_seqs["input_ids"], q_seqs["attention_mask"], q_seqs["token_type_ids"] + ) + + self.val_dataloader = DataLoader(val_dataset, batch_size=self.args.per_device_eval_batch_size) + + + def train(self, + p_encoder_name, + q_encoder_name, + args=None + ): + torch.cuda.empty_cache() + + # Optimizer + no_decay = ["bias", "LayerNorm.weight"] + optimizer_grouped_parameters = [ + {"params": [p for n, p in self.p_encoder.named_parameters() if not any(nd in n for nd in no_decay)], "weight_decay": self.args.weight_decay}, + {"params": [p for n, p in self.p_encoder.named_parameters() if any(nd in n for nd in no_decay)], "weight_decay": 0.0}, + {"params": [p for n, p in self.q_encoder.named_parameters() if not any(nd in n for nd in no_decay)], "weight_decay": self.args.weight_decay}, + {"params": [p for n, p in self.q_encoder.named_parameters() if any(nd in n for nd in no_decay)], "weight_decay": 0.0} + ] + optimizer = AdamW( + optimizer_grouped_parameters, + lr=self.args.learning_rate, + eps=self.args.adam_epsilon + ) + t_total = len(self.train_dataloader) // self.args.gradient_accumulation_steps * self.args.num_train_epochs + scheduler = get_linear_schedule_with_warmup( + optimizer, + num_warmup_steps=self.args.warmup_steps, + num_training_steps=t_total + ) + + # Start + global_step = 0 + + self.p_encoder.zero_grad() + self.q_encoder.zero_grad() + torch.cuda.empty_cache() + + train_iterator = trange(int(self.args.num_train_epochs), desc="Epoch") + for t in train_iterator: + + # epoch_iterator = tqdm(train_dataloader, desc="Iteration") + with tqdm(self.train_dataloader, unit="batch") as tepoch: + for batch in tepoch: + + self.p_encoder.train() + self.q_encoder.train() + + targets = torch.zeros(self.batch_size).long() # positive example은 전부 첫 번째에 위치하므로 + targets = targets.to(self.args.device) + + p_inputs = { + "input_ids": batch[0].view(self.batch_size * (self.num_neg + 1), -1).to(self.args.device), + "attention_mask": batch[1].view(self.batch_size * (self.num_neg + 1), -1).to(self.args.device), + "token_type_ids": batch[2].view(self.batch_size * (self.num_neg + 1), -1).to(self.args.device) + } + + q_inputs = { + "input_ids": batch[3].to(self.args.device), + "attention_mask": batch[4].to(self.args.device), + "token_type_ids": batch[5].to(self.args.device) + } + + del batch + torch.cuda.empty_cache() + # (batch_size * (num_neg + 1), emb_dim) + p_outputs = self.p_encoder(**p_inputs) + # (batch_size, emb_dim) + q_outputs = self.q_encoder(**q_inputs) + + # Calculate similarity score & loss + p_outputs = p_outputs.view(self.batch_size, self.num_neg + 1, -1) # (batch_size, sample_num, emb_size) + q_outputs = q_outputs.view(self.batch_size, 1, -1) # (batch_size, 1, emb_size) + + # (batch_size, num_neg + 1) + sim_scores = torch.bmm(q_outputs, torch.transpose(p_outputs, 1, 2)).squeeze() + sim_scores = sim_scores.view(self.batch_size, -1) + sim_scores = F.log_softmax(sim_scores, dim=1) + + loss = F.nll_loss(sim_scores, targets) # -log(sim_scores - targets) → 결국 sim_scores가 클수록 loss 값은 0에 가까워짐. sim_scores가 0에 가까울수록 loss는 무한히 (-)로 커짐. + tepoch.set_postfix(loss=f"{str(loss.item())}") + + wandb.log({"loss": loss}) + + loss.backward() + optimizer.step() + scheduler.step() + + self.q_encoder.zero_grad() + self.p_encoder.zero_grad() + + global_step += 1 + + torch.cuda.empty_cache() + del p_inputs, q_inputs + + val_loss = self.evaluate(self.val_dataloader) + print(f"Validation Loss: {val_loss}") + + wandb.log({"validation_loss": val_loss}) + + os.makedirs(self.args.output_dir, exist_ok=True) + with open(self.args.output_dir + p_encoder_name, "wb") as f: + pickle.dump(self.p_encoder, f) + + with open(self.args.output_dir + q_encoder_name, "wb") as f: + pickle.dump(self.q_encoder, f) + + + def evaluate(self, dataloader): + self.p_encoder.eval() + self.q_encoder.eval() + total_loss = 0 + + with torch.no_grad(): + for batch in tqdm(dataloader, desc="Evaluating"): # batch[0].size() == (batch_size, max_length) + targets = torch.zeros(batch[0].size(0)).long().to(self.args.device) + + p_inputs = { + "input_ids": batch[0].to(self.args.device), + "attention_mask": batch[1].to(self.args.device), + "token_type_ids": batch[2].to(self.args.device), + } + q_inputs = { + "input_ids": batch[3].to(self.args.device), + "attention_mask": batch[4].to(self.args.device), + "token_type_ids": batch[5].to(self.args.device), + } + + p_outputs = self.p_encoder(**p_inputs).unsqueeze(1) # (batch_size, max_length, emb_size) + q_outputs = self.q_encoder(**q_inputs).unsqueeze(1) + + + sim_scores = torch.bmm(q_outputs, p_outputs.transpose(1, 2)).squeeze() # (batch_size, 1) + sim_scores = sim_scores.view(self.batch_size, -1) + sim_scores = F.log_softmax(sim_scores, dim=1) + + loss = F.nll_loss(sim_scores, targets) + total_loss += loss.item() + + return total_loss / len(dataloader) + + +# wandB 초기화 및 저장 폴더 생성 +def wandb_init(run_name, base_path="../wandb"): + # 현재 시각 + current_time = datetime.now().strftime("%m%d_%H%M") + wandb_name = f"klue/bert-base_{current_time}" + + # WandB 초기화 + wandb.init(project="wandb_logs", name=wandb_name, dir=base_path, + config={ + "learning_rate" : 5e-5, + "batch_size" : 8, + "epoch" : 3 + }) # 프로젝트 이름과 실험 이름 설정 + + # set run name + wandb.run.name = run_name + wandb.run.save() + + +if __name__=="__main__": + def set_seed(random_seed): + torch.manual_seed(random_seed) + torch.cuda.manual_seed(random_seed) + torch.cuda.manual_seed_all(random_seed) # if use multi-GPU + random.seed(random_seed) + np.random.seed(random_seed) + + set_seed(42) # magic number :) + + # WandB 초기화 + wandb_init("klue/bert-base_1") + + # "/bin_name.bin" + p_encoder_name = "/p_test.bin" + q_encoder_name = "/q_test.bin" + + # load dataset + dataset = load_from_disk("../data/train_dataset") + with open('../data/korquad_train_dataset.json', "r") as f: + train_dataset = json.load(f) + + # train_dataset = dataset["train"] + val_dataset = dataset["validation"] + + # args set + args = TrainingArguments( + output_dir="./retrieval/dense_encoder", + evaluation_strategy="epoch", + learning_rate=4e-5, + per_device_train_batch_size=5, + per_device_eval_batch_size=5, + num_train_epochs=2, + weight_decay=0.01 + ) + model_checkpoint = "klue/bert-base" + + tokenizer = AutoTokenizer.from_pretrained(model_checkpoint) + p_encoder = BertEncoder.from_pretrained(model_checkpoint).to(args.device) + q_encoder = BertEncoder.from_pretrained(model_checkpoint).to(args.device) + + # Retrieval 객체 생성 + retriever = DenseRetrieval( + args=args, + dataset=train_dataset, + val_dataset=val_dataset, + num_neg=2, + tokenizer=tokenizer, + p_encoder=p_encoder, + q_encoder=q_encoder + ) + + # train + retriever.train(p_encoder_name, q_encoder_name) \ No newline at end of file diff --git a/code/inference.py b/code/inference.py new file mode 100644 index 0000000..0180fe4 --- /dev/null +++ b/code/inference.py @@ -0,0 +1,317 @@ +""" +Open-Domain Question Answering 을 수행하는 inference 코드 입니다. +대부분의 로직은 train.py 와 비슷하나 retrieval, predict 부분이 추가되어 있습니다. +""" + +import logging +from typing import Callable, Dict, List, NoReturn, Tuple +import numpy as np +import pandas as pd +from arguments import ModelArguments, DataTrainingArguments, CustomTrainingArguments +from datasets import ( + Dataset, + DatasetDict, + Features, + Sequence, + Value, + load_from_disk, + load_metric, +) +from transformers import ( + AutoConfig, + AutoTokenizer, + DataCollatorWithPadding, + EvalPrediction, +) + +from utils.trainer_qa import QuestionAnsweringTrainer +from utils.utils_qa import * + +logger = logging.getLogger(__name__) + + +def load_mrc_resources( + model_args: ModelArguments, + data_args: DataTrainingArguments, + training_args: CustomTrainingArguments, +): + # 가능한 arguments들은 arguments.py에서 확인하거나 --help flag로 확인 + training_args.do_train = True + print(f"model is from {model_args.model_name_or_path}") + print(f"data is from {data_args.dataset_name}") + + # logging 설정 + setup_logging() + + # verbosity 설정 : Transformers logger의 정보로 사용합니다 (on main process only) + logger.info("Training/evaluation parameters %s", training_args) + + # 모델을 초기화하기 전에 난수를 고정합니다. + set_seed(training_args.seed) + + datasets = load_from_disk(data_args.dataset_name) + print(datasets) + + # AutoConfig를 이용하여 pretrained model 과 tokenizer를 불러옵니다. + # argument로 원하는 모델 이름을 설정하면 옵션을 바꿀 수 있습니다. + config = AutoConfig.from_pretrained( + ( + model_args.config_name + if model_args.config_name + else model_args.model_name_or_path + ), + ) + tokenizer = AutoTokenizer.from_pretrained( + ( + model_args.tokenizer_name + if model_args.tokenizer_name + else model_args.model_name_or_path + ), + # 'use_fast' True: rust로 구현된 tokenizer / False: python으로 구현된 tokenizer + use_fast=True, + ) + model_class = model_class_from_string(model_args.model_class) + model = model_class.from_pretrained( + model_args.model_name_or_path, + from_tf=bool(".ckpt" in model_args.model_name_or_path), + config=config, + ) + + # run passage retrieval + datasets = run_sparse_retrieval( + tokenizer.tokenize, + datasets, + training_args, + data_args, + ) + + return data_args, training_args, model_args, datasets, tokenizer, model + + +def run_sparse_retrieval( + tokenize_fn: Callable[[str], List[str]], + datasets: DatasetDict, + training_args: CustomTrainingArguments, + data_args: DataTrainingArguments, + data_path: str = "../data", + context_path: str = "wikipedia_documents.json", +) -> DatasetDict: + + if data_args.retriever_from_file is not None: + df = pd.read_csv(data_args.retriever_from_file) + # string -> dict type casting + if training_args.do_eval: + df["answers"] = df["answers"].apply(lambda x: eval(x)) + else: + # Query에 맞는 Passage들을 Retrieval 합니다. + retriever_class = retrieve_class_from_string(data_args.retriever_class) + retriever = retriever_class( + tokenize_fn=tokenize_fn, + data_path=data_path, + context_path=context_path, + setting_path=data_args.setting_path, + index_name=data_args.index_name, + ) + # if not isinstance(retriever, Retrieval): + # raise TypeError("retrieverz arguments must be Retrieval class") + + if data_args.use_faiss: + retriever.build_faiss(num_clusters=data_args.num_clusters) + df = retriever.retrieve_faiss( + datasets["validation"], topk=data_args.top_k_retrieval + ) + else: + df = retriever.retrieve( + datasets["validation"], topk=data_args.top_k_retrieval + ) + + # test data 에 대해선 정답이 없으므로 id question context 로만 데이터셋이 구성됩니다. + if training_args.do_predict: + f = Features( + { + "context": Value(dtype="string", id=None), + "id": Value(dtype="string", id=None), + "question": Value(dtype="string", id=None), + } + ) + + # train data 에 대해선 정답이 존재하므로 id question context answer 로 데이터셋이 구성됩니다. + elif training_args.do_eval: + f = Features( + { + "answers": Sequence( + feature={ + "text": Value(dtype="string", id=None), + "answer_start": Value(dtype="int32", id=None), + }, + length=-1, + id=None, + ), + "context": Value(dtype="string", id=None), + "id": Value(dtype="string", id=None), + "question": Value(dtype="string", id=None), + } + ) + if "original_context" in df.columns: + df = df.drop(columns=["original_context"]) + + datasets = DatasetDict({"validation": Dataset.from_pandas(df, features=f)}) + return datasets + + +def run_mrc( + data_args: DataTrainingArguments, + training_args: CustomTrainingArguments, + model_args: ModelArguments, + datasets: DatasetDict, + tokenizer, + model, +) -> NoReturn: + # eval or predict mrc model + if not (training_args.do_eval or training_args.do_predict): + return + + # eval 혹은 prediction에서만 사용함 + column_names = datasets["validation"].column_names + + question_column_name = "question" if "question" in column_names else column_names[0] + context_column_name = "context" if "context" in column_names else column_names[1] + answer_column_name = "answers" if "answers" in column_names else column_names[2] + + # Padding에 대한 옵션을 설정합니다. + # (question|context) 혹은 (context|question)로 세팅 가능합니다. + pad_on_right = tokenizer.padding_side == "right" + + # 오류가 있는지 확인합니다. + _, max_seq_length = check_no_error(data_args, training_args, datasets, tokenizer) + + # Validation preprocessing + def prepare_validation_features(examples): + # truncation과 padding(length가 짧을때만)을 통해 toknization을 진행하며, stride를 이용하여 overflow를 유지합니다. + # 각 example들은 이전의 context와 조금씩 겹치게됩니다. + tokenized_examples = tokenizer( + examples[question_column_name if pad_on_right else context_column_name], + examples[context_column_name if pad_on_right else question_column_name], + truncation="only_second" if pad_on_right else "only_first", + max_length=max_seq_length, + stride=data_args.doc_stride, + return_overflowing_tokens=True, + return_offsets_mapping=True, + return_token_type_ids=model_args.token_type_ids, + padding="max_length" if data_args.pad_to_max_length else False, + ) + + # 길이가 긴 context가 등장할 경우 truncate를 진행해야하므로, 해당 데이터셋을 찾을 수 있도록 mapping 가능한 값이 필요합니다. + sample_mapping = tokenized_examples.pop("overflow_to_sample_mapping") + + # evaluation을 위해, prediction을 context의 substring으로 변환해야합니다. + # corresponding example_id를 유지하고 offset mappings을 저장해야합니다. + tokenized_examples["example_id"] = [] + + for i in range(len(tokenized_examples["input_ids"])): + # sequence id를 설정합니다 (to know what is the context and what is the question). + sequence_ids = tokenized_examples.sequence_ids(i) + context_index = 1 if pad_on_right else 0 + + # 하나의 example이 여러개의 span을 가질 수 있습니다. + sample_index = sample_mapping[i] + tokenized_examples["example_id"].append(examples["id"][sample_index]) + + # context의 일부가 아닌 offset_mapping을 None으로 설정하면 token position이 context의 일부인지 쉽게 확인 할 수 있음 + tokenized_examples["offset_mapping"][i] = [ + (o if sequence_ids[k] == context_index else None) + for k, o in enumerate(tokenized_examples["offset_mapping"][i]) + ] + return tokenized_examples + + eval_dataset = datasets["validation"] + + # Validation Feature 생성 + eval_dataset = eval_dataset.map( + prepare_validation_features, + batched=True, + num_proc=data_args.preprocessing_num_workers, + remove_columns=column_names, + load_from_cache_file=not data_args.overwrite_cache, + ) + + # Data collator + # flag가 True이면 이미 max length로 padding된 상태입니다. + # 그렇지 않다면 data collator에서 padding을 진행해야합니다. + data_collator = DataCollatorWithPadding( + tokenizer, pad_to_multiple_of=8 if training_args.fp16 else None + ) + + # Post-processing: + def post_processing_function( + examples, + features, + predictions: Tuple[np.ndarray, np.ndarray], + training_args: CustomTrainingArguments, + ) -> EvalPrediction: + # Post-processing: start logits과 end logits을 original context의 정답과 match시킵니다. + predictions = postprocess_qa_predictions( + examples=examples, + features=features, + predictions=predictions, + max_answer_length=data_args.max_answer_length, + output_dir=training_args.output_dir, + ) + # Metric을 구할 수 있도록 Format을 맞춰줍니다. + formatted_predictions = [ + {"id": k, "prediction_text": v} for k, v in predictions.items() + ] + + if training_args.do_predict: + return formatted_predictions + elif training_args.do_eval: + references = [ + {"id": ex["id"], "answers": ex[answer_column_name]} + for ex in datasets["validation"] + ] + return EvalPrediction( + predictions=formatted_predictions, label_ids=references + ) + + metric = load_metric("squad") + + def compute_metrics(p: EvalPrediction) -> Dict: + return metric.compute(predictions=p.predictions, references=p.label_ids) + + # Trainer 초기화 + trainer = QuestionAnsweringTrainer( + model=model, + args=training_args, + train_dataset=None, + eval_dataset=eval_dataset, + eval_examples=datasets["validation"], + tokenizer=tokenizer, + data_collator=data_collator, + post_process_function=post_processing_function, + compute_metrics=compute_metrics, + ) + + #### eval dataset & eval example - predictions.json 생성됨 + if training_args.do_predict: + predictions = trainer.predict( + test_dataset=eval_dataset, test_examples=datasets["validation"] + ) + + # predictions.json 은 postprocess_qa_predictions() 호출시 이미 저장됩니다. + print( + "No metric can be presented because there is no correct answer given. Job done!" + ) + + if training_args.do_eval: + logger.info("*** Evaluate ***") + metrics = trainer.evaluate() + metrics["eval_samples"] = len(eval_dataset) + + trainer.log_metrics("test", metrics) + trainer.save_metrics("test", metrics) + + +if __name__ == "__main__": + from utils.utils_qa import load_arguments + + run_mrc(*load_mrc_resources(*load_arguments())) diff --git a/code/integration_pipeline.py b/code/integration_pipeline.py new file mode 100644 index 0000000..1015e8c --- /dev/null +++ b/code/integration_pipeline.py @@ -0,0 +1,67 @@ +""" +훈련부터 추론까지 전 과정을 수행하는 하나의 파이프라인 코드 +""" + +import train +import inference +from arguments import ModelArguments, DataTrainingArguments, CustomTrainingArguments +from utils.utils_qa import load_arguments, set_seed + + +def train_to_eval( + model_args: ModelArguments, + data_args: DataTrainingArguments, + training_args: CustomTrainingArguments, +): + # train output을 eval model로 이동 + model_args.model_name_or_path = training_args.output_dir + # eval output은 model이 아닌 prediction + training_args.output_dir = training_args.output_dir.replace("models/", "outputs/") + # do_train -> do_eval + training_args.do_train = False + training_args.do_eval = True + return model_args, data_args, training_args + + +def eval_to_inference( + model_args: ModelArguments, + data_args: DataTrainingArguments, + training_args: CustomTrainingArguments, +): + # dataset 변경: train -> test + data_args.dataset_name = data_args.dataset_name.replace("train", "test") + if data_args.retriever_from_file is not None: + data_args.retriever_from_file = data_args.retriever_from_file.replace( + "train", "test" + ) + # do_eval -> do_predict + training_args.do_eval = False + training_args.do_predict = True + return model_args, data_args, training_args + + +def main(): + """ + config.json 파일 하나로 train-eval-inference 통합 파이프라인 구축 + """ + model_args, data_args, training_args = load_arguments() + train.run_mrc(*train.load_mrc_resources(model_args, data_args, training_args)) + + model_args, data_args, training_args = train_to_eval( + model_args, data_args, training_args + ) + train.run_mrc(*train.load_mrc_resources(model_args, data_args, training_args)) + inference.run_mrc( + *inference.load_mrc_resources(model_args, data_args, training_args) + ) + model_args, data_args, training_args = eval_to_inference( + model_args, data_args, training_args + ) + inference.run_mrc( + *inference.load_mrc_resources(model_args, data_args, training_args) + ) + + +if __name__ == "__main__": + set_seed() + main() diff --git a/code/retrieval/__init__.py b/code/retrieval/__init__.py new file mode 100644 index 0000000..e69de29 diff --git a/code/retrieval/base.py b/code/retrieval/base.py new file mode 100644 index 0000000..1ee00ab --- /dev/null +++ b/code/retrieval/base.py @@ -0,0 +1,49 @@ +import json +import os +from typing import List, Optional, Union, Callable +from datasets import Dataset + + +class Retrieval: + def __init__( + self, + tokenize_fn: Optional[Callable] = None, + data_path: Optional[str] = None, + context_path: Optional[str] = None, + use_title: Optional[bool] = None, + index_name: Optional[str] = None, + setting_path: Optional[str] = None, + ): + self.data_path = data_path + with open( + os.path.join(data_path, context_path), + "r", + encoding="utf-8", + ) as f: + wiki = json.load(f) + self.contexts = list( + dict.fromkeys( + [ + f'{v["title"]}: {v["text"]}' if use_title else v["text"] + for v in wiki.values() + ] + ) + ) + self.ids = list(range(len(self.contexts))) + self.tokenize_fn = tokenize_fn + if index_name: + self.index_name = index_name + if setting_path: + self.setting_path = setting_path + + def retrieve(self, query_or_dataset: Union[str, Dataset], topk: Optional[int]): + raise NotImplementedError + + def get_embedding(self): + raise NotImplementedError + + def get_relevant_doc(self, query: str, k: Optional[int]): + raise NotImplementedError + + def get_relevant_doc_bulk(self, queries: List, k: Optional[int]): + raise NotImplementedError diff --git a/code/retrieval/bm25.py b/code/retrieval/bm25.py new file mode 100644 index 0000000..beb6afc --- /dev/null +++ b/code/retrieval/bm25.py @@ -0,0 +1,297 @@ +if __name__ == "__main__": + import sys, os + + sys.path.append(os.path.dirname(os.path.abspath(os.path.dirname(__file__)))) + +from typing import List, Optional, Tuple, Union +import numpy as np +import pandas as pd +import os +import pickle +import sys +from datasets import Dataset +from rank_bm25 import BM25Okapi +from tqdm.auto import tqdm +from retrieval.base import Retrieval +from utils.utils_qa import timer + + +class BM25Retrieval(Retrieval): + def __init__( + self, + tokenize_fn, + data_path: Optional[str] = "../data/", + context_path: Optional[str] = "wikipedia_documents.json", + use_title=True, + *args, + **kwargs, + ) -> None: + """ + Arguments: + tokenize_fn: + 기본 text를 tokenize해주는 함수입니다. + 아래와 같은 함수들을 사용할 수 있습니다. + - lambda x: x.split(' ') + - Huggingface Tokenizer + - konlpy.tag의 Mecab + + data_path: + 데이터가 보관되어 있는 경로입니다. + + context_path: + Passage들이 묶여있는 파일명입니다. + + use_title: + contexts에 title을 추가할지 정합니다. + + Summary: + Passage 파일을 불러오고 BM25Okapi를 선언하는 기능을 합니다. + """ + super().__init__(tokenize_fn, data_path, context_path, use_title) + + self.get_sparse_embedding() + + # Tokenize + # self.tokenized_corpus = [self.tokenize_fn(doc) for doc in self.contexts] + + # Transform by vectorizer + # self.bm25 = BM25Okapi(self.tokenized_corpus, k1=1.5, b=0.75) + + def get_sparse_embedding(self) -> None: + """Summary: + Passage Embedding을 만들고 + TFIDF와 Embedding을 pickle로 저장합니다. + 만약 미리 저장된 파일이 있으면 저장된 pickle을 불러옵니다. + """ + + # Pickle을 불러오거나 저장합니다. + pickle_name = f"bm25_sparse_embedding.bin" + emd_path = os.path.join(self.data_path, pickle_name) + + if os.path.isfile(emd_path): + with open(emd_path, "rb") as file: + self.bm25 = pickle.load(file) + print("Embedding pickle load.") + else: + print("Build passage embedding") + + tokenized_corpus = [self.tokenize_fn(doc) for doc in self.contexts] + self.bm25 = BM25Okapi(tokenized_corpus, k1=1.5, b=0.75) + + with open(emd_path, "wb") as file: + pickle.dump(self.bm25, file) + print("Embedding pickle saved.") + + def retrieve_for_reranker( + self, query_or_dataset: Dataset, topk: Optional[int] = 1 + ) -> pd.DataFrame: + # Retrieve한 Passage를 pd.DataFrame으로 반환합니다. + total = [] + with timer("query exhaustive search using BM25"): + doc_scores, doc_indices = self.get_relevant_doc_bulk( + query_or_dataset["question"], k=topk + ) + for idx, example in enumerate( + tqdm(query_or_dataset, desc="Sparse retrieval: ") + ): + tmp = { + # Query와 해당 id를 반환합니다. + "question": example["question"], + "id": example["id"], + # Retrieve한 Passage의 id, context를 반환합니다. + "context": [self.contexts[pid] for pid in doc_indices[idx]], + } + if "context" in example.keys() and "answers" in example.keys(): + # validation 데이터를 사용하면 ground_truth context와 answer도 반환합니다. + tmp["original_context"] = example["context"] + tmp["answers"] = example["answers"] + total.append(tmp) + + return pd.DataFrame(total) + + def retrieve( + self, query_or_dataset: Union[str, Dataset], topk: Optional[int] = 1 + ) -> Union[Tuple[List, List], pd.DataFrame]: + """ + Arguments: + query_or_dataset (Union[str, Dataset]): + str이나 Dataset으로 이루어진 Query를 받습니다. + str 형태인 하나의 query만 받으면 `get_relevant_doc`을 통해 유사도를 구합니다. + query를 포함한 HF.Dataset을 받으면 `get_relevant_doc_bulk`를 통해 유사도를 구합니다. + topk (Optional[int], optional): Defaults to 1. + 상위 몇 개의 passage를 사용할 것인지 지정합니다. + + Returns: + 1개의 Query를 받는 경우 -> Tuple(List, List) + 다수의 Query를 받는 경우 -> pd.DataFrame: [description] + + Note: + 다수의 Query를 받는 경우, + Ground Truth가 있는 Query (train/valid) -> 기존 Ground Truth Passage를 같이 반환합니다. + Ground Truth가 없는 Query (test) -> Retrieval한 Passage만 반환합니다. + """ + + if isinstance(query_or_dataset, str): + doc_scores, doc_indices = self.get_relevant_doc(query_or_dataset, k=topk) + print("[query exhaustive search using BM25]\n", query_or_dataset, "\n") + + for i in range(topk): + print(f"Top-{i+1} passage with score {doc_scores[i]:4f}") + print(self.contexts[doc_indices[i]]) + + return (doc_scores, [self.contexts[doc_indices[i]] for i in range(topk)]) + + elif isinstance(query_or_dataset, Dataset): + + # Retrieve한 Passage를 pd.DataFrame으로 반환합니다. + total = [] + with timer("query exhaustive search using BM25"): + doc_scores, doc_indices = self.get_relevant_doc_bulk( + query_or_dataset["question"], k=topk + ) + for idx, example in enumerate( + tqdm(query_or_dataset, desc="Sparse retrieval: ") + ): + tmp = { + # Query와 해당 id를 반환합니다. + "question": example["question"], + "id": example["id"], + # Retrieve한 Passage의 id, context를 반환합니다. + "context": " ".join( + [self.contexts[pid] for pid in doc_indices[idx]] + ), + } + if "context" in example.keys() and "answers" in example.keys(): + # validation 데이터를 사용하면 ground_truth context와 answer도 반환합니다. + tmp["original_context"] = example["context"] + tmp["answers"] = example["answers"] + total.append(tmp) + + cqas = pd.DataFrame(total) + return cqas + + def get_relevant_doc(self, query: str, k: Optional[int] = 1) -> Tuple[List, List]: + + with timer("transform"): + tokenized_query = self.tokenize_fn(query) + + with timer("query exhaustive search"): + result = self.bm25.get_scores(tokenized_query) + if not isinstance(result, np.ndarray): + result = result.toarray() + + sorted_result = np.argsort(result.squeeze())[::-1] + doc_score = result.squeeze()[sorted_result].tolist()[:k] + doc_indices = sorted_result.tolist()[:k] + return doc_score, doc_indices + + def get_relevant_doc_bulk( + self, queries: List, k: Optional[int] = 1 + ) -> Tuple[List, List]: + """ + Arguments: + queries (List): + 여러 개의 Query를 받습니다. + k (Optional[int]): 1 + 상위 몇 개의 Passage를 반환할지 정합니다. + Note: + vocab 에 없는 이상한 단어로 query 하는 경우 assertion 발생 (예) 뙣뙇? + """ + + tokenized_query = [self.tokenize_fn(query) for query in queries] + + doc_scores = [] + doc_indices = [] + + for i in range(len(tokenized_query)): + query = tokenized_query[i] + result = self.bm25.get_scores(query) + if not isinstance(result, np.ndarray): + result = result.toarray() + sorted_result = np.argsort(result.squeeze())[::-1] + doc_scores.append(result.squeeze()[sorted_result].tolist()[:k]) + doc_indices.append(sorted_result.tolist()[:k]) + + return doc_scores, doc_indices + + +if __name__ == "__main__": + import argparse + from datasets import concatenate_datasets, load_from_disk + + # Arguments + parser = argparse.ArgumentParser(description="") + parser.add_argument( + "--dataset_name", default="../data/train_dataset", type=str, help="" + ) + parser.add_argument( + "--model_name_or_path", + default="monologg/koelectra-base-v3-finetuned-korquad", + type=str, + help="", + ) + parser.add_argument("--data_path", default="../data", type=str, help="") + parser.add_argument( + "--context_path", default="wikipedia_documents.json", type=str, help="" + ) + parser.add_argument( + "--topk", + default=20, + type=int, + help="retrieve할 topk 문서의 개수를 설정해주세요", + ) + parser.add_argument( + "--is_for_reranker", + default=False, + type=bool, + help="reranker 용도일 때 설정해주세요", + ) + + args = parser.parse_args() + print(args) + + # Test sparse + org_dataset = load_from_disk(args.dataset_name) + + from transformers import AutoTokenizer + + tokenizer = AutoTokenizer.from_pretrained( + args.model_name_or_path, + ) + + retriever = BM25Retrieval( + tokenize_fn=tokenizer.tokenize, + data_path=args.data_path, + context_path=args.context_path, + use_title=False, + ) + + if args.is_for_reranker: + df_for_reranker = retriever.retrieve_for_reranker( + org_dataset["validation"], args.topk + ) + df_for_reranker.to_csv(f"bm25_{args.topk}.csv", index=False) + print("rerank를 위한 bm25 retriver 결과 저장됨") + else: + full_ds = concatenate_datasets( + [ + org_dataset["train"].flatten_indices(), + org_dataset["validation"].flatten_indices(), + ] + ) # train dev 를 합친 4192 개 질문에 대해 모두 테스트 + print("*" * 40, "query dataset", "*" * 40) + print(full_ds) + query = "대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은?" + + # test single query + with timer("single query by exhaustive search using bm25"): + scores, indices = retriever.retrieve(query) + + # test bulk + with timer("bulk query by exhaustive search using bm25"): + df = retriever.retrieve(full_ds) + df["correct"] = df["original_context"] == df["context"] + print( + "correct retrieval result by exhaustive search", + df["correct"].sum() / len(df), + ) diff --git a/code/retrieval/dense.py b/code/retrieval/dense.py new file mode 100644 index 0000000..3b24942 --- /dev/null +++ b/code/retrieval/dense.py @@ -0,0 +1,109 @@ +import json +import os +from tqdm import tqdm +import pandas as pd + +import torch +import pickle +from typing import List, Optional, Tuple, Union +from datasets import load_from_disk, Dataset +from transformers import AutoTokenizer +from pprint import pprint + +class DenseRetrieval: + def __init__( + self, + tokenize_fn, + setting_path, + index_name, + data_path: Optional[str] = "../data/", + context_path: Optional[str] = "wikipedia_documents.json", + model_checkpoint: str = "klue/bert-base", + passage_encoder_path: str = "./retrieval/dense_encoder/p_korquad_1.bin", + query_encoder_path: str = "./retrieval/dense_encoder/q_korquad_1.bin", + use_title: bool = False, + ) -> None: + self.data_path = data_path + self.context_path = context_path + self.use_title = use_title + + self.tokenizer = AutoTokenizer.from_pretrained(model_checkpoint) + + # Load pre-trained encoders (passage and query encoders) + with open(passage_encoder_path, "rb") as f: + self.p_encoder = pickle.load(f) + with open(query_encoder_path, "rb") as f: + self.q_encoder = pickle.load(f) + + # Ensure the models are in eval mode + self.p_encoder.eval() + self.q_encoder.eval() + + def get_dot_scores_rank(self, query: str, passages: List[str], topk: int = 20) -> List[int]: + """Retrieve the top-k relevant passages for the given query.""" + # Tokenize query + with torch.no_grad(): + q_inputs = self.tokenizer([query], padding="max_length", truncation=True, return_tensors="pt").to("cuda") + q_emb = self.q_encoder(**q_inputs).to("cpu") # (num_query, emb_dim) + + # Encode passages and compute similarity scores + p_embs = [] + for passage in passages: + p_inputs = self.tokenizer(passage, padding="max_length", truncation=True, return_tensors="pt").to("cuda") + p_emb = self.p_encoder(**p_inputs).to("cpu").numpy() # (1, emb_dim) + p_embs.append(p_emb) + + p_embs = torch.Tensor(p_embs).squeeze() # (num_passage, emb_dim) + dot_prod_scores = torch.matmul(q_emb, torch.transpose(p_embs, 0, 1)) # (num_query, num_passage) + ranked_indices = torch.argsort(dot_prod_scores, dim=1, descending=True).squeeze().tolist() + + return ranked_indices[:topk] + + def get_relevant_doc(self, query: str, topk: int = 20) -> Tuple[List[str], List[int]]: + """Retrieve the top-k relevant passages and their indices for a given query.""" + # Load the context (Wikipedia passages) + context_file = os.path.join(self.data_path, self.context_path) + with open(context_file, "r", encoding="utf-8") as f: + wiki_data = json.load(f) + contexts = list(dict.fromkeys([value["text"] for value in wiki_data.values()])) + + # Retrieve relevant passages + ranked_indices = self.get_dot_scores_rank(query=query, passages=contexts, topk=topk) + retrieved_passages = [contexts[idx] for idx in ranked_indices] + + return retrieved_passages + + def retrieve(self, dataset: Union[str, Dataset], topk: int = 20): + """Retrieve top-k passages for all queries in a dataset.""" + queries = dataset["question"] + ids = dataset["id"] + + example_data = {"question": [], + "context": [], + "id": []} + for idx in tqdm(range(len(queries)), total=len(queries), desc="Searching", unit="query"): # Example: retrieve for the first 5 queries + retrieved_passages = self.get_relevant_doc(query=queries[idx], topk=topk) + example_data["question"].append(queries[idx]) + example_data["id"].append(ids[idx]) + example_data["context"].append(" ".join(retrieved_passages)) + + return pd.DataFrame(example_data) + +if __name__ == "__main__": + # Load dataset (train_dataset assumed to be at data_path) + data_path = "../data/" + dataset = load_from_disk(os.path.join(data_path, "train_dataset")) + val_dataset = dataset["validation"] + + # Initialize DenseRetrieval object + dense_retriever = DenseRetrieval( + tokenize_fn=None, # You can pass a custom tokenize_fn if needed + data_path=data_path, + context_path="wikipedia_documents.json", + model_checkpoint="klue/bert-base", + passage_encoder_path="dense_encoder/p_korquad_1.bin", + query_encoder_path="dense_encoder/q_korquad_1.bin", + ) + + # Example: retrieve top-5 passages for the validation dataset + dense_retriever.get_topk_passages_for_dataset(val_dataset, topk=5) \ No newline at end of file diff --git a/code/retrieval/dense_encoder/.gitkeep b/code/retrieval/dense_encoder/.gitkeep new file mode 100644 index 0000000..e69de29 diff --git a/code/retrieval/elastic.py b/code/retrieval/elastic.py new file mode 100644 index 0000000..ceb22c2 --- /dev/null +++ b/code/retrieval/elastic.py @@ -0,0 +1,361 @@ +import json +import os, sys +import pprint +import warnings +import re +import argparse +from typing import List, Optional, Tuple, Union +import pandas as pd +from datasets import Dataset +from tqdm.auto import tqdm +from retrieval.base import Retrieval +from elasticsearch import Elasticsearch, ElasticsearchWarning +from utils.utils_qa import timer + +# ElasticsearchWarning 무시 +warnings.filterwarnings("ignore", category=ElasticsearchWarning) + + +class ElasticRetrieval(Retrieval): + def __init__( + self, index_name, setting_path, data_path, context_path, *args, **kwargs + ): + self.ec = ElasticClient( + index_name=index_name, + setting_path=setting_path, + dataset_path=os.path.join(data_path, context_path), + ) + + def retrieve_for_reranker( + self, query_or_dataset: Dataset, topk: Optional[int] = 1 + ) -> pd.DataFrame: + # Retrieve한 Passage를 pd.DataFrame으로 반환합니다. + total = [] + with timer("query exhaustive search"): + doc_scores, doc_indices, docs = self.get_relevant_doc_bulk( + query_or_dataset["question"], k=topk + ) + + for idx, example in enumerate( + tqdm(query_or_dataset, desc="Sparse retrieval with Elasticsearch: ") + ): + retrieved_context = [] + for i in range(min(topk, len(docs[idx]))): + retrieved_context.append(docs[idx][i]["_source"]["document_text"]) + + tmp = { + "question": example["question"], + "id": example["id"], + "context": retrieved_context, + } + if "context" in example.keys() and "answers" in example.keys(): + # validation 데이터를 사용하면 ground_truth context와 answer도 반환합니다. + tmp["original_context"] = example["context"] + tmp["answers"] = example["answers"] + total.append(tmp) + return pd.DataFrame(total) + + def retrieve( + self, query_or_dataset: Union[str, Dataset], topk: Optional[int] = 1 + ) -> Union[Tuple[List, List], pd.DataFrame]: + if isinstance(query_or_dataset, str): + doc_scores, doc_indices, docs = self.get_relevant_doc( + query_or_dataset, k=topk + ) + print("[Search query]\n", query_or_dataset, "\n") + + for i in range(min(topk, len(docs))): + print(f"Top-{i+1} passage with score {doc_scores[i]:4f}") + print(doc_indices[i]) + print(docs[i]["_source"]["document_text"]) + + return (doc_scores, [doc_indices[i] for i in range(topk)]) + + elif isinstance(query_or_dataset, Dataset): + # Retrieve한 Passage를 pd.DataFrame으로 반환합니다. + total = [] + with timer("query exhaustive search"): + doc_scores, doc_indices, docs = self.get_relevant_doc_bulk( + query_or_dataset["question"], k=topk + ) + + for idx, example in enumerate( + tqdm(query_or_dataset, desc="Sparse retrieval with Elasticsearch: ") + ): + # retrieved_context 구하는 부분 수정 + retrieved_context = [] + for i in range(min(topk, len(docs[idx]))): + retrieved_context.append(docs[idx][i]["_source"]["document_text"]) + + tmp = { + # Query와 해당 id를 반환합니다. + "question": example["question"], + "id": example["id"], + # Retrieve한 Passage의 id, context를 반환합니다. + # "context_id": doc_indices[idx], # type 에러 발생하여 주석처리 + "context": " ".join(retrieved_context), # 수정 + } + if "context" in example.keys() and "answers" in example.keys(): + # validation 데이터를 사용하면 ground_truth context와 answer도 반환합니다. + tmp["original_context"] = example["context"] + tmp["answers"] = example["answers"] + total.append(tmp) + + cqas = pd.DataFrame(total) + return cqas + + def get_relevant_doc(self, query: str, k: Optional[int] = 1) -> Tuple[List, List]: + doc_score = [] + doc_index = [] + res = self.ec.es_search(query, k) + docs = res["hits"]["hits"] + + for hit in docs: + doc_score.append(hit["_score"]) + doc_index.append(hit["_id"]) + print("Doc ID: %3r Score: %5.2f" % (hit["_id"], hit["_score"])) + + return doc_score, doc_index, docs + + def get_relevant_doc_bulk( + self, queries: List, k: Optional[int] = 1 + ) -> Tuple[List, List]: + total_docs = [] + doc_scores = [] + doc_indices = [] + + for query in queries: + doc_score = [] + doc_index = [] + res = self.ec.es_search(query, k) + docs = res["hits"]["hits"] + + for hit in docs: + doc_score.append(hit["_score"]) + doc_indices.append(hit["_id"]) + + doc_scores.append(doc_score) + doc_indices.append(doc_index) + total_docs.append(docs) + + return doc_scores, doc_indices, total_docs + + +class ElasticClient: + def __init__(self, index_name, setting_path, dataset_path, manual_mode=False): + self.index_name = index_name + self.setting_path = setting_path + self.dataset_path = dataset_path + self.client = self.connect() + # 직접 메서드 호출해서 사용하는 경우 + if manual_mode: + return + if self.create_index(): + self.insert_data() + + # elasticsearch 서버 세팅 + def connect(self): + es = Elasticsearch( + "http://localhost:9200", timeout=30, max_retries=10, retry_on_timeout=True + ) + print("Ping Elasticsearch :", es.ping()) + return es + + # 인덱스 생성 + def create_index(self): + # 이미 인덱스가 존재하는 경우 + if self.client.indices.exists(index=self.index_name): + print("Index already exists.") + return False + + with open(self.setting_path, "r") as f: + setting = json.load(f) + self.client.indices.create(index=self.index_name, body=setting) + print("Index creation has been completed") + return True + + # 인덱스 삭제 + def delete_index(self): + # 인덱스가 존재하지 않는 경우 + if not self.client.indices.exists(index=self.index_name): + print("Index doesn't exist.") + return + + self.client.indices.delete(index=self.index_name) + print("Index deletion has been completed") + + # 인덱스에 데이터 삽입 + def insert_data(self): + # 삽입할 데이터 전처리 + def _preprocess(text): + text = re.sub(r"\n", " ", text) + text = re.sub(r"\\n", " ", text) + text = re.sub(r"#", " ", text) + text = re.sub( + r"[^A-Za-z0-9가-힣.?!,()~‘’“”" ":%&《》〈〉''㈜·\-'+\s一-龥サマーン]", + "", + text, + ) # サマーン 는 predictions.json에 있었음 + text = re.sub( + r"\s+", " ", text + ).strip() # 두 개 이상의 연속된 공백을 하나로 치환 + # text = re.sub(r"[^A-Za-z0-9가-힣.?!,()~‘’“”"":%&《》〈〉''㈜·\-\'+\s一-龥]", "", text) + + return text + + # 위키피디아 데이터 로드 + def _load_data(dataset_path: str = "../data/wikipedia_documents.json"): + with open(dataset_path, "r") as f: + wiki = json.load(f) + + wiki_texts = list(dict.fromkeys([v["text"] for v in wiki.values()])) + wiki_texts = [_preprocess(text) for text in wiki_texts] + wiki_corpus = [ + {"document_text": wiki_texts[i]} for i in range(len(wiki_texts)) + ] + return wiki_corpus + + wiki_corpus = _load_data(self.dataset_path) + for i, text in enumerate(tqdm(wiki_corpus)): + try: + self.client.index(index=self.index_name, id=i, body=text) + except: + print(f"Unable to load document {i}.") + + n_records = self.client.count(index=self.index_name)["count"] + print(f"Succesfully loaded {n_records} into {self.index_name}") + print("@@@@@@@ 데이터 삽입 완료 @@@@@@@") + + # 삽입한 데이터 확인 + def check_data(self, doc_id=0): + print("샘플 데이터:") + doc = self.client.get(index=self.index_name, id=doc_id) + pprint.pprint(doc) + + def es_search(self, question, topk): + query = {"query": {"bool": {"must": [{"match": {"document_text": question}}]}}} + res = self.client.search(index=self.index_name, body=query, size=topk) + return res + + +if __name__ == "__main__": + import sys + import argparse + from datasets import concatenate_datasets, load_from_disk + + sys.path.append(os.path.dirname(os.path.abspath(os.path.dirname(__file__)))) + + # Arguments + parser = argparse.ArgumentParser(description="") + parser.add_argument( + "--dataset_name", default="../data/train_dataset", type=str, help="" + ) + parser.add_argument( + "--model_name_or_path", + default="klue/roberta-large", + type=str, + help="", + ) + parser.add_argument("--data_path", default="../data", type=str, help="") + parser.add_argument( + "--context_path", default="wikipedia_documents.json", type=str, help="" + ) + parser.add_argument("--use_faiss", default=False, type=bool, help="") + parser.add_argument( + "--index_name", + default="origin-wiki", + type=str, + help="테스트할 index name을 설정해주세요", + ) + parser.add_argument( + "--setting_path", + default="../config/elastic_setting.json", + type=str, + help="테스트할 setting_path를 설정해주세요", + ) + parser.add_argument( + "--topk", + default=20, + type=int, + help="retrieve할 topk 문서의 개수를 설정해주세요", + ) + parser.add_argument( + "--is_for_reranker", + default=False, + type=bool, + help="reranker 용도일 때 설정해주세요", + ) + + args = parser.parse_args() + print(args) + + # dataset 로드 + org_dataset = load_from_disk(args.dataset_name) + + # Elasticsearch index 초기화 + ec = ElasticClient( + index_name=args.index_name, + setting_path=args.setting_path, + dataset_path="../data/wikipedia_documents.json", + manual_mode=True, + ) + + # Elasticsearch 사용 + retriever = ElasticRetrieval( + index_name=args.index_name, + setting_path=args.setting_path, + data_path="../data/", + context_path="wikipedia_documents.json", + ) + + if args.is_for_reranker: + df_for_reranker = retriever.retrieve_for_reranker( + org_dataset["validation"], args.topk + ) + df_for_reranker.to_csv(f"es_{args.topk}.csv", index=False) + print("rerank를 위한 es retriver 결과 저장됨") + else: + # Test sparse + full_ds = concatenate_datasets( + [ + org_dataset["train"].flatten_indices(), + org_dataset["validation"].flatten_indices(), + ] + ) # train dev 를 합친 4192 개 질문에 대해 모두 테스트 + print("*" * 40, "query dataset", "*" * 40) + print(full_ds) + print(len(org_dataset["train"]), len(org_dataset["validation"])) + + query = "대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은?" + if args.use_faiss: + + # test single query + with timer("single query by faiss"): + scores, indices = retriever.retrieve_faiss(query) + + # test bulk + with timer("bulk query by exhaustive search"): + df = retriever.retrieve_faiss(full_ds) + df["correct"] = df["original_context"] == df["context"] + + print( + "correct retrieval result by faiss", df["correct"].sum() / len(df) + ) + + else: + with timer("bulk query by exhaustive search"): + df = retriever.retrieve(full_ds, topk=args.topk) + df["correct"] = [ + original_context in context + for original_context, context in zip( + df["original_context"], df["context"] + ) + ] + print( + "correct retrieval result by exhaustive search", + f"{df['correct'].sum()}/{len(df)}", + df["correct"].sum() / len(df), + ) + + with timer("single query by exhaustive search"): + scores, indices = retriever.retrieve(query) diff --git a/code/retrieval/reranker.py b/code/retrieval/reranker.py new file mode 100644 index 0000000..a052ed0 --- /dev/null +++ b/code/retrieval/reranker.py @@ -0,0 +1,124 @@ +if __name__ == "__main__": + import sys, os + + sys.path.append(os.path.dirname(os.path.abspath(os.path.dirname(__file__)))) + import sys + import csv + + csv.field_size_limit(sys.maxsize) + + +import ast +import numpy as np +import pandas as pd +import torch +from tqdm import tqdm +from datasets import Dataset +from typing import Optional, Union +from transformers import AutoModelForSequenceClassification, AutoTokenizer, set_seed +from retrieval.elastic import ElasticRetrieval + + +class ElasticRerankRetrieval: + def __init__( + self, index_name, setting_path, data_path, context_path, *args, **kwargs + ): + self.elastic_retrieval = ElasticRetrieval( + index_name, setting_path, data_path, context_path + ) + + def retrieve(self, query_or_dataset: Union[str, Dataset], topk: Optional[int] = 5): + if isinstance(query_or_dataset, str): + raise NotImplementedError + + elif isinstance(query_or_dataset, Dataset): + df = self.elastic_retrieval.retrieve_for_reranker(query_or_dataset, 40) + return rerank(df=df, topk=topk) + + +def rerank( + df: pd.DataFrame, + topk: int = 1, + model_path: str = "Dongjin-kr/ko-reranker", + batch_size: int = 128, + max_length: int = 512, +): + def exp_normalize(x): + y = np.exp(x - x.max(axis=1, keepdims=True)) + return y / y.sum(axis=1, keepdims=True) + + device = torch.device("cuda" if torch.cuda.is_available() else "cpu") + tokenizer = AutoTokenizer.from_pretrained(model_path) + model = AutoModelForSequenceClassification.from_pretrained(model_path) + model.to(device) + model.eval() + + all_questions = df["question"].tolist() + all_contexts = df["context"].tolist() + all_pairs = [ + [question, context] + for question, contexts in zip(all_questions, all_contexts) + for context in contexts + ] + + all_scores = [] + + for i in tqdm(range(0, len(all_pairs), batch_size), desc="Processing batches"): + batch_pairs = all_pairs[i : i + batch_size] + + with torch.no_grad(): + inputs = tokenizer( + batch_pairs, + padding=True, + truncation=True, + return_tensors="pt", + max_length=max_length, + ) + inputs = {k: v.to(device) for k, v in inputs.items()} + batch_scores = ( + model(**inputs, return_dict=True).logits.view(-1).float().cpu().numpy() + ) + all_scores.extend(batch_scores) + + all_scores = np.array(all_scores) + + start = 0 + new_contexts = [] + for contexts in all_contexts: + end = start + len(contexts) + scores = all_scores[start:end] + scores = exp_normalize(scores.reshape(1, -1)).flatten() + top_indices = np.argsort(scores)[-topk:][::-1] + top_contexts = [contexts[i] for i in top_indices] + new_contexts.append(" ".join(top_contexts)) + start = end + + df["context"] = new_contexts + + return df + + +if __name__ == "__main__": + import argparse + + # Arguments + parser = argparse.ArgumentParser(description="") + parser.add_argument( + "--df_path", default="../data/retriever/es_topk_20.csv", type=str, help="" + ) + parser.add_argument("--topk", default=5, type=int, help="") + parser.add_argument("--batch_size", default=128, type=int, help="") + parser.add_argument("--prefix", default="es_20", type=str, help="") + + args = parser.parse_args() + print(args) + + set_seed(42) + df_for_rerank = pd.read_csv(args.df_path) + df_for_rerank["context"] = df_for_rerank["context"].apply( + lambda x: ast.literal_eval(x) + ) + + df_rerank = rerank(df=df_for_rerank, topk=args.topk, batch_size=args.batch_size) + df_rerank.to_csv(f"{args.prefix}_rerank_{args.topk}.csv", index=False) + print("rerank 결과 저장됨") diff --git a/code/retrieval/tdidf.py b/code/retrieval/tdidf.py new file mode 100644 index 0000000..a1662dc --- /dev/null +++ b/code/retrieval/tdidf.py @@ -0,0 +1,433 @@ +import os +import pickle +from typing import List, NoReturn, Optional, Tuple, Union +import faiss +import numpy as np +import pandas as pd +from datasets import Dataset +from sklearn.feature_extraction.text import TfidfVectorizer +from tqdm.auto import tqdm +from retrieval.base import Retrieval +from utils.utils_qa import timer + + +class TfidfRetrieval(Retrieval): + def __init__( + self, + tokenize_fn, + data_path: Optional[str] = "../data/", + context_path: Optional[str] = "wikipedia_documents.json", + use_title: Optional[bool] = False, + *args, + **kwargs, + ) -> NoReturn: + """ + Arguments: + tokenize_fn: + 기본 text를 tokenize해주는 함수입니다. + 아래와 같은 함수들을 사용할 수 있습니다. + - lambda x: x.split(' ') + - Huggingface Tokenizer + - konlpy.tag의 Mecab + + data_path: + 데이터가 보관되어 있는 경로입니다. + + context_path: + Passage들이 묶여있는 파일명입니다. + + data_path/context_path가 존재해야합니다. + + Summary: + Passage 파일을 불러오고 TfidfVectorizer를 선언하는 기능을 합니다. + """ + super().__init__(tokenize_fn, data_path, context_path, use_title) + + # Transform by vectorizer + self.tfidfv = TfidfVectorizer( + tokenizer=self.tokenize_fn, + ngram_range=(1, 2), + max_features=50000, + ) + + self.p_embedding = None # get_sparse_embedding()로 생성합니다 + self.indexer = None # build_faiss()로 생성합니다. + self.get_sparse_embedding() + + def get_sparse_embedding(self) -> NoReturn: + """ + Summary: + Passage Embedding을 만들고 + TFIDF와 Embedding을 pickle로 저장합니다. + 만약 미리 저장된 파일이 있으면 저장된 pickle을 불러옵니다. + """ + + # Pickle을 저장합니다. + pickle_name = f"sparse_embedding.bin" + tfidfv_name = f"tfidv.bin" + emd_path = os.path.join(self.data_path, pickle_name) + tfidfv_path = os.path.join(self.data_path, tfidfv_name) + + if os.path.isfile(emd_path) and os.path.isfile(tfidfv_path): + with open(emd_path, "rb") as file: + self.p_embedding = pickle.load(file) + with open(tfidfv_path, "rb") as file: + self.tfidfv = pickle.load(file) + print("Embedding pickle load.") + else: + print("Build passage embedding") + self.p_embedding = self.tfidfv.fit_transform(self.contexts) + print(self.p_embedding.shape) + with open(emd_path, "wb") as file: + pickle.dump(self.p_embedding, file) + with open(tfidfv_path, "wb") as file: + pickle.dump(self.tfidfv, file) + print("Embedding pickle saved.") + + def build_faiss(self, num_clusters=64) -> NoReturn: + """ + Summary: + 속성으로 저장되어 있는 Passage Embedding을 + Faiss indexer에 fitting 시켜놓습니다. + 이렇게 저장된 indexer는 `get_relevant_doc`에서 유사도를 계산하는데 사용됩니다. + + Note: + Faiss는 Build하는데 시간이 오래 걸리기 때문에, + 매번 새롭게 build하는 것은 비효율적입니다. + 그렇기 때문에 build된 index 파일을 저정하고 다음에 사용할 때 불러옵니다. + 다만 이 index 파일은 용량이 1.4Gb+ 이기 때문에 여러 num_clusters로 시험해보고 + 제일 적절한 것을 제외하고 모두 삭제하는 것을 권장합니다. + """ + + indexer_name = f"faiss_clusters{num_clusters}.index" + indexer_path = os.path.join(self.data_path, indexer_name) + if os.path.isfile(indexer_path): + print("Load Saved Faiss Indexer.") + self.indexer = faiss.read_index(indexer_path) + + else: + p_emb = self.p_embedding.astype(np.float32).toarray() + emb_dim = p_emb.shape[-1] + + num_clusters = num_clusters + quantizer = faiss.IndexFlatL2(emb_dim) + + self.indexer = faiss.IndexIVFScalarQuantizer( + quantizer, quantizer.d, num_clusters, faiss.METRIC_L2 + ) + self.indexer.train(p_emb) + self.indexer.add(p_emb) + faiss.write_index(self.indexer, indexer_path) + print("Faiss Indexer Saved.") + + def retrieve( + self, query_or_dataset: Union[str, Dataset], topk: Optional[int] = 1 + ) -> Union[Tuple[List, List], pd.DataFrame]: + """ + Arguments: + query_or_dataset (Union[str, Dataset]): + str이나 Dataset으로 이루어진 Query를 받습니다. + str 형태인 하나의 query만 받으면 `get_relevant_doc`을 통해 유사도를 구합니다. + Dataset 형태는 query를 포함한 HF.Dataset을 받습니다. + 이 경우 `get_relevant_doc_bulk`를 통해 유사도를 구합니다. + topk (Optional[int], optional): Defaults to 1. + 상위 몇 개의 passage를 사용할 것인지 지정합니다. + + Returns: + 1개의 Query를 받는 경우 -> Tuple(List, List) + 다수의 Query를 받는 경우 -> pd.DataFrame: [description] + + Note: + 다수의 Query를 받는 경우, + Ground Truth가 있는 Query (train/valid) -> 기존 Ground Truth Passage를 같이 반환합니다. + Ground Truth가 없는 Query (test) -> Retrieval한 Passage만 반환합니다. + """ + + assert ( + self.p_embedding is not None + ), "get_sparse_embedding() 메소드를 먼저 수행해줘야합니다." + + if isinstance(query_or_dataset, str): + doc_scores, doc_indices = self.get_relevant_doc(query_or_dataset, k=topk) + print("[Search query]\n", query_or_dataset, "\n") + + for i in range(topk): + print(f"Top-{i+1} passage with score {doc_scores[i]:4f}") + print(self.contexts[doc_indices[i]]) + + return (doc_scores, [self.contexts[doc_indices[i]] for i in range(topk)]) + + elif isinstance(query_or_dataset, Dataset): + + # Retrieve한 Passage를 pd.DataFrame으로 반환합니다. + total = [] + with timer("query exhaustive search"): + doc_scores, doc_indices = self.get_relevant_doc_bulk( + query_or_dataset["question"], k=topk + ) + for idx, example in enumerate( + tqdm(query_or_dataset, desc="Sparse retrieval: ") + ): + tmp = { + # Query와 해당 id를 반환합니다. + "question": example["question"], + "id": example["id"], + # Retrieve한 Passage의 id, context를 반환합니다. + "context": " ".join( + [self.contexts[pid] for pid in doc_indices[idx]] + ), + } + if "context" in example.keys() and "answers" in example.keys(): + # validation 데이터를 사용하면 ground_truth context와 answer도 반환합니다. + tmp["original_context"] = example["context"] + tmp["answers"] = example["answers"] + total.append(tmp) + + cqas = pd.DataFrame(total) + return cqas + + def get_relevant_doc(self, query: str, k: Optional[int] = 1) -> Tuple[List, List]: + """ + Arguments: + query (str): + 하나의 Query를 받습니다. + k (Optional[int]): 1 + 상위 몇 개의 Passage를 반환할지 정합니다. + Note: + vocab 에 없는 이상한 단어로 query 하는 경우 assertion 발생 (예) 뙣뙇? + """ + + with timer("transform"): + query_vec = self.tfidfv.transform([query]) + assert ( + np.sum(query_vec) != 0 + ), "오류가 발생했습니다. 이 오류는 보통 query에 vectorizer의 vocab에 없는 단어만 존재하는 경우 발생합니다." + + with timer("query ex search"): + result = query_vec * self.p_embedding.T + if not isinstance(result, np.ndarray): + result = result.toarray() + + sorted_result = np.argsort(result.squeeze())[::-1] + doc_score = result.squeeze()[sorted_result].tolist()[:k] + doc_indices = sorted_result.tolist()[:k] + return doc_score, doc_indices + + def get_relevant_doc_bulk( + self, queries: List, k: Optional[int] = 1 + ) -> Tuple[List, List]: + """ + Arguments: + queries (List): + 하나의 Query를 받습니다. + k (Optional[int]): 1 + 상위 몇 개의 Passage를 반환할지 정합니다. + Note: + vocab 에 없는 이상한 단어로 query 하는 경우 assertion 발생 (예) 뙣뙇? + """ + + query_vec = self.tfidfv.transform(queries) + assert ( + np.sum(query_vec) != 0 + ), "오류가 발생했습니다. 이 오류는 보통 query에 vectorizer의 vocab에 없는 단어만 존재하는 경우 발생합니다." + + result = query_vec * self.p_embedding.T + if not isinstance(result, np.ndarray): + result = result.toarray() + doc_scores = [] + doc_indices = [] + for i in range(result.shape[0]): + sorted_result = np.argsort(result[i, :])[::-1] + doc_scores.append(result[i, :][sorted_result].tolist()[:k]) + doc_indices.append(sorted_result.tolist()[:k]) + return doc_scores, doc_indices + + def retrieve_faiss( + self, query_or_dataset: Union[str, Dataset], topk: Optional[int] = 1 + ) -> Union[Tuple[List, List], pd.DataFrame]: + """ + Arguments: + query_or_dataset (Union[str, Dataset]): + str이나 Dataset으로 이루어진 Query를 받습니다. + str 형태인 하나의 query만 받으면 `get_relevant_doc`을 통해 유사도를 구합니다. + Dataset 형태는 query를 포함한 HF.Dataset을 받습니다. + 이 경우 `get_relevant_doc_bulk`를 통해 유사도를 구합니다. + topk (Optional[int], optional): Defaults to 1. + 상위 몇 개의 passage를 사용할 것인지 지정합니다. + + Returns: + 1개의 Query를 받는 경우 -> Tuple(List, List) + 다수의 Query를 받는 경우 -> pd.DataFrame: [description] + + Note: + 다수의 Query를 받는 경우, + Ground Truth가 있는 Query (train/valid) -> 기존 Ground Truth Passage를 같이 반환합니다. + Ground Truth가 없는 Query (test) -> Retrieval한 Passage만 반환합니다. + retrieve와 같은 기능을 하지만 faiss.indexer를 사용합니다. + """ + + assert self.indexer is not None, "build_faiss()를 먼저 수행해주세요." + + if isinstance(query_or_dataset, str): + doc_scores, doc_indices = self.get_relevant_doc_faiss( + query_or_dataset, k=topk + ) + print("[Search query]\n", query_or_dataset, "\n") + + for i in range(topk): + print("Top-%d passage with score %.4f" % (i + 1, doc_scores[i])) + print(self.contexts[doc_indices[i]]) + + return (doc_scores, [self.contexts[doc_indices[i]] for i in range(topk)]) + + elif isinstance(query_or_dataset, Dataset): + + # Retrieve한 Passage를 pd.DataFrame으로 반환합니다. + queries = query_or_dataset["question"] + total = [] + + with timer("query faiss search"): + doc_scores, doc_indices = self.get_relevant_doc_bulk_faiss( + queries, k=topk + ) + for idx, example in enumerate( + tqdm(query_or_dataset, desc="Sparse retrieval: ") + ): + tmp = { + # Query와 해당 id를 반환합니다. + "question": example["question"], + "id": example["id"], + # Retrieve한 Passage의 id, context를 반환합니다. + "context": " ".join( + [self.contexts[pid] for pid in doc_indices[idx]] + ), + } + if "context" in example.keys() and "answers" in example.keys(): + # validation 데이터를 사용하면 ground_truth context와 answer도 반환합니다. + tmp["original_context"] = example["context"] + tmp["answers"] = example["answers"] + total.append(tmp) + + return pd.DataFrame(total) + + def get_relevant_doc_faiss( + self, query: str, k: Optional[int] = 1 + ) -> Tuple[List, List]: + """ + Arguments: + query (str): + 하나의 Query를 받습니다. + k (Optional[int]): 1 + 상위 몇 개의 Passage를 반환할지 정합니다. + Note: + vocab 에 없는 이상한 단어로 query 하는 경우 assertion 발생 (예) 뙣뙇? + """ + + query_vec = self.tfidfv.transform([query]) + assert ( + np.sum(query_vec) != 0 + ), "오류가 발생했습니다. 이 오류는 보통 query에 vectorizer의 vocab에 없는 단어만 존재하는 경우 발생합니다." + + q_emb = query_vec.toarray().astype(np.float32) + with timer("query faiss search"): + D, I = self.indexer.search(q_emb, k) + + return D.tolist()[0], I.tolist()[0] + + def get_relevant_doc_bulk_faiss( + self, queries: List, k: Optional[int] = 1 + ) -> Tuple[List, List]: + """ + Arguments: + queries (List): + 하나의 Query를 받습니다. + k (Optional[int]): 1 + 상위 몇 개의 Passage를 반환할지 정합니다. + Note: + vocab 에 없는 이상한 단어로 query 하는 경우 assertion 발생 (예) 뙣뙇? + """ + + query_vecs = self.tfidfv.transform(queries) + assert ( + np.sum(query_vecs) != 0 + ), "오류가 발생했습니다. 이 오류는 보통 query에 vectorizer의 vocab에 없는 단어만 존재하는 경우 발생합니다." + + q_embs = query_vecs.toarray().astype(np.float32) + D, I = self.indexer.search(q_embs, k) + + return D.tolist(), I.tolist() + + +if __name__ == "__main__": + import argparse + from datasets import concatenate_datasets, load_from_disk + + # Arguments + parser = argparse.ArgumentParser(description="") + parser.add_argument( + "--dataset_name", metavar="./data/train_dataset", type=str, help="" + ) + parser.add_argument( + "--model_name_or_path", + metavar="bert-base-multilingual-cased", + type=str, + help="", + ) + parser.add_argument("--data_path", metavar="./data", type=str, help="") + parser.add_argument( + "--context_path", metavar="wikipedia_documents", type=str, help="" + ) + parser.add_argument("--use_faiss", metavar=False, type=bool, help="") + + args = parser.parse_args() + + # Test sparse + org_dataset = load_from_disk(args.dataset_name) + full_ds = concatenate_datasets( + [ + org_dataset["train"].flatten_indices(), + org_dataset["validation"].flatten_indices(), + ] + ) # train dev 를 합친 4192 개 질문에 대해 모두 테스트 + print("*" * 40, "query dataset", "*" * 40) + print(full_ds) + + from transformers import AutoTokenizer + + tokenizer = AutoTokenizer.from_pretrained( + args.model_name_or_path, + use_fast=False, + ) + + retriever = TfidfRetrieval( + tokenize_fn=tokenizer.tokenize, + data_path=args.data_path, + context_path=args.context_path, + ) + + query = "대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은?" + + if args.use_faiss: + + # test single query + with timer("single query by faiss"): + scores, indices = retriever.retrieve_faiss(query) + + # test bulk + with timer("bulk query by exhaustive search"): + df = retriever.retrieve_faiss(full_ds) + df["correct"] = df["original_context"] == df["context"] + + print("correct retrieval result by faiss", df["correct"].sum() / len(df)) + + else: + with timer("bulk query by exhaustive search"): + df = retriever.retrieve(full_ds) + df["correct"] = df["original_context"] == df["context"] + print( + "correct retrieval result by exhaustive search", + df["correct"].sum() / len(df), + ) + + with timer("single query by exhaustive search"): + scores, indices = retriever.retrieve(query) diff --git a/code/train.py b/code/train.py new file mode 100644 index 0000000..16162aa --- /dev/null +++ b/code/train.py @@ -0,0 +1,347 @@ +import logging +import os +from typing import Dict, NoReturn, Tuple +import numpy as np +from arguments import ModelArguments, DataTrainingArguments, CustomTrainingArguments +from datasets import DatasetDict, load_from_disk, load_metric +from transformers import ( + AutoConfig, + AutoTokenizer, + DataCollatorWithPadding, + EvalPrediction, +) +from utils.trainer_qa import QuestionAnsweringTrainer +from utils.utils_qa import * + + +logger = logging.getLogger(__name__) + + +def load_mrc_resources( + model_args: ModelArguments, + data_args: DataTrainingArguments, + training_args: CustomTrainingArguments, +): + # 가능한 arguments들은 arguments.py에서 확인하거나 --help flag로 확인 + print(f"model is from {model_args.model_name_or_path}") + print(f"data is from {data_args.dataset_name}") + + # logging 설정 + setup_logging() + + # verbosity 설정 : Transformers logger의 정보로 사용합니다 (on main process only) + logger.info("Training/evaluation parameters %s", training_args) + + # 모델을 초기화하기 전에 난수를 고정합니다. + set_seed(training_args.seed) + + datasets = load_from_disk(data_args.dataset_name) + print(datasets) + + # AutoConfig를 이용하여 pretrained model 과 tokenizer를 불러옵니다. + # argument로 원하는 모델 이름을 설정하면 옵션을 바꿀 수 있습니다. + config = AutoConfig.from_pretrained( + ( + model_args.config_name + if model_args.config_name + else model_args.model_name_or_path + ), + ) + tokenizer = AutoTokenizer.from_pretrained( + ( + model_args.tokenizer_name + if model_args.tokenizer_name + else model_args.model_name_or_path + ), + # 'use_fast' True: rust로 구현된 tokenizer / False: python으로 구현된 tokenizer + use_fast=True, + ) + + model_class = model_class_from_string(model_args.model_class) + model = model_class.from_pretrained( + model_args.model_name_or_path, + from_tf=bool(".ckpt" in model_args.model_name_or_path), + config=config, + ) + + return data_args, training_args, model_args, datasets, tokenizer, model + + +def run_mrc( + data_args: DataTrainingArguments, + training_args: CustomTrainingArguments, + model_args: ModelArguments, + datasets: DatasetDict, + tokenizer, + model, +) -> NoReturn: + # train or eval mrc model + if not (training_args.do_train or training_args.do_eval): + return + + # dataset을 전처리합니다. + # training과 evaluation에서 사용되는 전처리는 아주 조금 다른 형태를 가집니다. + if training_args.do_train: + column_names = datasets["train"].column_names + else: + column_names = datasets["validation"].column_names + + question_column_name = "question" if "question" in column_names else column_names[0] + context_column_name = "context" if "context" in column_names else column_names[1] + answer_column_name = "answers" if "answers" in column_names else column_names[2] + + # Padding에 대한 옵션을 설정합니다. + # (question|context) 혹은 (context|question)로 세팅 가능합니다. + pad_on_right = tokenizer.padding_side == "right" + + # 오류가 있는지 확인합니다. + last_checkpoint, max_seq_length = check_no_error( + data_args, training_args, datasets, tokenizer + ) + + # Train preprocessing + def prepare_train_features(examples): + # truncation과 padding(length가 짧을때만)을 통해 toknization을 진행하며, stride를 이용하여 overflow를 유지합니다. + # 각 example들은 이전의 context와 조금씩 겹치게됩니다. + tokenized_examples = tokenizer( + examples[question_column_name if pad_on_right else context_column_name], + examples[context_column_name if pad_on_right else question_column_name], + truncation="only_second" if pad_on_right else "only_first", + max_length=max_seq_length, + stride=data_args.doc_stride, + return_overflowing_tokens=True, + return_offsets_mapping=True, + return_token_type_ids=model_args.token_type_ids, + padding="max_length" if data_args.pad_to_max_length else False, + ) + + # 길이가 긴 context가 등장할 경우 truncate를 진행해야하므로, 해당 데이터셋을 찾을 수 있도록 mapping 가능한 값이 필요합니다. + sample_mapping = tokenized_examples.pop("overflow_to_sample_mapping") + # token의 캐릭터 단위 position를 찾을 수 있도록 offset mapping을 사용합니다. + # start_positions과 end_positions을 찾는데 도움을 줄 수 있습니다. + offset_mapping = tokenized_examples.pop("offset_mapping") + + # 데이터셋에 "start position", "enc position" label을 부여합니다. + tokenized_examples["start_positions"] = [] + tokenized_examples["end_positions"] = [] + + for i, offsets in enumerate(offset_mapping): + input_ids = tokenized_examples["input_ids"][i] + cls_index = input_ids.index(tokenizer.cls_token_id) # cls index + + # sequence id를 설정합니다 (to know what is the context and what is the question). + sequence_ids = tokenized_examples.sequence_ids(i) + + # 하나의 example이 여러개의 span을 가질 수 있습니다. + sample_index = sample_mapping[i] + answers = examples[answer_column_name][sample_index] + + # answer가 없을 경우 cls_index를 answer로 설정합니다(== example에서 정답이 없는 경우 존재할 수 있음). + if len(answers["answer_start"]) == 0: + tokenized_examples["start_positions"].append(cls_index) + tokenized_examples["end_positions"].append(cls_index) + else: + # text에서 정답의 Start/end character index + start_char = answers["answer_start"][0] + end_char = start_char + len(answers["text"][0]) + + # text에서 current span의 Start token index + token_start_index = 0 + while sequence_ids[token_start_index] != (1 if pad_on_right else 0): + token_start_index += 1 + + # text에서 current span의 End token index + token_end_index = len(input_ids) - 1 + while sequence_ids[token_end_index] != (1 if pad_on_right else 0): + token_end_index -= 1 + + # 정답이 span을 벗어났는지 확인합니다(정답이 없는 경우 CLS index로 label되어있음). + if not ( + offsets[token_start_index][0] <= start_char + and offsets[token_end_index][1] >= end_char + ): + tokenized_examples["start_positions"].append(cls_index) + tokenized_examples["end_positions"].append(cls_index) + else: + # token_start_index 및 token_end_index를 answer의 끝으로 이동합니다. + # Note: answer가 마지막 단어인 경우 last offset을 따라갈 수 있습니다(edge case). + while ( + token_start_index < len(offsets) + and offsets[token_start_index][0] <= start_char + ): + token_start_index += 1 + tokenized_examples["start_positions"].append(token_start_index - 1) + while offsets[token_end_index][1] >= end_char: + token_end_index -= 1 + tokenized_examples["end_positions"].append(token_end_index + 1) + + return tokenized_examples + + if training_args.do_train: + if "train" not in datasets: + raise ValueError("--do_train requires a train dataset") + train_dataset = datasets["train"] + + # dataset에서 train feature를 생성합니다. + train_dataset = train_dataset.map( + prepare_train_features, + batched=True, + num_proc=data_args.preprocessing_num_workers, + remove_columns=column_names, + load_from_cache_file=not data_args.overwrite_cache, + ) + + # Validation preprocessing + def prepare_validation_features(examples): + # truncation과 padding(length가 짧을때만)을 통해 toknization을 진행하며, stride를 이용하여 overflow를 유지합니다. + # 각 example들은 이전의 context와 조금씩 겹치게됩니다. + tokenized_examples = tokenizer( + examples[question_column_name if pad_on_right else context_column_name], + examples[context_column_name if pad_on_right else question_column_name], + truncation="only_second" if pad_on_right else "only_first", + max_length=max_seq_length, + stride=data_args.doc_stride, + return_overflowing_tokens=True, + return_offsets_mapping=True, + return_token_type_ids=model_args.token_type_ids, + padding="max_length" if data_args.pad_to_max_length else False, + ) + + # 길이가 긴 context가 등장할 경우 truncate를 진행해야하므로, 해당 데이터셋을 찾을 수 있도록 mapping 가능한 값이 필요합니다. + sample_mapping = tokenized_examples.pop("overflow_to_sample_mapping") + + # evaluation을 위해, prediction을 context의 substring으로 변환해야합니다. + # corresponding example_id를 유지하고 offset mappings을 저장해야합니다. + tokenized_examples["example_id"] = [] + + for i in range(len(tokenized_examples["input_ids"])): + # sequence id를 설정합니다 (to know what is the context and what is the question). + sequence_ids = tokenized_examples.sequence_ids(i) + context_index = 1 if pad_on_right else 0 + + # 하나의 example이 여러개의 span을 가질 수 있습니다. + sample_index = sample_mapping[i] + tokenized_examples["example_id"].append(examples["id"][sample_index]) + + # context의 일부가 아닌 offset_mapping을 None으로 설정하면 token position이 context의 일부인지 쉽게 확인 할 수 있음 + tokenized_examples["offset_mapping"][i] = [ + (o if sequence_ids[k] == context_index else None) + for k, o in enumerate(tokenized_examples["offset_mapping"][i]) + ] + return tokenized_examples + + if training_args.do_eval: + eval_dataset = datasets["validation"] + + # Validation Feature 생성 + eval_dataset = eval_dataset.map( + prepare_validation_features, + batched=True, + num_proc=data_args.preprocessing_num_workers, + remove_columns=column_names, + load_from_cache_file=not data_args.overwrite_cache, + ) + + # Data collator + # flag가 True이면 이미 max length로 padding된 상태입니다. + # 그렇지 않다면 data collator에서 padding을 진행해야합니다. + data_collator = DataCollatorWithPadding( + tokenizer, pad_to_multiple_of=8 if training_args.fp16 else None + ) + + # Post-processing: + def post_processing_function( + examples, + features, + predictions: Tuple[np.ndarray, np.ndarray], + training_args: CustomTrainingArguments, + ) -> EvalPrediction: + # Post-processing: start logits과 end logits을 original context의 정답과 match시킵니다. + predictions = postprocess_qa_predictions( + examples=examples, + features=features, + predictions=predictions, + max_answer_length=data_args.max_answer_length, + output_dir=training_args.output_dir, + ) + # Metric을 구할 수 있도록 Format을 맞춰줍니다. + formatted_predictions = [ + {"id": k, "prediction_text": v} for k, v in predictions.items() + ] + + if training_args.do_predict: + return formatted_predictions + elif training_args.do_eval: + references = [ + {"id": ex["id"], "answers": ex[answer_column_name]} + for ex in datasets["validation"] + ] + return EvalPrediction( + predictions=formatted_predictions, label_ids=references + ) + + metric = load_metric("squad") + + def compute_metrics(p: EvalPrediction) -> Dict: + return metric.compute(predictions=p.predictions, references=p.label_ids) + + # Trainer 초기화 + trainer = QuestionAnsweringTrainer( + model=model, + args=training_args, + train_dataset=train_dataset if training_args.do_train else None, + eval_dataset=eval_dataset if training_args.do_eval else None, + eval_examples=datasets["validation"] if training_args.do_eval else None, + tokenizer=tokenizer, + data_collator=data_collator, + post_process_function=post_processing_function, + compute_metrics=compute_metrics, + ) + + # Training + if training_args.do_train: + if last_checkpoint is not None: + checkpoint = last_checkpoint + elif os.path.isdir(model_args.model_name_or_path): + checkpoint = model_args.model_name_or_path + else: + checkpoint = None + if not model_args.use_checkpoint: + checkpoint = None + train_result = trainer.train(resume_from_checkpoint=checkpoint) + trainer.save_model() # Saves the tokenizer too for easy upload + + metrics = train_result.metrics + metrics["train_samples"] = len(train_dataset) + + trainer.log_metrics("train", metrics) + trainer.save_metrics("train", metrics) + trainer.save_state() + + output_train_file = os.path.join(training_args.output_dir, "train_results.txt") + + with open(output_train_file, "w") as writer: + logger.info("***** Train results *****") + for key, value in sorted(train_result.metrics.items()): + logger.info(f" {key} = {value}") + writer.write(f"{key} = {value}\n") + + # State 저장 + trainer.state.save_to_json( + os.path.join(training_args.output_dir, "trainer_state.json") + ) + + # Evaluation + if training_args.do_eval: + logger.info("*** Evaluate ***") + metrics = trainer.evaluate() + metrics["eval_samples"] = len(eval_dataset) + + trainer.log_metrics("eval", metrics) + trainer.save_metrics("eval", metrics) + + +if __name__ == "__main__": + from utils.utils_qa import load_arguments + + run_mrc(*load_mrc_resources(*load_arguments())) diff --git a/code/utils/__init__.py b/code/utils/__init__.py new file mode 100644 index 0000000..e69de29 diff --git a/code/utils/trainer_qa.py b/code/utils/trainer_qa.py new file mode 100644 index 0000000..fe60138 --- /dev/null +++ b/code/utils/trainer_qa.py @@ -0,0 +1,112 @@ +# coding=utf-8 +# Copyright 2020 The HuggingFace Team All rights reserved. +# +# Licensed under the Apache License, Version 2.0 (the "License"); +# you may not use this file except in compliance with the License. +# You may obtain a copy of the License at +# +# http://www.apache.org/licenses/LICENSE-2.0 +# +# Unless required by applicable law or agreed to in writing, software +# distributed under the License is distributed on an "AS IS" BASIS, +# WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. +# See the License for the specific language governing permissions and +# limitations under the License. +""" +Question-Answering task와 관련된 'Trainer'의 subclass 코드 입니다. +""" + +from transformers import Trainer, is_datasets_available, is_torch_tpu_available + +if is_datasets_available(): + import datasets + +if is_torch_tpu_available(): + import torch_xla.core.xla_model as xm + import torch_xla.debug.metrics as met + + +# Huggingface의 Trainer를 상속받아 QuestionAnswering을 위한 Trainer를 생성합니다. +class QuestionAnsweringTrainer(Trainer): + def __init__(self, *args, eval_examples=None, post_process_function=None, **kwargs): + super().__init__(*args, **kwargs) + self.eval_examples = eval_examples + self.post_process_function = post_process_function + + def evaluate(self, eval_dataset=None, eval_examples=None, ignore_keys=None): + eval_dataset = self.eval_dataset if eval_dataset is None else eval_dataset + eval_dataloader = self.get_eval_dataloader(eval_dataset) + eval_examples = self.eval_examples if eval_examples is None else eval_examples + + # 일시적으로 metric computation를 불가능하게 한 상태이며, 해당 코드에서는 loop 내에서 metric 계산을 수행합니다. + compute_metrics = self.compute_metrics + self.compute_metrics = None + try: + output = self.prediction_loop( + eval_dataloader, + description="Evaluation", + # metric이 없으면 예측값을 모으는 이유가 없으므로 아래의 코드를 따르게 됩니다. + # self.args.prediction_loss_only + prediction_loss_only=True if compute_metrics is None else None, + ignore_keys=ignore_keys, + ) + finally: + self.compute_metrics = compute_metrics + + if isinstance(eval_dataset, datasets.Dataset): + eval_dataset.set_format( + type=eval_dataset.format["type"], + columns=list(eval_dataset.features.keys()), + ) + + if self.post_process_function is not None and self.compute_metrics is not None: + eval_preds = self.post_process_function( + eval_examples, eval_dataset, output.predictions, self.args + ) + metrics = self.compute_metrics(eval_preds) + + self.log(metrics) + else: + metrics = {} + + if self.args.tpu_metrics_debug or self.args.debug: + # tpu-comment: PyTorch/XLA에 대한 Logging debug metrics (compile, execute times, ops, etc.) + xm.master_print(met.metrics_report()) + + self.control = self.callback_handler.on_evaluate( + self.args, self.state, self.control, metrics + ) + return metrics + + def predict(self, test_dataset, test_examples, ignore_keys=None): + test_dataloader = self.get_test_dataloader(test_dataset) + + # 일시적으로 metric computation를 불가능하게 한 상태이며, 해당 코드에서는 loop 내에서 metric 계산을 수행합니다. + # evaluate 함수와 동일하게 구성되어있습니다 + compute_metrics = self.compute_metrics + self.compute_metrics = None + try: + output = self.prediction_loop( + test_dataloader, + description="Evaluation", + # metric이 없으면 예측값을 모으는 이유가 없으므로 아래의 코드를 따르게 됩니다. + # self.args.prediction_loss_only + prediction_loss_only=True if compute_metrics is None else None, + ignore_keys=ignore_keys, + ) + finally: + self.compute_metrics = compute_metrics + + if self.post_process_function is None or self.compute_metrics is None: + return output + + if isinstance(test_dataset, datasets.Dataset): + test_dataset.set_format( + type=test_dataset.format["type"], + columns=list(test_dataset.features.keys()), + ) + + predictions = self.post_process_function( + test_examples, test_dataset, output.predictions, self.args + ) + return predictions diff --git a/code/utils/utils_qa.py b/code/utils/utils_qa.py new file mode 100644 index 0000000..e0ddfed --- /dev/null +++ b/code/utils/utils_qa.py @@ -0,0 +1,462 @@ +# coding=utf-8 +# Copyright 2020 The HuggingFace Team All rights reserved. +# +# Licensed under the Apache License, Version 2.0 (the 'License'); +# you may not use this file except in compliance with the License. +# You may obtain a copy of the License at +# +# http://www.apache.org/licenses/LICENSE-2.0 +# +# Unless required by applicable law or agreed to in writing, software +# distributed under the License is distributed on an 'AS IS' BASIS, +# WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. +# See the License for the specific language governing permissions and +# limitations under the License. +""" +Pre-processing & Post-processing utilities for question answering. +""" +import collections +import json +import logging +import os +import sys +import random +from typing import Any, Optional, Tuple +import time +from contextlib import contextmanager +import numpy as np +import torch +from arguments import DataTrainingArguments, ModelArguments, CustomTrainingArguments +from datasets import DatasetDict +from tqdm.auto import tqdm +from transformers import ( + PreTrainedTokenizerFast, + TrainingArguments, + HfArgumentParser, + is_torch_available, +) +from transformers.trainer_utils import get_last_checkpoint + +logger = logging.getLogger(__name__) + + +@contextmanager +def timer(name): + t0 = time.time() + yield + print(f"[{name}] done in {time.time() - t0:.3f} s") + + +def setup_logging(): + logging.basicConfig( + format="%(asctime)s - %(levelname)s - %(name)s - %(message)s", + datefmt="%Y/%m/%d %H:%M:%S", + handlers=[logging.StreamHandler(sys.stdout)], + ) + + +def set_seed(seed: int = 42, deterministic: bool = True): + """ + seed 고정하는 함수 (random, numpy, torch) + + Args: + seed (:obj:`int`): The seed to set. + deterministic (`bool`, defaults to `True`): + Whether to use deterministic algorithms where available. Can slow down training. + """ + random.seed(seed) + np.random.seed(seed) + if is_torch_available(): + torch.manual_seed(seed) + torch.cuda.manual_seed(seed) + torch.cuda.manual_seed_all(seed) # if use multi-GPU + if deterministic: + # torch.use_deterministic_algorithms(True) + torch.backends.cudnn.deterministic = True + torch.backends.cudnn.benchmark = False + + +def postprocess_qa_predictions( + examples, + features, + predictions: Tuple[np.ndarray, np.ndarray], + version_2_with_negative: bool = False, + n_best_size: int = 20, + max_answer_length: int = 30, + null_score_diff_threshold: float = 0.0, + output_dir: Optional[str] = None, + prefix: Optional[str] = None, + is_world_process_zero: bool = True, +): + """ + Post-processes : qa model의 prediction 값을 후처리하는 함수 + 모델은 start logit과 end logit을 반환하기 때문에, 이를 기반으로 original text로 변경하는 후처리가 필요함 + + Args: + examples: 전처리 되지 않은 데이터셋 (see the main script for more information). + features: 전처리가 진행된 데이터셋 (see the main script for more information). + predictions (:obj:`Tuple[np.ndarray, np.ndarray]`): + 모델의 예측값 :start logits과 the end logits을 나타내는 two arrays 첫번째 차원은 :obj:`features`의 element와 갯수가 맞아야함. + version_2_with_negative (:obj:`bool`, `optional`, defaults to :obj:`False`): + 정답이 없는 데이터셋이 포함되어있는지 여부를 나타냄 + n_best_size (:obj:`int`, `optional`, defaults to 20): + 답변을 찾을 때 생성할 n-best prediction 총 개수 + max_answer_length (:obj:`int`, `optional`, defaults to 30): + 생성할 수 있는 답변의 최대 길이 + null_score_diff_threshold (:obj:`float`, `optional`, defaults to 0): + null 답변을 선택하는 데 사용되는 threshold + : if the best answer has a score that is less than the score of + the null answer minus this threshold, the null answer is selected for this example (note that the score of + the null answer for an example giving several features is the minimum of the scores for the null answer on + each feature: all features must be aligned on the fact they `want` to predict a null answer). + Only useful when :obj:`version_2_with_negative` is :obj:`True`. + output_dir (:obj:`str`, `optional`): + 아래의 값이 저장되는 경로 + dictionary : predictions, n_best predictions (with their scores and logits) if:obj:`version_2_with_negative=True`, + dictionary : the scores differences between best and null answers + prefix (:obj:`str`, `optional`): + dictionary에 `prefix`가 포함되어 저장됨 + is_world_process_zero (:obj:`bool`, `optional`, defaults to :obj:`True`): + 이 프로세스가 main process인지 여부(logging/save를 수행해야 하는지 여부를 결정하는 데 사용됨) + """ + assert ( + len(predictions) == 2 + ), "`predictions` should be a tuple with two elements (start_logits, end_logits)." + all_start_logits, all_end_logits = predictions + + assert len(predictions[0]) == len( + features + ), f"Got {len(predictions[0])} predictions and {len(features)} features." + + # example과 mapping되는 feature 생성 + example_id_to_index = {k: i for i, k in enumerate(examples["id"])} + features_per_example = collections.defaultdict(list) + for i, feature in enumerate(features): + features_per_example[example_id_to_index[feature["example_id"]]].append(i) + + # prediction, nbest에 해당하는 OrderedDict 생성합니다. + all_predictions = collections.OrderedDict() + all_nbest_json = collections.OrderedDict() + if version_2_with_negative: + scores_diff_json = collections.OrderedDict() + + # Logging. + logger.setLevel(logging.INFO if is_world_process_zero else logging.WARN) + logger.info( + f"Post-processing {len(examples)} example predictions split into {len(features)} features." + ) + + # 전체 example들에 대한 main Loop + for example_index, example in enumerate(tqdm(examples)): + # 해당하는 현재 example index + feature_indices = features_per_example[example_index] + + min_null_prediction = None + prelim_predictions = [] + + # 현재 example에 대한 모든 feature 생성합니다. + for feature_index in feature_indices: + # 각 featureure에 대한 모든 prediction을 가져옵니다. + start_logits = all_start_logits[feature_index] + end_logits = all_end_logits[feature_index] + # logit과 original context의 logit을 mapping합니다. + offset_mapping = features[feature_index]["offset_mapping"] + # Optional : `token_is_max_context`, 제공되는 경우 현재 기능에서 사용할 수 있는 max context가 없는 answer를 제거합니다 + token_is_max_context = features[feature_index].get( + "token_is_max_context", None + ) + + # minimum null prediction을 업데이트 합니다. + feature_null_score = start_logits[0] + end_logits[0] + if ( + min_null_prediction is None + or min_null_prediction["score"] > feature_null_score + ): + min_null_prediction = { + "offsets": (0, 0), + "score": feature_null_score, + "start_logit": start_logits[0], + "end_logit": end_logits[0], + } + + # `n_best_size`보다 큰 start and end logits을 살펴봅니다. + start_indexes = np.argsort(start_logits)[ + -1 : -n_best_size - 1 : -1 + ].tolist() + + end_indexes = np.argsort(end_logits)[-1 : -n_best_size - 1 : -1].tolist() + + for start_index in start_indexes: + for end_index in end_indexes: + # out-of-scope answers는 고려하지 않습니다. + if ( + start_index >= len(offset_mapping) + or end_index >= len(offset_mapping) + or offset_mapping[start_index] is None + or offset_mapping[end_index] is None + ): + continue + # 길이가 < 0 또는 > max_answer_length인 answer도 고려하지 않습니다. + if ( + end_index < start_index + or end_index - start_index + 1 > max_answer_length + ): + continue + # 최대 context가 없는 answer도 고려하지 않습니다. + if ( + token_is_max_context is not None + and not token_is_max_context.get(str(start_index), False) + ): + continue + prelim_predictions.append( + { + "offsets": ( + offset_mapping[start_index][0], + offset_mapping[end_index][1], + ), + "score": start_logits[start_index] + end_logits[end_index], + "start_logit": start_logits[start_index], + "end_logit": end_logits[end_index], + } + ) + + if version_2_with_negative: + # minimum null prediction을 추가합니다. + prelim_predictions.append(min_null_prediction) + null_score = min_null_prediction["score"] + + # 가장 좋은 `n_best_size` predictions만 유지합니다. + predictions = sorted( + prelim_predictions, key=lambda x: x["score"], reverse=True + )[:n_best_size] + + # 낮은 점수로 인해 제거된 경우 minimum null prediction을 다시 추가합니다. + if version_2_with_negative and not any( + p["offsets"] == (0, 0) for p in predictions + ): + predictions.append(min_null_prediction) + + # offset을 사용하여 original context에서 answer text를 수집합니다. + context = example["context"] + for pred in predictions: + offsets = pred.pop("offsets") + pred["text"] = context[offsets[0] : offsets[1]] + + # rare edge case에는 null이 아닌 예측이 하나도 없으며 failure를 피하기 위해 fake prediction을 만듭니다. + if len(predictions) == 0 or ( + len(predictions) == 1 and predictions[0]["text"] == "" + ): + + predictions.insert( + 0, {"text": "empty", "start_logit": 0.0, "end_logit": 0.0, "score": 0.0} + ) + + # 모든 점수의 소프트맥스를 계산합니다(we do it with numpy to stay independent from torch/tf in this file, using the LogSumExp trick). + scores = np.array([pred.pop("score") for pred in predictions]) + exp_scores = np.exp(scores - np.max(scores)) + probs = exp_scores / exp_scores.sum() + + # 예측값에 확률을 포함합니다. + for prob, pred in zip(probs, predictions): + pred["probability"] = prob + + # best prediction을 선택합니다. + if not version_2_with_negative: + all_predictions[example["id"]] = predictions[0]["text"] + else: + # else case : 먼저 비어 있지 않은 최상의 예측을 찾아야 합니다 + i = 0 + while predictions[i]["text"] == "": + i += 1 + best_non_null_pred = predictions[i] + + # threshold를 사용해서 null prediction을 비교합니다. + score_diff = ( + null_score + - best_non_null_pred["start_logit"] + - best_non_null_pred["end_logit"] + ) + scores_diff_json[example["id"]] = float( + score_diff + ) # JSON-serializable 가능 + if score_diff > null_score_diff_threshold: + all_predictions[example["id"]] = "" + else: + all_predictions[example["id"]] = best_non_null_pred["text"] + + # np.float를 다시 float로 casting -> `predictions`은 JSON-serializable 가능 + all_nbest_json[example["id"]] = [ + { + k: ( + float(v) + if isinstance(v, (np.float16, np.float32, np.float64)) + else v + ) + for k, v in pred.items() + } + for pred in predictions + ] + + # output_dir이 있으면 모든 dicts를 저장합니다. + if output_dir is not None: + assert os.path.isdir(output_dir), f"{output_dir} is not a directory." + + prediction_file = os.path.join( + output_dir, + "predictions.json" if prefix is None else f"predictions_{prefix}".json, + ) + nbest_file = os.path.join( + output_dir, + ( + "nbest_predictions.json" + if prefix is None + else f"nbest_predictions_{prefix}".json + ), + ) + if version_2_with_negative: + null_odds_file = os.path.join( + output_dir, + "null_odds.json" if prefix is None else f"null_odds_{prefix}".json, + ) + + logger.info(f"Saving predictions to {prediction_file}.") + with open(prediction_file, "w", encoding="utf-8") as writer: + writer.write( + json.dumps(all_predictions, indent=4, ensure_ascii=False) + "\n" + ) + logger.info(f"Saving nbest_preds to {nbest_file}.") + with open(nbest_file, "w", encoding="utf-8") as writer: + writer.write( + json.dumps(all_nbest_json, indent=4, ensure_ascii=False) + "\n" + ) + if version_2_with_negative: + logger.info(f"Saving null_odds to {null_odds_file}.") + with open(null_odds_file, "w", encoding="utf-8") as writer: + writer.write( + json.dumps(scores_diff_json, indent=4, ensure_ascii=False) + "\n" + ) + + return all_predictions + + +def check_no_error( + data_args: DataTrainingArguments, + training_args: TrainingArguments, + datasets: DatasetDict, + tokenizer, +) -> Tuple[Any, int]: + """ + 훈련 및 평가 전 체크리스트를 확인하여 오류를 방지하는 함수. + + Args: + data_args (DataTrainingArguments): + 데이터 관련 훈련 설정을 포함한 인자. + `max_seq_length` 같은 시퀀스 길이 설정 등이 포함될 수 있음. + + training_args (TrainingArguments): + 훈련 관련 설정을 포함한 인자. + `output_dir` (출력 디렉토리), `do_train` (훈련 여부), + `overwrite_output_dir` (출력 디렉토리 덮어쓰기 여부) 등의 정보를 포함함. + + datasets (DatasetDict): + 훈련, 검증, 테스트 데이터셋을 포함하는 객체. + `datasets["validation"]`과 같이 접근 가능하며, 검증 데이터가 포함되어 있는지 확인하는 데 사용됨. + + tokenizer: + 텍스트 데이터를 토큰으로 변환하는 객체. + 이 함수는 `PreTrainedTokenizerFast`의 인스턴스여야 함. + + Returns: + Tuple[Any, int]: + 마지막 체크포인트 `last_checkpoint`와 최대 시퀀스 길이 `max_seq_length`를 반환 + """ + + # overwrite 옵션이 없고 checkpoint가 존재하면 이를 반환 + last_checkpoint = None + if ( + os.path.isdir(training_args.output_dir) + and training_args.do_train + and not training_args.overwrite_output_dir + ): + last_checkpoint = get_last_checkpoint(training_args.output_dir) + if last_checkpoint is None and len(os.listdir(training_args.output_dir)) > 0: + raise ValueError( + f"Output directory ({training_args.output_dir}) already exists and is not empty. " + "Use --overwrite_output_dir to overcome." + ) + elif last_checkpoint is not None: + logger.info( + f"Checkpoint detected, resuming training at {last_checkpoint}. To avoid this behavior, change " + "the `--output_dir` or add `--overwrite_output_dir` to train from scratch." + ) + + # Tokenizer check: 해당 script는 Fast tokenizer를 필요로합니다. + if not isinstance(tokenizer, PreTrainedTokenizerFast): + raise ValueError( + "This example script only works for models that have a fast tokenizer. Checkout the big table of models " + "at https://huggingface.co/transformers/index.html#bigtable to find the model types that meet this " + "requirement" + ) + + # data_args.max_seq_length가 모델이 지원하는 최대 시퀀스 길이보다 큰지 확인 + if data_args.max_seq_length > tokenizer.model_max_length: + logger.warning( + f"The max_seq_length passed ({data_args.max_seq_length}) is larger than the maximum length for the" + f"model ({tokenizer.model_max_length}). Using max_seq_length={tokenizer.model_max_length}." + ) + max_seq_length = min(data_args.max_seq_length, tokenizer.model_max_length) + + if "validation" not in datasets: + raise ValueError("--do_eval requires a validation dataset") + return last_checkpoint, max_seq_length + + +def load_arguments() -> ( + Tuple[ModelArguments, DataTrainingArguments, CustomTrainingArguments] +): + parser = HfArgumentParser( + (ModelArguments, DataTrainingArguments, CustomTrainingArguments) + ) + if len(sys.argv) == 2 and sys.argv[1].endswith(".json"): + # If we pass only one argument to the script and it's the path to a json file, + # let's parse it to get our arguments. + model_args, data_args, training_args = parser.parse_json_file( + json_file=os.path.abspath(sys.argv[1]) + ) + else: + model_args, data_args, training_args = parser.parse_args_into_dataclasses() + return model_args, data_args, training_args + + +def model_class_from_string(class_name: str): + if class_name == "CNN_RobertaForQuestionAnswering": + from custom_model import CNN_RobertaForQuestionAnswering + + return CNN_RobertaForQuestionAnswering + else: + from transformers import AutoModelForQuestionAnswering + + return AutoModelForQuestionAnswering + + +def retrieve_class_from_string(class_name: str): + if class_name == "BM25Retrieval": + from retrieval.bm25 import BM25Retrieval + + return BM25Retrieval + elif class_name == "ElasticRetrieval": + from retrieval.elastic import ElasticRetrieval + + return ElasticRetrieval + elif class_name == "ElasticRerankRetrieval": + from retrieval.reranker import ElasticRerankRetrieval + + return ElasticRerankRetrieval + elif class_name == "DenseRetrieval": + from retrieval.dense import DenseRetrieval + + return DenseRetrieval + else: + from retrieval.tdidf import TfidfRetrieval + + return TfidfRetrieval diff --git a/data/.gitkeep b/data/.gitkeep new file mode 100644 index 0000000..e69de29 diff --git a/ensemble/gpt_voting.ipynb b/ensemble/gpt_voting.ipynb new file mode 100644 index 0000000..4567304 --- /dev/null +++ b/ensemble/gpt_voting.ipynb @@ -0,0 +1,1702 @@ +{ + "cells": [ + { + "cell_type": "code", + "id": "initial_id", + "metadata": { + "collapsed": true, + "ExecuteTime": { + "end_time": "2024-10-24T04:35:33.909775Z", + "start_time": "2024-10-24T04:35:33.898593Z" + } + }, + "source": [ + "import json\n", + "from glob import glob\n", + "from collections import Counter, OrderedDict" + ], + "outputs": [], + "execution_count": 1 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-24T04:35:33.925964Z", + "start_time": "2024-10-24T04:35:33.916346Z" + } + }, + "cell_type": "code", + "source": [ + "# 예측 파일들을 로드합니다.\n", + "prediction_files = glob(\"./results_hard/*.json\")" + ], + "id": "f2846639fdc48ddc", + "outputs": [], + "execution_count": 2 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-24T04:35:36.941183Z", + "start_time": "2024-10-24T04:35:36.932345Z" + } + }, + "cell_type": "code", + "source": "print(prediction_files)", + "id": "f3477b67d0e8f9d3", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "['./results_hard\\\\72.0800_rl_korquad_e1_npassage_e3_es40to5.json', './results_hard\\\\effie.json', './results_hard\\\\elise.json']\n" + ] + } + ], + "execution_count": 3 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-24T05:38:08.745929Z", + "start_time": "2024-10-24T05:38:08.486460Z" + } + }, + "cell_type": "code", + "source": [ + "from datasets import load_from_disk\n", + "import os\n", + "import pandas as pd\n", + "current_dir = os.getcwd()\n", + "parent_dir = os.path.dirname(current_dir)\n", + "\n", + "# Arrow 파일 경로 설정\n", + "test_file_path = os.path.join(parent_dir, 'data', 'test_dataset')\n", + "test_dataset=load_from_disk(test_file_path)\n", + "test_dataset=test_dataset['validation']\n", + "test_df=pd.DataFrame(test_dataset)" + ], + "id": "82714e7a5df33c79", + "outputs": [], + "execution_count": 37 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-24T04:41:50.707832Z", + "start_time": "2024-10-24T04:41:50.691780Z" + } + }, + "cell_type": "code", + "source": [ + "# 파일을 읽어와서 predictions 리스트에 저장\n", + "def load_predictions(file_paths):\n", + " predictions = []\n", + " for file_path in file_paths:\n", + " with open(file_path, \"r\", encoding='utf-8') as f:\n", + " predictions.append(json.load(f))\n", + " return predictions\n", + "\n", + "# 각 문항에 대해 3개가 겹치는지, 2개가 겹치는지, 모두 다른지 확인\n", + "def check_overlap(predictions):\n", + " all_matching = {} # 3개가 모두 일치하는 정답\n", + " two_matching = {} # 2개가 일치하는 정답\n", + " none_matching = {} # 하나도 겹치지 않는 정답\n", + "\n", + " # 모든 질문에 대해 답변 확인\n", + " for question_id in predictions[0].keys():\n", + " answers = [pred[question_id] for pred in predictions if question_id in pred]\n", + " answer_counts = Counter(answers)\n", + "\n", + " # 3개의 답변이 모두 동일한 경우\n", + " if len(answer_counts) == 1:\n", + " all_matching[question_id] = answers[0]\n", + " # 2개의 답변이 동일하고, 하나는 다른 경우\n", + " elif len(answer_counts) == 2:\n", + " most_common_answer = answer_counts.most_common(1)[0][0]\n", + " least_common_answer = answer_counts.most_common()[-1][0]\n", + " two_matching[question_id] = [most_common_answer, least_common_answer]\n", + " # 모든 답변이 다른 경우\n", + " else:\n", + " none_matching[question_id] = answers\n", + " \n", + " return all_matching, two_matching, none_matching\n", + "\n", + "# MRC 결과 파일 경로 설정\n", + "file_paths = glob(\"./results_hard/*.json\")\n", + "\n", + "# 파일 로드\n", + "predictions = load_predictions(file_paths)\n", + "\n", + "# 각 문항에 대해 3개, 2개, 모두 다른 답변을 확인\n", + "all_matching, two_matching, none_matching = check_overlap(predictions)\n", + "\n", + "# 질문 매칭을 위해 ID를 key로 한 딕셔너리 생성\n", + "id_to_question = dict(zip(test_df['id'], test_df['question']))\n", + "\n", + "# 결과 출력 (질문과 함께 출력)\n", + "print(\"### 3개 모두 겹치는 답변 ###\")\n", + "for question_id, answer in all_matching.items():\n", + " question = id_to_question.get(question_id, \"질문 없음\")\n", + " print(f\"{question_id}: {answer} ({question})\")\n", + "\n", + "print(\"\\n### 2개 겹치는 답변 ###\")\n", + "for question_id, answers in two_matching.items():\n", + " question = id_to_question.get(question_id, \"질문 없음\")\n", + " print(f\"{question_id}: {answers[0]}, {answers[1]} -----({question})\")\n", + "\n", + "print(\"\\n### 모두 다른 답변 ###\")\n", + "for question_id, answers in none_matching.items():\n", + " question = id_to_question.get(question_id, \"질문 없음\")\n", + " print(f\"{question_id}: {answers} -----({question})\")\n" + ], + "id": "4096f3f7b92fd95", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "### 3개 모두 겹치는 답변 ###\n", + "mrc-1-001113: 냉전 (용병회사의 경기가 좋아진 것은 무엇이 끝난 이후부터인가?)\n", + "mrc-0-002191: 대통령인 빌헬름 미클라스 (돌푸스에게 불특정 기간동안 하원이 잠시 쉬는 것을 건의 받았던 인물은?)\n", + "mrc-0-003951: 뉴질랜드 (마오리언어와 영어, 뉴질랜드 수화를 공식 언어로 사용하는 나라는?)\n", + "mrc-1-001272: 프랑스 (디엔비엔푸 전투에서 보응우옌잡이 상대한 국가는?)\n", + "mrc-1-000993: 유두 (단공류가 일반 포유류와 다르다는 것을 알 수 있는 신체 부위는?)\n", + "mrc-0-001283: 순조 11년(1811) (흉년이 발생하고 곳곳에 난이 일어났던 시기는?)\n", + "mrc-0-004543: 고전도성 철 (급전궤도는 보통 무엇으로 만들어져 있는가?)\n", + "mrc-0-002895: 칼라치 전방 약250km 지점 (제6군이 18일 동안이나 대기해야 했던 장소는?)\n", + "mrc-0-000535: 롭 포드 (누가 시장으로 선출되면서 트랜짓 시티 계획안이 불발되었나?)\n", + "mrc-1-001724: 노스햄프턴 교회 (1차 대각성 운동이 일어나는데 큰 영향을 끼친 설교는 어디서 진행되었는가?)\n", + "mrc-0-001606: 석조 궁륭 (슈파이어 대성당 2차 축조시에 가장 우선순위로 고려했던 천장 건축 방식은?)\n", + "mrc-0-000266: 국민 (통대를 뽑을 수 있었던 주체는 누구인가?)\n", + "mrc-0-000032: 국방부 보고서 (미군이 충원되지 않으면 서울이 전쟁 시작 후 2주만에 함락될 것이라 밝힌 문서는?)\n", + "mrc-0-005215: 입석대(立石臺) (임경업 장군이 도를 닦은 곳으로 알려진 곳은?)\n", + "mrc-0-005407: 숙의 정씨 (화재에서 인종을 구한 공으로 귀인으로 직위가 오른 사람은?)\n", + "mrc-0-003683: 국가인권위원회 (초등학생 일기검사의 인권침해 여부를 판단하는 주체는?)\n", + "mrc-0-002835: 망자 (불보살이 천도할 대상은?)\n", + "mrc-1-001829: 화흡 (조조에게 신고한 사람도 조사해야한다고 한 것은 누구인가?)\n", + "mrc-1-001662: 보신 전쟁 (나카무라 번이 메이지 정부에 굴복하게 된 결투의 이름은 무엇인가요?)\n", + "mrc-0-004007: 신시내티대학교 (밀러허긴스가 법학을 전공한 곳은?)\n", + "mrc-1-000418: 일등바위 (유달산에서 다도해 절경을 볼 수 있는 바위는 무엇인가?)\n", + "mrc-0-004646: 건늠선 (이타미 역이 종착역이었을 때 존재했지만 지진 이후 없어진 것은?)\n", + "mrc-0-004830: 13개 (2001년까지 발견된 해왕성의 총 위성 갯수는?)\n", + "mrc-0-002762: 경복사(景福寺) (보덕이 전주 도달산에 세운 절은?)\n", + "mrc-0-000395: 후쿠도메 시게루 중장 (제2함대의 편에서서 다른 문제를 제기한 인물은?)\n", + "mrc-0-001668: 어머니 (틸의 삼촌댁 방문을 걱정한 인물은?)\n", + "mrc-0-004487: 피터 발스 박사 (코코넛으로 인해 매년 사람이 죽는다는 설화를 인용한 인물은?)\n", + "mrc-0-004413: 호어벨리샤 (체임벌린에 의해 무역부의 회장 자리를 받게 된 사람은?)\n", + "mrc-1-000221: 목제 (철툇자루를 제작하는데 주로 활용된 재료는?)\n", + "mrc-0-002177: 시트로엥 (앙드레-귀스타브 시트로엥이 만든 기업 이름은?)\n", + "mrc-0-003223: 폴 베나세라프 (논문으로 플라톤주의의 허점을 언급한 사람은?)\n", + "mrc-0-004318: 1943년 7월 2일 (여운형이 경성헌병대에서 풀려난 날짜는?)\n", + "mrc-0-002764: 카에데 소이치로 (엔도에게 차키를 돌려주려던 사람은？)\n", + "mrc-0-001725: 스털링 실리펀트 (워렌이 스스로 영화를 제작할 수 있음을 입증하여 승부에서 이긴 상대는 누구인가?)\n", + "mrc-0-004445: 2019년 8월 1일 (지브롤터 내셔널리그의 설립에 영향을 준 개편안이 발표된 시기는?)\n", + "mrc-0-000001: '강연옥' (안영애를 본보기로 만든 <당의 참된 딸>이라는 가극에서 극 중 여자 주연의 이름은?)\n", + "mrc-0-005411: 사비나 (횡령 범죄자 조니를 체포한 요원은 누구인가?)\n", + "mrc-0-003385: 1584년(선조 17년) (동인이 본격적인 세력을 잡은 때는?)\n", + "mrc-1-001555: 소토쿠 고등학교 (미나미 칸토 대회에서 구마가야 고등학교의 1차전 상대 학교는?)\n", + "mrc-0-000988: 노포탑(露砲塔) (19세기 후반의 장갑함에 사용된 화포 형식은?)\n", + "mrc-1-001619: 오야마 이와오 (제2군에 참여한 일본의 유명인사 중 군인 신분으로 참여한 사람은 누구인가?)\n", + "mrc-0-004880: 남미 자브로 (연방군의 캘리포니아 기지보다 더 큰 규모의 기지는 어디에 있는가?)\n", + "mrc-0-003177: 연금 (베토벤이 받았던 후원 요금을 칭하는 단어는 무엇인가요?)\n", + "mrc-1-001523: 니 기븐 (기븐 가의 첫째 아들은 누구인가?)\n", + "mrc-1-001353: 애굽 (여호와가 기드온의 조상을 어디에서 구해냈는가?)\n", + "mrc-0-005278: 근세 (핀란드의 원주민들이 부족사회에서 벗어난 것은 언제인가?)\n", + "mrc-0-000339: 시칠리아 (안드레우치오 디 피에트로를 몰래 지켜보던 인물은 어떤 지역 출신인가요?)\n", + "mrc-0-001183: 러더퍼드 B. 헤이스 (1876년 일반 투표에서 틸던에 패배한 인물은?)\n", + "mrc-1-001155: 광고 (경영을 위해 기관지에 싣기도 하는 것은?)\n", + "mrc-0-000991: 윌리엄 3세 (윌리엄 키드에게 공로장을 준 사람은?)\n", + "mrc-0-005328: 신라 (창원평야 구릉의 평평한 지형에서 발견된 흔적을 통해 성이 언제 지어졌다는 것을 알 수 있는가?)\n", + "mrc-0-002070: 압력 (수증기가 물이 되는 과정에서 가해지는 것은?)\n", + "mrc-0-002453: 다이요 (나가시마에게 감독직을 맡아줄 것을 가장 열렬히 부탁했던 팀은?)\n", + "mrc-0-003274: 필라델피아 (에이미는 서터에게 졸업 이후 어디에서 지내자고 권유하나요?)\n", + "mrc-0-004430: 길거리 불한당 (어머니를 죽음에 이르게 한 것은 아들이 무엇처럼 행동했기 때문인가?)\n", + "mrc-0-003455: 스포츠 신문 (후지무라 감독 퇴진 요구서에 대한 내용을 보도한 언론은?)\n", + "mrc-0-000540: 빌바인 (즈와쓰의 한계 오라력 값보다 필요 오라력 값이 낮은 기체는?)\n", + "mrc-0-000607: 비정상적으로 큰 송곳니 (평행 진화의 결과로 마블고양이가 가지고 있는 것은?)\n", + "mrc-0-003540: 해상 교통, 보급 확보에 충당해야 할 함정과 인력의 부족 (연합 함대가 국지 경비 부대와 해상 호위 부대의 인재 육성을 경시해 일어난 결과는?)\n", + "mrc-1-001466: 1938년 (정주영이 쌀가게 배달원으로 일한 가게를 인수한 해는?)\n", + "mrc-0-004954: 제5중대장 김상흥 대위 (적이 항복 의사를 밝히며 다가오고 있음을 대대장에게 보고한 사람은?)\n", + "mrc-0-004159: 해 (지지)단계 (캐릭터의 다친 장면이 유일하게 나오지 않는 단계는?)\n", + "mrc-0-002445: 콘라트 2세 (잘리어 왕조의 초대황제 이름은?)\n", + "mrc-0-004336: 예루살렘 성전 (야고보가 강압적으로 배교에 관해 설교당했던 장소는?)\n", + "mrc-0-001346: 호해 (진시황이 죽은 이후 황제의 자리에 즉위한 인물은 누구인가?)\n", + "mrc-0-001891: 학업에 집중하기 위해 (2010년 국가대표팀 훈련에 참가한 이다혜가 독일로 돌아가게 된 이유는?)\n", + "mrc-0-000033: 하난야 (웃시야의 정예 전투 병력을 통솔하는 사람은?)\n", + "mrc-0-000201: 블라인드 테스트 (포도주 테이스팅에서는 공평한 평가를 위해 무엇을 진행하기도 하나요?)\n", + "mrc-0-002224: 군대 내 성소수자 권리 정책 (클린턴이 대통령 선거 초반에 내걸었던 정책은?)\n", + "mrc-0-000140: 오코 카무 (베르글룬트가 직장을 그만둔 후 그 자리를 이어받은 사람은?)\n", + "mrc-0-001124: 노화욱 (베트남전 진실위원회 이후에 세워진 단체의 대표는 누구인가요?)\n", + "mrc-0-003870: 도시구 (첫 도입 당시 1013개가 있던 것은?)\n", + "mrc-0-005260: 안드레아스 (전쟁에서 군인들의 삶을 보여주는 주요 등장인물은 누구인가요?)\n", + "mrc-1-000376: 시나위 대금 (산조 대금보다 약 2도 정도 음정이 높은 대금은?)\n", + "mrc-1-000715: 네스토리우스 (예수의 테오토코스에 대해 부정적으로 인식했던 인물은?)\n", + "mrc-0-002747: 믈라카 술탄국 (파라메스와르가 해적의 도움으로 세운 나라는?)\n", + "mrc-1-001341: “가상 연좌시위” (온라인 사이트에 접속하지 못하게 하는 웹상에서의 시위는?)\n", + "mrc-0-003597: 기원전 11년 (로마가 판노니아를 장악한 시기는?)\n", + "mrc-0-003509: 미국 긴축정책 (1980년부터 1985년 사이, 미국달러가 세계 중요 4대 통화에 대해 50% 정도 평가절상된 이유는?)\n", + "mrc-0-001335: 노예를 해방 (헌터가 조지아에서 지시한 사항은 무엇인가?)\n", + "mrc-0-004402: 1995년 (윤락행위등방지법이 전문 개정되었던 해는?)\n", + "mrc-1-000225: 1802년 (베토벤의 귀 상태가 악화된 연도는?)\n", + "mrc-0-003315: 보안 (기존의 공중 네트워크로 중요 문서와 데이터를 전송하는데에 문제가 되었던 것은?)\n", + "mrc-0-004971: 천도교 대종사장(大宗司長) (1919년 정광조의 보직은?)\n", + "mrc-0-004538: 밀 (잉글랜드에서 보리와 함께 가장 많이 경작하는 작물은 무엇인가요?)\n", + "mrc-1-000573: 큰곰자리 운동성군 (미자르는 무엇의 일부인가?)\n", + "mrc-0-005403: 1720년 (스트라디바리가 고령의 조짐을 보이기 시작한 해는?)\n", + "mrc-0-002046: 모겐소 (공격적 현실주의와 대비되는 고전적 현실주의를 설파한 인물은?)\n", + "mrc-0-001943: 디지털 영상 (컴퓨터 시각에서 분할의 대상은?)\n", + "mrc-1-001141: 《후한서》 (삼한총왕설의 근거를 제공한 서적은?)\n", + "mrc-0-002709: 남자의 시체 (리자베타가 꿈 속에서 들었던 장소에 실제로 찾아가 발견한 것은?)\n", + "mrc-0-000313: 케빈 G. 린치 (현직 추밀원사무처장 웨인울터즈의 선임은?)\n", + "mrc-0-003110: 난씨 (진평공이 통치할 때 망해서 사라진 가문은?)\n", + "mrc-0-003155: 스카만드로스 강 (트로이 군사들은 아킬레우스에 의해 어디에서 사망했나요?)\n", + "mrc-1-001242: 볼바라 (세이드를 행하는 여성을 지칭하는 명칭은?)\n", + "mrc-0-004432: 연합국 (세니와 대국 사무관들은 어느 편과 힘을 합치기로 했는가?)\n", + "mrc-0-000755: 이태웅 (공식적인 첫 새천년베이비의 이름은?)\n", + "mrc-1-001802: 호메이니 (레바논 전투에서 헤즈볼라는 누구에 대한 지지를 표명했나요?)\n", + "mrc-0-000016: 스윙 (1930년대 흑인음악으로 백인들의 열렬한 사랑을 받았던 재즈의 한 분야는?)\n", + "mrc-1-000695: 고려 말 (여성의 몸치장에 쓰인 장신구의 위치가 저고리 밑으로 올라오게 된 때는 언제인가?)\n", + "mrc-0-001034: '죄를 범한 자' (공소권이 사라질 경우 무엇에서 벗어나게 되는가?)\n", + "mrc-1-001735: 마리아 팔코네티 (드레이어 감독이 잔 다르크에 비유한 사람은?)\n", + "mrc-1-001179: 쿠페 (\"아오테아로아\"의 기원에 관한 이야기마다 등장하는 인물은?)\n", + "mrc-1-000521: 종 맨 위 (용통의 위치는?)\n", + "mrc-1-000623: 1866년 (<바다의 일꾼들>이 나온 연도는?)\n", + "mrc-0-003953: 평균비용 (일반비용과 특수비용을 더한 값을 총생산물로 나눴을 때 나오는 값은 무엇인가?)\n", + "mrc-0-002008: HA1 도메인의 18번 코돈 (지금에도 여전히 진화압을 받고 있는 헤마글루티닌 유전자의 한 종류는?)\n", + "mrc-0-002374: 무로마치 막부 (해적중의 활동을 승인한 것은?)\n", + "mrc-1-000086: 이승만 (윤치호가 사촌동생을 통해 만나려고 했던 인물은?)\n", + "mrc-0-004490: 약물 (인쇄사전에서 쉽게 읽히게 하기 위해 사용하는 것은?)\n", + "mrc-1-000780: 강 노인 (미자가 일을 때려친 것은 누구 때문인가?)\n", + "mrc-0-000037: 미켈란젤로 (피렌체파의 대미를 수놓은 사람은?)\n", + "mrc-0-003187: 기암절벽 (고석포, 장군석, 할망바우라는 이름을 가진 바위는 무엇으로 유명한가?)\n", + "mrc-1-000021: 국가안보상 필요할 경우 (법안에서 제재를 취소할 수 있는 권리가 발생하는 경우는 무엇인가?)\n", + "mrc-1-001634: 성경의 요한 계시록 (영화 <제7의 봉인>의 제목의 모티브가 된 것은?)\n", + "mrc-0-004266: 영국 (제1 공수 사단은 어느 나라 부대인가?)\n", + "mrc-0-003249: 노르웨이 (이스다렌의 여인이 중심적으로 스파이 활동을 한 국가는?)\n", + "mrc-0-001728: 약 12,000명 (헨리 5세가 1415년에 프랑스 북쪽을 공격하기 위해 동원한 군사는 몇 명인가?)\n", + "mrc-0-000970: 고천제 (천자등극설'을 대중들에게 확산시킨 행사는?)\n", + "mrc-0-004182: 파시즘 (갖지 못한 국가'가 위기를 극복하기 위해 광폭한 전쟁과 함께 시행한 것은?)\n", + "mrc-0-004626: 웅기탁 (장정기가 들어있는 우산이끼의 가지는?)\n", + "mrc-0-000065: 1,668만 5천 달러 (멕시코 연방 정부는 메탈클래드에게 얼마를 보상하라고 하였나?)\n", + "mrc-0-003016: 신춘문예공모전 (대학원에서 수업을 듣던 시절 소설을 출품하던 곳은 어디었는가?)\n", + "mrc-0-002169: 다케다 한시(武田範之) (이회광이 이용구의 추천으로 원종 고문 자리에 세운 사람은?)\n", + "mrc-0-002771: 보이저 탐사선 (갈릴레오 호 직전에 관측을 진행한 발사체의 이름은?)\n", + "mrc-0-003359: 모자 (사관학교에서 졸업을 할 때 던지는 물건은?)\n", + "mrc-1-000666: 여름철 (노르웨이 노르카프에서는 어느 계절에 백야를 항상 볼 수 있나요?)\n", + "mrc-0-003123: 세르비아군 (1991년에 오브차라를 강제수용소로 변경하여 사용하려 했던 세력은?)\n", + "mrc-0-003614: 복벽 내 (호르몬의 주요 생성장소가 위치한 곳은?)\n", + "mrc-1-000791: 금융위원회 (금산법 제 24조에 의거하여 대통령령이 시행되는 경우 어느 기관의 승인을 받아야 하는가?)\n", + "mrc-1-001485: 에베소 (셰익스피어의 <<실수 연발>>에서 두 쌍의 쌍둥이 형제들이 재회하는 장소는?)\n", + "mrc-0-003425: 3차원 (실제 상황을 이해하려면 몇 차원 상자 속 입자 문제를 풀어야 하나?)\n", + "mrc-0-002676: 아루에 (메구밍에게 자신이 사용하던 안대를 준 사람은?)\n", + "mrc-0-001432: 1887년 (아나톨은 언제부터 작성되었나요?)\n", + "mrc-1-001332: 레이프 세거스탐 (사라스테의 후임은 누구인가?)\n", + "mrc-0-001281: 사법부 (일제강점기 당시 형조와 같은 역할을 한 기관은?)\n", + "mrc-0-003224: 91 cm 구경의 굴절망원경 (버넘이 허빅-아로천체를 찾아냈을 때, 사용한 물건은?)\n", + "mrc-0-000496: 5월 7일 (윤창중이 인턴 직원을 성추행한 것으로 알려진 날짜는?)\n", + "mrc-0-001384: 미술과 (린후이인이 원래 진학하고 싶어했던 과는?)\n", + "mrc-0-003067: 영국 (강요에 의한 개혁이 아니라 긴 기간 동안 의회의 권한을 키운 국가는?)\n", + "mrc-0-004545: 후군 (한중을 공격 시, 군량과 운송이 속한 조조의 부대는?)\n", + "mrc-0-004460: 고문 (주인규는 무엇 때문에 스스로 생을 마감하게 되는가?)\n", + "mrc-0-002975: 엘디아 (프리츠는 어느 나라의 왕인가?)\n", + "mrc-0-004389: 트루먼의 아빠 (트루먼이 탐험을 하지 못하게 크리스토프가 제거한 인물은?)\n", + "mrc-0-005180: Lea et al (1987) (반-베블런 효과가 처음 소개된 곳은?)\n", + "mrc-0-000431: 자기장 (단순 조화 진동자의 진동 주기는 무엇의 세기에 비례하나요?)\n", + "mrc-0-002967: 이라크 (텔 아파르나 키프리를 탈환하기 위해 계획 중인 집단이 소속된 나라는 어디인가?)\n", + "mrc-0-001838: 1916년 (상하이의 북역과 남역 모두를 자유롭게 타기 시작했던 해는?)\n", + "mrc-0-000021: 1862년 (브레킨리지가 루이지애나주 배턴루지를 얻는 데 실패한 해는?)\n", + "mrc-0-004709: 블랙 홀 (매우 센 중력에 의해 빛이 탈출하지 못하는 천체는?)\n", + "mrc-0-003085: 80~90% (국부 제거술로 인한 환관지망생들의 사망률은?)\n", + "mrc-1-000856: 목재와 장작을 실어나르고자 (억스브릿지선이 생긴 이유는?)\n", + "mrc-0-003629: 유성생식 (암컷류가 수중에 생식을 하거나 알주머니를 다른 물체에 붙이는 생식 방법은?)\n", + "mrc-0-005210: 마르크 오버르마르스 (판 호이동크에게 어시스트를 해준 선수는?)\n", + "mrc-0-002685: 1876년 (레오폴 2세가 국제아프리카협회로 부른 민간 지주 회사를 결성한 해는?)\n", + "mrc-0-002389: 유교문화 (대가족제도에서 차별의식을 더욱 강화시켰던 문화는?)\n", + "mrc-0-001366: 신성 로마 제국 (모하치 전투 후 오스만 제국과 헝가리 왕국을 둘로 나눈 나라는?)\n", + "mrc-0-005387: 자동차 폐기장 (임규남이 병원에 입원하는 바람에 해고 당한 직장은?)\n", + "mrc-0-003100: 히브리 백성 (모세가 십계명을 받고 시나이 산에서 내려와 누구를 보고 슬퍼하고 분노했다고 <탈출기>는 전하는가?)\n", + "mrc-0-000898: 이회창 (귀족적인 정치가의 이미지를 탈피하기 위해 노력하였으나 실패한 인물은?)\n", + "mrc-1-000256: 쿠니스 (본인의 일에 진중하게 임했고 많은 것을 연습했지만, 자신의 옷차림에 불만을 제기했던 인물은?)\n", + "mrc-0-004932: 3년 (몇 년간의 전쟁을 통해 '귀방'이라 불리는 이민족이 정벌되었는가?)\n", + "mrc-1-000008: 히틀러의 외투 (슈타우펜베르크는 들 것에 실려나온 사람이 무엇을 덮고 있는 것을 보고 히틀러의 죽음을 단정했나?)\n", + "mrc-0-005465: 쿠파 (버섯왕국의 피치 공주를 납치한 악당 거북의 이름은?)\n", + "mrc-0-003365: '비공식 굿즈' (팬들이 스스로 만드는 상품을 뭐라 하는가?)\n", + "mrc-0-002788: 합작 5원칙 (박헌영이 정부의 역할을 미군정에서 인민위원회로 즉시 넘겨달라고 요구했던 성명은 무엇인가?)\n", + "mrc-1-000582: 소반 (한국에서 음식을 올려놓을때 쓰이는 세간의 이름은 무엇인가요?)\n", + "mrc-0-000345: 주선회 (전효숙이 재판관직 사임으로 민간인이 되었을 때 헌법소장직을 대행 한 사람은?)\n", + "mrc-0-002584: 정규 공간 (우리손은 위상 공간을 거리화하려면 그 공간이 제2 가산 공간임과 더불어 어떤 공간이어야 한다고 증명했나?)\n", + "mrc-0-004928: 하미드 카르자이 (할릴자드 대사와 정치적 이야기를 나눈 아프간 대통령은?)\n", + "mrc-0-004803: 예시 아티드랑 텔렘당 (베니 간츠가 리쿠드당과 같은 노선을 밟겠다는 입장을 표명한 이후, 청백당을 나갔던 인물은?)\n", + "mrc-0-002424: 자인단오-한장군 놀이 (경신자오단오제가 지금의 이름이 되기 직전의 명칭은 무엇이었는가?)\n", + "mrc-0-000205: 제작자 Chris Avellone (게임 발표회에서 제작기간이 부족했다고 한 사람은?)\n", + "mrc-0-002518: 빙하기 세대 (히키코모리가 유독 많아졌던 세대는?)\n", + "mrc-1-001027: 광주지방검찰청 순천지청 (2012년에 공금횡령의 죄목으로 김모씨의 긴급 체포를 진행한 집단은?)\n", + "mrc-0-000122: 종신형 (밀란 루키치는 그의 위법행위로 인해 어떤 형을 받았나?)\n", + "mrc-0-000712: 포토맥군 (북버지니아군이 챈슬러즈빌 전투에서 상대한 것은?)\n", + "mrc-0-003227: 대구 (<굳세어라 금순아>의 작곡가가 실제 피난생활을 했던곳은?)\n", + "mrc-0-002215: 따끄옥루앗 (크리스티앙 드카스를 포로로 잡은 인물은 누구인가?)\n", + "mrc-0-002601: 네덜란드의 1, 2도시 (폐예노르트와 아약스가 \"더 클라시커르\"에서 맞대결을 할 때 경기가 치뤄지는 곳은?)\n", + "mrc-0-004910: 유럽의 서부 전선 (총 14만 명의 인도인들이 영국 전쟁의 지원을 위해 보내졌던 곳은?)\n", + "mrc-0-002166: 하루 (강희제가 310 마리의 토끼를 사냥하려면 얼마나 걸리는가?)\n", + "mrc-0-003503: 긴급 구호 건설 법령 (공공 사업 법안이 통과되지 못하자 와그너가 내세운 법령은 무엇인가?)\n", + "mrc-0-001845: 조봉암 (모스크바로 가기 위한 여권이 필요한 사람은?)\n", + "mrc-0-000316: 후장식 대포 (금속을 다루는 능력의 진보가 이루어지며 등장한 대포는 무엇인가?)\n", + "mrc-0-003027: 리비우스 (로마의 성벽을 확장한 인물을 기록한 사람은?)\n", + "mrc-0-005283: 감각기에 (반사는 어디에서 온 데이터로 인해 발생하는가?)\n", + "mrc-0-002338: 루피 (도플라밍고가 해군에 체포되기 전에 서로 싸웠으며 그가 현상금 3억 베리를 건 인물은 누구인가?)\n", + "mrc-0-002983: 초등학교 교원 (군자면에서 당 선전으로 활동한 사람들의 직업은?)\n", + "mrc-0-004017: 정원 초과 (합동조사반에 의하면 사고의 원인에는 과적 외에 어떤 것이 있는가?)\n", + "mrc-0-001220: 4점 (양산이씨 종가가 보유한 왕지 중 양산이씨의 시조와 관련한 왕지는 몇 점이 있는가?)\n", + "mrc-0-002746: 아칸바로 (공룡을 닮은 토우는 어디에서 발견되었나요?)\n", + "mrc-0-002285: 열적작용 (주파수가 높은 강한 전자파가 사람의 몸에 닿아 부정적 영향을 일으키는 원리는?)\n", + "mrc-0-001844: 키릴 문자 (10세기 초에 글라골 문자와 그리스 문자를 이용해 새롭게 만들어 낸 문자는?)\n", + "mrc-1-001020: 팔레스타인 (안더스가 폴란드 제2군단을 설립한 나라는?)\n", + "mrc-0-001574: 피오렐로 라과디아 (이탈리아계 미국인들의 민주당 뉴딜 연정 가입으로인해 이득을 본 공화단원은?)\n", + "mrc-1-000155: 1996년 6월 24일 (국민회의 측이 비판한 대통령의 발언은 언제 한 발언이었나?)\n", + "mrc-1-000801: 손가락 (화가 난 스승이 아힘사에게 살인 후 목걸이로 만들어 오라고 한 신체부위는?)\n", + "mrc-0-003959: 스파르타의 장군 길리포스 (아테네가 주도권을 잃어버리는데 영향을 준 인물은?)\n", + "mrc-0-000014: 유대인 (섬 정부가 영국 정부가 지시내리기전에 섬에서 모두 쫓아낸 민족은?)\n", + "mrc-0-000246: 톰 디마르코 (로버트 마틴은 단일 책임 원칙을 알려주기 위해 누구의 책을 참고하였나?)\n", + "mrc-0-001030: 1988년 (금기시된 소재를 다룬 소설이 출간된 해는?)\n", + "mrc-1-001600: 플랑베르주 (하이네스에게 화염의 힘을 받은 인물은 누구인가요?)\n", + "mrc-1-000727: 두 가지 (교황의 자리에 오른 후 보니파시오 3세가 바꾼 것은 몇 개인가?)\n", + "mrc-1-001584: 글래스고 대학교 (제임스 와트와 같은 역사적인 발명가를 배출한 곳은 어디인가요?)\n", + "mrc-1-000387: 정보통신윤리회의 (사이트에 올라오는 콘텐츠를 검열하는 주체는 누구인가?)\n", + "mrc-1-001370: 국제법 (교전 당사자에 대한 전쟁 범죄 심판시 판단 기준이 되는 법은?)\n", + "mrc-1-000621: 간석기(마제석기) (A지구 아랫부분에서 민무늬토기와 더불어 어떤 유물이 발굴되었나?)\n", + "mrc-0-001557: 아테네 (시켈리아 원정을 기획한 국가는?)\n", + "mrc-0-000850: 문장원 (마지막까지 동래권번에 드나든 동래한량꾼은?)\n", + "mrc-0-001149: 오키나와어 (표준어 보급으로 오키나와현에서 고사될 위기에 있는 언어는?)\n", + "mrc-0-000288: 《작가의 일기》 (도스토옙스키를 연구할 때 큰 도움이 됐던 책은?)\n", + "mrc-1-001690: 국립중앙박물관 (인도의 아육왕 계통의 불상의 의복 형식과 유사한 자료를 소장하고 있는 곳은?)\n", + "mrc-0-004363: 파비아 (카를이 교황으로부터 신성 로마 제국 황제관을 부여받은 장소는?)\n", + "mrc-0-000177: 8명 (둠 3: 악마의 부활에서는 최대 몇 명까지 동시에 즐길 수 있나요?)\n", + "mrc-0-002514: API (클라우드 컴퓨팅으로 작동하는 시스템은 무엇을 통해 어플리케이션에 들어갈 수 있나요?)\n", + "mrc-0-001487: 85번 (티칼왕조의 창건자는 몇 번 무덤에 묻혔다고 알려져있나?)\n", + "mrc-0-001938: 코네티컷 소년원 (보닌의 흉터는 어디서 만들어졌을거라 추측되는가?)\n", + "mrc-1-001692: 15개 (유럽에서 두 번째로 큰 국가에는 몇 개의 국립공원이 존재하는가?)\n", + "mrc-0-000574: 1954년 (17도선이 '잠정적인 군사분계선'으로 규정된 연도는?)\n", + "mrc-1-001541: 유대인 (기독교와 메시아에 대한 생각이 다른 사람들은?)\n", + "mrc-1-000550: 마리아의 다섯 가지 기쁨 (종교 개혁 전 영국에서 인기를 끌었던 헌신은?)\n", + "mrc-0-003442: 매개념 (결론에 표시하지 않는 개념은?)\n", + "mrc-0-002868: 1875년 (위트레흐트 육군 군의학교가 폐교된 해는 언제인가요?)\n", + "mrc-0-002848: 케빈 베이컨 (퀵실버(영화)에서 집시를 고가도로에서 추락시킨 사람을 연기한 배우는?)\n", + "mrc-0-001363: 찰스 2세 (1661년 건축 시 제팅기법의 지나친 사용을 제재한 사람은?)\n", + "mrc-0-002282: 마리 알렌 (코페르니쿠스 유해의 진위여부를 밝힌 사람은?)\n", + "mrc-1-001592: 매일 저녁 (오가키로 향하는 아보시 발 도카이도 본선 기차를 운영하는 때는?)\n", + "mrc-1-000013: 요새 (해안포를 정착해 해안을 방어하기 위해 건설한 것은?)\n", + "mrc-0-003170: 1994년 (네덜란드의 모든 이들이 오라녜나사우 훈장을 받을 수 있게 된 건 몇 년인가?)\n", + "mrc-1-001310: 안티트롬빈 (출혈성 천연두 초기와 말기 환자 모두에게 증가하는 물질은?)\n", + "mrc-1-001545: 차가운 점액 (도룡뇽이 수분 증발을 예방하고 몸이 마르지 않도록 내뿜는 것은?)\n", + "mrc-1-001035: 절 (신돈의 어미니는 어느 곳에 소속된 노비인가?)\n", + "mrc-0-000687: 5건 (사건 몇 개를 풀 때 마다 아키이시가 아이템을 주나?)\n", + "mrc-0-003514: 인민의용군 (함세환은 어느 군대에 스스로 입대하여 전투에 참여했나요?)\n", + "mrc-0-004484: 전라남도 지역 (일제의 남한 대토벌 작전은 어느 지역에 대한 압박이었나요?)\n", + "mrc-0-004310: 일본 가도카와 쇼텐 (대원씨아이가 어떤 회사와 계약하여 한국에서 뉴타입을 출간할 수 있었나?)\n", + "mrc-0-004855: 1961년 (베르니이헝 조약이 체결된 해는 언제인가?)\n", + "mrc-0-000328: 사실주의 (시에나의 신비주의에 대비되는 피렌체 미술계의 성향은?)\n", + "mrc-0-002947: 르네상스 양식 (목포근대역사관 본관의 건축 양식은?)\n", + "mrc-0-002720: 하후상 (조비에게 정의를 살려달라고 부탁했다가 사망한 인물은?)\n", + "mrc-0-003413: 스톤페리어 (황금방울새 그림을 유리창의 일부였을거라 추측한 인물은?)\n", + "mrc-1-000320: 1번 ~ 9번 (해동검도의 예도 검법 중에 나한일과 김정호가 직접 만든 검법은?)\n", + "mrc-0-003669: 법무성이 (무슈 두 파리를 선발하는 기관은?)\n", + "mrc-1-001443: 일리노이주 (헨드릭스가 공화당 행정부를 공격했을 당시 어디서 선거 유세를 하던 중이었나?)\n", + "mrc-0-004862: 정통 칼리파(Al-Khalifah Ar-Rashid) (1대부터 4대 칼리파를 통틀어 부른 명칭은?)\n", + "mrc-1-001549: 경추 (그레이가 수술을 받은 것은 어디를 다쳤기 때문인가?)\n", + "mrc-0-002832: 공격력 (월드컵에 출전 한 다른 나라에 비해 대한민국 선수들이 강하지 못한 부분은 무엇인가?)\n", + "mrc-1-000691: 말 (크라테로스를 사망에 이르게 한 동물은?)\n", + "mrc-0-001179: 소프트웨어 엔지니어링 (의존성 주입은 어디에서 쓰이는 기술인가요?)\n", + "mrc-0-004648: 식후 졸림증 (높은 기온과 과식으로 인해 유발되는 증상은 무엇인가?)\n", + "mrc-0-005097: 갈리아인 (카이사르가 브리튼인의 문화와 흡사한 문화를 가지고 있다고 생각한 부족은?)\n", + "mrc-0-002816: 문학 혁명 (셀린 문학의 스타일은 무엇이라 묘사되는가?)\n", + "mrc-0-000895: 줄기군 절지동물 (공하류는 어디로 분류되는 것으로 추측하고 있는가?)\n", + "mrc-0-002436: 오스트리아-헝가리 제국 시대 (헝가리 요리와 오스트리아 요리가 교류한 시기는?)\n", + "mrc-0-002265: 1935년 (와그너법령이 통과된 해는?)\n", + "mrc-0-003068: 시구르드 (파프니르의 피를 마시고 배신당할 것을 알게 된 인물은?)\n", + "mrc-0-001072: 새누리당 (헌재 결정에 대해 적극적으로 동의한 당은?)\n", + "mrc-0-002927: 12척 (후방에 배치된 돈 후안 호세 나바로의 함대의 배는 몇 척인가?)\n", + "mrc-0-000028: 김 대령 (요원들의 마지막 임무 대상은 누구인가?)\n", + "mrc-1-000292: 오티스 소프 (1998년 5월에 리치먼드와 함께 워싱턴 위저즈로 팀을 옮긴 사람은?)\n", + "mrc-0-000499: 극단적인 자전축 경사 (천왕성에서 계절의 변화가 크지 않은 것은 무엇 때문인가?)\n", + "mrc-0-000780: 밖 (수술대 하부에 꿀샘이 존재하면 꽃밥은 어디를 향해 있는가?)\n", + "mrc-1-001635: 배우자 (부부 중 1인이 단독으로 혼인취소소송을 제기하고자 하는 경우 누구를 상대로 소를 제기하여야 하는가?)\n", + "mrc-0-001689: 1671년 (1754년에 철거되었던 시장이 왕실 특허를 재확인받았던 해는?)\n", + "mrc-0-000964: 하리수 (호적을 '남'에서 '여'로 바꾼 인물은?)\n", + "mrc-0-003544: 프랑스 (스페인령 아메리카에서는 누구의 공격에 대응하는 것이 주요한 문제였나?)\n", + "mrc-0-002033: 급진파 (신문 <파시스트 정권,Il Regime Fascista>의 주된 논조는?)\n", + "mrc-1-000189: 공수부대 (롬멜이 어디에 대응하기 위해 나무 기둥과 통나무를 이용하라고 지시했나?)\n", + "mrc-0-003180: 한스 칼 폰 빈터펠트 장군 (아우구스트 빌헬름은 어떤 군지휘관이 모이 전투에서 전사하며 타격을 입게 되나?)\n", + "mrc-1-001214: CP0의 요원 (카쿠와 로브 루치의 현재 신분은?)\n", + "mrc-0-002777: 삼흥 (정치 형태를 홍보하려는 목적으로 류경 스마트폰에 내장된 책의 이름은 무엇인가?)\n", + "mrc-1-001394: 바라아가 (중세 아랍 제국에서 여권과 세금 납부 증명서를 겸용한 서류의 이름은 무엇인가?)\n", + "mrc-1-001716: 1945년 (일본 히로히토 천황이 항복을 선언한 해는?)\n", + "mrc-0-002979: 4칸 (안채와 사랑채 사이에 있는 장소의 앞면은 몇 칸인가요?)\n", + "mrc-0-002536: 리히노브스키 (피아노 즉흥 연주 경연대회에서 베토벤의 스폰서는 누구였는가?)\n", + "mrc-0-002219: 위험한 물질 (곰팡이에 대해 무지했던 사람들은 까망베르 껍질에 대해 어떻게 생각했는가?)\n", + "mrc-0-004690: 리 컬른 (존 크루거가 유일하게 믿는 사람은?)\n", + "mrc-0-002879: 이스라엘 (아랍 연합 공화국은 어느 국가를 상대로 전쟁을 벌였는가?)\n", + "mrc-0-003617: 레온 트로츠키 (볼세비키에 참가해 볼세비키의 군적 역량을 강화시킨 사람은 누구인가?)\n", + "mrc-0-002618: 태황제 (무관학교를 설립한 인물은?)\n", + "mrc-0-001614: 조선 후기 (너비아니에 돼지고기를 사용한 시대는?)\n", + "mrc-0-004674: 테코아쿠 (레르도의 군대가 디아스의 군대에게 대패한 곳은?)\n", + "mrc-0-000393: 고교시절 (박철민이 처음 연기를 시작한 것은 언제인가?)\n", + "mrc-0-000740: 학습자가 정보 통달에 이를 때까지 (학생이 테스트에서 탈락하고 다시 검증을 받는 과정은 언제까지 반복되는가?)\n", + "mrc-0-003904: 1922년 (윤치호가 송도고등보통학교의 네 번째 교장을 맡게 된 해는?)\n", + "mrc-0-005094: 여성 금주 동맹 (투표하기로한 후보 대신 당선되면 시장직을 수행하겠다는 솔터에게 표를 준 단체는?)\n", + "mrc-0-005209: 도쿄의 윤락가 (김옥균이 암살을 피하기 위해 돌아다닌 곳은?)\n", + "mrc-0-003716: 오스트리아 (파아 디브루노 함을 끝까지 공격했던 배는 어느 나라 소속인가요?)\n", + "mrc-0-004081: 세계 최대의 해류 (미시시피 강으로 인해 멕시코 만류가 생겼다는 주장이 힘을 잃은 이유는 멕시코 만류가 무엇으로 알려졌기 때문인가?)\n", + "mrc-0-001180: 1811년 (피아노 협주곡 5번의 첫 공개 초연이 이루어진 해는?)\n", + "mrc-0-003926: 서재필 (윤치호는 성주이씨의 묘소를 누구에게 알려주었는가?)\n", + "mrc-0-001654: 붉은 구슬 (히보코가 용서의 대가로 받은 물건은?)\n", + "mrc-0-000852: 가족의 화합 (부첼라토가 지니는 전통적인 의미는?)\n", + "mrc-0-003331: 200만 달러 (인천상륙장면의 재촬영에 소요된 금액은?)\n", + "mrc-0-004329: 황소 (콘코바르가 알릴과 메브와의 전투에서 분실한 것은?)\n", + "mrc-1-001425: 260억 개 (가트나는 2020년에 사물 인터넷 기술을 사용하는 사물은 몇 개일거라 예측했나?)\n", + "mrc-1-001769: 헝가리 (마가렛의 모친은 어떤 나라의 왕족이었나?)\n", + "mrc-0-002916: 퀸투스 루타티우스 카툴루스 (카틸리나는 누구 덕분에 간통 혐의에서 벗어날 수 있었나요?)\n", + "mrc-0-000435: 젊은이들 (파브르는 그의 글을 통해 누구에게 자연과학에 대한 사랑을 전했는가?)\n", + "mrc-0-000459: 내각회의 (지방총감부 제도를 없애기로 결정한 곳은?)\n", + "mrc-1-000218: 《나뭇잎의 집》 (레이크가 가장 큰 영향을 받았다고 한 작품의 이름은?)\n", + "mrc-1-000181: 강세황 (강현의 아들 이름은?)\n", + "mrc-0-003996: 토우야 (유에에게 마력을 넘겨준 사람은?)\n", + "mrc-0-005410: 오미이마즈 역에서 병결 및 분리를 하는 동안 (쓰루가 방면의 신쾌속 열차가 특급 선더버드 호의 추월을 위해 대기할 때는 언제인가?)\n", + "mrc-0-001793: 플라티니 (베언트 푀어슈터 덕분에 얻은 페널티 킥을 누가 하였는가?)\n", + "mrc-0-001705: 슈베르트 (19세기 가곡이 성행하는 데 큰 역할을 한 인물은?)\n", + "mrc-1-001624: 가즈사 국 (국사가 국내 인부 동원의 권한을 얻는 계기가 된 사건이 일어난 곳은?)\n", + "mrc-1-000694: 연청권 (미종예의 전신은 무엇인가?)\n", + "mrc-0-001425: 중심지 이동설 (고조선의 도읍지와 관련하여 한국 역사학계에서 널리 인정받는 이론은?)\n", + "mrc-1-001516: 가속화 분류기 (분류 작업 중 일정한 시점에 미리 종료함으로써 속도를 올릴 수 있는 것은?)\n", + "mrc-1-000954: 1989년 (제미니 상을 탄 프로그램의 제작 시기는?)\n", + "mrc-0-000096: 2009년 8월 (세종대학교의 기후변화센터는 언제 만들어졌나?)\n", + "mrc-0-003596: 부당한 일요등교 지시 (이대우를 중심으로 모인 학생들은 무엇에 항변하기 위해 시위대를 조직했는가?)\n", + "mrc-0-002651: 영국 (바이츠만은 어떤 나라를 향해 밸푸어 선언을 했나요?)\n", + "mrc-0-001370: 특수목적회사 M2G (타코벨을 한국에 세 번째로 도입한 회사는?)\n", + "mrc-0-002766: 1969년 (기무라의 이론을 기반으로 2명의 학자가 새로운 이론을 발표한 해는?)\n", + "mrc-1-001011: 뷔르츠부르크 대학교 (로타르 마이어가 1853년에 병리학을 공부하던 대학교는 어디였는가?)\n", + "mrc-1-000112: 순치제 (러시아를 견제하기 위해 조선에 군사를 요구한 청나라의 왕은?)\n", + "mrc-1-001436: 앙리 블랑슈 (니콜라 요셉이 벨기에에 돌아가도록 결정적인 영향을 준 기사를 내보낸 사람은?)\n", + "mrc-0-004840: 초나라가 장차 흥성할 것이므로 (태사 백은 환공의 질문에 왜 남쪽이 부적절하다고 답하였는가?)\n", + "mrc-0-001931: 64 군 (스탈린그라드의 소련군 중 사정이 나았던 부대는?)\n", + "mrc-0-004832: 공병우 자판 (특정한 글자에 대해서만 모아치기가 가능한 자판은?)\n", + "mrc-0-000866: 1945년 (쇼와 천황이 맥아더 옆에 직립부동자세로 찍힌 사진이 일반 신문에 실린 해는?)\n", + "mrc-0-000723: 빛 (광배는 부처의 육신에서 나오는 어떠한 것을 하나의 형체로 표현한 것인가?)\n", + "mrc-0-000942: 모터크로스 레이서 (쇼 자마가 부모에 대한 반발을 계기로 가지게 된 장래희망은?)\n", + "mrc-0-004280: 사츠키 (남자친구를 잃은 슬픔에 대해 《Moonlight Shadow》에서 말한 인물은?)\n", + "mrc-1-000518: 아드레날린 (알레르기를 관리하는 계획에는 어떤 호르몬을 투여하는 것도 포함되는가?)\n", + "mrc-1-001582: 1934년 (윤치호가 '질곡의 인디아' 저자를 만났던 해는?)\n", + "mrc-0-002164: 《완전한 죽음》 (<구해줘> 바로 이전에 출간된 책은?)\n", + "mrc-0-001076: 베다는 (보니파시오가 캔터베리 대주교에게 권고 서신을 보낸 적 있다고 말한 사람은?)\n", + "mrc-0-003962: 뉴질랜드 (오스트레일리아의 새로운 개혁정책은 주위 어느 나라에 영향을 주었는가?)\n", + "mrc-1-001301: 대통령 캘빈 쿨리지 (미국 국민들이 일본 대지진에 대한 관심을 갖도록 만드는 데 도움을 준 미국의 인물은?)\n", + "mrc-1-000651: 호림박물관 (대한민국 보물 제 1540호를 보관하는 장소는 어디인가?)\n", + "mrc-0-000845: 오삼계 (1642년 초 이후로 누구의 군대가 유일하게 방패막으로 쓰였나요?)\n", + "mrc-0-002188: 104번 위치의 글루탐산 (삼탄당 인산 이성질화효소 결핍증은 주로 어떤 물질의 돌연변이로 일어나나요?)\n", + "mrc-0-003648: 상대적 손실 가치 (투자 초기 비용보다 매출액이 적더라도 흑자로 판단할 수 있는 기준은?)\n", + "mrc-0-003069: 블루 라인 (첫 해의 기대보다 65% 높은 기수를 받은 노선은?)\n", + "mrc-0-004759: 하이브리드 잉크 배합물 (일부 볼펜에서 잉크가 비교적 빨리 건조되기 위해 사용되는 것은?)\n", + "mrc-1-000412: 미하일린 (2012년 런던 올림픽 결승전에서 리네르에게 패한 사람은 누구인가?)\n", + "mrc-0-001078: 1946년 (에센의 시장에 하이네만이 당선된 해는?)\n", + "mrc-0-000734: 언더우드 박사 (윤치호는 누구의 집에 숨어있었는가?)\n", + "mrc-1-000770: 중동 건설 현장 (오목이 수지에게 청탁한 남편의 일자리 장소는?)\n", + "mrc-0-004187: 승려 (화순 유마사 해련탑은 누구의 무덤인가요?)\n", + "mrc-1-001554: 야기옐론 대학 (코페르니쿠스가 겨울 학기에 등록한 대학은 무슨 대학으로 불리기도 하는가?)\n", + "mrc-0-000062: 전달판 (정란이 방벽에 도달하면 방벽과 탑사이에 내리는 것은?)\n", + "mrc-0-003460: 레기온 (리파리 섬을 공격했을 때 아테네의 군사근거지 위치는 어디였나?)\n", + "mrc-1-000143: 밀양 농잠학교 (진석중이 잠업에 대한 전문기술을 습득한 기관은?)\n", + "mrc-0-001393: 마이클 뉴먼 (서머힐 스쿨 조사관들의 주장이 주관적인 듯이 말한 사람은?)\n", + "mrc-0-001790: 스카버러 타운 센터 (설계자들이 원래 스카버러 도심을 만들려고 했던 곳은?)\n", + "mrc-0-003418: 의사결정권자들 (유심 교수가 오랫동안 인터뷰를 해온 자들은?)\n", + "mrc-0-004465: 와히드 박사 (2008년 당시 몰디브의 부통령은?)\n", + "mrc-0-002840: 화이트워터 사건 (클린턴과 힐러리 여사가 저질렀다는 혐의를 받았던 스캔들은?)\n", + "mrc-1-000227: 동탁의 군대 (양인 전투에서 손견군과 충돌한 부대는?)\n", + "mrc-0-002155: 서울 (과거 우리나라의 전국지는 어디서 출간되었나?)\n", + "mrc-0-001660: 6미터 (오늘날 양치식물이 다 자랐을 때 최대 높이는 몇 미터 미만인가?)\n", + "mrc-0-000913: 탈당 (박기출이 후보지명 되면 조한백, 박재우, 장준하 등이 취하겠다고 한 행동은?)\n", + "mrc-0-004373: 5월 29일 (미네소타주 경찰이 오마르 히메네스를 체포한 날짜는 언제인가요?)\n", + "mrc-1-001229: OekakiBBS (오에카키라는 이름의 모티브는?)\n", + "mrc-0-005342: 소루트비히 (루트비히 2세의 사망 이후, 동프랑크 왕국의 중북부 지방의 땅을 물려받은 인물은?)\n", + "mrc-0-002098: 교황 율리오 2세 (모세상은 누구를 위해 만들어졌었는가?)\n", + "mrc-0-000784: 프랑스 (핵무기 개발건으로 미국과 갈등을 겪다가 통합군사 조직에서 빠진 나라는?)\n", + "mrc-0-004040: 안티오쿠스 (셀레우쿠스에게 왕좌를 계승받은 사람은?)\n", + "mrc-1-001277: 좀비 (헤드크랩의 공격을 받은 레이븐홈의 사람들은 어떤 존재로 변하였는가?)\n", + "mrc-0-000434: 인질이 된 다케치요(이에야스)의 양육을 위해 (게요인이 슨푸로 이사간 이유는?)\n", + "mrc-0-002096: 1947년 (노동운동 단체가 소멸하기 시작한 연도는?)\n", + "mrc-0-000211: 실루엣 (할리퀸이 소설 분위기를 미국풍으로 바꿀 무렵 세운 자회사는?)\n", + "mrc-0-004909: 모술 (쿠틉 앗딘이 이라크에 있는 칼리프 영지를 점거하기 위해 출정을 시작한 지역은?)\n", + "mrc-0-001026: 86 편의 (<어린이와 가정을 위한 이야기>는 원래 몇 편의 이야기로 구성되었나?)\n", + "mrc-0-001864: 보리스 타디치 (2008년에 니콜리치와 대선에서 맞붙어 승리한 인물은?)\n", + "mrc-0-004467: 1994년 (Music Box앨범 이후 다음 앨범의 작업을 시작한 연도는?)\n", + "mrc-0-002636: 1977년 (서울교대를 상징하는 동물을 정한 연도는?)\n", + "mrc-0-002581: 중앙위원회 (어떤 부서가 통일전선조직의 활동을 규제하는가?)\n", + "mrc-0-003040: 일본 (미국이 한국과 더불어 비전략 핵무기를 공유하는 아시아의 파트너 나라는?)\n", + "mrc-0-003558: 연방 정부 (도르발 공항보다 미라벨 공항을 많이 이용할 것이라고 예측했던 기관은?)\n", + "mrc-1-001670: 현무암 화방벽 (대성전의 전면 퇴칸을 제외한 면에 만들어진 것은?)\n", + "mrc-0-004531: 판옥선 (임진왜란에서 일본 수군을 격파한 조선의 배는 무엇인가?)\n", + "mrc-0-003835: 피렌체 (\"이탈리아의 예술의 궁전\"이라는 별명을 가진 도시는?)\n", + "mrc-0-002683: 1726년 (삼길암 목조관음보살좌상이 조성된 해는?)\n", + "mrc-0-003053: 조선혁명간부학교 (중국 국민당정부의 도움으로 1932년 설립된 교육 기관은?)\n", + "mrc-0-002782: 선조 (서인들은 어떤 왕에게 정여립의 탄핵을 주장하는 상소를 올렸는가?)\n", + "mrc-0-002245: 레드훅 스튜디오 (다키스트 던전을 만든 회사는?)\n", + "mrc-0-002130: 러시아 제국 (프리비슬린스키 크라이는 어느 나라에 소속되어 있었는가?)\n", + "mrc-1-001559: 소방방재센터 (경찰은 어떤 기관의 GPS를 이용하여 오원춘을 체포할 수 있었나요?)\n", + "mrc-0-004672: 존 벨링햄 (퍼시벌에게 앙심을 품고 총을 쏜 인물은?)\n", + "mrc-1-001051: 나르샤(날아 오르다) 선발대회 (19세 이하 남녀가 한국대표로 참가할 수 있는 대회는?)\n", + "mrc-1-000788: 프랑스 (찰스 2세가 국내로 돌아오기 전에 있던 국가는?)\n", + "mrc-0-002530: 안티오코스 3세 (필리포스 5세와 영토를 공유하기로 합의한 사람은?)\n", + "mrc-0-002481: 세 가지 (사용자가 마비노기에서 고를 수 있는 종족은 총 몇 개인가?)\n", + "mrc-0-000283: 비올라 (클래식 연주시 중해금은 어느 악기 옆에 위치해 있는가?)\n", + "mrc-0-003500: 인체의 급소 (백병전은 사람의 신체부위 중 어디를 겨냥하는 무술인가?)\n", + "mrc-1-001669: 대밭골 (금동관음보살입상이 처음 발견된곳으로 추정되는곳은?)\n", + "mrc-0-004372: 대구 (이용문이 육군본부의 장교들과 의견을 나눴던 곳은?)\n", + "mrc-0-000944: 물 (용수로가 운반하는 것은?)\n", + "mrc-0-003528: 어사대부 (대신들이 대홍려 풍야왕을 추천한 직위는?)\n", + "mrc-0-002877: 빌트루디스 (코르비니아노가 비판한 인물은 누구와 혼인하였나요?)\n", + "mrc-0-005447: 석재 (관음정사 존상은 무엇으로 만들어졌나요?)\n", + "mrc-0-004394: 프리드리히 니체 (《그리스 비극 시대의 철학》은 누구의 저서인가?)\n", + "mrc-0-000651: 1967년 (디즈니랜드에서 개인회원을 뽑기 시작한 년도는?)\n", + "mrc-0-002989: 재단 X (타입 2 가이아 메모리을 만든 집단은?)\n", + "mrc-0-001804: 자유당계 인사들 (장면이 정치보복에 반대하는 입장에서 처벌을 원치 않은 대상은?)\n", + "mrc-0-003411: 서스펜디드 게임 (콜드게임 중 어떠한 계기로 인해 잠시 중단된 뒤, 익일에 게임이 진행되는 것은?)\n", + "\n", + "### 2개 겹치는 답변 ###\n", + "mrc-0-005021: 91년 체제, 대의제도 -----(상류 부르주아의 정치 독점을 불러일으킨 체계는?)\n", + "mrc-1-000163: 구미호, 선종 조사 초상에 연고를 두고 있기 때문 -----(아시노 호가 만들어진 원인은 무엇인가?)\n", + "mrc-0-000439: 리처드 말킨, 점쟁이 -----(클레어에게 오세아닉 815편을 타라고 말한 사람의 이름은?)\n", + "mrc-0-000901: 아라라기 코요미, 오시노 메메 -----(괴수로부터 메구밍을 구해준 사람은 누구인가?)\n", + "mrc-0-001326: ‘자유’지에, 《뉴스피플》 -----(이유립씨가 1970년대 중반에 본인의 글을 기고하기 시작한 곳은?)\n", + "mrc-0-003644: 이탈리아, 백제 -----(콘스탄티누스가 군사 4만 명을 이끌고 침범한 나라는?)\n", + "mrc-0-000049: 게임플레이, 서사 -----(루돌로지스트들이 게임에서 가장 주된 것이라 주장하는 것은?)\n", + "mrc-0-001206: 2007년, 1849년 -----(펌프가 발매된 해는 언제인가?)\n", + "mrc-0-003133: 책, 불법 어업 -----(아델리 펭귄의 목숨에 지장을 주는 사람의 업종은 무엇인가요?)\n", + "mrc-0-001058: 룸비니 동산, 카필라 성 -----(석가모니 부처가 태어난 곳은 어디인가?)\n", + "mrc-0-002361: 독립, 영토 -----(동맹을 맺음으로써 헝가리는 자유를 비롯해 무엇을 잃었나?)\n", + "mrc-0-001086: 라이프치히, 초계면 -----(8천 명의 시민들이 모여 대규모 시위를 벌인 지역은?)\n", + "mrc-0-000624: 영국, 노르웨이 -----(유로니우스를 살해한 용의자가 소속된 밴드의 국적은?)\n", + "mrc-1-001280: 미국 대통령 우드로 윌슨, 미국의 대통령 우드로 윌슨 -----(자신이 고안한 14개조 평화원칙을 국제 사회에 발표하고 싶어한 인물은?)\n", + "mrc-0-000504: 삼국시대, 고려시대 -----(팔과 다리가 밋밋한 형태인 신체표현은 어떤 시기를 반영한 것인가요?)\n", + "mrc-0-003763: 광배(光背)의 뒷면, 불상조성도금사적기(佛像造成塗金事蹟記) -----(불상에 대한 정보가 적혀있는 것은?)\n", + "mrc-0-003896: 마튀랭 박사, 프랭크 맥린 -----(병으로 인해 피렌체의 수많은 사람들이 죽어갔음을 언급한 사람은?)\n", + "mrc-0-003298: 오카다 다케시, 김호 -----(1994년 FIFA 월드컵 당시 대한민국 축구 대표팀의 감독은 누구인가?)\n", + "mrc-0-003628: 공유 필명, 판권관리 -----(선라이즈의 애니메이션 작품 기획부는 야타테 하지메를 무엇으로 사용하는가?)\n", + "mrc-0-000432: 조선건국동맹, 이르쿠츠크파 고려공산당 상하이 지부 -----(여운형이 조동호와 함께 조직한 것은?)\n", + "mrc-0-003364: 아우구스투스 시대, 아우구스투스 시대(기원전 27년 ~ 기원후 14년) -----(단색 배경에 추상적인 디자인을 쓰는 양식이 유행하던 시기는?)\n", + "mrc-0-003670: ‘마루게’ 할아버지, ‘마루게’ -----(최고령 초등학생으로 기네스북에 올라있는 사람은?)\n", + "mrc-0-000386: 야즈데게르드 3세, 호세 1세 -----(628년에 새롭게 왕위에 오른 사람은 누구인가요?)\n", + "mrc-0-004345: 1991년, 2001년 -----(셰이크 무지부르 라흐만의 딸이 처음으로 선거에서 졌던 해는?)\n", + "mrc-0-001470: 볼가 지방, 만주국 무단장 성 무단장 시에 -----(소설 <형제>의 작가가 태어난 지역은?)\n", + "mrc-1-001239: 쉴드 빔, 대형 액정 모니터 -----(무엇이 창 아래에 설치되어 표시기가 한 개 늘어났는가?)\n", + "mrc-0-001940: 경문왕, 신라 경문왕 -----(동화사 석조비로자나불이 제작될 때, 당시 임금은 누구였는가?)\n", + "mrc-0-001241: 환율 부문, 상업 분야 -----(협동 화폐 거래소의 인정은 어느 부문에서 나타나는 변화인가?)\n", + "mrc-1-001457: 도요토미 히데요시, 청나라의 북양대신(北洋大臣) 이홍장 -----(조선역사를 수호하는데 위기를 제공한 사람은?)\n", + "mrc-1-000908: 기생충, 변비 -----(비자나무의 열매는 어떤 증상을 치료하기 위해 쓰이나요?)\n", + "mrc-1-000116: 가이아, 타르타로스 -----(튀폰의 아버지는 누구인가?)\n", + "mrc-0-004669: 교황, 베드로좌 -----(가톨릭 교회에서 주교에게 '최고사제'의 자격을 주는 직함의 이름은?)\n", + "mrc-0-002210: 통인 주기, 조선인민군 -----(아랑을 살해한 사람은?)\n", + "mrc-1-000862: 대막리지 연개소문, 설인귀 -----(당의 군대를 몰살시킨 사람은?)\n", + "mrc-0-000986: 마라도나, 오스마르 -----(전반전이 6분이 지난 후 골을 넣은 선수는?)\n", + "mrc-0-003970: 센리 선, 교토 본선과 센리 선 -----(통근특급이 걸림돌인 노선과 서로 평면교차하는 노선은 어디인가?)\n", + "mrc-0-000304: 1919년 10월 1일, 1919년 1월26일 -----(국경일에 일장기를 달아도 반대하지 않을 것이라는 내용을 담은 윤치호의 일기는 언제 쓰여진 것인가?)\n", + "mrc-1-001025: 티탄즈, 특수부대티탄즈 -----(자미토프가 개혁을 강행하기 위해 설립한 사병 집단은?)\n", + "mrc-0-001374: 1530년, 1305년 -----(성 요한 기사단이 로도스 섬으로 거처를 옮긴 년도는?)\n", + "mrc-0-001783: 자자 빙크스, 나부의 의원 자자 빙크스 -----(팰퍼틴에게 비상시의 권리를 도맡아 달라고 의견을 냈던 인물은?)\n", + "mrc-0-005332: 백제금동대향로, 동탁은잔 -----(날개 앞쪽으로 연꽃을 들고 있는 인면조가 그려진 백제의 유물은 무엇인가?)\n", + "mrc-1-001594: 자유송환, 자동송환 -----(각 측에서 주장된 포로교환 방법 중 선택된 것은?)\n", + "mrc-0-002938: 데이 페소, 찰스 디 페소 -----(티나헤로가 아칸바로의 유적을 날조한 것이라고 주장한 인물은?)\n", + "mrc-0-002936: 소비에트 연방, 붉은 군대 -----(메리의 사촌은 어디에서 영웅으로 활약하기도 했나요?)\n", + "mrc-0-003706: 천공, 6신관 -----(마'를 피하기 위해 살몬 신전을 보낸 곳은?)\n", + "mrc-0-001021: 투사체의 궤적, 보스턴의 폐공장 -----(타격이 시작되는 것은 대상이 어디에 나타날 때인가?)\n", + "mrc-0-003236: 베를린, 프로이센 -----(작센군과 오스트리아군은 함께 어디를 공격할 예정이였나?)\n", + "mrc-0-001379: 퓌르트, 리즈 유나이티드 FC -----(네델란드와의 친선 경기에서 유일하게 골을 넣은 선수의 소속팀은?)\n", + "mrc-0-004927: 풍력이나 조력 발전 등 대체 에너지의 개발, 대체 에너지의 개발 -----(아일랜드의 자원 공급 불안과 지구 온난화에 대한 해결방안은?)\n", + "mrc-0-000576: 알 카포네, 베니토 무솔리니 -----(히틀러의 반란은 누구를 모방한 것인가?)\n", + "mrc-0-002786: 외교부 장관직, 외교부 장관 -----(최초로 공산주의 정당을 제외한 선거 이후 메리가 맡은 직책은?)\n", + "mrc-0-001105: 실존주의, 실존주의 사상 -----(오노에게 영향을 미친 장 폴 사르트르의 철학은?)\n", + "mrc-0-001896: P 시리즈, 스페셜라이즈드의 P 시리즈 -----(산악 자전거 프리 라이드 부문에 출전하는 마틴 소더스트롬이 이용하는 제품은?)\n", + "mrc-0-001887: 고려 중기 이후, 18세기 중후반 -----(부피와 무게감을 나타낸 얼굴이나 짧은 목 등을 통해 알 수 있는 불상의 축조 시기는?)\n", + "mrc-1-001797: 감옥, 뮌헨 발트프리드호프 -----(이경언이 사망한 장소는?)\n", + "mrc-0-002028: 리을설, 리을설(李乙雪, 1921-2015) -----(김일성이 소련인으로서 살고 싶어했다고 말을 한 인물은?)\n", + "mrc-0-003031: 당 태종, 수 양제(煬帝) -----(고구려에 크게 지고 그 전쟁때문에 병이나서 죽은 당나라 왕은?)\n", + "mrc-1-000235: '농지', '농지'(農地) -----(레닌에 의하면 자본주의식 농업 시스템을 통해 일반 시민들이 더 쉽게 사용할 수 있게 된 것은 무엇인가?)\n", + "mrc-0-002716: 《지옥에서 보낸 한 철》, 지에코초 -----(아르튀르가 베르린과의 연애생활을 한 경험을 쓴 시집이름은?)\n", + "mrc-0-003961: 마에노 료타쿠, 스기타 겐파쿠 -----(네덜란드어를 몰랐으나 타펠 아나토미아의 해부도 번역에 참여한 것은 누구인가?)\n", + "mrc-1-001721: 이경희, 조카 윤보선 -----(선생님에게 창씨개명을 하지 않겠다고 한 사람은?)\n", + "mrc-0-004738: 헌법, 일본국헌법 -----(주권재민의 원칙은 어디에 명시되어 있는가?)\n", + "mrc-1-001603: 법관 출신 인사, 사법개혁을 책임질 법관 출신 인사 -----(21대 총선을 겨냥하여 사법개혁을 이끌어갈 수 있다는 것에 뒷받침된 명목은?)\n", + "mrc-0-003356: 언더우드(Underwood)박사, 진주강씨 -----(윤치호의 아내는 누구의 부인을 방문했나?)\n", + "mrc-1-000769: 좌일선의 제1대대, 제1대대 -----(107고지를 처음 함락시킨 부대는?)\n", + "mrc-0-000114: 코드, 코드가 변조되거나 손상되지 않음 -----(코드 서명이 보증하는 대상은?)\n", + "mrc-0-002997: 1922년, 1954년 -----(타누당(TANU)를 설립한 인물이 태어난 해는?)\n", + "mrc-1-000889: 금산전투, 667년의 금산전투 -----(고구려와 당나라 사이에 4대 전투 중 유일하게 다른 해에 일어난 전투는?)\n", + "mrc-1-000267: 3층, 지상 2층 -----(도쇼구 역의 승강장은 몇 층에 있는가?)\n", + "mrc-0-002654: 사운드클라우드, 본인 사운드클라우드 계정 -----(navigation'이 올라온 사이트는?)\n", + "mrc-0-002758: 우크라이나, 잉글랜드 -----(스위스가 월드컵에서 이긴 나라는?)\n", + "mrc-1-001727: 수영공원, 수영사적공원 -----(경상좌도 수군절도사영이 관리했던 곳은?)\n", + "mrc-0-004755: 서울대 터, 장충단공원 -----(공원으로 변화되는 곳은?)\n", + "mrc-0-002525: <<종횡무진 한국경제>>, 종횡무진 한국경제 -----(장하준 교수의 한국경제에 대한 생각에 대해 반론한 김상조 교수의 저서는?)\n", + "mrc-0-001847: 호해, 2세 황제 호해 -----(자신의 사리사욕만 채우며 무능했던 진나라의 황제는?)\n", + "mrc-0-003215: 1773년, 1770년 -----(보스턴 차 사건이 발발한 년도는?)\n", + "mrc-0-001757: 《Nirvana》, Delay 1968 -----(Yoo Doo Right이 수록된 앨범명은?)\n", + "mrc-0-004594: 교육 및 문화 교류를 통해 미국 사람들과 다른 국가 사람들 간의 상호 이해를 높이는 것, 외국인노동자의 정주화 방지 -----(외국인 근로자 고용 등에 대한 법률'의 목적은?)\n", + "mrc-0-001133: 언카스(또는 다운카스, Uncas), 언카스 -----(17세기 피쿼트로부터 독립하여 모하칸족을 만든 사람은?)\n", + "mrc-0-003821: 오스트리아, 잉글랜드 -----(프랑스군은 마렝고에서 어떤 나라의 군대와 마주하였나?)\n", + "mrc-0-001607: 스렝이, 스렝과 -----(누아다가 오른손이 없는 이유는 누구 때문인가?)\n", + "mrc-0-003454: 16세기, 샤를마뉴 황제 (742789 CE) 당시 로마 제국의 쇠퇴 이후 -----(현대 식물원은 언제 오픈되었는가?)\n", + "mrc-0-000206: 2월 혁명, 프랑스 제2공화국을 선포 -----(필리프가 왕실에서 쫒겨난 사건의 단초가 된 역사적 사건은?)\n", + "mrc-0-003043: 경시청 수사1과, 수사1과 -----(시바사키의 이전 소속 부서는?)\n", + "mrc-0-003434: 재산권 박탈, 계획 경제 -----(평등과 복지 사회를 이루기 위해 필요한 것이라는 선전 하에 행해지는 것은?)\n", + "mrc-0-001324: 부산시, 부산 -----(《서편 삼층석탑》은 어느 지역의 유형문화재로 지정되어있나요?)\n", + "mrc-0-002127: 4막 3장이, 4막 3장 -----(맬컴이 맥더프에게 상실에 슬퍼할 줄 알아야 함을 배우는 장은?)\n", + "mrc-0-001438: 금강산 보광암, 봉원사 -----(이보담은 어느 절에서 스님이 되었는가?)\n", + "mrc-0-001415: 상서좌복야(尙書左僕射), 노룡군의 대장 -----(이무훈에게 살해당한 인물의 직책은?)\n", + "mrc-1-000650: 불투명하고 착색된 광물, 광물 -----(조흔색은 무엇을 구별하는데 도움을 주나요?)\n", + "mrc-0-003105: 폭동, 4·19 폭동설’ -----(군부세력들이 어떤 상황을 빌미로 쿠테타를 일으키려고 했나?)\n", + "mrc-0-002170: 《소우기》, 《소우기》(小右記) -----(우치쿠라노 이시메가 작성한 내용이 실린 기록은 무엇인가요?)\n", + "mrc-0-002414: 꼬리부분, 머리와 손목 -----(보디 스타킹에서 봉제되지 않은 부분은?)\n", + "mrc-0-000668: 메란, 돈화현 육정산 고분군 -----(프랑크 왕족들의 무덤이 있는 곳은?)\n", + "mrc-1-001689: 라위스달, 카네츠 신베에 -----(홉베마의 스승은 누구인가요?)\n", + "mrc-0-002493: 미국, 세르비아 -----(쿠챤과 밀로셰비치의 협의에 대해서 작성한 작가의 출신국가는?)\n", + "mrc-0-002092: 소방공무원법, 「소방공무원법」 -----(시도 도지사가 시도 소속 소방공무원을 임용할 수 있도록 개정된 법은?)\n", + "mrc-1-001196: 트리아 터너, 4번째 외야수 -----(2016시즌 당시 테일러는 누구 대신 주전이 되었나?)\n", + "mrc-0-002045: 송병하, 송준길 -----(호연재 김씨의 시증조부는?)\n", + "mrc-0-003645: <밤으로의 긴 여행>, 밤으로의 긴 여행 -----(손턴 와일더 사후, 최고의 명작으로 손꼽히는 작품은 무엇인가?)\n", + "mrc-0-001272: 강물, 왕성 -----(신립이 스스로 목숨을 끊은 곳은?)\n", + "mrc-0-003639: '거대한 탑', '온' -----(단어 '토레혼'의 어근은?)\n", + "mrc-0-001046: 현직 대통령 프랭클린 D. 루스벨트, 프랭클린 D. 루스벨트 -----(총선에서 듀이를 꺾은 사람은?)\n", + "mrc-0-001863: 나스티카, 베다의 권위를 인정하는 가의 여부 -----(베단타 학파와 차르바카파는 무엇을 기준으로 나뉘어졌나요?)\n", + "mrc-0-001123: 레반스라움, 레반스라움을 위한 식민주의 -----(토산물을 착취하는 등과 같은 업무의 명목은?)\n", + "mrc-1-000056: 라크스 클라인, 패트릭 자라 -----(프리덤 건담의 이름을 지은 사람은?)\n", + "mrc-0-001192: 우윤근 원내대표, 박근혜 대통령 -----(통진당을 해산시킨 결정을 인정한다고 직접 말한 인물은?)\n", + "mrc-0-005108: 아도니스, 에로스 -----(진홍빛 장미가 만들어진 원인을 제공한 자는?)\n", + "mrc-1-000713: 드주드주아나의 동굴, 티베트 -----(처음으로 염색된 섬유가 발견되었던 장소는?)\n", + "mrc-0-004970: 한 번, 5.3마리 -----(붉은자이언트날다람쥐 암컷의 일 년 평균 번식 횟수는?)\n", + "mrc-1-000690: 하비 로우마이어, '리카르도 클레멘트' -----(레이가 골트 이후에 사용한 가짜 이름은 무엇인가요?)\n", + "mrc-0-003499: 초음파 가습기, 초음파식 가습기 -----(물방울에 급수대의 이물질이 없는 가습기는?)\n", + "mrc-0-004708: 위장, 땅 속이나 나무 줄기 사이 -----(어버이새가 새끼들의 먹이를 보관하는 곳은?)\n", + "mrc-0-004579: 전라북도 전주, 루이지애나주 센터빌 -----(경서교회를 설립한 사람이 태어난 도시는 어디인가?)\n", + "mrc-0-000255: 인사관리에 대한 통제권, 실권 -----(사장이 부하직원에게 행사할 수 있는 권리는 무엇인가?)\n", + "mrc-0-001539: 목포터미널 인근 도심, 목포 -----(부부가 딸을 차에 태운 곳은?)\n", + "mrc-0-005166: 플로이드가 말을 하고 있으니 괜찮다고, 괜찮다고 -----(행인의 플로이드가 코피난다는 말에 경찰관은 뭐라고 말했는가?)\n", + "mrc-0-000150: 3-3 무승부, 3-3 -----(아만시오가 처음으로 출전한 유럽대항전의 결과는?)\n", + "mrc-0-000760: 공개 프록시, IP 주소 -----(다중 계정 사용자의 판별을 불가능하게 하는 것은?)\n", + "mrc-0-004510: 인체의 치수, 인체의 치수(인체측정학의 측정 기준) -----(인간에게 가장 익숙한 크기의 개념은 무엇인가요?)\n", + "mrc-0-002482: 근원 마그마가 형성되는 기작이 다르기 때문, 근원 마그마가 형성되는 기작 -----(발산형 경계와 수렴형경계의 마그마 점성이 다른 이유는?)\n", + "mrc-1-001729: 수리물리학, 수리 물리학 -----(이론물리학에 비해 수학적인 부분을 더 강조하는 학문은?)\n", + "mrc-0-004371: 미드(Mead), 원세훈 -----(역할을 가장 먼저 구체화 시킨 사람은?)\n", + "mrc-0-002763: 강릉, 개성 -----(신혜왕후가 묻혀있는 지역은?)\n", + "mrc-0-001429: 제노바 공화국, 독일 -----(요안니스 5세의 쿠테타를 지원한 것은 어느 나라인가?)\n", + "mrc-0-004649: 내각, 국가판무관부 -----(히틀러의 권한을 합법적으로 확대시켜준 국가 기관은?)\n", + "mrc-0-004438: 과학적인 의문에 대한 답변을 얻거나 문제에 대한 조사를 하기 위한 목적, 교란 요인을 통제하는 것 -----(연구자들이 설계된 실험실을 이용하는 것은 무엇을 위해서인가?)\n", + "mrc-0-005422: 옥시전 디스트로이어, '옥시전 디스트로이어' -----(세리자와 박사가 숨기려고 한 것은?)\n", + "mrc-0-000394: 김영춘, 김정은 -----(조선인민공화국에서 최고로 높은 직위에 오른 자는?)\n", + "mrc-0-002289: 가덕도, 남해안 연안일대의 요충지 -----(조선수군의 길목을 차단하기 위해 일본군이 설치한 왜성이 위치한 장소는?)\n", + "mrc-0-003038: 에피루스의 주교 에우리아의 요한, 에우리아의 요한 -----(알키온의 주교 자리를 빼앗은 사람은?)\n", + "mrc-0-001682: 사형, 무죄 -----(보닌이 살인 혐의로 체포되어 받은 형벌은?)\n", + "mrc-0-001457: 오스트리아-헝가리 제국, 세르비아 -----(러시아가 동원령을 내린 것은 어느 나라를 견제하기 위해서인가?)\n", + "mrc-0-003755: 권문세족, 무신 -----(정중부의 난 이전 병권을 장악한 집단은?)\n", + "mrc-0-002696: 1948년, 1949년 -----(베이핑-톈진 전투가 시작된 연도는?)\n", + "mrc-0-000564: 1970년, 1835년 -----(여성 작가들이 언제부터 여성 등장인물에 관심을 가지기 시작했나요?)\n", + "mrc-0-004323: 강력범죄 특별수사관, 연극배우 -----(알렉스의 직업은?)\n", + "mrc-0-000664: 벤자민 바커, 벤저민 바커 -----(스위니 토드의 본명은?)\n", + "mrc-0-004392: 뇌 일부, 뇌 -----(모토코의 몸 중에 인공적인 기계장치로 되어 있지 않은 곳은?)\n", + "mrc-0-000162: 스타베크 포트발 크빈네르, 벨기에의 FC 브뤼셀 -----(최재수는 2012년에 어디로 이적했는가?)\n", + "mrc-0-004085: 신라 선덕여왕, R. H. 앨런 -----(맥국이라는 명칭을 알린 사람은?)\n", + "mrc-0-003807: 키홀더, 날카롭게 간 키홀더 -----(오두막의 첫 손님은 어떤 물건을 활용해 자살했는가?)\n", + "mrc-0-004710: 공훈의 보상, 다이라노 다다쓰네의 난 -----(국내무사가 체포 활동에 참가한 것은 무엇 때문인가?)\n", + "mrc-0-005012: 이탈리아 요리, 파스타 -----(미국에서 나폴리식 요리를 의미하는 요리는?)\n", + "mrc-0-003770: 명련사, 명련사이 -----(원래 요괴를 위해 만들었으나 차후 인간들의 신봉도 받게된 시설은?)\n", + "mrc-0-004111: 1924년, 1919년 -----(학생들이 일본인 선생들을 몰아내기 위해 동맹휴학 시위를 일으킨 해는 ?)\n", + "mrc-1-001775: 카르멜 수녀원, 암스테르담 -----(장면이 가족과 떨어져 거처를 옮긴 곳은?)\n", + "mrc-1-000627: 1967년 11월 15일, 9월 26일 -----(도무라 가즈사쿠가 대표로 있던 단체가 공산당과 결별을 선언했던 시기는?)\n", + "mrc-1-001316: 조선무선공학원, 창립기 -----(광운전자공과대학 이전에 사용되던 명칭은 무엇인가요?)\n", + "mrc-1-000977: '나는 참된 보통 선거를 원한다', 나는 참된 보통 선거를 원한다 (我要真普選)' -----(하나를 철거하면 열을 건다' 운동에 사용된 플랜카드의 내용은?)\n", + "mrc-0-003501: 백병계열군, 백병전특화계열의 직업 -----(PK, 수탈을 목적으로 하는 플레이어에게 인기가 많은 직업군은?)\n", + "mrc-1-000841: 사돈인 한진창, 구 대한제국 대신들 -----(윤치호가 고종 독살설을 믿게된 것은 누구 때문인가?)\n", + "mrc-0-005486: 조조, 이각(李傕) 등 -----(헌제는 추격을 당하다 누구에게 도움을 청하였나요?)\n", + "mrc-0-004410: 세르게이 미로노프, 빌헬름 바이틀링 -----(사회민주주의와 민주사회주의를 합친 사상을 가진 집단의 우두머리는 누구인가?)\n", + "mrc-0-001659: 솔레놉신이, 유산 -----(인간에게 불타는 느낌의 아픔을 주는 것은?)\n", + "mrc-0-001251: 공화당원 투표인들 만을 화나게, 공화당원 투표인들 만을 화나게 할 것 -----(듀이는 닉슨을 공천 후보에서 내리는 것이 어떤 결과를 초래할 것이라고 말했는가?)\n", + "mrc-1-000177: 제8조, 제3조 -----(조청상민수륙무역장정중의 8개조중, 장정의 개정에 대한 조항은?)\n", + "mrc-1-001517: 강원도 관찰사인, 강원도도장관 -----(이규완이 강원도에 철도 건설을 제안할 당시 직책은 무엇이었는가?)\n", + "mrc-0-003711: 성철(이영주), 성철 -----(법맥과 전등을 중시하면 스승없이 깨달음을 얻을 수 없다고 주장한 사람은?)\n", + "mrc-0-004335: 뉴욕타임스, 일간 뉴욕타임스 -----(중국 공산당원과 가족의 미국 입국 금지 방안 검토와 관련된 마이크 폼페이오 장관의 입장을 보도한 언론은?)\n", + "mrc-0-003436: 주노 해변, 디에프 해변 -----(제2캐나다기갑여단이 상륙한 곳은?)\n", + "mrc-0-002605: 수수께끼의 콘드률, 콘드률 -----(구립운석을 이루는 물질 중 널리 알려진 것은?)\n", + "\n", + "### 모두 다른 답변 ###\n", + "mrc-1-000653: ['사만', '사만 행성', '지구'] -----(유령'은 어느 행성에서 지구로 왔는가?)\n", + "mrc-0-000854: ['1916년', '1971년', '2008년'] -----(독일에서 외국 영화를 상영할 수 없게 된 연도는?)\n", + "mrc-0-001235: ['황소자리 성류', '미치류의 화석이 전세계에 걸쳐 발견된다는 것', '화석'] -----(미치류가 해안가를 통해 다른 곳으로 이동했다는 주장을 뒷받침하는 것은?)\n", + "mrc-1-000813: ['태풍 초이완이 마리아나 제도에서 벗어나자', '마리아나 제도', '9월 13일'] -----(태풍 초이완의 경보는 어떤 순간부터 풀렸는가?)\n", + "mrc-0-001699: ['SI 단위계', '미터법', 'SI'] -----(질량을 킬로그램으로 정의하는 단위 규칙은 무엇인가?)\n", + "mrc-0-001884: ['상반신', '하반신', '복잡한 2족 보행기구'] -----(레빌 장군은 무엇이 없었기 때문에 실망했나?)\n", + "mrc-0-003205: ['조선후기', '고려 초경', '조선후기에'] -----(석조지장보살상이 조각되지 않았을 것으로 추정되는 시기는?)\n", + "mrc-0-000359: ['독일', '독일군', '프랑스'] -----(제1차 마른강 전투에서 이긴 국가는?)\n", + "mrc-0-001382: ['이집트', '스페인', '프랑스'] -----(로마의 인력 수급에 중요한 역할을 한 나라는?)\n", + "mrc-0-002723: ['건강 증서', '\"건강 증서\"', '건강증서'] -----(화물과 배가 시내 가까이에 갈 수 있는지의 여부를 정하는 기준이 된 문서는?)\n", + "mrc-0-001445: ['1918년까지', '1960년 초반 아프리카인들의 독립 이전까지', '1960년 초반 아프리카인들의 독립 이전'] -----(독일의 식민 지배는 언제까지 지속됐는가?)\n", + "mrc-1-000536: ['장래의 시장 상황이 불투명', '양극화', '장래의 시장 상황이 불투명하다면'] -----(안전한 거래를 지지하는 주식 시장 참여자들은 어떤 집단 극화 양상을 보이나요?)\n", + "mrc-0-005293: ['밀리켄역', '케네디역', '유니언역'] -----(1985년 스토우빌선 열차가 스토우빌에서 출발해 여섯 번째로 정차했던 역은?)\n", + "mrc-1-001543: ['머나먼 다리', '밴드 오브 브라더스', '영화 머나먼 다리'] -----(마켓가든 작전을 다룬 작품은?)\n", + "mrc-0-002231: ['악령', '<고골에게 보내는 편지>', '사회적인 희곡'] -----(정치적 코미트를 담고있는 작품은?)\n", + "mrc-0-001961: ['남서풍', '북동풍', '동남풍'] -----(낮에는 어떤 바람이 부는가?)\n", + "mrc-0-004196: ['우주 토끼', '요로감염증', '합병증'] -----(루이가 사망하게 될 원인은 무엇인가?)\n", + "mrc-0-001778: ['1072년', '1045년', '1953년'] -----(고스자쿠 천황이 사망한 연도는?)\n", + "mrc-0-002074: ['3턴', '5턴', '최대 10일'] -----(야전의 전투 제한 시간은?)\n", + "mrc-1-000580: ['장웅', '오토야', '히스토리아가'] -----(키요미와 자신이 아끼는 2명을 지키기 위해 목숨도 아까워 하지 않은 사람은?)\n", + "mrc-0-004245: ['농상무대신', '외무대신', '외무대신과 농상무대신'] -----(이토 히로부미가 정치적 대립관계인 오쿠마 시게노부에게 준 관직은?)\n", + "mrc-0-000500: ['2006년', '2008년', '2009년'] -----(진관희가 짧은 기자 회견을 가진 해는?)\n", + "mrc-1-001071: ['남자아이 빈을 데려다 양자로 삼', '남자아이 빈을 데려다 양자', '남자아이 빈을 데려다 양자로 삼는다.'] -----(좌운검이 도연이 정조의 자손인 것을 아무도 모르게 하기 위해 한 행동은?)\n", + "mrc-1-001269: ['제임스 패닌', '패닌', '제임스 패닌 대령'] -----(에이몬 b. 킹을 파견한 사람은?)\n", + "mrc-1-000870: ['아즈마(東)', '마하프라즈냐파라미타샤스트라(Mahaprajnaparamita\\xadsastra)', '이즈마 하치로로'] -----(아즈마의 초기 명칭은?)\n", + "mrc-0-000527: ['순우리말 이름', '보물', '과학의 중요성'] -----(조선박물연구회가 공포하고자 한 것은?)\n", + "mrc-1-000278: ['차벽을 만드는 방법', '정보공개', '사전 구속 영장'] -----(청구취지는 밝히는 방법은?)\n", + "mrc-1-000094: ['구와바라', '구와바라 다케오', '구와바라 다케오(桑原武夫, 교토대 명예교수)'] -----(가와바타가 술 '고도'를 직접 사와서 시음시킨 사람은?)\n", + "mrc-1-000972: ['미노프스키 입자', '염소가스', '미노프스키 입자 산포'] -----(연방군의 레이다를 무력화시킨 화학무기는?)\n", + "mrc-0-000030: ['1643년', \"'관왕묘'\", '영천 숭렬당'] -----(수사들이 전쟁의 대가로 지은 건물은?)\n", + "mrc-0-001878: ['입석대(立石臺)', '입석대', '문장대'] -----(속리산에서 임경업 장군의 설화가 깃들어있는 곳은 어디인가?)\n", + "mrc-0-003441: ['라트비아', '렌나르트', '인민전선'] -----(에스토니아는 희망을 가졌는가' 를 발표한 인물이 리투아니와 협력한 떄는?)\n", + "mrc-1-000524: ['밀로셰비치', '슬로보단 밀로셰비치', '세르비아의 대통령 슬로보단 밀로셰비치'] -----(인민군이 세르비아를 확장하는 쪽으로 돌아서게 만든 사람은?)\n", + "mrc-1-001426: ['중재위원회를 설치하자고 공식적으로 요청', '수출 규제 해제 요청', '직선기선'] -----(한국이 무시한 일본 측의 주장은?)\n", + "mrc-0-004308: ['폭스바겐 제타', 'Beetles(딱정벌레)', \"'Beetles(딱정벌레)'\"] -----(폭스바겐이 곤충명을 이름으로 지은 차량은?)\n", + "mrc-0-002991: ['프리큐어들', '사카가미 아유미', '스마일과 스위트 멤버들이'] -----(처음에는 후짱을 반대했지만 마지막에 후짱의 도움을 받은 인물은?)\n" + ] + } + ], + "execution_count": 12 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-24T05:10:44.753209Z", + "start_time": "2024-10-24T05:10:44.748862Z" + } + }, + "cell_type": "code", + "source": [ + "\n", + "from openai import OpenAI\n", + "\n", + "def gpt_select_best_answer(question, answers):\n", + " \n", + " client = OpenAI(\n", + " # This is the default and can be omitted\n", + " api_key=os.environ.get(\"OPENAI_API_KEY\"),\n", + ")\n", + " prompt = f\"질문: {question}\\n\\n가능한 답변들: {', '.join(answers)}\\n\\n위 답변 중에서 가장 적합한 답변을 골라서 출력해. 반드시 저 안에 있어야 하고, 답변만 출력해.\"\n", + " \n", + " # GPT-3.5 API 호출\n", + " completion = client.chat.completions.create(\n", + " model=\"chatgpt-4o-latest\", # 사용할 모델\n", + " messages=[{\"role\": \"system\", \"content\": \"You are a helpful assistant.\"},\n", + " {\"role\": \"user\", \"content\": prompt}],\n", + " max_tokens=100,\n", + " temperature=0.5,\n", + " )\n", + " \n", + " return completion.choices[0].message.content.strip()" + ], + "id": "6696e802a0f17538", + "outputs": [], + "execution_count": 19 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-24T05:16:16.144056Z", + "start_time": "2024-10-24T05:12:00.749303Z" + } + }, + "cell_type": "code", + "source": [ + "\n", + "# 2개 겹치는 답변에 대해 GPT로 최종 선택\n", + "two_matching_final = {}\n", + "print(\"\\n### 2개 겹치는 답변 (GPT 선택) ###\")\n", + "for question_id, answers in two_matching.items():\n", + " question = id_to_question.get(question_id, \"질문 없음\")\n", + " final_answer = gpt_select_best_answer(question, answers)\n", + " two_matching_final[question_id] = final_answer\n", + " print(f\"{question_id}: {answers} 중 {final_answer} ({question})\")\n", + "\n", + "# 모두 다른 답변에 대해 GPT로 최종 선택\n", + "none_matching_final = {}\n", + "print(\"\\n### 모두 다른 답변 (GPT 선택) ###\")\n", + "for question_id, answers in none_matching.items():\n", + " question = id_to_question.get(question_id, \"질문 없음\")\n", + " final_answer = gpt_select_best_answer(question, answers)\n", + " none_matching_final[question_id] = final_answer\n", + " print(f\"{question_id}: {answers} 중 {final_answer} ({question})\")\n", + "\n", + "# 최종 결과 통합\n", + "final_results = all_matching.copy() # 3개 모두 겹치는 결과 복사\n", + "final_results.update(two_matching_final) # 2개 겹치는 GPT 선택 결과 업데이트\n", + "final_results.update(none_matching_final) # 모두 다른 GPT 선택 결과 업데이트\n", + "\n", + "# 최종 결과를 json 파일로 저장\n", + "with open(\"final_mrc_results(GPT).json\", \"w\", encoding='utf-8') as f:\n", + " json.dump(final_results, f, indent=4, ensure_ascii=False)\n", + "\n", + "print(\"\\n최종 결과가 'final_mrc_results(GPT).json'에 저장되었습니다.\")" + ], + "id": "3b29f7761285324f", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "\n", + "### 2개 겹치는 답변 (GPT 선택) ###\n", + "mrc-0-005021: ['91년 체제', '대의제도'] 중 대의제도 (상류 부르주아의 정치 독점을 불러일으킨 체계는?)\n", + "mrc-1-000163: ['구미호', '선종 조사 초상에 연고를 두고 있기 때문'] 중 선종 조사 초상에 연고를 두고 있기 때문 (아시노 호가 만들어진 원인은 무엇인가?)\n", + "mrc-0-000439: ['리처드 말킨', '점쟁이'] 중 리처드 말킨 (클레어에게 오세아닉 815편을 타라고 말한 사람의 이름은?)\n", + "mrc-0-000901: ['아라라기 코요미', '오시노 메메'] 중 아라라기 코요미 (괴수로부터 메구밍을 구해준 사람은 누구인가?)\n", + "mrc-0-001326: ['‘자유’지에', '《뉴스피플》'] 중 ‘자유’지에 (이유립씨가 1970년대 중반에 본인의 글을 기고하기 시작한 곳은?)\n", + "mrc-0-003644: ['이탈리아', '백제'] 중 이탈리아 (콘스탄티누스가 군사 4만 명을 이끌고 침범한 나라는?)\n", + "mrc-0-000049: ['게임플레이', '서사'] 중 게임플레이 (루돌로지스트들이 게임에서 가장 주된 것이라 주장하는 것은?)\n", + "mrc-0-001206: ['2007년', '1849년'] 중 1849년 (펌프가 발매된 해는 언제인가?)\n", + "mrc-0-003133: ['책', '불법 어업'] 중 불법 어업 (아델리 펭귄의 목숨에 지장을 주는 사람의 업종은 무엇인가요?)\n", + "mrc-0-001058: ['룸비니 동산', '카필라 성'] 중 룸비니 동산 (석가모니 부처가 태어난 곳은 어디인가?)\n", + "mrc-0-002361: ['독립', '영토'] 중 독립 (동맹을 맺음으로써 헝가리는 자유를 비롯해 무엇을 잃었나?)\n", + "mrc-0-001086: ['라이프치히', '초계면'] 중 라이프치히 (8천 명의 시민들이 모여 대규모 시위를 벌인 지역은?)\n", + "mrc-0-000624: ['영국', '노르웨이'] 중 노르웨이 (유로니우스를 살해한 용의자가 소속된 밴드의 국적은?)\n", + "mrc-1-001280: ['미국 대통령 우드로 윌슨', '미국의 대통령 우드로 윌슨'] 중 미국 대통령 우드로 윌슨 (자신이 고안한 14개조 평화원칙을 국제 사회에 발표하고 싶어한 인물은?)\n", + "mrc-0-000504: ['삼국시대', '고려시대'] 중 삼국시대 (팔과 다리가 밋밋한 형태인 신체표현은 어떤 시기를 반영한 것인가요?)\n", + "mrc-0-003763: ['광배(光背)의 뒷면', '불상조성도금사적기(佛像造成塗金事蹟記)'] 중 불상조성도금사적기(佛像造成塗金事蹟記) (불상에 대한 정보가 적혀있는 것은?)\n", + "mrc-0-003896: ['마튀랭 박사', '프랭크 맥린'] 중 프랭크 맥린 (병으로 인해 피렌체의 수많은 사람들이 죽어갔음을 언급한 사람은?)\n", + "mrc-0-003298: ['오카다 다케시', '김호'] 중 김호 (1994년 FIFA 월드컵 당시 대한민국 축구 대표팀의 감독은 누구인가?)\n", + "mrc-0-003628: ['공유 필명', '판권관리'] 중 공유 필명 (선라이즈의 애니메이션 작품 기획부는 야타테 하지메를 무엇으로 사용하는가?)\n", + "mrc-0-000432: ['조선건국동맹', '이르쿠츠크파 고려공산당 상하이 지부'] 중 조선건국동맹 (여운형이 조동호와 함께 조직한 것은?)\n", + "mrc-0-003364: ['아우구스투스 시대', '아우구스투스 시대(기원전 27년 ~ 기원후 14년)'] 중 아우구스투스 시대(기원전 27년 ~ 기원후 14년) (단색 배경에 추상적인 디자인을 쓰는 양식이 유행하던 시기는?)\n", + "mrc-0-003670: ['‘마루게’ 할아버지', '‘마루게’'] 중 마루게 (최고령 초등학생으로 기네스북에 올라있는 사람은?)\n", + "mrc-0-000386: ['야즈데게르드 3세', '호세 1세'] 중 야즈데게르드 3세 (628년에 새롭게 왕위에 오른 사람은 누구인가요?)\n", + "mrc-0-004345: ['1991년', '2001년'] 중 2001년 (셰이크 무지부르 라흐만의 딸이 처음으로 선거에서 졌던 해는?)\n", + "mrc-0-001470: ['볼가 지방', '만주국 무단장 성 무단장 시에'] 중 만주국 무단장 성 무단장 시에 (소설 <형제>의 작가가 태어난 지역은?)\n", + "mrc-1-001239: ['쉴드 빔', '대형 액정 모니터'] 중 쉴드 빔 (무엇이 창 아래에 설치되어 표시기가 한 개 늘어났는가?)\n", + "mrc-0-001940: ['경문왕', '신라 경문왕'] 중 신라 경문왕 (동화사 석조비로자나불이 제작될 때, 당시 임금은 누구였는가?)\n", + "mrc-0-001241: ['환율 부문', '상업 분야'] 중 상업 분야 (협동 화폐 거래소의 인정은 어느 부문에서 나타나는 변화인가?)\n", + "mrc-1-001457: ['도요토미 히데요시', '청나라의 북양대신(北洋大臣) 이홍장'] 중 도요토미 히데요시 (조선역사를 수호하는데 위기를 제공한 사람은?)\n", + "mrc-1-000908: ['기생충', '변비'] 중 기생충 (비자나무의 열매는 어떤 증상을 치료하기 위해 쓰이나요?)\n", + "mrc-1-000116: ['가이아', '타르타로스'] 중 타르타로스 (튀폰의 아버지는 누구인가?)\n", + "mrc-0-004669: ['교황', '베드로좌'] 중 베드로좌 (가톨릭 교회에서 주교에게 '최고사제'의 자격을 주는 직함의 이름은?)\n", + "mrc-0-002210: ['통인 주기', '조선인민군'] 중 통인 주기 (아랑을 살해한 사람은?)\n", + "mrc-1-000862: ['대막리지 연개소문', '설인귀'] 중 설인귀 (당의 군대를 몰살시킨 사람은?)\n", + "mrc-0-000986: ['마라도나', '오스마르'] 중 오스마르 (전반전이 6분이 지난 후 골을 넣은 선수는?)\n", + "mrc-0-003970: ['센리 선', '교토 본선과 센리 선'] 중 교토 본선과 센리 선 (통근특급이 걸림돌인 노선과 서로 평면교차하는 노선은 어디인가?)\n", + "mrc-0-000304: ['1919년 10월 1일', '1919년 1월26일'] 중 1919년 10월 1일 (국경일에 일장기를 달아도 반대하지 않을 것이라는 내용을 담은 윤치호의 일기는 언제 쓰여진 것인가?)\n", + "mrc-1-001025: ['티탄즈', '특수부대티탄즈'] 중 티탄즈 (자미토프가 개혁을 강행하기 위해 설립한 사병 집단은?)\n", + "mrc-0-001374: ['1530년', '1305년'] 중 1305년 (성 요한 기사단이 로도스 섬으로 거처를 옮긴 년도는?)\n", + "mrc-0-001783: ['자자 빙크스', '나부의 의원 자자 빙크스'] 중 나부의 의원 자자 빙크스 (팰퍼틴에게 비상시의 권리를 도맡아 달라고 의견을 냈던 인물은?)\n", + "mrc-0-005332: ['백제금동대향로', '동탁은잔'] 중 백제금동대향로 (날개 앞쪽으로 연꽃을 들고 있는 인면조가 그려진 백제의 유물은 무엇인가?)\n", + "mrc-1-001594: ['자유송환', '자동송환'] 중 자유송환 (각 측에서 주장된 포로교환 방법 중 선택된 것은?)\n", + "mrc-0-002938: ['데이 페소', '찰스 디 페소'] 중 찰스 디 페소 (티나헤로가 아칸바로의 유적을 날조한 것이라고 주장한 인물은?)\n", + "mrc-0-002936: ['소비에트 연방', '붉은 군대'] 중 붉은 군대 (메리의 사촌은 어디에서 영웅으로 활약하기도 했나요?)\n", + "mrc-0-003706: ['천공', '6신관'] 중 천공 (마'를 피하기 위해 살몬 신전을 보낸 곳은?)\n", + "mrc-0-001021: ['투사체의 궤적', '보스턴의 폐공장'] 중 투사체의 궤적 (타격이 시작되는 것은 대상이 어디에 나타날 때인가?)\n", + "mrc-0-003236: ['베를린', '프로이센'] 중 베를린 (작센군과 오스트리아군은 함께 어디를 공격할 예정이였나?)\n", + "mrc-0-001379: ['퓌르트', '리즈 유나이티드 FC'] 중 리즈 유나이티드 FC (네델란드와의 친선 경기에서 유일하게 골을 넣은 선수의 소속팀은?)\n", + "mrc-0-004927: ['풍력이나 조력 발전 등 대체 에너지의 개발', '대체 에너지의 개발'] 중 풍력이나 조력 발전 등 대체 에너지의 개발 (아일랜드의 자원 공급 불안과 지구 온난화에 대한 해결방안은?)\n", + "mrc-0-000576: ['알 카포네', '베니토 무솔리니'] 중 베니토 무솔리니 (히틀러의 반란은 누구를 모방한 것인가?)\n", + "mrc-0-002786: ['외교부 장관직', '외교부 장관'] 중 외교부 장관 (최초로 공산주의 정당을 제외한 선거 이후 메리가 맡은 직책은?)\n", + "mrc-0-001105: ['실존주의', '실존주의 사상'] 중 실존주의 (오노에게 영향을 미친 장 폴 사르트르의 철학은?)\n", + "mrc-0-001896: ['P 시리즈', '스페셜라이즈드의 P 시리즈'] 중 스페셜라이즈드의 P 시리즈 (산악 자전거 프리 라이드 부문에 출전하는 마틴 소더스트롬이 이용하는 제품은?)\n", + "mrc-0-001887: ['고려 중기 이후', '18세기 중후반'] 중 고려 중기 이후 (부피와 무게감을 나타낸 얼굴이나 짧은 목 등을 통해 알 수 있는 불상의 축조 시기는?)\n", + "mrc-1-001797: ['감옥', '뮌헨 발트프리드호프'] 중 뮌헨 발트프리드호프 (이경언이 사망한 장소는?)\n", + "mrc-0-002028: ['리을설', '리을설(李乙雪, 1921-2015)'] 중 리을설(李乙雪, 1921-2015) (김일성이 소련인으로서 살고 싶어했다고 말을 한 인물은?)\n", + "mrc-0-003031: ['당 태종', '수 양제(煬帝)'] 중 당 태종 (고구려에 크게 지고 그 전쟁때문에 병이나서 죽은 당나라 왕은?)\n", + "mrc-1-000235: [\"'농지'\", \"'농지'(農地)\"] 중 '농지' (레닌에 의하면 자본주의식 농업 시스템을 통해 일반 시민들이 더 쉽게 사용할 수 있게 된 것은 무엇인가?)\n", + "mrc-0-002716: ['《지옥에서 보낸 한 철》', '지에코초'] 중 《지옥에서 보낸 한 철》 (아르튀르가 베르린과의 연애생활을 한 경험을 쓴 시집이름은?)\n", + "mrc-0-003961: ['마에노 료타쿠', '스기타 겐파쿠'] 중 스기타 겐파쿠 (네덜란드어를 몰랐으나 타펠 아나토미아의 해부도 번역에 참여한 것은 누구인가?)\n", + "mrc-1-001721: ['이경희', '조카 윤보선'] 중 조카 윤보선 (선생님에게 창씨개명을 하지 않겠다고 한 사람은?)\n", + "mrc-0-004738: ['헌법', '일본국헌법'] 중 헌법 (주권재민의 원칙은 어디에 명시되어 있는가?)\n", + "mrc-1-001603: ['법관 출신 인사', '사법개혁을 책임질 법관 출신 인사'] 중 사법개혁을 책임질 법관 출신 인사 (21대 총선을 겨냥하여 사법개혁을 이끌어갈 수 있다는 것에 뒷받침된 명목은?)\n", + "mrc-0-003356: ['언더우드(Underwood)박사', '진주강씨'] 중 언더우드(Underwood)박사 (윤치호의 아내는 누구의 부인을 방문했나?)\n", + "mrc-1-000769: ['좌일선의 제1대대', '제1대대'] 중 제1대대 (107고지를 처음 함락시킨 부대는?)\n", + "mrc-0-000114: ['코드', '코드가 변조되거나 손상되지 않음'] 중 코드가 변조되거나 손상되지 않음 (코드 서명이 보증하는 대상은?)\n", + "mrc-0-002997: ['1922년', '1954년'] 중 1922년 (타누당(TANU)를 설립한 인물이 태어난 해는?)\n", + "mrc-1-000889: ['금산전투', '667년의 금산전투'] 중 667년의 금산전투 (고구려와 당나라 사이에 4대 전투 중 유일하게 다른 해에 일어난 전투는?)\n", + "mrc-1-000267: ['3층', '지상 2층'] 중 지상 2층 (도쇼구 역의 승강장은 몇 층에 있는가?)\n", + "mrc-0-002654: ['사운드클라우드', '본인 사운드클라우드 계정'] 중 사운드클라우드 (navigation'이 올라온 사이트는?)\n", + "mrc-0-002758: ['우크라이나', '잉글랜드'] 중 잉글랜드 (스위스가 월드컵에서 이긴 나라는?)\n", + "mrc-1-001727: ['수영공원', '수영사적공원'] 중 수영사적공원 (경상좌도 수군절도사영이 관리했던 곳은?)\n", + "mrc-0-004755: ['서울대 터', '장충단공원'] 중 장충단공원 (공원으로 변화되는 곳은?)\n", + "mrc-0-002525: ['<<종횡무진 한국경제>>', '종횡무진 한국경제'] 중 종횡무진 한국경제 (장하준 교수의 한국경제에 대한 생각에 대해 반론한 김상조 교수의 저서는?)\n", + "mrc-0-001847: ['호해', '2세 황제 호해'] 중 2세 황제 호해 (자신의 사리사욕만 채우며 무능했던 진나라의 황제는?)\n", + "mrc-0-003215: ['1773년', '1770년'] 중 1773년 (보스턴 차 사건이 발발한 년도는?)\n", + "mrc-0-001757: ['《Nirvana》', 'Delay 1968'] 중 Delay 1968 (Yoo Doo Right이 수록된 앨범명은?)\n", + "mrc-0-004594: ['교육 및 문화 교류를 통해 미국 사람들과 다른 국가 사람들 간의 상호 이해를 높이는 것', '외국인노동자의 정주화 방지'] 중 외국인노동자의 정주화 방지 (외국인 근로자 고용 등에 대한 법률'의 목적은?)\n", + "mrc-0-001133: ['언카스(또는 다운카스, Uncas)', '언카스'] 중 언카스 (17세기 피쿼트로부터 독립하여 모하칸족을 만든 사람은?)\n", + "mrc-0-003821: ['오스트리아', '잉글랜드'] 중 오스트리아 (프랑스군은 마렝고에서 어떤 나라의 군대와 마주하였나?)\n", + "mrc-0-001607: ['스렝이', '스렝과'] 중 스렝 (누아다가 오른손이 없는 이유는 누구 때문인가?)\n", + "mrc-0-003454: ['16세기', '샤를마뉴 황제 (742789 CE) 당시 로마 제국의 쇠퇴 이후'] 중 16세기 (현대 식물원은 언제 오픈되었는가?)\n", + "mrc-0-000206: ['2월 혁명', '프랑스 제2공화국을 선포'] 중 2월 혁명 (필리프가 왕실에서 쫒겨난 사건의 단초가 된 역사적 사건은?)\n", + "mrc-0-003043: ['경시청 수사1과', '수사1과'] 중 수사1과 (시바사키의 이전 소속 부서는?)\n", + "mrc-0-003434: ['재산권 박탈', '계획 경제'] 중 재산권 박탈 (평등과 복지 사회를 이루기 위해 필요한 것이라는 선전 하에 행해지는 것은?)\n", + "mrc-0-001324: ['부산시', '부산'] 중 부산 (《서편 삼층석탑》은 어느 지역의 유형문화재로 지정되어있나요?)\n", + "mrc-0-002127: ['4막 3장이', '4막 3장'] 중 4막 3장 (맬컴이 맥더프에게 상실에 슬퍼할 줄 알아야 함을 배우는 장은?)\n", + "mrc-0-001438: ['금강산 보광암', '봉원사'] 중 봉원사 (이보담은 어느 절에서 스님이 되었는가?)\n", + "mrc-0-001415: ['상서좌복야(尙書左僕射)', '노룡군의 대장'] 중 상서좌복야(尙書左僕射) (이무훈에게 살해당한 인물의 직책은?)\n", + "mrc-1-000650: ['불투명하고 착색된 광물', '광물'] 중 광물 (조흔색은 무엇을 구별하는데 도움을 주나요?)\n", + "mrc-0-003105: ['폭동', '4·19 폭동설’'] 중 4·19 폭동설 (군부세력들이 어떤 상황을 빌미로 쿠테타를 일으키려고 했나?)\n", + "mrc-0-002170: ['《소우기》', '《소우기》(小右記)'] 중 《소우기》(小右記) (우치쿠라노 이시메가 작성한 내용이 실린 기록은 무엇인가요?)\n", + "mrc-0-002414: ['꼬리부분', '머리와 손목'] 중 머리와 손목 (보디 스타킹에서 봉제되지 않은 부분은?)\n", + "mrc-0-000668: ['메란', '돈화현 육정산 고분군'] 중 메란 (프랑크 왕족들의 무덤이 있는 곳은?)\n", + "mrc-1-001689: ['라위스달', '카네츠 신베에'] 중 라위스달 (홉베마의 스승은 누구인가요?)\n", + "mrc-0-002493: ['미국', '세르비아'] 중 세르비아 (쿠챤과 밀로셰비치의 협의에 대해서 작성한 작가의 출신국가는?)\n", + "mrc-0-002092: ['소방공무원법', '「소방공무원법」'] 중 소방공무원법 (시도 도지사가 시도 소속 소방공무원을 임용할 수 있도록 개정된 법은?)\n", + "mrc-1-001196: ['트리아 터너', '4번째 외야수'] 중 트리아 터너 (2016시즌 당시 테일러는 누구 대신 주전이 되었나?)\n", + "mrc-0-002045: ['송병하', '송준길'] 중 송준길 (호연재 김씨의 시증조부는?)\n", + "mrc-0-003645: ['<밤으로의 긴 여행>', '밤으로의 긴 여행'] 중 밤으로의 긴 여행 (손턴 와일더 사후, 최고의 명작으로 손꼽히는 작품은 무엇인가?)\n", + "mrc-0-001272: ['강물', '왕성'] 중 강물 (신립이 스스로 목숨을 끊은 곳은?)\n", + "mrc-0-003639: [\"'거대한 탑'\", \"'온'\"] 중 '거대한 탑' (단어 '토레혼'의 어근은?)\n", + "mrc-0-001046: ['현직 대통령 프랭클린 D. 루스벨트', '프랭클린 D. 루스벨트'] 중 프랭클린 D. 루스벨트 (총선에서 듀이를 꺾은 사람은?)\n", + "mrc-0-001863: ['나스티카', '베다의 권위를 인정하는 가의 여부'] 중 베다의 권위를 인정하는 가의 여부 (베단타 학파와 차르바카파는 무엇을 기준으로 나뉘어졌나요?)\n", + "mrc-0-001123: ['레반스라움', '레반스라움을 위한 식민주의'] 중 레반스라움을 위한 식민주의 (토산물을 착취하는 등과 같은 업무의 명목은?)\n", + "mrc-1-000056: ['라크스 클라인', '패트릭 자라'] 중 라크스 클라인 (프리덤 건담의 이름을 지은 사람은?)\n", + "mrc-0-001192: ['우윤근 원내대표', '박근혜 대통령'] 중 박근혜 대통령 (통진당을 해산시킨 결정을 인정한다고 직접 말한 인물은?)\n", + "mrc-0-005108: ['아도니스', '에로스'] 중 아도니스 (진홍빛 장미가 만들어진 원인을 제공한 자는?)\n", + "mrc-1-000713: ['드주드주아나의 동굴', '티베트'] 중 드주드주아나의 동굴 (처음으로 염색된 섬유가 발견되었던 장소는?)\n", + "mrc-0-004970: ['한 번', '5.3마리'] 중 한 번 (붉은자이언트날다람쥐 암컷의 일 년 평균 번식 횟수는?)\n", + "mrc-1-000690: ['하비 로우마이어', \"'리카르도 클레멘트'\"] 중 하비 로우마이어 (레이가 골트 이후에 사용한 가짜 이름은 무엇인가요?)\n", + "mrc-0-003499: ['초음파 가습기', '초음파식 가습기'] 중 초음파식 가습기 (물방울에 급수대의 이물질이 없는 가습기는?)\n", + "mrc-0-004708: ['위장', '땅 속이나 나무 줄기 사이'] 중 위장 (어버이새가 새끼들의 먹이를 보관하는 곳은?)\n", + "mrc-0-004579: ['전라북도 전주', '루이지애나주 센터빌'] 중 전라북도 전주 (경서교회를 설립한 사람이 태어난 도시는 어디인가?)\n", + "mrc-0-000255: ['인사관리에 대한 통제권', '실권'] 중 인사관리에 대한 통제권 (사장이 부하직원에게 행사할 수 있는 권리는 무엇인가?)\n", + "mrc-0-001539: ['목포터미널 인근 도심', '목포'] 중 목포터미널 인근 도심 (부부가 딸을 차에 태운 곳은?)\n", + "mrc-0-005166: ['플로이드가 말을 하고 있으니 괜찮다고', '괜찮다고'] 중 플로이드가 말을 하고 있으니 괜찮다고 (행인의 플로이드가 코피난다는 말에 경찰관은 뭐라고 말했는가?)\n", + "mrc-0-000150: ['3-3 무승부', '3-3'] 중 3-3 (아만시오가 처음으로 출전한 유럽대항전의 결과는?)\n", + "mrc-0-000760: ['공개 프록시', 'IP 주소'] 중 공개 프록시 (다중 계정 사용자의 판별을 불가능하게 하는 것은?)\n", + "mrc-0-004510: ['인체의 치수', '인체의 치수(인체측정학의 측정 기준)'] 중 인체의 치수(인체측정학의 측정 기준) (인간에게 가장 익숙한 크기의 개념은 무엇인가요?)\n", + "mrc-0-002482: ['근원 마그마가 형성되는 기작이 다르기 때문', '근원 마그마가 형성되는 기작'] 중 근원 마그마가 형성되는 기작이 다르기 때문 (발산형 경계와 수렴형경계의 마그마 점성이 다른 이유는?)\n", + "mrc-1-001729: ['수리물리학', '수리 물리학'] 중 수리물리학 (이론물리학에 비해 수학적인 부분을 더 강조하는 학문은?)\n", + "mrc-0-004371: ['미드(Mead)', '원세훈'] 중 미드(Mead) (역할을 가장 먼저 구체화 시킨 사람은?)\n", + "mrc-0-002763: ['강릉', '개성'] 중 강릉 (신혜왕후가 묻혀있는 지역은?)\n", + "mrc-0-001429: ['제노바 공화국', '독일'] 중 제노바 공화국 (요안니스 5세의 쿠테타를 지원한 것은 어느 나라인가?)\n", + "mrc-0-004649: ['내각', '국가판무관부'] 중 내각 (히틀러의 권한을 합법적으로 확대시켜준 국가 기관은?)\n", + "mrc-0-004438: ['과학적인 의문에 대한 답변을 얻거나 문제에 대한 조사를 하기 위한 목적', '교란 요인을 통제하는 것'] 중 과학적인 의문에 대한 답변을 얻거나 문제에 대한 조사를 하기 위한 목적 (연구자들이 설계된 실험실을 이용하는 것은 무엇을 위해서인가?)\n", + "mrc-0-005422: ['옥시전 디스트로이어', \"'옥시전 디스트로이어'\"] 중 옥시전 디스트로이어 (세리자와 박사가 숨기려고 한 것은?)\n", + "mrc-0-000394: ['김영춘', '김정은'] 중 김정은 (조선인민공화국에서 최고로 높은 직위에 오른 자는?)\n", + "mrc-0-002289: ['가덕도', '남해안 연안일대의 요충지'] 중 남해안 연안일대의 요충지 (조선수군의 길목을 차단하기 위해 일본군이 설치한 왜성이 위치한 장소는?)\n", + "mrc-0-003038: ['에피루스의 주교 에우리아의 요한', '에우리아의 요한'] 중 에우리아의 요한 (알키온의 주교 자리를 빼앗은 사람은?)\n", + "mrc-0-001682: ['사형', '무죄'] 중 사형 (보닌이 살인 혐의로 체포되어 받은 형벌은?)\n", + "mrc-0-001457: ['오스트리아-헝가리 제국', '세르비아'] 중 세르비아 (러시아가 동원령을 내린 것은 어느 나라를 견제하기 위해서인가?)\n", + "mrc-0-003755: ['권문세족', '무신'] 중 무신 (정중부의 난 이전 병권을 장악한 집단은?)\n", + "mrc-0-002696: ['1948년', '1949년'] 중 1948년 (베이핑-톈진 전투가 시작된 연도는?)\n", + "mrc-0-000564: ['1970년', '1835년'] 중 1835년 (여성 작가들이 언제부터 여성 등장인물에 관심을 가지기 시작했나요?)\n", + "mrc-0-004323: ['강력범죄 특별수사관', '연극배우'] 중 강력범죄 특별수사관 (알렉스의 직업은?)\n", + "mrc-0-000664: ['벤자민 바커', '벤저민 바커'] 중 벤자민 바커 (스위니 토드의 본명은?)\n", + "mrc-0-004392: ['뇌 일부', '뇌'] 중 뇌 (모토코의 몸 중에 인공적인 기계장치로 되어 있지 않은 곳은?)\n", + "mrc-0-000162: ['스타베크 포트발 크빈네르', '벨기에의 FC 브뤼셀'] 중 벨기에의 FC 브뤼셀 (최재수는 2012년에 어디로 이적했는가?)\n", + "mrc-0-004085: ['신라 선덕여왕', 'R. H. 앨런'] 중 R. H. 앨런 (맥국이라는 명칭을 알린 사람은?)\n", + "mrc-0-003807: ['키홀더', '날카롭게 간 키홀더'] 중 날카롭게 간 키홀더 (오두막의 첫 손님은 어떤 물건을 활용해 자살했는가?)\n", + "mrc-0-004710: ['공훈의 보상', '다이라노 다다쓰네의 난'] 중 다이라노 다다쓰네의 난 (국내무사가 체포 활동에 참가한 것은 무엇 때문인가?)\n", + "mrc-0-005012: ['이탈리아 요리', '파스타'] 중 이탈리아 요리 (미국에서 나폴리식 요리를 의미하는 요리는?)\n", + "mrc-0-003770: ['명련사', '명련사이'] 중 명련사 (원래 요괴를 위해 만들었으나 차후 인간들의 신봉도 받게된 시설은?)\n", + "mrc-0-004111: ['1924년', '1919년'] 중 1924년 (학생들이 일본인 선생들을 몰아내기 위해 동맹휴학 시위를 일으킨 해는 ?)\n", + "mrc-1-001775: ['카르멜 수녀원', '암스테르담'] 중 암스테르담 (장면이 가족과 떨어져 거처를 옮긴 곳은?)\n", + "mrc-1-000627: ['1967년 11월 15일', '9월 26일'] 중 1967년 11월 15일 (도무라 가즈사쿠가 대표로 있던 단체가 공산당과 결별을 선언했던 시기는?)\n", + "mrc-1-001316: ['조선무선공학원', '창립기'] 중 조선무선공학원 (광운전자공과대학 이전에 사용되던 명칭은 무엇인가요?)\n", + "mrc-1-000977: [\"'나는 참된 보통 선거를 원한다'\", \"나는 참된 보통 선거를 원한다 (我要真普選)'\"] 중 나는 참된 보통 선거를 원한다 (我要真普選) (하나를 철거하면 열을 건다' 운동에 사용된 플랜카드의 내용은?)\n", + "mrc-0-003501: ['백병계열군', '백병전특화계열의 직업'] 중 백병전특화계열의 직업 (PK, 수탈을 목적으로 하는 플레이어에게 인기가 많은 직업군은?)\n", + "mrc-1-000841: ['사돈인 한진창', '구 대한제국 대신들'] 중 사돈인 한진창 (윤치호가 고종 독살설을 믿게된 것은 누구 때문인가?)\n", + "mrc-0-005486: ['조조', '이각(李傕) 등'] 중 조조 (헌제는 추격을 당하다 누구에게 도움을 청하였나요?)\n", + "mrc-0-004410: ['세르게이 미로노프', '빌헬름 바이틀링'] 중 세르게이 미로노프 (사회민주주의와 민주사회주의를 합친 사상을 가진 집단의 우두머리는 누구인가?)\n", + "mrc-0-001659: ['솔레놉신이', '유산'] 중 솔레놉신이 (인간에게 불타는 느낌의 아픔을 주는 것은?)\n", + "mrc-0-001251: ['공화당원 투표인들 만을 화나게', '공화당원 투표인들 만을 화나게 할 것'] 중 공화당원 투표인들 만을 화나게 할 것 (듀이는 닉슨을 공천 후보에서 내리는 것이 어떤 결과를 초래할 것이라고 말했는가?)\n", + "mrc-1-000177: ['제8조', '제3조'] 중 제8조 (조청상민수륙무역장정중의 8개조중, 장정의 개정에 대한 조항은?)\n", + "mrc-1-001517: ['강원도 관찰사인', '강원도도장관'] 중 강원도 관찰사인 (이규완이 강원도에 철도 건설을 제안할 당시 직책은 무엇이었는가?)\n", + "mrc-0-003711: ['성철(이영주)', '성철'] 중 성철(이영주) (법맥과 전등을 중시하면 스승없이 깨달음을 얻을 수 없다고 주장한 사람은?)\n", + "mrc-0-004335: ['뉴욕타임스', '일간 뉴욕타임스'] 중 뉴욕타임스 (중국 공산당원과 가족의 미국 입국 금지 방안 검토와 관련된 마이크 폼페이오 장관의 입장을 보도한 언론은?)\n", + "mrc-0-003436: ['주노 해변', '디에프 해변'] 중 주노 해변 (제2캐나다기갑여단이 상륙한 곳은?)\n", + "mrc-0-002605: ['수수께끼의 콘드률', '콘드률'] 중 콘드률 (구립운석을 이루는 물질 중 널리 알려진 것은?)\n", + "\n", + "### 모두 다른 답변 (GPT 선택) ###\n", + "mrc-1-000653: ['사만', '사만 행성', '지구'] 중 사만 행성 (유령'은 어느 행성에서 지구로 왔는가?)\n", + "mrc-0-000854: ['1916년', '1971년', '2008년'] 중 1916년 (독일에서 외국 영화를 상영할 수 없게 된 연도는?)\n", + "mrc-0-001235: ['황소자리 성류', '미치류의 화석이 전세계에 걸쳐 발견된다는 것', '화석'] 중 미치류의 화석이 전세계에 걸쳐 발견된다는 것 (미치류가 해안가를 통해 다른 곳으로 이동했다는 주장을 뒷받침하는 것은?)\n", + "mrc-1-000813: ['태풍 초이완이 마리아나 제도에서 벗어나자', '마리아나 제도', '9월 13일'] 중 마리아나 제도, 9월 13일 (태풍 초이완의 경보는 어떤 순간부터 풀렸는가?)\n", + "mrc-0-001699: ['SI 단위계', '미터법', 'SI'] 중 SI (질량을 킬로그램으로 정의하는 단위 규칙은 무엇인가?)\n", + "mrc-0-001884: ['상반신', '하반신', '복잡한 2족 보행기구'] 중 복잡한 2족 보행기구 (레빌 장군은 무엇이 없었기 때문에 실망했나?)\n", + "mrc-0-003205: ['조선후기', '고려 초경', '조선후기에'] 중 조선후기 (석조지장보살상이 조각되지 않았을 것으로 추정되는 시기는?)\n", + "mrc-0-000359: ['독일', '독일군', '프랑스'] 중 독일군 (제1차 마른강 전투에서 이긴 국가는?)\n", + "mrc-0-001382: ['이집트', '스페인', '프랑스'] 중 이집트 (로마의 인력 수급에 중요한 역할을 한 나라는?)\n", + "mrc-0-002723: ['건강 증서', '\"건강 증서\"', '건강증서'] 중 건강증서 (화물과 배가 시내 가까이에 갈 수 있는지의 여부를 정하는 기준이 된 문서는?)\n", + "mrc-0-001445: ['1918년까지', '1960년 초반 아프리카인들의 독립 이전까지', '1960년 초반 아프리카인들의 독립 이전'] 중 1918년까지 (독일의 식민 지배는 언제까지 지속됐는가?)\n", + "mrc-1-000536: ['장래의 시장 상황이 불투명', '양극화', '장래의 시장 상황이 불투명하다면'] 중 양극화 (안전한 거래를 지지하는 주식 시장 참여자들은 어떤 집단 극화 양상을 보이나요?)\n", + "mrc-0-005293: ['밀리켄역', '케네디역', '유니언역'] 중 유니언역 (1985년 스토우빌선 열차가 스토우빌에서 출발해 여섯 번째로 정차했던 역은?)\n", + "mrc-1-001543: ['머나먼 다리', '밴드 오브 브라더스', '영화 머나먼 다리'] 중 머나먼 다리 (마켓가든 작전을 다룬 작품은?)\n", + "mrc-0-002231: ['악령', '<고골에게 보내는 편지>', '사회적인 희곡'] 중 사회적인 희곡 (정치적 코미트를 담고있는 작품은?)\n", + "mrc-0-001961: ['남서풍', '북동풍', '동남풍'] 중 남서풍 (낮에는 어떤 바람이 부는가?)\n", + "mrc-0-004196: ['우주 토끼', '요로감염증', '합병증'] 중 합병증 (루이가 사망하게 될 원인은 무엇인가?)\n", + "mrc-0-001778: ['1072년', '1045년', '1953년'] 중 1045년 (고스자쿠 천황이 사망한 연도는?)\n", + "mrc-0-002074: ['3턴', '5턴', '최대 10일'] 중 3턴 (야전의 전투 제한 시간은?)\n", + "mrc-1-000580: ['장웅', '오토야', '히스토리아가'] 중 오토야 (키요미와 자신이 아끼는 2명을 지키기 위해 목숨도 아까워 하지 않은 사람은?)\n", + "mrc-0-004245: ['농상무대신', '외무대신', '외무대신과 농상무대신'] 중 외무대신과 농상무대신 (이토 히로부미가 정치적 대립관계인 오쿠마 시게노부에게 준 관직은?)\n", + "mrc-0-000500: ['2006년', '2008년', '2009년'] 중 2008년 (진관희가 짧은 기자 회견을 가진 해는?)\n", + "mrc-1-001071: ['남자아이 빈을 데려다 양자로 삼', '남자아이 빈을 데려다 양자', '남자아이 빈을 데려다 양자로 삼는다.'] 중 남자아이 빈을 데려다 양자로 삼는다. (좌운검이 도연이 정조의 자손인 것을 아무도 모르게 하기 위해 한 행동은?)\n", + "mrc-1-001269: ['제임스 패닌', '패닌', '제임스 패닌 대령'] 중 제임스 패닌 (에이몬 b. 킹을 파견한 사람은?)\n", + "mrc-1-000870: ['아즈마(東)', '마하프라즈냐파라미타샤스트라(Mahaprajnaparamita\\xadsastra)', '이즈마 하치로로'] 중 아즈마(東) (아즈마의 초기 명칭은?)\n", + "mrc-0-000527: ['순우리말 이름', '보물', '과학의 중요성'] 중 보물 (조선박물연구회가 공포하고자 한 것은?)\n", + "mrc-1-000278: ['차벽을 만드는 방법', '정보공개', '사전 구속 영장'] 중 정보공개 (청구취지는 밝히는 방법은?)\n", + "mrc-1-000094: ['구와바라', '구와바라 다케오', '구와바라 다케오(桑原武夫, 교토대 명예교수)'] 중 구와바라 다케오(桑原武夫, 교토대 명예교수) (가와바타가 술 '고도'를 직접 사와서 시음시킨 사람은?)\n", + "mrc-1-000972: ['미노프스키 입자', '염소가스', '미노프스키 입자 산포'] 중 미노프스키 입자 산포 (연방군의 레이다를 무력화시킨 화학무기는?)\n", + "mrc-0-000030: ['1643년', \"'관왕묘'\", '영천 숭렬당'] 중 영천 숭렬당 (수사들이 전쟁의 대가로 지은 건물은?)\n", + "mrc-0-001878: ['입석대(立石臺)', '입석대', '문장대'] 중 입석대 (속리산에서 임경업 장군의 설화가 깃들어있는 곳은 어디인가?)\n", + "mrc-0-003441: ['라트비아', '렌나르트', '인민전선'] 중 렌나르트 (에스토니아는 희망을 가졌는가' 를 발표한 인물이 리투아니와 협력한 떄는?)\n", + "mrc-1-000524: ['밀로셰비치', '슬로보단 밀로셰비치', '세르비아의 대통령 슬로보단 밀로셰비치'] 중 슬로보단 밀로셰비치 (인민군이 세르비아를 확장하는 쪽으로 돌아서게 만든 사람은?)\n", + "mrc-1-001426: ['중재위원회를 설치하자고 공식적으로 요청', '수출 규제 해제 요청', '직선기선'] 중 중재위원회를 설치하자고 공식적으로 요청 (한국이 무시한 일본 측의 주장은?)\n", + "mrc-0-004308: ['폭스바겐 제타', 'Beetles(딱정벌레)', \"'Beetles(딱정벌레)'\"] 중 Beetles(딱정벌레) (폭스바겐이 곤충명을 이름으로 지은 차량은?)\n", + "mrc-0-002991: ['프리큐어들', '사카가미 아유미', '스마일과 스위트 멤버들이'] 중 프리큐어들 (처음에는 후짱을 반대했지만 마지막에 후짱의 도움을 받은 인물은?)\n", + "\n", + "최종 결과가 'final_mrc_results2.json'에 저장되었습니다.\n" + ] + } + ], + "execution_count": 21 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-24T05:38:27.374788Z", + "start_time": "2024-10-24T05:38:27.358680Z" + } + }, + "cell_type": "code", + "source": "", + "id": "853376dcf4657d69", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + " title context \\\n", + "0 미국 상원 미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국... \n", + "1 인사조직관리 '근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19... \n", + "2 강희제 강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전... \n", + "3 금동삼존불감 불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든... \n", + "4 계사명 사리구 동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기... \n", + "\n", + " question \\\n", + "0 대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은? \n", + "1 현대적 인사조직관리의 시발점이 된 책은? \n", + "2 강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가? \n", + "3 11~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요? \n", + "4 명문이 적힌 유물을 구성하는 그릇의 총 개수는? \n", + "\n", + " answers document_id \n", + "0 {'answer_start': [235], 'text': ['하원']} 18293 \n", + "1 {'answer_start': [212], 'text': ['《경영의 실제》']} 51638 \n", + "2 {'answer_start': [510], 'text': ['백성']} 5028 \n", + "3 {'answer_start': [625], 'text': ['중국']} 34146 \n", + "4 {'answer_start': [30], 'text': ['4개']} 47334 \n" + ] + } + ], + "execution_count": 39 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-24T05:40:02.521718Z", + "start_time": "2024-10-24T05:40:01.200196Z" + } + }, + "cell_type": "code", + "source": [ + "from transformers import RobertaForSequenceClassification, AutoTokenizer, Trainer, TrainingArguments\n", + "from datasets import Dataset\n", + "import torch\n", + "\n", + "# GPU 사용이 가능한지 확인\n", + "device = torch.device(\"cuda\" if torch.cuda.is_available() else \"cpu\")\n", + "\n", + "# RoBERTa 모델 및 토크나이저 불러오기\n", + "model_name = \"roberta-base\" # 사용할 사전 학습 모델\n", + "tokenizer = AutoTokenizer.from_pretrained(model_name)\n", + "model = RobertaForSequenceClassification.from_pretrained(model_name, num_labels=2) # 이진 분류니까 num_labels=2\n", + "\n", + "# 모델을 CUDA로 이동 (GPU 사용)\n", + "model.to(device)\n" + ], + "id": "73720186298a143", + "outputs": [ + { + "name": "stderr", + "output_type": "stream", + "text": [ + "C:\\Users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages\\huggingface_hub\\file_download.py:1142: FutureWarning: `resume_download` is deprecated and will be removed in version 1.0.0. Downloads always resume when possible. If you want to force a new download, use `force_download=True`.\n", + " warnings.warn(\n", + "loading configuration file config.json from cache at C:\\Users\\spdlq/.cache\\huggingface\\hub\\models--roberta-base\\snapshots\\e2da8e2f811d1448a5b465c236feacd80ffbac7b\\config.json\n", + "Model config RobertaConfig {\n", + " \"_name_or_path\": \"roberta-base\",\n", + " \"architectures\": [\n", + " \"RobertaForMaskedLM\"\n", + " ],\n", + " \"attention_probs_dropout_prob\": 0.1,\n", + " \"bos_token_id\": 0,\n", + " \"classifier_dropout\": null,\n", + " \"eos_token_id\": 2,\n", + " \"hidden_act\": \"gelu\",\n", + " \"hidden_dropout_prob\": 0.1,\n", + " \"hidden_size\": 768,\n", + " \"initializer_range\": 0.02,\n", + " \"intermediate_size\": 3072,\n", + " \"layer_norm_eps\": 1e-05,\n", + " \"max_position_embeddings\": 514,\n", + " \"model_type\": \"roberta\",\n", + " \"num_attention_heads\": 12,\n", + " \"num_hidden_layers\": 12,\n", + " \"pad_token_id\": 1,\n", + " \"position_embedding_type\": \"absolute\",\n", + " \"transformers_version\": \"4.24.0\",\n", + " \"type_vocab_size\": 1,\n", + " \"use_cache\": true,\n", + " \"vocab_size\": 50265\n", + "}\n", + "\n", + "loading file vocab.json from cache at C:\\Users\\spdlq/.cache\\huggingface\\hub\\models--roberta-base\\snapshots\\e2da8e2f811d1448a5b465c236feacd80ffbac7b\\vocab.json\n", + "loading file merges.txt from cache at C:\\Users\\spdlq/.cache\\huggingface\\hub\\models--roberta-base\\snapshots\\e2da8e2f811d1448a5b465c236feacd80ffbac7b\\merges.txt\n", + "loading file tokenizer.json from cache at C:\\Users\\spdlq/.cache\\huggingface\\hub\\models--roberta-base\\snapshots\\e2da8e2f811d1448a5b465c236feacd80ffbac7b\\tokenizer.json\n", + "loading file added_tokens.json from cache at None\n", + "loading file special_tokens_map.json from cache at None\n", + "loading file tokenizer_config.json from cache at C:\\Users\\spdlq/.cache\\huggingface\\hub\\models--roberta-base\\snapshots\\e2da8e2f811d1448a5b465c236feacd80ffbac7b\\tokenizer_config.json\n", + "loading configuration file config.json from cache at C:\\Users\\spdlq/.cache\\huggingface\\hub\\models--roberta-base\\snapshots\\e2da8e2f811d1448a5b465c236feacd80ffbac7b\\config.json\n", + "Model config RobertaConfig {\n", + " \"_name_or_path\": \"roberta-base\",\n", + " \"architectures\": [\n", + " \"RobertaForMaskedLM\"\n", + " ],\n", + " \"attention_probs_dropout_prob\": 0.1,\n", + " \"bos_token_id\": 0,\n", + " \"classifier_dropout\": null,\n", + " \"eos_token_id\": 2,\n", + " \"hidden_act\": \"gelu\",\n", + " \"hidden_dropout_prob\": 0.1,\n", + " \"hidden_size\": 768,\n", + " \"initializer_range\": 0.02,\n", + " \"intermediate_size\": 3072,\n", + " \"layer_norm_eps\": 1e-05,\n", + " \"max_position_embeddings\": 514,\n", + " \"model_type\": \"roberta\",\n", + " \"num_attention_heads\": 12,\n", + " \"num_hidden_layers\": 12,\n", + " \"pad_token_id\": 1,\n", + " \"position_embedding_type\": \"absolute\",\n", + " \"transformers_version\": \"4.24.0\",\n", + " \"type_vocab_size\": 1,\n", + " \"use_cache\": true,\n", + " \"vocab_size\": 50265\n", + "}\n", + "\n", + "loading configuration file config.json from cache at C:\\Users\\spdlq/.cache\\huggingface\\hub\\models--roberta-base\\snapshots\\e2da8e2f811d1448a5b465c236feacd80ffbac7b\\config.json\n", + "Model config RobertaConfig {\n", + " \"architectures\": [\n", + " \"RobertaForMaskedLM\"\n", + " ],\n", + " \"attention_probs_dropout_prob\": 0.1,\n", + " \"bos_token_id\": 0,\n", + " \"classifier_dropout\": null,\n", + " \"eos_token_id\": 2,\n", + " \"hidden_act\": \"gelu\",\n", + " \"hidden_dropout_prob\": 0.1,\n", + " \"hidden_size\": 768,\n", + " \"initializer_range\": 0.02,\n", + " \"intermediate_size\": 3072,\n", + " \"layer_norm_eps\": 1e-05,\n", + " \"max_position_embeddings\": 514,\n", + " \"model_type\": \"roberta\",\n", + " \"num_attention_heads\": 12,\n", + " \"num_hidden_layers\": 12,\n", + " \"pad_token_id\": 1,\n", + " \"position_embedding_type\": \"absolute\",\n", + " \"transformers_version\": \"4.24.0\",\n", + " \"type_vocab_size\": 1,\n", + " \"use_cache\": true,\n", + " \"vocab_size\": 50265\n", + "}\n", + "\n", + "loading weights file model.safetensors from cache at C:\\Users\\spdlq/.cache\\huggingface\\hub\\models--roberta-base\\snapshots\\e2da8e2f811d1448a5b465c236feacd80ffbac7b\\model.safetensors\n", + "Some weights of the model checkpoint at roberta-base were not used when initializing RobertaForSequenceClassification: ['lm_head.layer_norm.bias', 'lm_head.dense.weight', 'lm_head.bias', 'lm_head.layer_norm.weight', 'lm_head.dense.bias']\n", + "- This IS expected if you are initializing RobertaForSequenceClassification from the checkpoint of a model trained on another task or with another architecture (e.g. initializing a BertForSequenceClassification model from a BertForPreTraining model).\n", + "- This IS NOT expected if you are initializing RobertaForSequenceClassification from the checkpoint of a model that you expect to be exactly identical (initializing a BertForSequenceClassification model from a BertForSequenceClassification model).\n", + "Some weights of RobertaForSequenceClassification were not initialized from the model checkpoint at roberta-base and are newly initialized: ['classifier.dense.weight', 'classifier.out_proj.bias', 'classifier.dense.bias', 'classifier.out_proj.weight']\n", + "You should probably TRAIN this model on a down-stream task to be able to use it for predictions and inference.\n" + ] + }, + { + "data": { + "text/plain": [ + "RobertaForSequenceClassification(\n", + " (roberta): RobertaModel(\n", + " (embeddings): RobertaEmbeddings(\n", + " (word_embeddings): Embedding(50265, 768, padding_idx=1)\n", + " (position_embeddings): Embedding(514, 768, padding_idx=1)\n", + " (token_type_embeddings): Embedding(1, 768)\n", + " (LayerNorm): LayerNorm((768,), eps=1e-05, elementwise_affine=True)\n", + " (dropout): Dropout(p=0.1, inplace=False)\n", + " )\n", + " (encoder): RobertaEncoder(\n", + " (layer): ModuleList(\n", + " (0-11): 12 x RobertaLayer(\n", + " (attention): RobertaAttention(\n", + " (self): RobertaSelfAttention(\n", + " (query): Linear(in_features=768, out_features=768, bias=True)\n", + " (key): Linear(in_features=768, out_features=768, bias=True)\n", + " (value): Linear(in_features=768, out_features=768, bias=True)\n", + " (dropout): Dropout(p=0.1, inplace=False)\n", + " )\n", + " (output): RobertaSelfOutput(\n", + " (dense): Linear(in_features=768, out_features=768, bias=True)\n", + " (LayerNorm): LayerNorm((768,), eps=1e-05, elementwise_affine=True)\n", + " (dropout): Dropout(p=0.1, inplace=False)\n", + " )\n", + " )\n", + " (intermediate): RobertaIntermediate(\n", + " (dense): Linear(in_features=768, out_features=3072, bias=True)\n", + " (intermediate_act_fn): GELUActivation()\n", + " )\n", + " (output): RobertaOutput(\n", + " (dense): Linear(in_features=3072, out_features=768, bias=True)\n", + " (LayerNorm): LayerNorm((768,), eps=1e-05, elementwise_affine=True)\n", + " (dropout): Dropout(p=0.1, inplace=False)\n", + " )\n", + " )\n", + " )\n", + " )\n", + " )\n", + " (classifier): RobertaClassificationHead(\n", + " (dense): Linear(in_features=768, out_features=768, bias=True)\n", + " (dropout): Dropout(p=0.1, inplace=False)\n", + " (out_proj): Linear(in_features=768, out_features=2, bias=True)\n", + " )\n", + ")" + ] + }, + "execution_count": 40, + "metadata": {}, + "output_type": "execute_result" + } + ], + "execution_count": 40 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-24T05:48:32.652253Z", + "start_time": "2024-10-24T05:48:32.114779Z" + } + }, + "cell_type": "code", + "source": [ + "# 학습을 위한 `all_matching` 데이터를 Dataset 형태로 변환\n", + "def preprocess_function(examples):\n", + " return tokenizer(examples['question'], examples['answer'], truncation=True, padding=True)\n", + "\n", + "# `all_matching` 데이터를 Hugging Face Dataset으로 변환 (예: all_matching은 딕셔너리 형태로 가정)\n", + "all_matching_data = [{\"question\": q, \"answer\": a, \"label\": 1} for q, a in all_matching.items()] # label=1로 설정\n", + "train_dataset = Dataset.from_list(all_matching_data)\n", + "\n", + "# 평가를 위한 `eval_dataset` 설정\n", + "eval_dataset = train_dataset.train_test_split(test_size=0.1)[\"test\"] # 데이터의 10%를 평가용으로 사용\n", + "\n", + "# 토큰화 및 데이터 전처리\n", + "train_dataset = train_dataset.map(preprocess_function, batched=True)\n", + "eval_dataset = eval_dataset.map(preprocess_function, batched=True)\n", + "\n", + "# 학습 설정\n", + "training_args = TrainingArguments(\n", + " output_dir='./results',\n", + " evaluation_strategy=\"epoch\", # 매 epoch마다 평가 진행\n", + " per_device_train_batch_size=8,\n", + " per_device_eval_batch_size=8,\n", + " num_train_epochs=3,\n", + " weight_decay=0.01\n", + ")\n", + "\n", + "# 트레이너 설정 (eval_dataset 추가)\n", + "trainer = Trainer(\n", + " model=model,\n", + " args=training_args,\n", + " train_dataset=train_dataset,\n", + " eval_dataset=eval_dataset # 평가 데이터셋 추가\n", + ")\n", + "\n", + "# 모델 학습\n", + "trainer.train()\n", + "\n", + "# 모델을 평가 모드로 전환 (추론을 위해)\n", + "model.eval()" + ], + "id": "8983725706515f86", + "outputs": [ + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Map: 100%|██████████| 5331/5331 [00:00<00:00, 17735.26 examples/s]\n", + "Map: 100%|██████████| 593/593 [00:00<00:00, 15105.93 examples/s]\n", + "PyTorch: setting up devices\n", + "The default value for the training argument `--report_to` will change in v5 (from all installed integrations to none). In v5, you will need to use `--report_to all` to get the same behavior as now. You should start updating your code and make this info disappear :-).\n", + "The following columns in the training set don't have a corresponding argument in `RobertaForSequenceClassification.forward` and have been ignored: question, answer. If question, answer are not expected by `RobertaForSequenceClassification.forward`, you can safely ignore this message.\n", + "C:\\Users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages\\transformers\\optimization.py:306: FutureWarning: This implementation of AdamW is deprecated and will be removed in a future version. Use the PyTorch implementation torch.optim.AdamW instead, or set `no_deprecation_warning=True` to disable this warning\n", + " warnings.warn(\n", + "***** Running training *****\n", + " Num examples = 5331\n", + " Num Epochs = 3\n", + " Instantaneous batch size per device = 8\n", + " Total train batch size (w. parallel, distributed & accumulation) = 8\n", + " Gradient Accumulation steps = 1\n", + " Total optimization steps = 2001\n", + " Number of trainable parameters = 124647170\n", + "Automatic Weights & Biases logging enabled, to disable set os.environ[\"WANDB_DISABLED\"] = \"true\"\n" + ] + }, + { + "ename": "ValueError", + "evalue": "The model did not return a loss from the inputs, only the following keys: logits. For reference, the inputs it received are input_ids,attention_mask.", + "output_type": "error", + "traceback": [ + "\u001B[1;31m---------------------------------------------------------------------------\u001B[0m", + "\u001B[1;31mValueError\u001B[0m Traceback (most recent call last)", + "Cell \u001B[1;32mIn[56], line 41\u001B[0m\n\u001B[0;32m 33\u001B[0m trainer \u001B[38;5;241m=\u001B[39m Trainer(\n\u001B[0;32m 34\u001B[0m model\u001B[38;5;241m=\u001B[39mmodel,\n\u001B[0;32m 35\u001B[0m args\u001B[38;5;241m=\u001B[39mtraining_args,\n\u001B[0;32m 36\u001B[0m train_dataset\u001B[38;5;241m=\u001B[39mtrain_split,\n\u001B[0;32m 37\u001B[0m eval_dataset\u001B[38;5;241m=\u001B[39meval_split \u001B[38;5;66;03m# 평가 데이터셋 추가\u001B[39;00m\n\u001B[0;32m 38\u001B[0m )\n\u001B[0;32m 40\u001B[0m \u001B[38;5;66;03m# 모델 학습\u001B[39;00m\n\u001B[1;32m---> 41\u001B[0m \u001B[43mtrainer\u001B[49m\u001B[38;5;241;43m.\u001B[39;49m\u001B[43mtrain\u001B[49m\u001B[43m(\u001B[49m\u001B[43m)\u001B[49m\n\u001B[0;32m 43\u001B[0m \u001B[38;5;66;03m# 모델을 평가 모드로 전환 (추론을 위해)\u001B[39;00m\n\u001B[0;32m 44\u001B[0m model\u001B[38;5;241m.\u001B[39meval()\n", + "File \u001B[1;32m~\\.conda\\envs\\boost-camp1\\lib\\site-packages\\transformers\\trainer.py:1501\u001B[0m, in \u001B[0;36mTrainer.train\u001B[1;34m(self, resume_from_checkpoint, trial, ignore_keys_for_eval, **kwargs)\u001B[0m\n\u001B[0;32m 1496\u001B[0m \u001B[38;5;28mself\u001B[39m\u001B[38;5;241m.\u001B[39mmodel_wrapped \u001B[38;5;241m=\u001B[39m \u001B[38;5;28mself\u001B[39m\u001B[38;5;241m.\u001B[39mmodel\n\u001B[0;32m 1498\u001B[0m inner_training_loop \u001B[38;5;241m=\u001B[39m find_executable_batch_size(\n\u001B[0;32m 1499\u001B[0m \u001B[38;5;28mself\u001B[39m\u001B[38;5;241m.\u001B[39m_inner_training_loop, \u001B[38;5;28mself\u001B[39m\u001B[38;5;241m.\u001B[39m_train_batch_size, args\u001B[38;5;241m.\u001B[39mauto_find_batch_size\n\u001B[0;32m 1500\u001B[0m )\n\u001B[1;32m-> 1501\u001B[0m \u001B[38;5;28;01mreturn\u001B[39;00m \u001B[43minner_training_loop\u001B[49m\u001B[43m(\u001B[49m\n\u001B[0;32m 1502\u001B[0m \u001B[43m \u001B[49m\u001B[43margs\u001B[49m\u001B[38;5;241;43m=\u001B[39;49m\u001B[43margs\u001B[49m\u001B[43m,\u001B[49m\n\u001B[0;32m 1503\u001B[0m \u001B[43m \u001B[49m\u001B[43mresume_from_checkpoint\u001B[49m\u001B[38;5;241;43m=\u001B[39;49m\u001B[43mresume_from_checkpoint\u001B[49m\u001B[43m,\u001B[49m\n\u001B[0;32m 1504\u001B[0m \u001B[43m \u001B[49m\u001B[43mtrial\u001B[49m\u001B[38;5;241;43m=\u001B[39;49m\u001B[43mtrial\u001B[49m\u001B[43m,\u001B[49m\n\u001B[0;32m 1505\u001B[0m \u001B[43m \u001B[49m\u001B[43mignore_keys_for_eval\u001B[49m\u001B[38;5;241;43m=\u001B[39;49m\u001B[43mignore_keys_for_eval\u001B[49m\u001B[43m,\u001B[49m\n\u001B[0;32m 1506\u001B[0m \u001B[43m\u001B[49m\u001B[43m)\u001B[49m\n", + "File \u001B[1;32m~\\.conda\\envs\\boost-camp1\\lib\\site-packages\\transformers\\trainer.py:1749\u001B[0m, in \u001B[0;36mTrainer._inner_training_loop\u001B[1;34m(self, batch_size, args, resume_from_checkpoint, trial, ignore_keys_for_eval)\u001B[0m\n\u001B[0;32m 1747\u001B[0m tr_loss_step \u001B[38;5;241m=\u001B[39m \u001B[38;5;28mself\u001B[39m\u001B[38;5;241m.\u001B[39mtraining_step(model, inputs)\n\u001B[0;32m 1748\u001B[0m \u001B[38;5;28;01melse\u001B[39;00m:\n\u001B[1;32m-> 1749\u001B[0m tr_loss_step \u001B[38;5;241m=\u001B[39m \u001B[38;5;28;43mself\u001B[39;49m\u001B[38;5;241;43m.\u001B[39;49m\u001B[43mtraining_step\u001B[49m\u001B[43m(\u001B[49m\u001B[43mmodel\u001B[49m\u001B[43m,\u001B[49m\u001B[43m \u001B[49m\u001B[43minputs\u001B[49m\u001B[43m)\u001B[49m\n\u001B[0;32m 1751\u001B[0m \u001B[38;5;28;01mif\u001B[39;00m (\n\u001B[0;32m 1752\u001B[0m args\u001B[38;5;241m.\u001B[39mlogging_nan_inf_filter\n\u001B[0;32m 1753\u001B[0m \u001B[38;5;129;01mand\u001B[39;00m \u001B[38;5;129;01mnot\u001B[39;00m is_torch_tpu_available()\n\u001B[0;32m 1754\u001B[0m \u001B[38;5;129;01mand\u001B[39;00m (torch\u001B[38;5;241m.\u001B[39misnan(tr_loss_step) \u001B[38;5;129;01mor\u001B[39;00m torch\u001B[38;5;241m.\u001B[39misinf(tr_loss_step))\n\u001B[0;32m 1755\u001B[0m ):\n\u001B[0;32m 1756\u001B[0m \u001B[38;5;66;03m# if loss is nan or inf simply add the average of previous logged losses\u001B[39;00m\n\u001B[0;32m 1757\u001B[0m tr_loss \u001B[38;5;241m+\u001B[39m\u001B[38;5;241m=\u001B[39m tr_loss \u001B[38;5;241m/\u001B[39m (\u001B[38;5;241m1\u001B[39m \u001B[38;5;241m+\u001B[39m \u001B[38;5;28mself\u001B[39m\u001B[38;5;241m.\u001B[39mstate\u001B[38;5;241m.\u001B[39mglobal_step \u001B[38;5;241m-\u001B[39m \u001B[38;5;28mself\u001B[39m\u001B[38;5;241m.\u001B[39m_globalstep_last_logged)\n", + "File \u001B[1;32m~\\.conda\\envs\\boost-camp1\\lib\\site-packages\\transformers\\trainer.py:2508\u001B[0m, in \u001B[0;36mTrainer.training_step\u001B[1;34m(self, model, inputs)\u001B[0m\n\u001B[0;32m 2505\u001B[0m \u001B[38;5;28;01mreturn\u001B[39;00m loss_mb\u001B[38;5;241m.\u001B[39mreduce_mean()\u001B[38;5;241m.\u001B[39mdetach()\u001B[38;5;241m.\u001B[39mto(\u001B[38;5;28mself\u001B[39m\u001B[38;5;241m.\u001B[39margs\u001B[38;5;241m.\u001B[39mdevice)\n\u001B[0;32m 2507\u001B[0m \u001B[38;5;28;01mwith\u001B[39;00m \u001B[38;5;28mself\u001B[39m\u001B[38;5;241m.\u001B[39mcompute_loss_context_manager():\n\u001B[1;32m-> 2508\u001B[0m loss \u001B[38;5;241m=\u001B[39m \u001B[38;5;28;43mself\u001B[39;49m\u001B[38;5;241;43m.\u001B[39;49m\u001B[43mcompute_loss\u001B[49m\u001B[43m(\u001B[49m\u001B[43mmodel\u001B[49m\u001B[43m,\u001B[49m\u001B[43m \u001B[49m\u001B[43minputs\u001B[49m\u001B[43m)\u001B[49m\n\u001B[0;32m 2510\u001B[0m \u001B[38;5;28;01mif\u001B[39;00m \u001B[38;5;28mself\u001B[39m\u001B[38;5;241m.\u001B[39margs\u001B[38;5;241m.\u001B[39mn_gpu \u001B[38;5;241m>\u001B[39m \u001B[38;5;241m1\u001B[39m:\n\u001B[0;32m 2511\u001B[0m loss \u001B[38;5;241m=\u001B[39m loss\u001B[38;5;241m.\u001B[39mmean() \u001B[38;5;66;03m# mean() to average on multi-gpu parallel training\u001B[39;00m\n", + "File \u001B[1;32m~\\.conda\\envs\\boost-camp1\\lib\\site-packages\\transformers\\trainer.py:2553\u001B[0m, in \u001B[0;36mTrainer.compute_loss\u001B[1;34m(self, model, inputs, return_outputs)\u001B[0m\n\u001B[0;32m 2551\u001B[0m \u001B[38;5;28;01melse\u001B[39;00m:\n\u001B[0;32m 2552\u001B[0m \u001B[38;5;28;01mif\u001B[39;00m \u001B[38;5;28misinstance\u001B[39m(outputs, \u001B[38;5;28mdict\u001B[39m) \u001B[38;5;129;01mand\u001B[39;00m \u001B[38;5;124m\"\u001B[39m\u001B[38;5;124mloss\u001B[39m\u001B[38;5;124m\"\u001B[39m \u001B[38;5;129;01mnot\u001B[39;00m \u001B[38;5;129;01min\u001B[39;00m outputs:\n\u001B[1;32m-> 2553\u001B[0m \u001B[38;5;28;01mraise\u001B[39;00m \u001B[38;5;167;01mValueError\u001B[39;00m(\n\u001B[0;32m 2554\u001B[0m \u001B[38;5;124m\"\u001B[39m\u001B[38;5;124mThe model did not return a loss from the inputs, only the following keys: \u001B[39m\u001B[38;5;124m\"\u001B[39m\n\u001B[0;32m 2555\u001B[0m \u001B[38;5;124mf\u001B[39m\u001B[38;5;124m\"\u001B[39m\u001B[38;5;132;01m{\u001B[39;00m\u001B[38;5;124m'\u001B[39m\u001B[38;5;124m,\u001B[39m\u001B[38;5;124m'\u001B[39m\u001B[38;5;241m.\u001B[39mjoin(outputs\u001B[38;5;241m.\u001B[39mkeys())\u001B[38;5;132;01m}\u001B[39;00m\u001B[38;5;124m. For reference, the inputs it received are \u001B[39m\u001B[38;5;132;01m{\u001B[39;00m\u001B[38;5;124m'\u001B[39m\u001B[38;5;124m,\u001B[39m\u001B[38;5;124m'\u001B[39m\u001B[38;5;241m.\u001B[39mjoin(inputs\u001B[38;5;241m.\u001B[39mkeys())\u001B[38;5;132;01m}\u001B[39;00m\u001B[38;5;124m.\u001B[39m\u001B[38;5;124m\"\u001B[39m\n\u001B[0;32m 2556\u001B[0m )\n\u001B[0;32m 2557\u001B[0m \u001B[38;5;66;03m# We don't use .loss here since the model may return tuples instead of ModelOutput.\u001B[39;00m\n\u001B[0;32m 2558\u001B[0m loss \u001B[38;5;241m=\u001B[39m outputs[\u001B[38;5;124m\"\u001B[39m\u001B[38;5;124mloss\u001B[39m\u001B[38;5;124m\"\u001B[39m] \u001B[38;5;28;01mif\u001B[39;00m \u001B[38;5;28misinstance\u001B[39m(outputs, \u001B[38;5;28mdict\u001B[39m) \u001B[38;5;28;01melse\u001B[39;00m outputs[\u001B[38;5;241m0\u001B[39m]\n", + "\u001B[1;31mValueError\u001B[0m: The model did not return a loss from the inputs, only the following keys: logits. For reference, the inputs it received are input_ids,attention_mask." + ] + } + ], + "execution_count": 56 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-24T05:32:04.646106Z", + "start_time": "2024-10-24T05:32:04.627838Z" + } + }, + "cell_type": "code", + "source": [ + "def choose_best_answer(model, tokenizer, question, answer1, answer2, device):\n", + " # 입력 문장 토큰화 및 텐서 변환\n", + " inputs_1 = tokenizer(question, answer1, return_tensors=\"pt\", truncation=True, padding=True).to(device)\n", + " inputs_2 = tokenizer(question, answer2, return_tensors=\"pt\", truncation=True, padding=True).to(device)\n", + "\n", + " # 각 입력에 대해 BERT 모델의 출력(logits)을 얻음\n", + " with torch.no_grad():\n", + " outputs_1 = model(**inputs_1).logits\n", + " outputs_2 = model(**inputs_2).logits\n", + "\n", + " # logits에서 더 큰 값을 가진 답변을 선택 (0 또는 1 예측)\n", + " if outputs_1.argmax() == outputs_2.argmax():\n", + " return answer1 if outputs_1[0][1] > outputs_2[0][1] else answer2\n", + " else:\n", + " return answer1 if outputs_1.argmax() == 1 else answer2\n" + ], + "id": "cc841c9e1b06e642", + "outputs": [], + "execution_count": 32 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-24T05:32:30.324136Z", + "start_time": "2024-10-24T05:32:26.447772Z" + } + }, + "cell_type": "code", + "source": [ + "# 2개의 답변이 있는 경우 선택하기\n", + "two_matching_final = {}\n", + "for question_id, answers in two_matching.items():\n", + " question = id_to_question.get(question_id, \"질문 없음\")\n", + " answer1, answer2 = answers\n", + " best_answer = choose_best_answer(model, tokenizer, question, answer1, answer2, device)\n", + " two_matching_final[question_id] = best_answer\n", + " print(f\"{question_id}: {best_answer} (질문: {question})\")\n", + "\n", + "# 여러 개의 답변이 있는 경우 선택하기\n", + "none_matching_final = {}\n", + "for question_id, answers in none_matching.items():\n", + " question = id_to_question.get(question_id, \"질문 없음\")\n", + " # 두 개씩 비교하며 최종 답을 찾아야 함 (예: 답변 3개일 때 차례대로 비교)\n", + " best_answer = answers[0]\n", + " for answer in answers[1:]:\n", + " best_answer = choose_best_answer(model, tokenizer, question, best_answer, answer, device)\n", + " none_matching_final[question_id] = best_answer\n", + " print(f\"{question_id}: {best_answer} (질문: {question})\")\n" + ], + "id": "5f95da679e918e12", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "mrc-0-005021: 91년 체제 (질문: 상류 부르주아의 정치 독점을 불러일으킨 체계는?)\n", + "mrc-1-000163: 구미호 (질문: 아시노 호가 만들어진 원인은 무엇인가?)\n", + "mrc-0-000439: 점쟁이 (질문: 클레어에게 오세아닉 815편을 타라고 말한 사람의 이름은?)\n", + "mrc-0-000901: 오시노 메메 (질문: 괴수로부터 메구밍을 구해준 사람은 누구인가?)\n", + "mrc-0-001326: 《뉴스피플》 (질문: 이유립씨가 1970년대 중반에 본인의 글을 기고하기 시작한 곳은?)\n", + "mrc-0-003644: 백제 (질문: 콘스탄티누스가 군사 4만 명을 이끌고 침범한 나라는?)\n", + "mrc-0-000049: 서사 (질문: 루돌로지스트들이 게임에서 가장 주된 것이라 주장하는 것은?)\n", + "mrc-0-001206: 1849년 (질문: 펌프가 발매된 해는 언제인가?)\n", + "mrc-0-003133: 책 (질문: 아델리 펭귄의 목숨에 지장을 주는 사람의 업종은 무엇인가요?)\n", + "mrc-0-001058: 카필라 성 (질문: 석가모니 부처가 태어난 곳은 어디인가?)\n", + "mrc-0-002361: 영토 (질문: 동맹을 맺음으로써 헝가리는 자유를 비롯해 무엇을 잃었나?)\n", + "mrc-0-001086: 초계면 (질문: 8천 명의 시민들이 모여 대규모 시위를 벌인 지역은?)\n", + "mrc-0-000624: 영국 (질문: 유로니우스를 살해한 용의자가 소속된 밴드의 국적은?)\n", + "mrc-1-001280: 미국 대통령 우드로 윌슨 (질문: 자신이 고안한 14개조 평화원칙을 국제 사회에 발표하고 싶어한 인물은?)\n", + "mrc-0-000504: 삼국시대 (질문: 팔과 다리가 밋밋한 형태인 신체표현은 어떤 시기를 반영한 것인가요?)\n", + "mrc-0-003763: 광배(光背)의 뒷면 (질문: 불상에 대한 정보가 적혀있는 것은?)\n", + "mrc-0-003896: 마튀랭 박사 (질문: 병으로 인해 피렌체의 수많은 사람들이 죽어갔음을 언급한 사람은?)\n", + "mrc-0-003298: 김호 (질문: 1994년 FIFA 월드컵 당시 대한민국 축구 대표팀의 감독은 누구인가?)\n", + "mrc-0-003628: 공유 필명 (질문: 선라이즈의 애니메이션 작품 기획부는 야타테 하지메를 무엇으로 사용하는가?)\n", + "mrc-0-000432: 조선건국동맹 (질문: 여운형이 조동호와 함께 조직한 것은?)\n", + "mrc-0-003364: 아우구스투스 시대 (질문: 단색 배경에 추상적인 디자인을 쓰는 양식이 유행하던 시기는?)\n", + "mrc-0-003670: ‘마루게’ (질문: 최고령 초등학생으로 기네스북에 올라있는 사람은?)\n", + "mrc-0-000386: 호세 1세 (질문: 628년에 새롭게 왕위에 오른 사람은 누구인가요?)\n", + "mrc-0-004345: 2001년 (질문: 셰이크 무지부르 라흐만의 딸이 처음으로 선거에서 졌던 해는?)\n", + "mrc-0-001470: 볼가 지방 (질문: 소설 <형제>의 작가가 태어난 지역은?)\n", + "mrc-1-001239: 쉴드 빔 (질문: 무엇이 창 아래에 설치되어 표시기가 한 개 늘어났는가?)\n", + "mrc-0-001940: 경문왕 (질문: 동화사 석조비로자나불이 제작될 때, 당시 임금은 누구였는가?)\n", + "mrc-0-001241: 상업 분야 (질문: 협동 화폐 거래소의 인정은 어느 부문에서 나타나는 변화인가?)\n", + "mrc-1-001457: 도요토미 히데요시 (질문: 조선역사를 수호하는데 위기를 제공한 사람은?)\n", + "mrc-1-000908: 변비 (질문: 비자나무의 열매는 어떤 증상을 치료하기 위해 쓰이나요?)\n", + "mrc-1-000116: 가이아 (질문: 튀폰의 아버지는 누구인가?)\n", + "mrc-0-004669: 교황 (질문: 가톨릭 교회에서 주교에게 '최고사제'의 자격을 주는 직함의 이름은?)\n", + "mrc-0-002210: 통인 주기 (질문: 아랑을 살해한 사람은?)\n", + "mrc-1-000862: 설인귀 (질문: 당의 군대를 몰살시킨 사람은?)\n", + "mrc-0-000986: 오스마르 (질문: 전반전이 6분이 지난 후 골을 넣은 선수는?)\n", + "mrc-0-003970: 센리 선 (질문: 통근특급이 걸림돌인 노선과 서로 평면교차하는 노선은 어디인가?)\n", + "mrc-0-000304: 1919년 1월26일 (질문: 국경일에 일장기를 달아도 반대하지 않을 것이라는 내용을 담은 윤치호의 일기는 언제 쓰여진 것인가?)\n", + "mrc-1-001025: 티탄즈 (질문: 자미토프가 개혁을 강행하기 위해 설립한 사병 집단은?)\n", + "mrc-0-001374: 1530년 (질문: 성 요한 기사단이 로도스 섬으로 거처를 옮긴 년도는?)\n", + "mrc-0-001783: 자자 빙크스 (질문: 팰퍼틴에게 비상시의 권리를 도맡아 달라고 의견을 냈던 인물은?)\n", + "mrc-0-005332: 동탁은잔 (질문: 날개 앞쪽으로 연꽃을 들고 있는 인면조가 그려진 백제의 유물은 무엇인가?)\n", + "mrc-1-001594: 자유송환 (질문: 각 측에서 주장된 포로교환 방법 중 선택된 것은?)\n", + "mrc-0-002938: 데이 페소 (질문: 티나헤로가 아칸바로의 유적을 날조한 것이라고 주장한 인물은?)\n", + "mrc-0-002936: 붉은 군대 (질문: 메리의 사촌은 어디에서 영웅으로 활약하기도 했나요?)\n", + "mrc-0-003706: 6신관 (질문: 마'를 피하기 위해 살몬 신전을 보낸 곳은?)\n", + "mrc-0-001021: 보스턴의 폐공장 (질문: 타격이 시작되는 것은 대상이 어디에 나타날 때인가?)\n", + "mrc-0-003236: 베를린 (질문: 작센군과 오스트리아군은 함께 어디를 공격할 예정이였나?)\n", + "mrc-0-001379: 퓌르트 (질문: 네델란드와의 친선 경기에서 유일하게 골을 넣은 선수의 소속팀은?)\n", + "mrc-0-004927: 대체 에너지의 개발 (질문: 아일랜드의 자원 공급 불안과 지구 온난화에 대한 해결방안은?)\n", + "mrc-0-000576: 알 카포네 (질문: 히틀러의 반란은 누구를 모방한 것인가?)\n", + "mrc-0-002786: 외교부 장관 (질문: 최초로 공산주의 정당을 제외한 선거 이후 메리가 맡은 직책은?)\n", + "mrc-0-001105: 실존주의 (질문: 오노에게 영향을 미친 장 폴 사르트르의 철학은?)\n", + "mrc-0-001896: P 시리즈 (질문: 산악 자전거 프리 라이드 부문에 출전하는 마틴 소더스트롬이 이용하는 제품은?)\n", + "mrc-0-001887: 18세기 중후반 (질문: 부피와 무게감을 나타낸 얼굴이나 짧은 목 등을 통해 알 수 있는 불상의 축조 시기는?)\n", + "mrc-1-001797: 감옥 (질문: 이경언이 사망한 장소는?)\n", + "mrc-0-002028: 리을설 (질문: 김일성이 소련인으로서 살고 싶어했다고 말을 한 인물은?)\n", + "mrc-0-003031: 당 태종 (질문: 고구려에 크게 지고 그 전쟁때문에 병이나서 죽은 당나라 왕은?)\n", + "mrc-1-000235: '농지' (질문: 레닌에 의하면 자본주의식 농업 시스템을 통해 일반 시민들이 더 쉽게 사용할 수 있게 된 것은 무엇인가?)\n", + "mrc-0-002716: 지에코초 (질문: 아르튀르가 베르린과의 연애생활을 한 경험을 쓴 시집이름은?)\n", + "mrc-0-003961: 스기타 겐파쿠 (질문: 네덜란드어를 몰랐으나 타펠 아나토미아의 해부도 번역에 참여한 것은 누구인가?)\n", + "mrc-1-001721: 이경희 (질문: 선생님에게 창씨개명을 하지 않겠다고 한 사람은?)\n", + "mrc-0-004738: 헌법 (질문: 주권재민의 원칙은 어디에 명시되어 있는가?)\n", + "mrc-1-001603: 법관 출신 인사 (질문: 21대 총선을 겨냥하여 사법개혁을 이끌어갈 수 있다는 것에 뒷받침된 명목은?)\n", + "mrc-0-003356: 진주강씨 (질문: 윤치호의 아내는 누구의 부인을 방문했나?)\n", + "mrc-1-000769: 제1대대 (질문: 107고지를 처음 함락시킨 부대는?)\n", + "mrc-0-000114: 코드 (질문: 코드 서명이 보증하는 대상은?)\n", + "mrc-0-002997: 1922년 (질문: 타누당(TANU)를 설립한 인물이 태어난 해는?)\n", + "mrc-1-000889: 667년의 금산전투 (질문: 고구려와 당나라 사이에 4대 전투 중 유일하게 다른 해에 일어난 전투는?)\n", + "mrc-1-000267: 3층 (질문: 도쇼구 역의 승강장은 몇 층에 있는가?)\n", + "mrc-0-002654: 사운드클라우드 (질문: navigation'이 올라온 사이트는?)\n", + "mrc-0-002758: 잉글랜드 (질문: 스위스가 월드컵에서 이긴 나라는?)\n", + "mrc-1-001727: 수영공원 (질문: 경상좌도 수군절도사영이 관리했던 곳은?)\n", + "mrc-0-004755: 장충단공원 (질문: 공원으로 변화되는 곳은?)\n", + "mrc-0-002525: <<종횡무진 한국경제>> (질문: 장하준 교수의 한국경제에 대한 생각에 대해 반론한 김상조 교수의 저서는?)\n", + "mrc-0-001847: 호해 (질문: 자신의 사리사욕만 채우며 무능했던 진나라의 황제는?)\n", + "mrc-0-003215: 1773년 (질문: 보스턴 차 사건이 발발한 년도는?)\n", + "mrc-0-001757: 《Nirvana》 (질문: Yoo Doo Right이 수록된 앨범명은?)\n", + "mrc-0-004594: 외국인노동자의 정주화 방지 (질문: 외국인 근로자 고용 등에 대한 법률'의 목적은?)\n", + "mrc-0-001133: 언카스 (질문: 17세기 피쿼트로부터 독립하여 모하칸족을 만든 사람은?)\n", + "mrc-0-003821: 잉글랜드 (질문: 프랑스군은 마렝고에서 어떤 나라의 군대와 마주하였나?)\n", + "mrc-0-001607: 스렝이 (질문: 누아다가 오른손이 없는 이유는 누구 때문인가?)\n", + "mrc-0-003454: 16세기 (질문: 현대 식물원은 언제 오픈되었는가?)\n", + "mrc-0-000206: 2월 혁명 (질문: 필리프가 왕실에서 쫒겨난 사건의 단초가 된 역사적 사건은?)\n", + "mrc-0-003043: 수사1과 (질문: 시바사키의 이전 소속 부서는?)\n", + "mrc-0-003434: 계획 경제 (질문: 평등과 복지 사회를 이루기 위해 필요한 것이라는 선전 하에 행해지는 것은?)\n", + "mrc-0-001324: 부산 (질문: 《서편 삼층석탑》은 어느 지역의 유형문화재로 지정되어있나요?)\n", + "mrc-0-002127: 4막 3장 (질문: 맬컴이 맥더프에게 상실에 슬퍼할 줄 알아야 함을 배우는 장은?)\n", + "mrc-0-001438: 봉원사 (질문: 이보담은 어느 절에서 스님이 되었는가?)\n", + "mrc-0-001415: 노룡군의 대장 (질문: 이무훈에게 살해당한 인물의 직책은?)\n", + "mrc-1-000650: 광물 (질문: 조흔색은 무엇을 구별하는데 도움을 주나요?)\n", + "mrc-0-003105: 4·19 폭동설’ (질문: 군부세력들이 어떤 상황을 빌미로 쿠테타를 일으키려고 했나?)\n", + "mrc-0-002170: 《소우기》 (질문: 우치쿠라노 이시메가 작성한 내용이 실린 기록은 무엇인가요?)\n", + "mrc-0-002414: 꼬리부분 (질문: 보디 스타킹에서 봉제되지 않은 부분은?)\n", + "mrc-0-000668: 메란 (질문: 프랑크 왕족들의 무덤이 있는 곳은?)\n", + "mrc-1-001689: 라위스달 (질문: 홉베마의 스승은 누구인가요?)\n", + "mrc-0-002493: 미국 (질문: 쿠챤과 밀로셰비치의 협의에 대해서 작성한 작가의 출신국가는?)\n", + "mrc-0-002092: 「소방공무원법」 (질문: 시도 도지사가 시도 소속 소방공무원을 임용할 수 있도록 개정된 법은?)\n", + "mrc-1-001196: 4번째 외야수 (질문: 2016시즌 당시 테일러는 누구 대신 주전이 되었나?)\n", + "mrc-0-002045: 송병하 (질문: 호연재 김씨의 시증조부는?)\n", + "mrc-0-003645: <밤으로의 긴 여행> (질문: 손턴 와일더 사후, 최고의 명작으로 손꼽히는 작품은 무엇인가?)\n", + "mrc-0-001272: 왕성 (질문: 신립이 스스로 목숨을 끊은 곳은?)\n", + "mrc-0-003639: '온' (질문: 단어 '토레혼'의 어근은?)\n", + "mrc-0-001046: 프랭클린 D. 루스벨트 (질문: 총선에서 듀이를 꺾은 사람은?)\n", + "mrc-0-001863: 나스티카 (질문: 베단타 학파와 차르바카파는 무엇을 기준으로 나뉘어졌나요?)\n", + "mrc-0-001123: 레반스라움 (질문: 토산물을 착취하는 등과 같은 업무의 명목은?)\n", + "mrc-1-000056: 라크스 클라인 (질문: 프리덤 건담의 이름을 지은 사람은?)\n", + "mrc-0-001192: 박근혜 대통령 (질문: 통진당을 해산시킨 결정을 인정한다고 직접 말한 인물은?)\n", + "mrc-0-005108: 아도니스 (질문: 진홍빛 장미가 만들어진 원인을 제공한 자는?)\n", + "mrc-1-000713: 티베트 (질문: 처음으로 염색된 섬유가 발견되었던 장소는?)\n", + "mrc-0-004970: 한 번 (질문: 붉은자이언트날다람쥐 암컷의 일 년 평균 번식 횟수는?)\n", + "mrc-1-000690: 하비 로우마이어 (질문: 레이가 골트 이후에 사용한 가짜 이름은 무엇인가요?)\n", + "mrc-0-003499: 초음파 가습기 (질문: 물방울에 급수대의 이물질이 없는 가습기는?)\n", + "mrc-0-004708: 위장 (질문: 어버이새가 새끼들의 먹이를 보관하는 곳은?)\n", + "mrc-0-004579: 전라북도 전주 (질문: 경서교회를 설립한 사람이 태어난 도시는 어디인가?)\n", + "mrc-0-000255: 실권 (질문: 사장이 부하직원에게 행사할 수 있는 권리는 무엇인가?)\n", + "mrc-0-001539: 목포 (질문: 부부가 딸을 차에 태운 곳은?)\n", + "mrc-0-005166: 괜찮다고 (질문: 행인의 플로이드가 코피난다는 말에 경찰관은 뭐라고 말했는가?)\n", + "mrc-0-000150: 3-3 (질문: 아만시오가 처음으로 출전한 유럽대항전의 결과는?)\n", + "mrc-0-000760: IP 주소 (질문: 다중 계정 사용자의 판별을 불가능하게 하는 것은?)\n", + "mrc-0-004510: 인체의 치수 (질문: 인간에게 가장 익숙한 크기의 개념은 무엇인가요?)\n", + "mrc-0-002482: 근원 마그마가 형성되는 기작 (질문: 발산형 경계와 수렴형경계의 마그마 점성이 다른 이유는?)\n", + "mrc-1-001729: 수리물리학 (질문: 이론물리학에 비해 수학적인 부분을 더 강조하는 학문은?)\n", + "mrc-0-004371: 원세훈 (질문: 역할을 가장 먼저 구체화 시킨 사람은?)\n", + "mrc-0-002763: 개성 (질문: 신혜왕후가 묻혀있는 지역은?)\n", + "mrc-0-001429: 독일 (질문: 요안니스 5세의 쿠테타를 지원한 것은 어느 나라인가?)\n", + "mrc-0-004649: 내각 (질문: 히틀러의 권한을 합법적으로 확대시켜준 국가 기관은?)\n", + "mrc-0-004438: 교란 요인을 통제하는 것 (질문: 연구자들이 설계된 실험실을 이용하는 것은 무엇을 위해서인가?)\n", + "mrc-0-005422: '옥시전 디스트로이어' (질문: 세리자와 박사가 숨기려고 한 것은?)\n", + "mrc-0-000394: 김영춘 (질문: 조선인민공화국에서 최고로 높은 직위에 오른 자는?)\n", + "mrc-0-002289: 가덕도 (질문: 조선수군의 길목을 차단하기 위해 일본군이 설치한 왜성이 위치한 장소는?)\n", + "mrc-0-003038: 에우리아의 요한 (질문: 알키온의 주교 자리를 빼앗은 사람은?)\n", + "mrc-0-001682: 무죄 (질문: 보닌이 살인 혐의로 체포되어 받은 형벌은?)\n", + "mrc-0-001457: 세르비아 (질문: 러시아가 동원령을 내린 것은 어느 나라를 견제하기 위해서인가?)\n", + "mrc-0-003755: 무신 (질문: 정중부의 난 이전 병권을 장악한 집단은?)\n", + "mrc-0-002696: 1949년 (질문: 베이핑-톈진 전투가 시작된 연도는?)\n", + "mrc-0-000564: 1835년 (질문: 여성 작가들이 언제부터 여성 등장인물에 관심을 가지기 시작했나요?)\n", + "mrc-0-004323: 연극배우 (질문: 알렉스의 직업은?)\n", + "mrc-0-000664: 벤저민 바커 (질문: 스위니 토드의 본명은?)\n", + "mrc-0-004392: 뇌 (질문: 모토코의 몸 중에 인공적인 기계장치로 되어 있지 않은 곳은?)\n", + "mrc-0-000162: 벨기에의 FC 브뤼셀 (질문: 최재수는 2012년에 어디로 이적했는가?)\n", + "mrc-0-004085: R. H. 앨런 (질문: 맥국이라는 명칭을 알린 사람은?)\n", + "mrc-0-003807: 키홀더 (질문: 오두막의 첫 손님은 어떤 물건을 활용해 자살했는가?)\n", + "mrc-0-004710: 공훈의 보상 (질문: 국내무사가 체포 활동에 참가한 것은 무엇 때문인가?)\n", + "mrc-0-005012: 파스타 (질문: 미국에서 나폴리식 요리를 의미하는 요리는?)\n", + "mrc-0-003770: 명련사 (질문: 원래 요괴를 위해 만들었으나 차후 인간들의 신봉도 받게된 시설은?)\n", + "mrc-0-004111: 1919년 (질문: 학생들이 일본인 선생들을 몰아내기 위해 동맹휴학 시위를 일으킨 해는 ?)\n", + "mrc-1-001775: 암스테르담 (질문: 장면이 가족과 떨어져 거처를 옮긴 곳은?)\n", + "mrc-1-000627: 9월 26일 (질문: 도무라 가즈사쿠가 대표로 있던 단체가 공산당과 결별을 선언했던 시기는?)\n", + "mrc-1-001316: 창립기 (질문: 광운전자공과대학 이전에 사용되던 명칭은 무엇인가요?)\n", + "mrc-1-000977: '나는 참된 보통 선거를 원한다' (질문: 하나를 철거하면 열을 건다' 운동에 사용된 플랜카드의 내용은?)\n", + "mrc-0-003501: 백병계열군 (질문: PK, 수탈을 목적으로 하는 플레이어에게 인기가 많은 직업군은?)\n", + "mrc-1-000841: 구 대한제국 대신들 (질문: 윤치호가 고종 독살설을 믿게된 것은 누구 때문인가?)\n", + "mrc-0-005486: 조조 (질문: 헌제는 추격을 당하다 누구에게 도움을 청하였나요?)\n", + "mrc-0-004410: 세르게이 미로노프 (질문: 사회민주주의와 민주사회주의를 합친 사상을 가진 집단의 우두머리는 누구인가?)\n", + "mrc-0-001659: 유산 (질문: 인간에게 불타는 느낌의 아픔을 주는 것은?)\n", + "mrc-0-001251: 공화당원 투표인들 만을 화나게 (질문: 듀이는 닉슨을 공천 후보에서 내리는 것이 어떤 결과를 초래할 것이라고 말했는가?)\n", + "mrc-1-000177: 제8조 (질문: 조청상민수륙무역장정중의 8개조중, 장정의 개정에 대한 조항은?)\n", + "mrc-1-001517: 강원도도장관 (질문: 이규완이 강원도에 철도 건설을 제안할 당시 직책은 무엇이었는가?)\n", + "mrc-0-003711: 성철 (질문: 법맥과 전등을 중시하면 스승없이 깨달음을 얻을 수 없다고 주장한 사람은?)\n", + "mrc-0-004335: 뉴욕타임스 (질문: 중국 공산당원과 가족의 미국 입국 금지 방안 검토와 관련된 마이크 폼페이오 장관의 입장을 보도한 언론은?)\n", + "mrc-0-003436: 주노 해변 (질문: 제2캐나다기갑여단이 상륙한 곳은?)\n", + "mrc-0-002605: 콘드률 (질문: 구립운석을 이루는 물질 중 널리 알려진 것은?)\n", + "mrc-1-000653: 지구 (질문: 유령'은 어느 행성에서 지구로 왔는가?)\n", + "mrc-0-000854: 1916년 (질문: 독일에서 외국 영화를 상영할 수 없게 된 연도는?)\n", + "mrc-0-001235: 화석 (질문: 미치류가 해안가를 통해 다른 곳으로 이동했다는 주장을 뒷받침하는 것은?)\n", + "mrc-1-000813: 9월 13일 (질문: 태풍 초이완의 경보는 어떤 순간부터 풀렸는가?)\n", + "mrc-0-001699: SI (질문: 질량을 킬로그램으로 정의하는 단위 규칙은 무엇인가?)\n", + "mrc-0-001884: 하반신 (질문: 레빌 장군은 무엇이 없었기 때문에 실망했나?)\n", + "mrc-0-003205: 고려 초경 (질문: 석조지장보살상이 조각되지 않았을 것으로 추정되는 시기는?)\n", + "mrc-0-000359: 독일 (질문: 제1차 마른강 전투에서 이긴 국가는?)\n", + "mrc-0-001382: 이집트 (질문: 로마의 인력 수급에 중요한 역할을 한 나라는?)\n", + "mrc-0-002723: \"건강 증서\" (질문: 화물과 배가 시내 가까이에 갈 수 있는지의 여부를 정하는 기준이 된 문서는?)\n", + "mrc-0-001445: 1918년까지 (질문: 독일의 식민 지배는 언제까지 지속됐는가?)\n", + "mrc-1-000536: 양극화 (질문: 안전한 거래를 지지하는 주식 시장 참여자들은 어떤 집단 극화 양상을 보이나요?)\n", + "mrc-0-005293: 유니언역 (질문: 1985년 스토우빌선 열차가 스토우빌에서 출발해 여섯 번째로 정차했던 역은?)\n", + "mrc-1-001543: 머나먼 다리 (질문: 마켓가든 작전을 다룬 작품은?)\n", + "mrc-0-002231: 악령 (질문: 정치적 코미트를 담고있는 작품은?)\n", + "mrc-0-001961: 남서풍 (질문: 낮에는 어떤 바람이 부는가?)\n", + "mrc-0-004196: 합병증 (질문: 루이가 사망하게 될 원인은 무엇인가?)\n", + "mrc-0-001778: 1045년 (질문: 고스자쿠 천황이 사망한 연도는?)\n", + "mrc-0-002074: 5턴 (질문: 야전의 전투 제한 시간은?)\n", + "mrc-1-000580: 장웅 (질문: 키요미와 자신이 아끼는 2명을 지키기 위해 목숨도 아까워 하지 않은 사람은?)\n", + "mrc-0-004245: 외무대신 (질문: 이토 히로부미가 정치적 대립관계인 오쿠마 시게노부에게 준 관직은?)\n", + "mrc-0-000500: 2006년 (질문: 진관희가 짧은 기자 회견을 가진 해는?)\n", + "mrc-1-001071: 남자아이 빈을 데려다 양자 (질문: 좌운검이 도연이 정조의 자손인 것을 아무도 모르게 하기 위해 한 행동은?)\n", + "mrc-1-001269: 패닌 (질문: 에이몬 b. 킹을 파견한 사람은?)\n", + "mrc-1-000870: 이즈마 하치로로 (질문: 아즈마의 초기 명칭은?)\n", + "mrc-0-000527: 보물 (질문: 조선박물연구회가 공포하고자 한 것은?)\n", + "mrc-1-000278: 사전 구속 영장 (질문: 청구취지는 밝히는 방법은?)\n", + "mrc-1-000094: 구와바라 (질문: 가와바타가 술 '고도'를 직접 사와서 시음시킨 사람은?)\n", + "mrc-1-000972: 염소가스 (질문: 연방군의 레이다를 무력화시킨 화학무기는?)\n", + "mrc-0-000030: 1643년 (질문: 수사들이 전쟁의 대가로 지은 건물은?)\n", + "mrc-0-001878: 입석대 (질문: 속리산에서 임경업 장군의 설화가 깃들어있는 곳은 어디인가?)\n", + "mrc-0-003441: 인민전선 (질문: 에스토니아는 희망을 가졌는가' 를 발표한 인물이 리투아니와 협력한 떄는?)\n", + "mrc-1-000524: 밀로셰비치 (질문: 인민군이 세르비아를 확장하는 쪽으로 돌아서게 만든 사람은?)\n", + "mrc-1-001426: 직선기선 (질문: 한국이 무시한 일본 측의 주장은?)\n", + "mrc-0-004308: 'Beetles(딱정벌레)' (질문: 폭스바겐이 곤충명을 이름으로 지은 차량은?)\n", + "mrc-0-002991: 사카가미 아유미 (질문: 처음에는 후짱을 반대했지만 마지막에 후짱의 도움을 받은 인물은?)\n" + ] + } + ], + "execution_count": 34 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-24T05:32:32.845521Z", + "start_time": "2024-10-24T05:32:32.835971Z" + } + }, + "cell_type": "code", + "source": [ + "# 최종 결과 통합\n", + "final_results = all_matching.copy()\n", + "final_results.update(two_matching_final)\n", + "final_results.update(none_matching_final)\n", + "\n", + "# 결과를 json 파일로 저장\n", + "with open(\"final_mrc_results(roberta).json\", \"w\", encoding='utf-8') as f:\n", + " json.dump(final_results, f, indent=4, ensure_ascii=False)\n", + "\n", + "print(\"최종 결과가 'final_mrc_results(roberta).json'에 저장되었습니다.\")\n" + ], + "id": "15a711ef15b296ff", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "최종 결과가 'final_mrc_results(roberta).json'에 저장되었습니다.\n" + ] + } + ], + "execution_count": 35 + }, + { + "metadata": {}, + "cell_type": "code", + "outputs": [], + "execution_count": null, + "source": "", + "id": "52ab3ef02408b450" + } + ], + "metadata": { + "kernelspec": { + "display_name": "Python 3", + "language": "python", + "name": "python3" + }, + "language_info": { + "codemirror_mode": { + "name": "ipython", + "version": 2 + }, + "file_extension": ".py", + "mimetype": "text/x-python", + "name": "python", + "nbconvert_exporter": "python", + "pygments_lexer": "ipython2", + "version": "2.7.6" + } + }, + "nbformat": 4, + "nbformat_minor": 5 +} diff --git a/ensemble/hard_voting.py b/ensemble/hard_voting.py new file mode 100644 index 0000000..09c5856 --- /dev/null +++ b/ensemble/hard_voting.py @@ -0,0 +1,82 @@ +import json +from glob import glob +from collections import Counter, OrderedDict +""" +# 하드 보팅 앙상블 사용 방법 + +1. 파일 준비: + - 'ensemble/results_hard' 폴더 안에 앙상블하고 싶은 모든 'predictions.json' 파일들을 넣습니다. + +2. 우선순위 설정: + - 'priority_order' 리스트에 모델의 우선순위를 정의합니다. + - 예: priority_order = ['predictions1.json', 'predictions2.json', 'predictions3.json'] + - 리스트의 앞쪽에 있는 모델일수록 높은 우선순위를 가집니다. + +3. 코드 실행: + - 설정을 마친 후 코드를 실행합니다. + - 코드는 자동으로 폴더 내의 모든 JSON 파일을 읽어 앙상블을 수행합니다. + +4. 하드 보팅 과정: + - 각 질문에 대해 모든 모델의 답변을 수집합니다. + - 가장 많이 나온 답변(들)을 선택합니다. + - 동점인 경우, 우선순위가 가장 높은 모델의 답변을 선택합니다. + +5. 결과 확인: + - 앙상블 결과는 'final_hard_predictions.json' 파일로 저장됩니다. + - 이 파일에는 각 질문에 대한 최종 답변이 포함되어 있습니다. + +주의: 모델의 우선순위는 각 모델의 성능이나 특성을 고려하여 신중히 결정해야 합니다. +우선순위 설정에 따라 최종 결과가 크게 달라질 수 있습니다. +""" +# 우선순위 직접 정의 +priority_order = ['predictions(1).json', 'predictions(2).json', 'predictions(3).json'] + +def hard_voting_with_priority(predictions, priority_order): + result = {} + for question_id in predictions[0].keys(): + answers = [pred[question_id] for pred in predictions if question_id in pred] + answer_counts = Counter(answer for answer in answers if answer) + + if answer_counts: + # 가장 많이 나온 답변들을 찾습니다 + max_count = max(answer_counts.values()) + top_answers = [ans for ans, count in answer_counts.items() if count == max_count] + + if len(top_answers) == 1: + # 하나의 답변이 가장 많다면 그것을 선택 + result[question_id] = top_answers[0] + else: + # 동점이라면 우선순위가 높은 모델의 답변을 선택 + for model in priority_order: + model_index = next((i for i, pred in enumerate(predictions) if pred.get('filename') == model), None) + if model_index is not None: + model_answer = predictions[model_index].get(question_id, "") + if model_answer in top_answers: + result[question_id] = model_answer + break + else: + # 우선순위 모델에서도 답을 찾지 못했다면 첫 번째 top answer 선택 + result[question_id] = top_answers[0] + else: + result[question_id] = "" + return result + +# 예측 파일들을 로드합니다. +prediction_files = glob("./results_hard/*.json") +predictions = [] + +# 각 prediction 파일을 읽어와서 predictions 리스트에 추가합니다. +for file_name in prediction_files: + with open(file_name, "r", encoding='utf-8') as file: + prediction = json.load(file) + predictions.append(prediction) + +# 하드 보팅을 수행합니다. +final_predictions = hard_voting_with_priority(predictions, priority_order) + +# 결과를 출력합니다. +print(json.dumps(final_predictions, indent=4, ensure_ascii=False)) + +# 결과를 파일로 저장합니다. +with open("final_hard_predictions.json", "w", encoding='utf-8') as f: + json.dump(final_predictions, f, indent=4, ensure_ascii=False) diff --git a/ensemble/results_hard/.gitkeep b/ensemble/results_hard/.gitkeep new file mode 100644 index 0000000..e69de29 diff --git a/ensemble/results_soft/.gitkeep b/ensemble/results_soft/.gitkeep new file mode 100644 index 0000000..e69de29 diff --git a/ensemble/soft_voting.py b/ensemble/soft_voting.py new file mode 100644 index 0000000..02a00d0 --- /dev/null +++ b/ensemble/soft_voting.py @@ -0,0 +1,100 @@ +import json +from collections import defaultdict +from glob import glob +from difflib import SequenceMatcher + +#https://colab.research.google.com/drive/1jkeoeG7atT7kxbrwT_HZLNahWwXyc99t#scrollTo=d12Ilrzwhzr6 +""" +1. 파일 준비: + - 'ensemble/results_soft' 안에 앙상블하고 싶은 모든 'nbest_predictions.json' 파일들을 넣습니다. + +2. 유사도 설정: + - 'similar' 함수에서 유사도 임계값을 조정합니다. + - 예: SequenceMatcher(None, a, b).ratio() > 0.8 + - 0.8은 유사도 임계값입니다. 이 값을 높이면 더 엄격하게, 낮추면 더 관대하게 답변들을 그룹화합니다. + - 값의 범위: 0.0 (완전히 다름) ~ 1.0 (완전히 동일) + +3. 무응답 임계값 설정: + - 'NO_ANSWER_THRESHOLD' 값을 설정합니다. + - 최종 선택된 답변의 확률이 이 임계값보다 낮으면 빈 문자열("")을 반환합니다. + - 예: NO_ANSWER_THRESHOLD = 0.5 + - 이 경우, 최종 답변의 확률이 50% 미만이면 답변을 비웁니다. + +4. 코드 실행: + - 설정을 마친 후 코드를 실행합니다. + - 코드는 자동으로 폴더 내의 모든 JSON 파일을 읽어 앙상블을 수행합니다. + +5. 결과 확인: + - 앙상블 결과는 'final_soft_predictions.json' 파일로 저장됩니다. + - 이 파일에는 각 질문에 대한 최종 답변이 포함되어 있습니다. +""" +# 가중치 변경 가능 +def similar(a, b): + return SequenceMatcher(None, a, b).ratio() > 0.8 + +# 예측 파일들을 로드합니다. +prediction_files = glob("./results_soft/*.json") +ensemble_predictions = defaultdict(list) + +# 각 prediction 파일을 읽어와서 ensemble_predictions에 추가합니다. +for file_name in prediction_files: + with open(file_name, "r") as file: + predictions = json.load(file) + for key, value in predictions.items(): + if isinstance(value, list): + ensemble_predictions[key].extend(value) + else: + ensemble_predictions[key].append({"text": value, "probability": 1.0}) + +# Soft voting을 사용하여 각 예측 결과에 대한 가중 평균을 계산합니다. +final_predictions = {} +NO_ANSWER_THRESHOLD = 1.0 # 적절한 임계값 설정 필요 + +for key, predictions in ensemble_predictions.items(): + grouped_predictions = defaultdict(list) + + # 유사한 답변들을 그룹화합니다. + for pred in predictions: + if isinstance(pred, dict) and "text" in pred: + text = pred["text"] + elif isinstance(pred, str): + text = pred + else: + continue # 예상치 못한 형식의 예측은 건너뜁니다. + + added = False + for group_key in grouped_predictions: + if similar(text, group_key): + grouped_predictions[group_key].append(pred) + added = True + break + if not added: + grouped_predictions[text].append(pred) + + # 그룹별로 점수를 계산합니다. + group_scores = {} + for group_key, group_preds in grouped_predictions.items(): + group_scores[group_key] = sum(p.get("probability", 1.0) for p in group_preds) + + # 가장 높은 점수를 가진 그룹을 선택합니다. + if group_scores: + best_text = max(group_scores, key=group_scores.get) + best_score = group_scores[best_text] + else: + best_text = "" + best_score = 0 + + # No-answer 처리 + if best_score < NO_ANSWER_THRESHOLD: + final_predictions[key] = {"text": "", "score": best_score} + else: + final_predictions[key] = {"text": best_text, "score": best_score} + +# 결과를 출력 형식에 맞게 변환합니다. +converted_data = {key: value["text"] for key, value in final_predictions.items()} + +# 결과를 출력합니다. +print(json.dumps(converted_data, indent=4, ensure_ascii=False)) + +# 결과를 파일로 저장합니다. +json.dump(converted_data, open("final_soft_predictions.json", "w"), indent=4, ensure_ascii=False) diff --git a/external_dataset_processing/arrow_to_csv.py b/external_dataset_processing/arrow_to_csv.py new file mode 100644 index 0000000..e32539b --- /dev/null +++ b/external_dataset_processing/arrow_to_csv.py @@ -0,0 +1,10 @@ +from datasets import Dataset + +ds = Dataset.from_file("input_file_name.arrow") + +df = ds.to_pandas() + +csv_file_path = "output_file_name.csv" +df.to_csv(csv_file_path, index=False) + +print(f"Dataset saved to {csv_file_path}") diff --git a/external_dataset_processing/csv_to_arrow.py b/external_dataset_processing/csv_to_arrow.py new file mode 100644 index 0000000..d7ad66e --- /dev/null +++ b/external_dataset_processing/csv_to_arrow.py @@ -0,0 +1,89 @@ +import os +import json +import pandas as pd +from numpy import array +from datasets import Dataset, DatasetDict + + +def csv_to_arrow(train_filename, valid_filename, output_dir): + train_df = pd.read_csv(train_filename) + valid_df = pd.read_csv(valid_filename) + + # type str -> object(dict)로 변환 + train_df["answers"] = train_df["answers"].apply(lambda x: eval(x)) + valid_df["answers"] = valid_df["answers"].apply(lambda x: eval(x)) + + # Dataset으로 변환 (from pandas DataFrame) + train_dataset = Dataset.from_pandas(train_df) + + # 동일하게 validation과 test도 처리 가능 + valid_dataset = Dataset.from_pandas(valid_df) + + # DatasetDict로 결합 + dataset_dict = DatasetDict( + { + "train": train_dataset, + "validation": valid_dataset, + } + ) + + # Arrow 파일로 저장 + dataset_dict.save_to_disk(output_dir) + print(f"Augmented dataset saved to {output_dir}") + + +def modify_filename(output_dir): + TARGET_FILE_NAME = "dataset.arrow" + + # JSON 파일 경로 + train_state = f"{output_dir}/train/state.json" + valid_state = f"{output_dir}/validation/state.json" + + # arrow 파일 경로 + train_arrow = f"{output_dir}/train/data-00000-of-00001.arrow" + valid_arrow = f"{output_dir}/validation/data-00000-of-00001.arrow" + + def modify_json(json_filename): + # JSON 파일 읽기 + with open(json_filename, "r", encoding="utf-8") as f: + data = json.load(f) + + # filename 변경 + data["_data_files"][0]["filename"] = TARGET_FILE_NAME + + # 수정된 JSON 파일 덮어쓰기 + with open(json_filename, "w", encoding="utf-8") as f: + json.dump(data, f, indent=4, ensure_ascii=False) + + def modify_arrow(arrow_filename): + if os.path.exists(arrow_filename): + old_filepath, _ = os.path.split(arrow_filename) + os.rename(arrow_filename, os.path.join(old_filepath, TARGET_FILE_NAME)) + else: + print(f"파일 '{arrow_filename}'이 존재하지 않습니다.") + + modify_json(train_state) + modify_json(valid_state) + + modify_arrow(train_arrow) + modify_arrow(valid_arrow) + + +if __name__ == "__main__": + import argparse + + # Arguments + parser = argparse.ArgumentParser(description="") + parser.add_argument( + "--train_filename", metavar="train_dataset.csv", type=str, help="" + ) + parser.add_argument( + "--valid_filename", metavar="train_validation_dataset.csv", type=str, help="" + ) + parser.add_argument("--output_dir", metavar="train_dataset_v0", type=str, help="") + args = parser.parse_args() + + csv_to_arrow(args.train_filename, args.valid_filename, args.output_dir) + modify_filename(args.output_dir) + + # python csv_to_arrow.py --train_filename train_dataset.csv --valid_filename train_validation_dataset.csv --output_dir train_dataset_v0 diff --git a/external_dataset_processing/find_answer_start.py b/external_dataset_processing/find_answer_start.py new file mode 100644 index 0000000..4fa002e --- /dev/null +++ b/external_dataset_processing/find_answer_start.py @@ -0,0 +1,18 @@ +import pandas as pd + +updated_file_path = './input.csv' +data = pd.read_csv(updated_file_path) + +def find_start_position(row): + context = row['context'] + answer = row['answers'] + try: + start_position = context.find(answer) + return start_position + except: + return -1 + +data['answer_start'] = data.apply(find_start_position, axis=1) + +output_formatted_file_path = './output.csv' +data.to_csv(output_formatted_file_path, index=False) \ No newline at end of file diff --git a/external_dataset_processing/train_for_training.py b/external_dataset_processing/train_for_training.py new file mode 100644 index 0000000..4588bd0 --- /dev/null +++ b/external_dataset_processing/train_for_training.py @@ -0,0 +1,364 @@ +import logging +import os +import sys +from typing import Dict, NoReturn, Tuple +import numpy as np +from arguments import DataTrainingArguments, ModelArguments, CustomTrainingArguments +from datasets import DatasetDict, load_from_disk, load_metric +from trainer_qa import QuestionAnsweringTrainer +from transformers import ( + AutoConfig, + AutoModelForQuestionAnswering, + AutoTokenizer, + DataCollatorWithPadding, + EvalPrediction, + HfArgumentParser, + TrainingArguments, +) +from utils_qa import check_no_error, postprocess_qa_predictions, set_seed + +logger = logging.getLogger(__name__) + + +def main(): + parser = HfArgumentParser( + (ModelArguments, DataTrainingArguments, CustomTrainingArguments) + ) + model_args, data_args, training_args = parser.parse_args_into_dataclasses() + + # 가능한 arguments들은 arguments.py에서 확인하거나 --help flag로 확인 + + print(f"model is from {model_args.model_name_or_path}") + print(f"data is from {data_args.dataset_name}") + + # logging 설정 + logging.basicConfig( + format="%(asctime)s - %(levelname)s - %(name)s - %(message)s", + datefmt="%m/%d/%Y %H:%M:%S", + handlers=[logging.StreamHandler(sys.stdout)], + ) + + # verbosity 설정 : Transformers logger의 정보로 사용합니다 (on main process only) + logger.info("Training/evaluation parameters %s", training_args) + + # 모델을 초기화하기 전에 난수를 고정합니다. + set_seed(training_args.seed) + + datasets = load_from_disk(data_args.dataset_name) + print(datasets) + + # AutoConfig를 이용하여 pretrained model 과 tokenizer를 불러옵니다. + # argument로 원하는 모델 이름을 설정하면 옵션을 바꿀 수 있습니다. + config = AutoConfig.from_pretrained( + ( + model_args.config_name + if model_args.config_name + else model_args.model_name_or_path + ), + ) + tokenizer = AutoTokenizer.from_pretrained( + ( + model_args.tokenizer_name + if model_args.tokenizer_name + else model_args.model_name_or_path + ), + # 'use_fast' True: rust로 구현된 tokenizer / False: python으로 구현된 tokenizer + # rust version이 비교적 속도가 빠름 + use_fast=True, + ) + model = AutoModelForQuestionAnswering.from_pretrained( + model_args.model_name_or_path, + from_tf=bool(".ckpt" in model_args.model_name_or_path), + config=config, + ) + + print( + type(training_args), + type(model_args), + type(datasets), + type(tokenizer), + type(model), + ) + + # train or eval mrc model + if training_args.do_train or training_args.do_eval: + run_mrc(data_args, training_args, model_args, datasets, tokenizer, model) + + +def run_mrc( + data_args: DataTrainingArguments, + training_args: CustomTrainingArguments, + model_args: ModelArguments, + datasets: DatasetDict, + tokenizer, + model, +) -> NoReturn: + + # dataset을 전처리합니다. + # training과 evaluation에서 사용되는 전처리는 아주 조금 다른 형태를 가집니다. + if training_args.do_train: + column_names = datasets["train"].column_names + else: + column_names = datasets["validation"].column_names + + question_column_name = "question" if "question" in column_names else column_names[0] + context_column_name = "context" if "context" in column_names else column_names[1] + answer_column_name = "answers" if "answers" in column_names else column_names[2] + answer_start_column_name = "answer_start" if "answer_start" in column_names else column_names[3] + + + + # Padding에 대한 옵션을 설정합니다. + # (question|context) 혹은 (context|question)로 세팅 가능합니다. + pad_on_right = tokenizer.padding_side == "right" + + # 오류가 있는지 확인합니다. + last_checkpoint, max_seq_length = check_no_error( + data_args, training_args, datasets, tokenizer + ) + + # Train preprocessing + def prepare_train_features(examples): + # truncation과 padding(length가 짧을때만)을 통해 toknization을 진행하며, stride를 이용하여 overflow를 유지합니다. + # 각 example들은 이전의 context와 조금씩 겹치게됩니다. + tokenized_examples = tokenizer( + examples[question_column_name if pad_on_right else context_column_name], + examples[context_column_name if pad_on_right else question_column_name], + truncation="only_second" if pad_on_right else "only_first", + max_length=max_seq_length, + stride=data_args.doc_stride, + return_overflowing_tokens=True, + return_offsets_mapping=True, + return_token_type_ids=( + True if model_args.base_model.lower() == "bert" else False + ), # RoBERTa는 BERT와 달리 token_type_ids(문장 간 구분을 위한 역할을 수행)를 사용하지 않음 + padding="max_length" if data_args.pad_to_max_length else False, + ) + + # 길이가 긴 context가 등장할 경우 truncate를 진행해야하므로, 해당 데이터셋을 찾을 수 있도록 mapping 가능한 값이 필요합니다. + sample_mapping = tokenized_examples.pop("overflow_to_sample_mapping") + # token의 캐릭터 단위 position를 찾을 수 있도록 offset mapping을 사용합니다. + # start_positions과 end_positions을 찾는데 도움을 줄 수 있습니다. + offset_mapping = tokenized_examples.pop("offset_mapping") + + # 데이터셋에 "start position", "enc position" label을 부여합니다. + tokenized_examples["start_positions"] = [] + tokenized_examples["end_positions"] = [] + + for i, offsets in enumerate(offset_mapping): + input_ids = tokenized_examples["input_ids"][i] + cls_index = input_ids.index(tokenizer.cls_token_id) # cls index + + # sequence id를 설정합니다 (to know what is the context and what is the question). + sequence_ids = tokenized_examples.sequence_ids(i) + + # 하나의 example이 여러개의 span을 가질 수 있습니다. + sample_index = sample_mapping[i] + answers = examples[answer_column_name][sample_index] + + answer_start = examples[answer_start_column_name][sample_index] + # answer가 없을 경우 cls_index를 answer로 설정합니다(== example에서 정답이 없는 경우 존재할 수 있음). + if answer_start == -1: + tokenized_examples["start_positions"].append(cls_index) + tokenized_examples["end_positions"].append(cls_index) + else: + # text에서 정답의 Start/end character index + start_char = answer_start + end_char = start_char + len(answers) + + # text에서 current span의 Start token index + token_start_index = 0 + while sequence_ids[token_start_index] != (1 if pad_on_right else 0): + token_start_index += 1 + + # text에서 current span의 End token index + token_end_index = len(input_ids) - 1 + while sequence_ids[token_end_index] != (1 if pad_on_right else 0): + token_end_index -= 1 + + # 정답이 span을 벗어났는지 확인합니다(정답이 없는 경우 CLS index로 label되어있음). + if not ( + offsets[token_start_index][0] <= start_char + and offsets[token_end_index][1] >= end_char + ): + tokenized_examples["start_positions"].append(cls_index) + tokenized_examples["end_positions"].append(cls_index) + else: + # token_start_index 및 token_end_index를 answer의 끝으로 이동합니다. + # Note: answer가 마지막 단어인 경우 last offset을 따라갈 수 있습니다(edge case). + while ( + token_start_index < len(offsets) + and offsets[token_start_index][0] <= start_char + ): + token_start_index += 1 + tokenized_examples["start_positions"].append(token_start_index - 1) + while offsets[token_end_index][1] >= end_char: + token_end_index -= 1 + tokenized_examples["end_positions"].append(token_end_index + 1) + + return tokenized_examples + + if training_args.do_train: + if "train" not in datasets: + raise ValueError("--do_train requires a train dataset") + train_dataset = datasets["train"] + + # dataset에서 train feature를 생성합니다. + train_dataset = train_dataset.map( + prepare_train_features, + batched=True, + num_proc=data_args.preprocessing_num_workers, + remove_columns=column_names, + load_from_cache_file=not data_args.overwrite_cache, + ) + + # Validation preprocessing + def prepare_validation_features(examples): + # truncation과 padding(length가 짧을때만)을 통해 toknization을 진행하며, stride를 이용하여 overflow를 유지합니다. + # 각 example들은 이전의 context와 조금씩 겹치게됩니다. + tokenized_examples = tokenizer( + examples[question_column_name if pad_on_right else context_column_name], + examples[context_column_name if pad_on_right else question_column_name], + truncation="only_second" if pad_on_right else "only_first", + max_length=max_seq_length, + stride=data_args.doc_stride, + return_overflowing_tokens=True, + return_offsets_mapping=True, + return_token_type_ids=False, # roberta모델을 사용할 경우 False, bert를 사용할 경우 True로 표기해야합니다. + padding="max_length" if data_args.pad_to_max_length else False, + ) + + # 길이가 긴 context가 등장할 경우 truncate를 진행해야하므로, 해당 데이터셋을 찾을 수 있도록 mapping 가능한 값이 필요합니다. + sample_mapping = tokenized_examples.pop("overflow_to_sample_mapping") + + # evaluation을 위해, prediction을 context의 substring으로 변환해야합니다. + # corresponding example_id를 유지하고 offset mappings을 저장해야합니다. + tokenized_examples["example_id"] = [] + + for i in range(len(tokenized_examples["input_ids"])): + # sequence id를 설정합니다 (to know what is the context and what is the question). + sequence_ids = tokenized_examples.sequence_ids(i) + context_index = 1 if pad_on_right else 0 + + # 하나의 example이 여러개의 span을 가질 수 있습니다. + sample_index = sample_mapping[i] + tokenized_examples["example_id"].append(examples["id"][sample_index]) + + # context의 일부가 아닌 offset_mapping을 None으로 설정하면 token position이 context의 일부인지 쉽게 확인 할 수 있음 + tokenized_examples["offset_mapping"][i] = [ + (o if sequence_ids[k] == context_index else None) + for k, o in enumerate(tokenized_examples["offset_mapping"][i]) + ] + return tokenized_examples + + if training_args.do_eval: + eval_dataset = datasets["validation"] + + # Validation Feature 생성 + eval_dataset = eval_dataset.map( + prepare_validation_features, + batched=True, + num_proc=data_args.preprocessing_num_workers, + remove_columns=column_names, + load_from_cache_file=not data_args.overwrite_cache, + ) + + # Data collator + # flag가 True이면 이미 max length로 padding된 상태입니다. + # 그렇지 않다면 data collator에서 padding을 진행해야합니다. + data_collator = DataCollatorWithPadding( + tokenizer, pad_to_multiple_of=8 if training_args.fp16 else None + ) + + # Post-processing: + def post_processing_function( + examples, + features, + predictions: Tuple[np.ndarray, np.ndarray], + training_args: CustomTrainingArguments, + ) -> EvalPrediction: + # Post-processing: start logits과 end logits을 original context의 정답과 match시킵니다. + predictions = postprocess_qa_predictions( + examples=examples, + features=features, + predictions=predictions, + max_answer_length=data_args.max_answer_length, + output_dir=training_args.output_dir, + ) + # Metric을 구할 수 있도록 Format을 맞춰줍니다. + formatted_predictions = [ + {"id": k, "prediction_text": v} for k, v in predictions.items() + ] + + if training_args.do_predict: + return formatted_predictions + elif training_args.do_eval: + references = [ + {"id": ex["id"], "answers": ex[answer_column_name]} + for ex in datasets["validation"] + ] + return EvalPrediction( + predictions=formatted_predictions, label_ids=references + ) + + metric = load_metric("squad") + + def compute_metrics(p: EvalPrediction) -> Dict: + return metric.compute(predictions=p.predictions, references=p.label_ids) + + # Trainer 초기화 + trainer = QuestionAnsweringTrainer( + model=model, + args=training_args, + train_dataset=train_dataset if training_args.do_train else None, + eval_dataset=eval_dataset if training_args.do_eval else None, + eval_examples=datasets["validation"] if training_args.do_eval else None, + tokenizer=tokenizer, + data_collator=data_collator, + post_process_function=post_processing_function, + compute_metrics=compute_metrics, + ) + + # Training + if training_args.do_train: + if last_checkpoint is not None: + checkpoint = last_checkpoint + elif os.path.isdir(model_args.model_name_or_path): + checkpoint = model_args.model_name_or_path + else: + checkpoint = None + train_result = trainer.train(resume_from_checkpoint=False) + trainer.save_model() # Saves the tokenizer too for easy upload + + metrics = train_result.metrics + metrics["train_samples"] = len(train_dataset) + + trainer.log_metrics("train", metrics) + trainer.save_metrics("train", metrics) + trainer.save_state() + + output_train_file = os.path.join(training_args.output_dir, "train_results.txt") + + with open(output_train_file, "w") as writer: + logger.info("***** Train results *****") + for key, value in sorted(train_result.metrics.items()): + logger.info(f" {key} = {value}") + writer.write(f"{key} = {value}\n") + + # State 저장 + trainer.state.save_to_json( + os.path.join(training_args.output_dir, "trainer_state.json") + ) + + # Evaluation + if training_args.do_eval: + logger.info("*** Evaluate ***") + metrics = trainer.evaluate() + metrics["eval_samples"] = len(eval_dataset) + + trainer.log_metrics("eval", metrics) + trainer.save_metrics("eval", metrics) + + +if __name__ == "__main__": + main() diff --git a/notebooks/EDA_train,test.ipynb b/notebooks/EDA_train,test.ipynb new file mode 100644 index 0000000..6582c2b --- /dev/null +++ b/notebooks/EDA_train,test.ipynb @@ -0,0 +1,2049 @@ +{ + "cells": [ + { + "cell_type": "markdown", + "id": "1321e6ff-9980-411a-83d5-90364c486710", + "metadata": {}, + "source": "# EDA를 통한 데이터의 형태, 문장길이, 데이터 수, 결측치 등을 파악" + }, + { + "cell_type": "code", + "id": "f9c80410-55e7-4a38-9454-f2dc7c1fe8e5", + "metadata": { + "collapsed": true, + "jupyter": { + "outputs_hidden": true + }, + "tags": [], + "ExecuteTime": { + "end_time": "2024-10-04T12:32:38.923349Z", + "start_time": "2024-10-04T12:32:36.198622Z" + } + }, + "source": [ + "!pip install seaborn\n", + "!pip install pyarrow" + ], + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Requirement already satisfied: seaborn in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (0.13.2)\n", + "Requirement already satisfied: numpy!=1.24.0,>=1.20 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from seaborn) (1.26.4)\n", + "Requirement already satisfied: pandas>=1.2 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from seaborn) (2.2.2)\n", + "Requirement already satisfied: matplotlib!=3.6.1,>=3.4 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from seaborn) (3.9.2)\n", + "Requirement already satisfied: contourpy>=1.0.1 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from matplotlib!=3.6.1,>=3.4->seaborn) (1.2.0)\n", + "Requirement already satisfied: cycler>=0.10 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from matplotlib!=3.6.1,>=3.4->seaborn) (0.11.0)\n", + "Requirement already satisfied: fonttools>=4.22.0 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from matplotlib!=3.6.1,>=3.4->seaborn) (4.51.0)\n", + "Requirement already satisfied: kiwisolver>=1.3.1 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from matplotlib!=3.6.1,>=3.4->seaborn) (1.4.4)\n", + "Requirement already satisfied: packaging>=20.0 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from matplotlib!=3.6.1,>=3.4->seaborn) (24.1)\n", + "Requirement already satisfied: pillow>=8 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from matplotlib!=3.6.1,>=3.4->seaborn) (10.4.0)\n", + "Requirement already satisfied: pyparsing>=2.3.1 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from matplotlib!=3.6.1,>=3.4->seaborn) (3.1.2)\n", + "Requirement already satisfied: python-dateutil>=2.7 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from matplotlib!=3.6.1,>=3.4->seaborn) (2.9.0.post0)\n", + "Requirement already satisfied: pytz>=2020.1 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from pandas>=1.2->seaborn) (2024.1)\n", + "Requirement already satisfied: tzdata>=2022.7 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from pandas>=1.2->seaborn) (2023.3)\n", + "Requirement already satisfied: six>=1.5 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from python-dateutil>=2.7->matplotlib!=3.6.1,>=3.4->seaborn) (1.16.0)\n", + "Requirement already satisfied: pyarrow in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (17.0.0)\n", + "Requirement already satisfied: numpy>=1.16.6 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from pyarrow) (1.26.4)\n" + ] + } + ], + "execution_count": 21 + }, + { + "cell_type": "code", + "id": "dc2de0aa-e6a8-48a2-9af4-52b15c472e0c", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-17T06:31:51.982419Z", + "start_time": "2024-10-17T06:31:51.968042Z" + } + }, + "source": [ + "import pandas as pd\n", + "import seaborn as sns\n", + "import matplotlib\n", + "import matplotlib.pyplot as plt\n", + "import numpy as np\n", + "import random" + ], + "outputs": [], + "execution_count": 3 + }, + { + "cell_type": "markdown", + "id": "64923ae2-b4eb-45a4-af40-31dfac98173b", + "metadata": {}, + "source": [ + "# 데이터 구조 파악\n", + "![img](data_info1.png)" + ] + }, + { + "cell_type": "code", + "id": "5a828d0f-b0c9-4354-8650-40ce36f0e564", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-17T06:31:53.338865Z", + "start_time": "2024-10-17T06:31:53.319404Z" + } + }, + "source": [ + "from datasets import load_from_disk\n", + "import os\n", + "current_dir = os.getcwd()\n", + "parent_dir = os.path.dirname(current_dir)\n", + "\n", + "# Arrow 파일 경로 설정\n", + "train_file_path = os.path.join(parent_dir, 'data', 'shuffled_dataset')\n", + "test_file_path = os.path.join(parent_dir, 'data', 'test_dataset')\n", + "dataset = load_from_disk(train_file_path)\n", + "test_dataset=load_from_disk(test_file_path)" + ], + "outputs": [], + "execution_count": 4 + }, + { + "cell_type": "code", + "id": "70f97071-e4c3-4d04-bf32-076a099698ee", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-17T06:31:54.069885Z", + "start_time": "2024-10-17T06:31:53.840983Z" + } + }, + "source": [ + "train_dataset = dataset[\"train\"]\n", + "valid_dataset = dataset[\"validation\"]\n", + "test_dataset=test_dataset['validation']\n", + "\n", + "train_df=pd.DataFrame(train_dataset)\n", + "valid_df=pd.DataFrame(valid_dataset)\n", + "test_df=pd.DataFrame(test_dataset)\n", + "\n", + "print(f\"Train length : {len(train_df)}\")\n", + "print(f\"Valid length : {len(valid_df)}\")\n", + "print(f\"Test length : {len(test_df)}\")" + ], + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Train length : 5547\n", + "Valid length : 617\n", + "Test length : 600\n" + ] + } + ], + "execution_count": 5 + }, + { + "cell_type": "markdown", + "id": "5bef6e6f-aec8-4a8d-9403-d51e697197af", + "metadata": {}, + "source": "## 데이터의 형태" + }, + { + "cell_type": "code", + "id": "627b2d73-cb53-46f1-a5ac-c750c3e966ef", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-17T06:31:57.306033Z", + "start_time": "2024-10-17T06:31:57.294724Z" + } + }, + "source": "train_dataset[0]", + "outputs": [ + { + "data": { + "text/plain": [ + "{'title': '도당굿',\n", + " 'context': \"경기도에서 연행되는 굿의 한 가지로 일명 대동굿·치성굿이라고 하는데 매년 음력 10월 상달 추수 후 마을이 무사하고 잘 되기를 도당대감(都堂大監) 삼불제석(三佛帝釋)에게 비는 굿이 도당굿이다. 경기도 지역에서 마을의 으뜸신[都神]을 모신 당인 도당(都堂)에서 지내는 마을굿. 별칭으로는 ‘고창굿’이라 부르는 지역도 있다. 옛 시흥군 소래면 포리(浦里, 현 인천시 남동구)를 비롯해 장봉섬, 사섬, 떼무리섬 등 다수의 지역에서 정월에 행해졌으나, 음력 3월 3일과 10월 10일에 도당굿이 치러지는 사례도 흔히 찾아볼 수 있어 일정하지 않다. \\\\n\\\\n인천·부천 등 경기도 남부지방에서 세습무가 주관하는 도당굿 절차 및 진행과정을 보면, 굿은 마을의 신당이나 신목(神木)이 있는 근처에 차일을 치고 굿당을 꾸며 행하게 되는데, 맨 먼저 무당은 부정굿으로 굿당을 깨끗이 정화한다. 부정굿이 끝나면 마을의 당(堂)으로 도당신을 모시러 가는 ‘도당모시기’를 한다. 이처럼 마을의 안녕을 위해서 굿판을 벌여 치성과 제사를 지내는 것을 도당굿, 대동굿, 별신굿으로 불리고 있다.\\\\n\\\\n마을의 주민 가운데 한 사람에게 대를 내려 도당신이 강림한 것을 확인하는 ‘대내림’이 행하여진다. 전생과 현세의 삶과 수행을 귀하게 여기듯 티베트 불교(라마교)에서 전생과 현세의 불국(佛國, 관음의 정토)과 나라를 동일시하며 달라이라마를 관음의 '대내림' 화신이라고 생각하는 것과 비슷하다. 이어서 굿패는 ‘돌돌이’를 하는데 이것은 무당패들이 마을의 우물·장승·집 등을 무악을 울리면서 한바퀴 도는 것으로, 도당신의 영력으로 잡귀를 몰아내고 마을 전체를 정화시킨다는 의미를 가진다.\\\\n\\\\n굿당에 돌아와서는 당금애기신화가 구송되고 바라춤을 추는 ‘제석굿’을 하고, ‘본향굿’에서 도당할머니·도당할아버지를 모신 뒤 손굿(또는 손님굿)에서 천연두신인 손님을 청하여 마을에 질병이 돌지 않기를 기원한다.\\\\n\\\\n다음에 잡귀를 쫓아내는 군웅굿을 한 뒤, 굿을 시작할 때 굿당으로 모셔왔던 도당신을 다시 마을의 당으로 돌려보내는 ‘도당모셔다드리기’를 한다. 맨 마지막으로 ‘뒷전’에서 굿에 따라든 잡귀들을 풀어 먹여 보낸다\",\n", + " 'question': \"대내림'을 행한 뒤 다음 순서는?\",\n", + " 'answers': {'answer_start': [715], 'text': ['‘돌돌이’']},\n", + " 'document_id': 37217}" + ] + }, + "execution_count": 6, + "metadata": {}, + "output_type": "execute_result" + } + ], + "execution_count": 6 + }, + { + "cell_type": "code", + "id": "f11584bc-a1b0-40b1-8150-2df189ccd84e", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-17T06:31:58.279674Z", + "start_time": "2024-10-17T06:31:58.271532Z" + } + }, + "source": [ + "valid_dataset[0]" + ], + "outputs": [ + { + "data": { + "text/plain": [ + "{'title': None,\n", + " 'context': '제1차 그리스-페르시아 전쟁\\n기원전 493년까지 마지막까지 남은 반란군도 페르시아의 함대에 의해 괴멸되었고 페르시아는 이 기회로 에게해 동쪽의 섬들까지 제국의 판도를 넓혀갔다. 다리우스는 반란이 진압된 후 밀레토스에서는 신전을 약탈하고 주민은 모두 노예로 만들거나 강제로 이주시켰지만 나머지 반란 도시들은 놀랍게도 하나도 건드리지 않았다. 그는 사위인 마르도니오스를 이 지역의 총독으로 임명해 뒷처리를 맡겼는데 지역별로 공평한 세금을 부과하고 민주주의도 전부는 아니지만 일부 부활시켰고 죄인들을 각자 자기 고향도시로 돌아가도록 하였다. 다리우스 1세의 이러한 유화책은 그리스 본토에 대한 일종의 선전으로 보인다.\\n\\n기원전 492년 봄 엄청난 대군이 마르도니오스의 지휘 아래 그리스 원정에 나섰다. 해군은 에게해 해안의 해안국가들을 휩쓸었고 육군은 헬레스폰토스 해협을 건너 트라케와 마케도니아로 진군해 들어가서 복속시켰다. 그러나 아토스 산에서 페르시아 해군 선단은 폭풍을 만나 몰살했는데 헤로도토스에 따르면 300척의 배가 침몰하고 20,000명의 병사가 목숨을 잃었다고 한다. 마르도니오스는 남은 군대를 소아시아로 퇴각시켰다. 트라케의 부족인 브리간스는 퇴각하는 페르시아 군을 맞아 격렬하게 저항하여 마드로니우스에게 부상까지 입혔는데 결국 항복했다. 마르도니오스에 의한 이 원정이 과연 그리스 침공이었느냐에 대해서는 논란이 있다. 헤로도토스는 아테나이를 공격하기 위해서 라고 말하고 있지만 일단 트라케와 마케도니아를 다시 정복하여 이오니아 반란의 싹을 잘랐다는 점에서 더 이상의 진군이 필요했는가에 대한 의문이 있다.',\n", + " 'question': '기원전 492년 봄 그리스 원정을 지휘한 인물은 누구인가?',\n", + " 'answers': {'answer_start': [197], 'text': ['마르도니오스']},\n", + " 'document_id': 10764}" + ] + }, + "execution_count": 7, + "metadata": {}, + "output_type": "execute_result" + } + ], + "execution_count": 7 + }, + { + "cell_type": "code", + "id": "9d04deb2-2da0-41ba-a3e7-07921321c05f", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-17T06:32:03.440883Z", + "start_time": "2024-10-17T06:32:03.422544Z" + } + }, + "source": [ + "test_dataset[0]" + ], + "outputs": [ + { + "data": { + "text/plain": [ + "{'question': \"유령'은 어느 행성에서 지구로 왔는가?\", 'id': 'mrc-1-000653'}" + ] + }, + "execution_count": 8, + "metadata": {}, + "output_type": "execute_result" + } + ], + "execution_count": 8 + }, + { + "metadata": {}, + "cell_type": "markdown", + "source": "## context, question, answer에 대한 각각의 길이를 계산하여 추가", + "id": "7383f1903369f671" + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-17T06:32:05.899682Z", + "start_time": "2024-10-17T06:32:05.892162Z" + } + }, + "cell_type": "code", + "source": [ + "# 'answers_text' 열 추가\n", + "train_df['answers_text'] = train_df['answers'].apply(lambda x: x['text'][0])\n", + "# 'answers_text' 열 추가\n", + "valid_df['answers_text'] = valid_df['answers'].apply(lambda x: x['text'][0])" + ], + "id": "76bd490cd7f9baf7", + "outputs": [], + "execution_count": 9 + }, + { + "cell_type": "code", + "id": "d70b2c61-7927-4bb0-94d9-ed6afc852c01", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-17T06:32:06.534171Z", + "start_time": "2024-10-17T06:32:06.520474Z" + } + }, + "source": [ + "train_df['con_len'] = train_df['context'].apply(len)\n", + "train_df['qu_len'] = train_df['question'].apply(len)\n", + "train_df['ans_len'] = train_df['answers_text'].apply(len)\n", + "\n", + "\n", + "valid_df['con_len'] = valid_df['context'].apply(len)\n", + "valid_df['qu_len'] = valid_df['question'].apply(len)\n", + "valid_df['ans_len'] = valid_df['answers_text'].apply(len)\n", + "\n", + "\n", + "test_df['qu_len'] = test_df['question'].apply(len)" + ], + "outputs": [], + "execution_count": 10 + }, + { + "cell_type": "code", + "id": "538a08e5-d8ed-49e5-a303-4ecf63f9e5aa", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-17T06:32:07.483279Z", + "start_time": "2024-10-17T06:32:07.472250Z" + } + }, + "source": [ + "train_df.head()" + ], + "outputs": [ + { + "data": { + "text/plain": [ + " title context \\\n", + "0 도당굿 경기도에서 연행되는 굿의 한 가지로 일명 대동굿·치성굿이라고 하는데 매년 음력 10... \n", + "1 겨울 폭풍 작전 독일 공군에 의한 보급품 공수 작전이 실패로 끝나자, 포위된 독일 제6군이 구원의 ... \n", + "2 내니 다이어리 애니의 고군분투 뉴욕 입성기!!\\n\\n인류학자가 꿈인 21살 소녀 '애니(스칼렛 요... \n", + "3 수천부정 태종의 서손자로, 아버지는 태종의 열한번째 서자이자 유복자이며 선빈 안씨(善嬪 安氏... \n", + "4 긴 평화 긴 평화(Long Peace)는 그 전례가 없는 1945년 제2차 세계 대전의 종전... \n", + "\n", + " question \\\n", + "0 대내림'을 행한 뒤 다음 순서는? \n", + "1 돈 집단군에서 가장 크고 강력한 부대는 어디인가? \n", + "2 애니는 어디서 태어났는가? \n", + "3 수천부정에 봉작된 인물은? \n", + "4 냉전 이후 여러 분야에서 상대적 발전을 지속한 시대를 일컫는 용어는? \n", + "\n", + " answers document_id \\\n", + "0 {'answer_start': [715], 'text': ['‘돌돌이’']} 37217 \n", + "1 {'answer_start': [278], 'text': ['독일 제6군']} 53052 \n", + "2 {'answer_start': [616], 'text': ['뉴저지']} 37764 \n", + "3 {'answer_start': [264], 'text': ['이정은']} 50359 \n", + "4 {'answer_start': [259], 'text': ['\"새로운 평화(New ... 52295 \n", + "\n", + " answers_text con_len qu_len ans_len \n", + "0 ‘돌돌이’ 1053 18 5 \n", + "1 독일 제6군 1198 27 6 \n", + "2 뉴저지 643 14 3 \n", + "3 이정은 949 14 3 \n", + "4 \"새로운 평화(New Peace)\" 1304 38 19 " + ], + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_idanswers_textcon_lenqu_lenans_len
0도당굿경기도에서 연행되는 굿의 한 가지로 일명 대동굿·치성굿이라고 하는데 매년 음력 10...대내림'을 행한 뒤 다음 순서는?{'answer_start': [715], 'text': ['‘돌돌이’']}37217‘돌돌이’1053185
1겨울 폭풍 작전독일 공군에 의한 보급품 공수 작전이 실패로 끝나자, 포위된 독일 제6군이 구원의 ...돈 집단군에서 가장 크고 강력한 부대는 어디인가?{'answer_start': [278], 'text': ['독일 제6군']}53052독일 제6군1198276
2내니 다이어리애니의 고군분투 뉴욕 입성기!!\\n\\n인류학자가 꿈인 21살 소녀 '애니(스칼렛 요...애니는 어디서 태어났는가?{'answer_start': [616], 'text': ['뉴저지']}37764뉴저지643143
3수천부정태종의 서손자로, 아버지는 태종의 열한번째 서자이자 유복자이며 선빈 안씨(善嬪 安氏...수천부정에 봉작된 인물은?{'answer_start': [264], 'text': ['이정은']}50359이정은949143
4긴 평화긴 평화(Long Peace)는 그 전례가 없는 1945년 제2차 세계 대전의 종전...냉전 이후 여러 분야에서 상대적 발전을 지속한 시대를 일컫는 용어는?{'answer_start': [259], 'text': ['\"새로운 평화(New ...52295\"새로운 평화(New Peace)\"13043819
\n", + "
" + ] + }, + "execution_count": 11, + "metadata": {}, + "output_type": "execute_result" + } + ], + "execution_count": 11 + }, + { + "cell_type": "code", + "id": "b3babd48-57fb-4dc5-96f3-da934eccd616", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-17T06:32:09.056091Z", + "start_time": "2024-10-17T06:32:09.048057Z" + } + }, + "source": [ + "valid_df.head()" + ], + "outputs": [ + { + "data": { + "text/plain": [ + " title context \\\n", + "0 None 제1차 그리스-페르시아 전쟁\\n기원전 493년까지 마지막까지 남은 반란군도 페르시아... \n", + "1 등자 논제 화이트는 19세기 독일 역사학자 하인리히 브루너의 연구를 전범으로 삼았다. 브루너는... \n", + "2 전북 현대 모터스 2006 시즌 최강희 감독은 울산에서 최성국, 이천수 등에 밀려 벤치 신세였던 김형범과 카르로스(... \n", + "3 2016년 뉴욕 및 뉴저지 폭탄 테러 9월 17일 밤 8시 30분 (현지 시간 ) 미국 뉴욕주 맨해튼의 첼시에서 발생한 ... \n", + "4 헨리 모건소 초기 윌슨의 성원자로서 모건소는 자신이 내각 수준의 직위로 임명될 것을 취하였으나 ... \n", + "\n", + " question \\\n", + "0 기원전 492년 봄 그리스 원정을 지휘한 인물은 누구인가? \n", + "1 프랑크인 기수가 기병창을 사용하기 위해 접목시킨 것은 무엇을 탄생시켰나? \n", + "2 중국 기자들은 누구의 이름을 본떠 최강희의 별명을 지어주었나요? \n", + "3 뉴욕에서 폭발이 일어났을 당시 폭발이 발생했다는 사실을 알린 사람은 누구였나? \n", + "4 헨리 모건소가 오스카 스트라우스와 같은 직위를 받은 것은 몇 년인가? \n", + "\n", + " answers document_id \\\n", + "0 {'answer_start': [197], 'text': ['마르도니오스']} 10764 \n", + "1 {'answer_start': [561], 'text': ['무장 기마병으로서의 중... 47799 \n", + "2 {'answer_start': [989], 'text': ['청나라 시대의 강희제']} 45253 \n", + "3 {'answer_start': [87], 'text': ['J. 피터 도널드']} 44268 \n", + "4 {'answer_start': [470], 'text': ['1913년']} 19964 \n", + "\n", + " answers_text con_len qu_len ans_len \n", + "0 마르도니오스 794 32 6 \n", + "1 무장 기마병으로서의 중세 봉건계급 608 40 18 \n", + "2 청나라 시대의 강희제 1164 35 11 \n", + "3 J. 피터 도널드 1093 43 9 \n", + "4 1913년 1786 38 5 " + ], + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_idanswers_textcon_lenqu_lenans_len
0None제1차 그리스-페르시아 전쟁\\n기원전 493년까지 마지막까지 남은 반란군도 페르시아...기원전 492년 봄 그리스 원정을 지휘한 인물은 누구인가?{'answer_start': [197], 'text': ['마르도니오스']}10764마르도니오스794326
1등자 논제화이트는 19세기 독일 역사학자 하인리히 브루너의 연구를 전범으로 삼았다. 브루너는...프랑크인 기수가 기병창을 사용하기 위해 접목시킨 것은 무엇을 탄생시켰나?{'answer_start': [561], 'text': ['무장 기마병으로서의 중...47799무장 기마병으로서의 중세 봉건계급6084018
2전북 현대 모터스 2006 시즌최강희 감독은 울산에서 최성국, 이천수 등에 밀려 벤치 신세였던 김형범과 카르로스(...중국 기자들은 누구의 이름을 본떠 최강희의 별명을 지어주었나요?{'answer_start': [989], 'text': ['청나라 시대의 강희제']}45253청나라 시대의 강희제11643511
32016년 뉴욕 및 뉴저지 폭탄 테러9월 17일 밤 8시 30분 (현지 시간 ) 미국 뉴욕주 맨해튼의 첼시에서 발생한 ...뉴욕에서 폭발이 일어났을 당시 폭발이 발생했다는 사실을 알린 사람은 누구였나?{'answer_start': [87], 'text': ['J. 피터 도널드']}44268J. 피터 도널드1093439
4헨리 모건소초기 윌슨의 성원자로서 모건소는 자신이 내각 수준의 직위로 임명될 것을 취하였으나 ...헨리 모건소가 오스카 스트라우스와 같은 직위를 받은 것은 몇 년인가?{'answer_start': [470], 'text': ['1913년']}199641913년1786385
\n", + "
" + ] + }, + "execution_count": 12, + "metadata": {}, + "output_type": "execute_result" + } + ], + "execution_count": 12 + }, + { + "cell_type": "code", + "id": "5d9e5397-9a2b-4f6f-831a-8c8a3d2efd15", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-17T06:32:10.235883Z", + "start_time": "2024-10-17T06:32:10.227808Z" + } + }, + "source": [ + "test_df.head()" + ], + "outputs": [ + { + "data": { + "text/plain": [ + " question id qu_len\n", + "0 유령'은 어느 행성에서 지구로 왔는가? mrc-1-000653 21\n", + "1 용병회사의 경기가 좋아진 것은 무엇이 끝난 이후부터인가? mrc-1-001113 31\n", + "2 돌푸스에게 불특정 기간동안 하원이 잠시 쉬는 것을 건의 받았던 인물은? mrc-0-002191 39\n", + "3 마오리언어와 영어, 뉴질랜드 수화를 공식 언어로 사용하는 나라는? mrc-0-003951 36\n", + "4 디엔비엔푸 전투에서 보응우옌잡이 상대한 국가는? mrc-1-001272 26" + ], + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
questionidqu_len
0유령'은 어느 행성에서 지구로 왔는가?mrc-1-00065321
1용병회사의 경기가 좋아진 것은 무엇이 끝난 이후부터인가?mrc-1-00111331
2돌푸스에게 불특정 기간동안 하원이 잠시 쉬는 것을 건의 받았던 인물은?mrc-0-00219139
3마오리언어와 영어, 뉴질랜드 수화를 공식 언어로 사용하는 나라는?mrc-0-00395136
4디엔비엔푸 전투에서 보응우옌잡이 상대한 국가는?mrc-1-00127226
\n", + "
" + ] + }, + "execution_count": 13, + "metadata": {}, + "output_type": "execute_result" + } + ], + "execution_count": 13 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-17T06:32:12.865695Z", + "start_time": "2024-10-17T06:32:11.742045Z" + } + }, + "cell_type": "code", + "source": [ + "import seaborn as sns\n", + "import matplotlib.pyplot as plt\n", + "\n", + "# 스타일 설정 (seaborn 기본 스타일 적용)\n", + "sns.set_theme(style=\"whitegrid\")\n", + "\n", + "# 그래프 크기 조정\n", + "plt.figure(figsize=(20, 10))\n", + "plt.subplots_adjust(left=0.125, bottom=0.1, right=0.9, top=0.9, wspace=0.2, hspace=1)\n", + "\n", + "# 1. Train Context Data\n", + "plt.subplot(3, 3, 1)\n", + "sns.histplot(train_df[\"con_len\"], kde=True, color='blue')\n", + "plt.xlabel(\"Length of Data\")\n", + "plt.ylabel(\"Frequency\")\n", + "plt.title(\"Train Context Data Length Distribution\")\n", + "\n", + "# 2. Train Question Data\n", + "plt.subplot(3, 3, 2)\n", + "sns.histplot(train_df[\"qu_len\"], kde=True, color='purple')\n", + "plt.xlabel(\"Length of Data\")\n", + "plt.ylabel(\"Frequency\")\n", + "plt.title(\"Train Question Data Length Distribution\")\n", + "\n", + "# 3. Train Answer Data\n", + "plt.subplot(3, 3, 3)\n", + "sns.histplot(train_df[\"ans_len\"], kde=True, color='orange')\n", + "plt.xlabel(\"Length of Data\")\n", + "plt.ylabel(\"Frequency\")\n", + "plt.title(\"Train Answer Data Length Distribution\")\n", + "\n", + "# 4. Valid Context Data\n", + "plt.subplot(3, 3, 4)\n", + "sns.histplot(valid_df[\"con_len\"], kde=True, color='green')\n", + "plt.xlabel(\"Length of Data\")\n", + "plt.ylabel(\"Frequency\")\n", + "plt.title(\"Valid Context Data Length Distribution\")\n", + "\n", + "# 5. Valid Question Data\n", + "plt.subplot(3, 3, 5)\n", + "sns.histplot(valid_df[\"qu_len\"], kde=True, color='red')\n", + "plt.xlabel(\"Length of Data\")\n", + "plt.ylabel(\"Frequency\")\n", + "plt.title(\"Valid Question Data Length Distribution\")\n", + "\n", + "# 6. Valid Answer Data\n", + "plt.subplot(3, 3, 6)\n", + "sns.histplot(valid_df[\"ans_len\"], kde=True, color='brown')\n", + "plt.xlabel(\"Length of Data\")\n", + "plt.ylabel(\"Frequency\")\n", + "plt.title(\"Valid Answer Data Length Distribution\")\n", + "\n", + "# 7. Test Question Data\n", + "plt.subplot(3, 3, 8)\n", + "sns.histplot(test_df[\"qu_len\"], kde=True, color='teal')\n", + "plt.xlabel(\"Length of Data\")\n", + "plt.ylabel(\"Frequency\")\n", + "plt.title(\"Test Question Data Length Distribution\")\n", + "\n", + "plt.show()\n" + ], + "id": "900a3a491a320915", + "outputs": [ + { + "data": { + "text/plain": [ + "
" + ], + "image/png": "iVBORw0KGgoAAAANSUhEUgAABl0AAAN4CAYAAABJTS6YAAAAOXRFWHRTb2Z0d2FyZQBNYXRwbG90bGliIHZlcnNpb24zLjkuMiwgaHR0cHM6Ly9tYXRwbG90bGliLm9yZy8hTgPZAAAACXBIWXMAAA9hAAAPYQGoP6dpAAEAAElEQVR4nOzdd3iT1fvH8Xe6WzooZbTsWfaUvTcKOBj+ZCqoCIgiiiiKCiiIgyEbZQhOQEDELYiI7CV7Q9m0QOmgtHT//si3kdCWtmnapO3ndV25kp5n3TlP25w893POMSQnJycjIiIiIiIiIiIiIiIi2eJg6wBERERERERERERERETyAyVdRERERERERERERERErEBJFxEREREREREREREREStQ0kVERERERERERERERMQKlHQRERERERERERERERGxAiVdRERERERERERERERErEBJFxEREREREREREREREStQ0kVERERERERERERERMQKlHQRsVPJycl5ar/2fuyclpfem61jtfXxRUTEMvnx/3d+fE8p8tJ7s4dY7SEGERHJv/Lz50xeem+2jtXWx5fco6SL5KqxY8dStWrV+z7at2+frWOsWbOGqlWrcunSJavEHBQUxIQJE+jYsSN16tShbdu2vPzyyxw/ftwq+0/L/PnzWbx4sdX3++eff/L666/fd53Zs2enOid16tShc+fOfPjhh0RGRmb5uJGRkbz++uvs2bPH0tBNBg4cyMCBA7O9H2u6t1537txJ1apV2blzZ5b2k7Ld3Y9atWrRqlUrRo8ezZkzZ8zWz+rvembPw6VLl6hatSpr1qyx6Dj3s3fvXoYOHZrusURErCkvtjtOnz7N22+/TYcOHUztjldeeYUDBw5YZf+WstZnnSWy+vmYWdZqb6W0nezJ6dOn6du3r1lZ1apVmT17dpb3dW/d16hRgyZNmjB48GD+/vtvs3Ut+VzP7Hlo3749Y8eOtfg46QkODmbo0KFcvnw5zWOJiOSEvNhGWbVqFVWrVuXZZ5+1yv7sUUqd3f2oXbs27du35+233yYkJCTL+4yLi2PKlCn8+OOP2Y5v7Nix2f69sDZrfcdP2e7e9l7z5s0ZPnw4//77r9n6WW2LZuU83N1msmab15rtM7F/TrYOQAqW559/nj59+ph+njdvHkePHmXOnDmmMhcXl2wdo23btqxYsYLixYtnaz8A69evZ8yYMVSpUoXhw4dTunRpgoOD+fLLL3n88ceZO3curVu3zvZx7vXJJ5/wwgsvWH2/S5cuzfS6K1asAIxZ+OjoaA4dOsTChQv566+/+Pbbb/H19c30vo4dO8batWvp2bNnVkPOE7JSr5nxzjvvULNmTQDu3LnDxYsXWbhwIb1792bZsmXUqVMHyPrvembPQ/HixVmxYgVly5bN3htJw3fffcfp06dz5VgiInmt3fHjjz8ybtw4qlevzgsvvECpUqUIDg5m1apV9O3blzFjxjB48OBsH8cS937W1axZkxUrVlC5cuVciyGzn4+ZlVPtLXvw66+/pro4kR29e/fm8ccfByA+Pp7r16+zatUqnnvuOd5++20GDBgAWPa5ntnzMGfOHDw9PS17A/exbds2Nm3axNtvv53jxxIRSZHX2igAq1evJjAwkK1bt3Lx4kXKlCljlf3aozlz5lCsWDEAYmJiOHXqFJ9++ikbN25k+fLlWXrv165dY+nSpUyZMiWnwrWpe7/jZ9fw4cNp27YtALGxsQQHB7Ns2TL69+/PrFmz6NixI5D1tmhWzsOKFSvw9/e3+D2kJ632WU4dS2xPSRfJVWXLljX7ElakSBFcXFyoV6+e1Y5RpEgRihQpku39XLhwgddee41WrVrxySef4OjoaFrWpUsX+vXrx9ixY9m4cSNubm7ZPp69ufectGjRgmbNmtG/f3+mTZvGpEmTbBNYAVC5cmWz+m/atCmdO3emR48evP766/z00084Ojpa7Xf9Xtb+m7SXY4lIwZOX2h0nT57kzTffpFu3brz//vs4OPzXIf2RRx5h8uTJfPjhh1StWpXmzZtn+3jZ5enpmev/vzP7+SjW5+/vn+p8P/TQQ4wYMYIPPviAtm3bUrp06Rz9XK9Ro0aO7NfWxxKRgikvtVHAOALIvn37+OyzzxgzZgwrV65k9OjRVtm3PapevTqlS5c2/dysWTPatWtHz549eeedd/j8889tGF3+VrZs2TTbHP369WPcuHE0bdoUT0/PHG2L5mYbV9dD8i8NLyZ2KaX73vLly2nXrh3Nmzdny5YtgDGL3rNnT+rVq0edOnV49NFH+eWXX0zb3tuFduzYsQwaNIjVq1fTpUsXatWqxSOPPJJqOIR7ffnll8TFxfHWW2+l+gLv5ubG66+/Tu/evc2G29q6dSv9+vXjgQceoEmTJowePZqrV6+axVajRg0OHDjAE088Qe3atWnbti0LFy40rZMyPMWcOXPMhqo4efIkQ4cOpUGDBjRo0IARI0Zw8eJF0/IXX3yR2rVrc/bsWVPZvHnzqFatGtu3b2fgwIHs2rWLXbt2Wdw1sm7dunTs2JG1a9cSExNjKr/fOdm5cydPPvkkAE8++aRpaLDExEQ+++wzunfvTp06dahXrx59+vRh+/btWY4rLXv27GHAgAHUrVuXxo0b8/rrr3Pz5k3T8sycCzDeDfHyyy/TuHFjGjVqxDvvvMOMGTNMXXrvV69nz57lmWeeoW7durRo0YKpU6eSkJBg0fvx8fHh2Wef5ezZs+zatcv0Hu7+Xb958yavvvoqLVq0oHbt2jz66KOsXbsWSP88DBw4kFdffZWRI0fSoEEDnnvuuXS7A+/bt4/HHnuM2rVr8/DDD5v93aW3zd3dn8eOHcv333/P5cuXTeumtd25c+cYOXIkLVq0oF69egwcOJC9e/emOtavv/7KyJEjqV+/Po0aNWLcuHHcvn3bovoVkYLNHtodn332Ge7u7rzzzjtmCZcUY8aMISAggLlz55rK0hpyM60hEK5cucIrr7xC48aNqVu3Lk899RRHjx412+6XX37hkUceoU6dOjRt2pRXX32Va9eumY5z72ddWsc5dOgQzzzzDE2aNKFBgwYMGzaMU6dOpYpt+/btPP3009StW5fmzZvz4YcfWvXzEWD37t0888wzNGrUiFq1atG+fXtmz55NUlISkH57a8OGDfTr14/69etTq1YtHnzwQb766iuLYrtXRuchs59v8fHxTJ06ldatW1OnTh2eeeYZ1q5da/o9nD17tulO6XuHrIiKimLcuHE0btyY+vXrM3LkSEJDQy16PwaDgdGjRxMfH8+qVavM3kPK53pSUhIzZ86kffv2pvMwffp04uPjTfGB+XmYPXs2nTp1Ys6cOTRp0oSOHTsSFhaW5pBfISEhDB06lDp16tCmTRtmzZpFYmKiaXla29z9N7tmzRreeOMNADp06GBa997tbt26xZQpU+jYsSO1a9eme/fupvd897FmzZrFhx9+SPPmzU3nJigoyKL6FREB+2ijgLGXi5eXF82aNePBBx9k9erVxMXFma2T8v9706ZNPPzww9SqVYsuXbrw/fffm6335Zdf8uCDD1K7dm1atWrFhAkTiIqKIikpiaZNm5rd4BkfH0/9+vV54oknzPbx+OOPm4Y9TUpK4rPPPqNTp06mY3755Zdm66f1vTerypQpw//93/+xbds2Lly4YCq/X9vh0qVLdOjQAYA33njDbGiwjM5fdmR0/SizbbKoqCjeeecdmjVrRv369Xn55ZdZunSp6TM7re/4Ka5fv25qzzRu3Ji3336b6Ohoi96Pi4sLL774IuHh4fz6669m7yGlLRobG8vEiRNp3bq16TwsWbIESP88jB07lqeeeorx48fTsGFDevToQUJCQppDfp0+fZp+/fpRu3ZtOnXqlOp3LK1t7h6CNr322b3bXbt2jTfeeIM2bdpQp04devfuzZ9//pnqWF9//XWqNt2NGzcsql/JGUq6iF2bMWMGr7/+Oq+//jr16tXj66+/5p133qFDhw58+umnfPzxxzg7OzNmzBiuXLmS7n4OHz7M4sWLGTlyJHPnzsXJyYmRI0cSERGR7jb//PMPNWrUoESJEmkub9KkCa+88oqpq+4PP/zA008/TYkSJZg+fTpvvPEG//77L0888YTZl9mkpCRGjRpF165d+eyzz3jggQeYOnUq//zzD/DfsF69e/c2vQ4KCqJPnz6EhobywQcfMHnyZC5evEjfvn1N+54wYQKFChVi/PjxJCcnc+zYMebNm8egQYNo1qwZ48ePp0aNGtSoUYMVK1aYhufIqpYtWxIfH8+hQ4cAMjwnNWvW5J133gGMw4KMHz8egKlTpzJ37lyeeOIJFi1axLvvvktYWBgvvfSSxR/EKXbv3s2gQYNwc3Pjk08+4c0332TXrl08+eST3Llzx7ReRuciLi6Op556in379vHmm28yZcoUjh8/bvrgBu5br1OmTOGBBx5gwYIFdO7cmYULF7J8+XKL31erVq0AzBIQdxszZgynT59m4sSJfPbZZ9SoUYPXX3+dnTt3pnsewNjF1dnZmblz55oSM2l5++23efDBB5k7dy6VK1fm5ZdfNjX4M+P555+nTZs2FCtWjBUrVpi6DN/t9OnT9OzZk4sXL/LWW28xdepUDAYDTz31lNnFNDDWfalSpZg3bx7PPvssq1evZsGCBZmOR0TkXrZsd2zcuJEWLVrg4eGR5nIXFxc6duzI3r17CQsLy/R7unnzJn369OHIkSO8/fbbTJs2jaSkJPr372+aC2Xv3r28+uqrps+qN954gx07dpjuYM1MG2LHjh307duXpKQkJk+ezKRJk7h69Sp9+vRJNefKq6++avp8fPjhh1myZEmqC9hZce/n4/Hjxxk0aBCFCxdmxowZzJ8/nwYNGjBnzhx+/vlnIO321qZNmxgxYgQ1a9Zk3rx5zJ49m1KlSvHee++xb98+i+ODzJ2HFBl9vr3zzjssW7aMAQMGMHfuXIoWLWo2NNbjjz9O7969Te8zZVgwgC+++IL4+HhmzpzJyy+/zMaNG5k4caLF76tSpUoEBASk2zZZuHAhX3/9NSNGjGDJkiX07duXRYsWmd5PWucBjAmq9evXM336dEaNGpXusLazZ8+mSJEizJ07l169erFgwQJmzZqV6fjbtm3L8OHDAWPi5/nnn0+1zp07d+jXrx/r1q3j6aefZt68eTzwwAOMGzcuVbvjiy++4OzZs0yZMoVJkyZx+PBhzQ0jIlZhyzZKYmIiP/zwA127dsXFxYWePXsSGhrKhg0bUq17/fp13n33XZ588kk+++wzSpcuzdixY02fdT///DMffvgh/fv3Z/HixYwYMYIffviBSZMm4eDgQKtWrcxuxDxw4ADR0dEcPnzYdJ3g5s2bHD58mHbt2gHGayGzZs3ikUceYcGCBTz44IO8//77ZjeqQOa/995Py5Ytgf/aHBm1HYoXL2660D58+HDTa0vPX2Zk5vpRiozaZCNGjODXX3/lxRdfZMaMGdy+fZtp06aZlt/vO/7MmTMJCAhg3rx5PPnkk6xcuTJbc5e0aNECBweHdNtkkydP5u+//+b1119n8eLFdOjQgQ8//JA1a9akex7AeMPu+fPnmT17NiNGjMDJKe1BoaZMmULdunWZN28erVq1YtKkSaxcuTLT8d+vfZbixo0b9O7dm127dvHyyy+bfp9GjBjBunXrzNadMWMGSUlJTJ8+nddee41Nmzbx/vvvZzoeyXkaXkzsWp8+fXjwwQdNP1+8eJGnn36aESNGmMpKly5Nz5492bdvHyVLlkxzP7du3WLNmjWm7rseHh4MGDCAHTt20KVLlzS3CQkJoXr16pmKMykpiY8//pjmzZszY8YMU3mDBg3o2rUrS5YsYcyYMYBxjpTnn3/e9A/2gQceYP369WzatIlWrVqZuhbePYzDnDlzcHNzY+nSpabxpZs1a0bHjh1ZtGgRr7/+On5+fkyYMIGXXnqJ7777jq+++oqKFSvyyiuvAMYhOVK2zU73xZRxTVMy6Bmdk+7du5vG2KxcubLpdUoPkrvv0HVzc+PFF1/kxIkT1K9f3+IYp02bRoUKFfj0009NvZTq1q1Lt27dWL16Nf379wcyPhfr1q3j7NmzrF69mlq1agHGoUxSxhBNeU/p1euTTz5p+vLetGlT/vrrL3bs2GEa9zyrihYtChgbsmnZtWsXzz//vCm+Jk2aULhwYRwdHfH09EzzPAA4ODjw3nvvmS70pTfR4ogRI0x3BLVu3Zpz584xZ84cU8MzI2XLlk3Vbf7eBNucOXNwdnbmiy++wMvLCzBeEOnevTsff/wx3333nWndNm3amO5uatasGVu3bmXTpk35upu7iOQsW7U7wsPDuX37NqVKlbpvfOXKlSM5OZkrV65kem61ZcuWER4ezrfffmvaf+vWrenatSszZ85k1qxZ7N27F1dXV4YMGYKrqysAhQsX5tChQyQnJ2eqDTFt2jTKlCnDokWLTJ+9LVu2pFOnTsyePZtPPvnEtO7jjz9uqtNmzZqxYcMGNm3aZDa2fVbc+/l4/Phxmjdvzscff2zqNdSiRQs2bdrE7t27efjhh9Nsb50+fZrHHnuMcePGmfZdv359mjRpwu7du2nQoIFF8UHmzkOK+32+Xbhwge+//57XX3/dNL9Pq1atuHHjhulGCH9/f9PY4Peer9q1a/PRRx+Z9n3w4EE2b95s8fsCY/2nd2flrl27qFmzJr169QKgcePGuLu7p/p9unf4soSEBF5//fUMh9Jr1qyZaWz2Vq1aERUVxRdffMHTTz+Nj49PhrEXKVLE9Hd671AyKdasWcPJkyf55ptveOCBB0zHSkhIYN68efTp04fChQsD4O3tzbx580x/AxcuXGD27NmEhYVlaT5EEZF72fLayObNm7l27Zrpf3m9evWoXLky3377LV27djVbNyYmhsmTJ9OsWTMAypcvT7t27fj777+pVKkSO3fupFSpUvTv3x8HBwcaN26Mh4eH6YaStm3bsm7dOq5du0bx4sXZsWMHNWvW5OjRo+zbt4+WLVuyZcsWHB0dadmyJUFBQaxcuZJXXnnF9F21ZcuWGAwGPv30U/r162f6/3vv915LpFwPSWlzZKbtkHJdqWzZsqbhKy09f5mRmetHKe7XJtu+fTs7duxg9uzZdO7cGTC2XR5++GHTHC73+47fpUsXU2/SlPbMjh07LH5fTk5OFC5c+L7XQ5o3b063bt0A4/UQDw8PfH19cXFxSfM8gLHNMXHiRMqVK3ff4/fs2dNUd61atSIkJIS5c+fSu3fvNHup3+t+7bMUn3/+OTdv3uTXX381zRvUpk0bBg0axEcffUT37t1NxwoMDDSbn+bgwYP89ttvGcYhuUdJF7Frdw/3AJjuFLt16xbnzp3j3LlzprsgUoYpSMvdX6gA0z+6u4fIupfBYDAbnuB+goKCuH79uinBkaJs2bLUr18/1VBedycUXFxcKFKkyH17d+zYsYMmTZrg5uZm6urp6elJw4YN2bZtm2m9Bx98kG7dujF+/HicnZ1ZtWpVtiffy4il5yTl7oibN29y/vx5goKC2LhxY4bbZSQmJoYDBw7wzDPPkJycbKqvMmXKUKlSJbZu3WpKusD9z8WOHTsoU6aMKeECxnpv165dpoZna9iwoem1wWCgVKlSZsPRWcpgMKRZ3qRJE2bPns3x48dp06YNrVu3NmtQpad06dKZang+9NBDZj937NiR2bNnW3VIr127dtGuXTtTwgWMjatu3boxd+5cs2Pd21Dx9/fn8uXLVotFRAoeW7U7kpOTgfT/v6dIWZ4yRFZmbN++nerVq1OiRAnTZ6KDgwOtW7c23THXqFEjZsyYwcMPP8xDDz1E69atadmyJW3atMnUMaKjozl06BAjRowwG5LV29vbdKHlbvfeWOHv75/tXq7wX/089thjPPbYY8TGxnLhwgXOnz/PkSNHSExMvO95e/bZZ03v58KFCwQFBZl69manbQKZOw8p7vf5tnPnTpKTk80uvAF07949U71PU5IGKcqUKZPjbZNp06bRr18/OnXqROvWrTN980lgYGCG69x7sa9z584sW7aM/fv3Z/r3NyO7du2iVKlSqerukUceYdWqVRw4cMB0rNq1a5v9Ddz9t6+ki4hkhy2vjaxevZpy5cpRoUIF02fGQw89xOzZszlz5gyVKlUyW//uz7GU/ad8zjdt2pQVK1bQs2dPOnfuTNu2bXn44YdNnyMtW7bE0dGRbdu28dhjj7F9+3Y6derEnTt32L17Ny1btuTvv/+mcePGeHp68uOPP5KcnEz79u3NhsVq37498+fPZ+/evaabEjP7vTczUuK1tO1g6fnLjMxeP4L7t8l27NiBs7Oz2U2nDg4OpnOfkbuvh4CxzZFez9isuF+bY/ny5YSEhNCuXTvatGljltRKj5ubm9nfRHrubXN06tSJDRs2cPbsWbObWrNj165d1K9f35RwSfHII4/wxhtvmB0rrfbi/f6OJfcp6SJ2zc/Pz+znCxcu8M4777Bjxw6cnJyoWLGiqfGRcsEiLe7u7mY/Z+aiRalSpe7brTMhIYGbN29SvHhxwsPDgf/utLxb0aJFU42b7ubmZvazg4PDfeMPDw/nl19+SXN8z3snxnvsscf4+eefKVeuXKrGjzWEhIQA/zWeLD0nhw4dYuLEiRw6dAg3NzcqV65suvPzfttlJDIykqSkJBYuXJhqfhbAdAdvivudi7CwsFS/g5D2eU7Lvb93GZ3njNxb9/eaMWMGCxYs4Ndff+W3337DwcGB5s2bM2HChFQf2nfL7PtJuasnhZ+fH8nJyURFRWXyHWQsIiIi3b+je49l7foVEbFVu8PX15dChQqZjbWdlpSeiFm5+zE8PJzz58+nO6xoTEwM9evX57PPPmPp0qUsXryYBQsWUKxYMYYMGcJTTz2V4TFu3bpFcnJyuv+/b926ZVaW1XZQRu79fLxz5w7vvfceP/zwAwkJCZQuXZr69evj5OR03+PcvHmT8ePHs2HDBgwGA+XKlTNdaM/u50tmzkOK+32+pcxPd+/vamY/y++92GSNz86QkBCqVKmS5rJnn32WQoUKsXr1aj788EM++OADAgMDefPNN013QacnM+/p3nVS2sX3GyYnq+7XNgHMklZpnTvIWqJURCQttmqj3Lx5k02bNhEfH0+jRo1SLV+xYgVvvvlmusdI+T+YElPXrl1JSkrim2++Yc6cOcycOZNSpUoxevRounXrho+PD/Xr12f79u107tyZAwcOMHr0aEJCQti5cydJSUls3brVdDE95VpMSu+Ge6W0ESDzn5X3c2+bw9K2g6XnLzOycv0oo+shhQsXTtWLw1bXQ+7cuUNERES610PGjRuHv78/69atMw2dWr9+fd555x2zni338vPzy/DGJ0j7eghYv82RVq/bzLY5dD3EvijpInlGUlISzz33HM7OzqxcuZIaNWrg5OTE6dOnU90haA0tW7Zk2bJlXL9+PdU/VzDO+TJs2DCmT59OtWrVANIcWuH69evZvrPNy8uL5s2bm4aRuNvd403euXOHyZMnExgYyJkzZ1i4cCHDhg3L1rHvtW3bNjw8PKhZs6bF5yQqKopnn32WqlWr8tNPP1GpUiUcHBz4+++/+f3337MVX6FChTAYDAwaNCjNhte9H0z3U6JECc6fP5+q3NIJZ7Mr5a6UtBq7YPw9GTNmDGPGjOHs2bP8+eefzJs3j4kTJ7Jo0aJsHz8iIsKsUXbjxg0cHR3x8fEx1cm9vcOyeueyj49Pun9HYLwwmTKxs4hITsrtdke7du3YvHkzt2/fplChQoBxbrGgoCCqVq1KYmIiGzZsoGbNmmYXXjL6v+vl5UXjxo157bXX0jxuSo/YVq1a0apVK2JiYtixYwdffPEF77//PvXq1aNu3br3jd3LywuDwZDu/++UoZdyyr2fj5MnT+b333/nk08+oXnz5qZEQ0YX+V999VXOnDnD559/ToMGDXBxcSEmJsZsaEtLZfY8ZCRlrsHQ0FACAgJM5bZqm5w5c4Zr167Rr1+/NJc7ODjQv39/+vfvT2hoKH///TcLFizgxRdfZNu2bdnukX1vL52U38Gs/I1kxMfHJ8324N1tExGR3JSbbZQffviB+Ph45syZg7e3t9myuXPnsnbtWl555ZVUF+/vp3v37nTv3p1bt26xZcsWFi5cyJgxY2jYsCElSpSgTZs2fPXVV+zduxdnZ2dq165NSEgIq1atYteuXYSFhZnmDkmJadmyZab2092yM0xXWrZt24bBYDD14rCk7ZDT5y+z148yUqJECcLCwkhKSjJLvNiqzbFz504SExPTvR7i4uLC8OHDGT58OFeuXOGvv/5i3rx5jB49ml9//TXbx783uZJTbY6MrodI3pHxoHMidiIsLIygoCB69+5NnTp1TB8WKeNQW/sOsv79++Ps7MykSZNS/eOMiYlh1qxZ+Pj40K5dOypUqECxYsX48ccfzda7ePEi+/fvz/IY4PfeSdC4cWNOnz5N9erVqV27NrVr16ZWrVosXbqU9evXm9abNm0aV65cYebMmTz11FPMmTOHEydOpLvfrDp27BgbNmygV69euLq6Zvqc3D3MAsDZs2cJDw/nySefpEqVKqa4rHEuPT09qVGjBmfPnjXVVe3atalSpQpz5szJ1LBgKRo3bszFixc5duyYqSw2NjbV2OfZrdfMiIqKYsmSJVStWjXN36fLly/Tpk0b0xieFStWZMiQITRv3pzg4GAg9XnIqn/++cf0Oikpid9++426devi5uZmGis25Vhg7BZ98OBBs31kVFeNGjXir7/+MrsrOjExkZ9//pnatWvn+HB5IiIpcrvdMXToUO7cucPEiRNN+z58+DCPPfYYQ4cOZcqUKVy4cMFsmARPT0+z/7tAqslFGzduTFBQEBUqVDD7XFy3bh3fffcdjo6OfPjhh/Tu3Zvk5GTc3d1p166daXjKq1evAvf//+3h4UGtWrX45ZdfzNpMt27dYtOmTamGZbKmtD4f9+7dS5MmTejYsaMp4XL48GFu3rxpdt7ufU979+6lS5cuNG3a1PR5Y63znZnzkBkPPPAAjo6O/PHHH2bl9/6cG20TgFmzZuHm5kaPHj3SXN6nTx8mTZoEGC9K9OzZk/79+3Pr1i1T79XsxHp32wSMEzS7u7ubEoWZ+RvJTNvk8uXLqYZEWbduHc7OztSpU8fS8EVELJKbbZQ1a9ZQr149OnXqRJMmTcweffv2JSIiIksXtEeNGsULL7wAGJMDDz30EM8//zyJiYmmm+vatm1LSEgIK1asoEGDBjg7O9OkSRMSEhKYOXMmgYGBppEcUi7Ah4WFmX2+hoeH88knn5h6wlhDcHAw3333HW3btjXd+JCZtsO9n/E5ff4ye/0oM/tJSEgwDQOfYsOGDWY/50abIyEhgfnz51O0aFE6deqUavmdO3fo0qULS5YsAYzJtv79+9OtW7ccuR4CxjZHQECAaS4Ya7U5/v3331S939etW0exYsUynHdG7It6ukie4efnR6lSpfj666/x9/fH29ubLVu2sGzZMuD+Y5BaonTp0kyYMIFx48bRv39/+vTpQ0BAABcuXGDp0qWcP3+ehQsXmr7Mv/LKK7zxxhu8/PLLPPbYY4SFhTFnzhx8fHzSvMPgfry9vfn333/ZvXs3DRs25Pnnn6dPnz4MHTqUvn374urqyooVK9iwYYNp4tXdu3fz5ZdfMmrUKCpWrMiLL77I77//ztixY1m5ciXOzs6m/W7fvp0aNWrcd4LR/fv3A8aurbdv3+bQoUMsXbqU8uXL89JLLwGZPycp83Ns2rQJHx8fKlSogKenJwsWLMDJyQknJyd+//13Vq1aZbZdeoKDg1m6dGmq8sqVK9OyZUvTJHqjR4/mkUceITExkSVLlnDgwAGGDx+e6fPQvXt3PvvsM0aMGMFLL72Et7c3S5YsITQ01OyOmXvrNbtOnz5tGgYtNjaWs2fP8uWXXxIWFsbMmTPT7PpaqlQp/P39mTRpElFRUZQtW5bDhw/z999/M3ToUCD1eUjpoZVZn3zyCYmJiQQEBPDtt98SFBTE559/DmDqBv7VV19Rrlw5fH19+fLLL7lz547ZUCbe3t7cuHGDv//+2zSR3d1eeOEFNm/ezJNPPslzzz2Hi4sLX331FRcvXrRKbx0RkczK7XZHYGAgH3zwAW+88QYXLlygT58+lC5dmlGjRjFz5kwSExNp1qwZ7du3N23Trl07Nm7cyOTJk+nYsSN79+5l7dq1ZvsdNGgQP/zwA4MGDeLpp5/G19eXX375hZUrV5pNbvr5558zduxYHnnkEeLj41m0aBGFCxemadOmQMafdaNHj+aZZ57h2WefZcCAAcTHx/PZZ58RFxdnuriSXZn9fKxTpw6//vor3377LZUqVeL48ePMnz8fg8Fgdt7ubW/VqVOHH3/8kZo1a+Lv78+///7Lp59+mmq79KTVNvH09KR3796ZOg+ZUaZMGXr16sX06dOJj4+nWrVqrF+/nr/++gv478t8yp2/P/30E3Xr1r3vMKOZERwcbGobJiQkEBISwvfff8+WLVt499130x3qo1GjRixZsoSiRYtSv359QkJC+Pzzz2ncuLFpiJN7z0NW/PHHH5QoUYLmzZuzZcsWVqxYwUsvvWS6GaRdu3Z8+umnLFiwgHr16rFp0ybTmPkpUupq/fr1tG7dOtXwvD179uSbb77hhRdeYOTIkZQpU4aNGzeyevVqXnjhhVR3fouI5LTcaqMcPHiQkydPmk0Sf7cOHTrg4+PD8uXL002+36tp06aMHz+eDz/8kNatWxMZGcmcOXMoX7686ftpYGAgpUqVYv369YwePRowDotVpUoV9u3bZ/p+m7LuI488wttvv83ly5epVasWQUFBzJgxg9KlS1O+fHmL3vuxY8dMPQ5iYmI4ceIES5cuxdXVlXfeece0XmbaDinfw7dv306lSpWoW7duts5fVFRUmm0Of39/HnzwwUxdP8qMRo0a0aJFC8aNG8eNGzcoWbIkq1at4vjx42bXJDL6jp9VFy5cMLU54uPjuXTpEsuXL+fIkSPMnTs3zdFL3NzcqFmzJnPmzMHZ2ZmqVasSFBTE999/T5cuXYC0z0NWfPnllxQqVIgaNWrw888/888///DRRx+Z6qJt27b8/PPP1KlThwoVKvD999+n6imbUfts8ODBrFu3jsGDB/PCCy/g6+vL2rVr2bFjB++//36u3VQj1qGki+Qp8+bNY/LkyYwdOxYXFxcqV67M/Pnzef/999mzZw8DBw606vF69OhBuXLlWLZsGZ988gmhoaEUK1aM+vXrM3PmTLPJsnr27EmhQoX49NNPGTFiBJ6enrRq1YpXXnklzeHJ7mfYsGHMmzePIUOG8Msvv1CtWjW+/vprZsyYwWuvvUZycjKBgYHMnTuXDh06EB0dzRtvvEFgYCDPPPMMYLzrdPz48Tz33HPMnz+fkSNH0r9/fw4fPsyQIUOYMmUKDz/8cLoxPPHEE6bXhQsXpmTJkjzzzDP069fP9EUWMndOqlSpQvfu3fn666/5559/+Omnn5g3bx4fffQRL730EoUKFaJ69ep89dVXDBkyhD179phdVLrXhQsXmDJlSprnq2XLlrRs2ZLFixczZ84cRo4cibOzMzVr1uTzzz9PNdnY/Tg5ObF48WImT57MhAkTcHJy4pFHHsHX15egoCDTevfWa/HixTN9jLS8++67ptceHh4UL16cli1bMmjQoPteNJkzZw7Tp09n5syZhIWFERAQwAsvvMBzzz0HkOZ5yIrJkyfz0Ucfcf78eQIDA1m4cCGNGzc2Lf/ggw947733ePvtt00XmerXr2/Wtbpnz578/fffjBgxgpEjR6aajK5KlSp88803TJ8+nTfffBODwUCdOnX44osvsnwhRkQku3K73dGtWzcCAwNZunQps2bNMg3N1bFjR2rXrs2iRYvo1asXkyZNokaNGvTq1YsLFy7w/fffs2LFCho3bszMmTPp27evaZ8lSpRg+fLlTJs2jQkTJhAbG0v58uWZPHkyvXv3BqB169ZMnTqVJUuW8MILL2AwGHjggQf44osvTEODZfRZl5K4mTVrFq+88gouLi40bNiQDz/8MN35PrIqs5+PY8eOJT4+nk8++YS4uDhKly7N8OHDOX36NBs3biQxMRFHR8dU7a2Uz7H33nsPgPLlyzNx4kTWrVvHnj17MowvrbZJqVKl6N27d6bOQ2a9/fbbeHh4sGTJEqKiomjWrBnDhw9n7ty5phsdOnfuzA8//MDYsWPp3bs3EyZMyNIx7rVq1SrTzTHOzs4UL16cWrVq8dVXX9338/mll17CxcWF1atXM3fuXLy8vGjfvr3pIhqkbvdmxdixY/ntt99YunQpxYoV44033jCbh2jo0KHcvHmTJUuWEB8fT9u2bZk8ebLZTThNmjShefPmTJs2je3bt/PZZ5+ZHcPd3Z0vv/ySadOmMWvWLKKioqhYsaJF505ExFpyo42yevVqHB0dU31nS+Hi4sJDDz3E8uXLzUaHuJ8+ffoQHx/P8uXL+eabb3Bzc6NZs2aMGTMGZ2dn03qtW7fm22+/Nfu+2aRJE06ePGkaWizFlClT+PTTT1m+fDnBwcH4+fnRtWtXRo0aZXHvhrtvGPH09CQgIIBHH32UgQMHms1pkpm2g6enJ4MHD2bFihVs2rSJrVu3Zuv8RUREpNnmaNy4MQ8++GCG14+yYsaMGXzwwQdMmzaNhIQEOnToQN++fc1u8snoO35WzZ8/n/nz5wPGOXlLlChBw4YNmThx4n1vHH333Xf55JNPWLJkCdevX8fPz4/evXubbhpO6zxkxbvvvsuSJUv45JNPKFOmDNOnTzcb0v6NN94gISGBjz/+GCcnJ7p27cro0aN56623TOtk1D4rVqwY3377LdOmTWPy5MmmG2zmzZuX5XMntmdI1iw7IiJpOnXqFGfPnqVz585md3L06tWLgIAA5syZY8PoRESkoLl58yZffvklvXr1SnOSTcn/wsPD2bx5M61atTIb1/vDDz9kzZo1WRpGVURERCQ9ly9fZv/+/XTo0MFszp6RI0dy8eJFvv/+extGJ2L/1NNFRCQd0dHRvPTSS/Tr149OnTqRmJjITz/9xJEjRxgzZoytwxMRkQKmSJEiprv1pGByd3dn8uTJVK9enaeeegoPDw/27dvHl19+ybBhw2wdnoiIiOQTDg4OjB07lg4dOtC7d28cHR3ZvHkzf/zxR5o9bUTEnHq6iIjcx2+//cbixYs5c+YMycnJ1KhRg+HDh9OyZUtbhyYiIiIF0LFjx/jkk0/Yv38/MTExlC1blj59+tC/f/80530TERERscSOHTuYO3cux44dIyEhgUqVKjF48GC6d+9u69BE7J6SLiIiIiIiIiIiIiIiIlbgYOsARERERERERERERERE8gMlXURERERERERERERERKxASRcRERERERERERERERErcLJ1APbm33//JTk5GWdnZ1uHIiIiYjfi4+MxGAzUr1/f1qHke2qLiIiIpKa2SO5RW0RERCS1rLRF1NPlHsnJySQnJ6e7LC4uLt3lYn2q89ynOs99qvPcpfq2zP0+H8W6Clpd629SdZBC9aA6ANVBCtVD6jooaJ+PtpTdutbvr/3RObE/Oif2R+fE/tjbOcnK56N6utwj5U6O2rVrp1oWHR3NsWPHqFy5Mh4eHrkdWoGkOs99qvPcpzrPXapvyxw6dMjWIRQY92uL5Ef6m1QdpFA9qA5AdZBC9ZC6DtQWyT3ZbYvo99f+6JzYH50T+6NzYn/s7ZxkpS2ini4iIiIiIiIiIiIiIiJWoKSLiIiIiIiIiIiIiIiIFSjpIiIiIiIiIiIiIiIiYgVKuoiIiIiIiIiIiIiIiFiBki4iIiIiIiIiIiIiIiJWoKSLiIiIiIiIiIiIiIiIFTjZOgBJ2+LFxudnnrFtHCIiIiJ5VUxYDLERsanKXX1ccfd1t0FEIiIicl9nPodKg20dhYiISLYo6WKnIiNtHYGIiIhI3hYbEcv+pftTldcbVE9JFxEREXuUEGPrCERERLJNSRcRERERKfDS6hWjHjEiIiIiIiKSVUq6iIiIiEiBl1avGPWIERERERERkaxysHUAIiIiIiIiIiIiIiIi+YGSLiIiIiIiIiIiIiIiIlagpIuIiIiIiIiIiIiIiIgVKOkiIiIiIiIiIiIiIiJiBUq6iIiIiIiIiIiIiIiIWIGSLiIiIiIiIiIiIiIiIlagpIuIiIiIiIiIiIiIiIgVKOkiIiIiIiIiIiIiIiJiBUq6iIiIiIiIiIiIiIiIWIGTrQMQc4sXg6enraMQEREREREREREREZGsUk8XOxMZCbdu2ToKERGRgikoKIj69euzZs0aU9mxY8cYMGAA9erVo23btixevNhsm6SkJGbNmkWrVq2oW7cuTz/9NOfPn8/t0EVERERERETEDijpIiIiIgLEx8fz6quvEh0dbSoLCwtj8ODBlC9fntWrV/Piiy8yc+ZMVq9ebVpn3rx5LF++nEmTJrFixQoMBgNDhgwhLi7OFm9DrCz8XLjZIyYsxtYhiYiIiIiIiB3T8GJ2zMvLONxYZCR4e8Mzz9g6IhERkfxr9uzZFCpUyKxs5cqVuLi4MGHCBJycnKhUqRLnz59n4cKF9OrVi7i4OJYsWcKYMWNo06YNADNmzKBVq1asX7+ebt262eKtiJXERcVxdNVRs7J6g+rh7utuo4hERERERETE3qmni52LjISICOOziIiI5Izdu3ezYsUKPvzwQ7PyPXv20KhRI5yc/rtPpWnTpgQFBREaGsrx48e5ffs2TZs2NS339vamRo0a7N69O9fiFxERkbxh3rx5DBw40KzMGkOZZrQPERERyT1KuoiIiEiBFhkZyWuvvcZbb71FQECA2bLg4GD8/f3NyooXLw7AlStXCA4OBki1XfHixbl69WoORi0iIiJ5zdKlS5k1a5ZZmTWGMs3MPkRERCT3aHgxERERKdAmTJhAvXr1ePjhh1Mtu3PnDi4uLmZlrq6uAMTGxhITY5zfI611IiIiLI4pOTnZbG6Z/CylDlOerSkhIYH4+Pg0y++t37TWTUpOSlWW1rbZlZN1kJeoHlQHoDpIoXpIXQfJyckYDAZbhmSxkJAQxo0bx969e6lQoYLZMmsMZZrRPkRERCR3KekiIiIiBdbatWvZs2cPP/74Y5rL3dzcTHeRpoiNjQXAw8MDNzc3AOLi4kyvU9Zxd7d83o/4+HiOHTtm8fZ50blz5zK9rp+HH4nRiWZljh6OhEaHmpUVpjDXr19PtX1ERATnI85nuG58XHyqsrS2tZas1EF+pnpQHYDqIIXqwbwO7r3JIa84cuQIPj4+rFu3jrlz53L58mXTsvSGMv30008JDQ3l8uXL9x3KtFu3bhnuw8/PL3feqIiIiABKuoiIiEgBtnr1akJDQ2nbtq1Z+fjx41m8eDElS5bk2rVrZstSfi5RogQJCQmmsrJly5qtU61aNYvjcnZ2pnLlyhZvn5fExMRw7tw5ypcvn+lEVfSVaP5d869ZWf3B9SlevXiq9YoVK5Zqex8fHwJKBmS4rrOLc6qytLbNLkvqID9SPagOQHWQQvWQug5Onz5t65As1r59e9q3b5/msuDgYAIDA83KsjqUaUb7sCTpkp1et9npqeWcEE98Aentm5vUe87+6JzYH50T+2Nv5yQrvW6VdBEREZECa+rUqdy5c8esrHPnzowcOZKuXbvy888/s3z5chITE3F0dARg+/btVKhQAT8/P7y8vPD09GTnzp2mpEtkZCRHjx5lwIABFsdlMBjw8PCw/I3lQe7u7pl+z3FOcTg7O5uVOTk5pdo+rfWysq6DwSFTx7GWrNRBfqZ6UB2A6iCF6uG/OsirQ4tlxBpDmWa0D0tYo9dtVntqOTk5ERAVxtVTp0w3toh1qfec/dE5sT86J/bHns5JZnvdKukiIiIiBVaJEiXSLPfz86NUqVL06tWLRYsWMW7cOJ599lkOHjzIsmXLmDhxImBscA0YMICpU6dSpEgRSpUqxccff4y/vz+dOnXKzbciIiIieZA1hjLNaB+WyE6v2+z01HIO8sWzQhWLjivpU+85+6NzYn90TuyPvZ2TrPS6VdJFREREJB1+fn4sWrSIyZMn06NHD4oVK8Zrr71Gjx49TOuMHDmShIQE3nrrLe7cuUOjRo1YvHhxnh13XkRERHKPv79/tocyzWgflrBGr1uLemo5OeNcwHt35ST1nrM/Oif2R+fE/tjLOclKr1uHHIwjy4KCgqhfvz5r1qwxlR07dowBAwZQr1492rZty+LFi822SUpKYtasWbRq1Yq6devy9NNPc/58zkxumttOnoRJk2D7dkhOtnU0IiIiBcOJEyfo2bOn6ec6deqwYsUKDh06xMaNG1MNG+bo6MiYMWPYvn07//77L5999hmlS5fO7bBFREQkD2rUqBF79+4lMTHRVHb3UKbVqlUzDWWaImUo04YNG2ZqHyIiIpK77CbpEh8fz6uvvmo2UVtYWBiDBw+mfPnyrF69mhdffJGZM2eyevVq0zrz5s1j+fLlTJo0iRUrVmAwGBgyZEiqrrV50aZNcPMm/PEH/PADJCXZOiIRERERuVdMWAzh58LNHjFh9jHZo4iI2LdevXoRFRXFuHHjOH36NGvWrGHZsmUMHToUMB/K9M8//+T48eO8/PLLZkOZZrQPERERyV12M7zY7NmzKVSokFnZypUrcXFxYcKECTg5OVGpUiXOnz/PwoUL6dWrF3FxcSxZsoQxY8bQpk0bAGbMmEGrVq1Yv3493bp1s8VbsYrERDhy5L+fN2+Gd9+FCRNsFpKIiIiIpCE2Ipb9S/ebldUbVA93X9uPOywiIvbNGkOZZmYfIiIiknvsIumye/duVqxYwdq1a2nbtq2pfM+ePTRq1Agnp//CbNq0KZ9++imhoaFcvnyZ27dv07RpU9Nyb29vatSowe7du/N00uXcOYiOhkKFoFUr+O03+PprJV1ERERERERE8qoPPvggVVnKUKbpSRnKdMyYMemuk9E+REREJPfYPOkSGRnJa6+9xltvvUVAQIDZsuDgYAIDA83KihcvDsCVK1cIDg4GSLVd8eLFuXr1qsUxJScnmw1zliImJsbs2doMBgMJCU7/6+XiADgSGJhEzZqJ/PGHE6dPGzh6NIby5QvOBC85XeeSmuo896nOc5fq2zLJyclZmjRORERERERERKQgsnnSZcKECdSrV4+HH3441bI7d+6YusumcHV1BSA2NtZ0wSytdSIiIiyOKT4+nmPHjqW7/Ny5cxbv+35cXFwIDS1OYqIDR474AlC2bBSRkVGULFmUS5dc+Prra/TseSNHjm/PcqrOJX2q89ynOs9dqu+su/fzVkREREREREREzNk06bJ27Vr27NnDjz/+mOZyNzc34uLizMpiY2MB8PDwwM3NDYC4uDjT65R13N0tH0Pb2dmZypUrpyqPiYnh3LlzlC9fPlv7T4/BYMDPz4mEBLh+3QmDIZn69d2Ji3OnRg0HLl2Co0dLM25cMasf217ldJ1Laqrz3Kc6z12qb8ucPn3a1iGIiIiIiIiIiNg9myZdVq9eTWhoqNk8LgDjx49n8eLFlCxZkmvXrpktS/m5RIkSJCQkmMrKli1rtk61atUsjstgMODh4ZHucnd39/suzw4nJzhwwPi6UiUD3t7ORETAAw/AH3/AH3844urqgaNjjhzebuVknUvaVOe5T3Weu1TfWaOhxUREREREREREMmbTpMvUqVO5c+eOWVnnzp0ZOXIkXbt25eeff2b58uUkJibi+L8sw/bt26lQoQJ+fn54eXnh6enJzp07TUmXyMhIjh49yoABA3L9/VjL2bPG5+rV/ysrXx7c3SE6GvbsgSZNbBKaiIiIiIiIiEj2nfkcKg22dRQiIiJW52DLg5coUYJy5cqZPQD8/PwoVaoUvXr1IioqinHjxnH69GnWrFnDsmXLGDp0KGAcW37AgAFMnTqVP//8k+PHj/Pyyy/j7+9Pp06dbPnWsuXG/6Zs8ff/r8zBAapUMb7+44/cj0lERERERERExGoSYmwdgYiISI6waU+XjPj5+bFo0SImT55Mjx49KFasGK+99ho9evQwrTNy5EgSEhJ46623uHPnDo0aNWLx4sV5erLf69eNz8XumbolMBAOHoQ//4S33879uERERETyqjvhdwg5GMKN4zfYM38PcVFxeJfxpnTT0lR9tCr+df0z3omIiIiIiIhIBixKusydO5eePXsSEBBg7Xg4ceKE2c916tRhxYoV6a7v6OjImDFjGDNmjNVjsYX4eAgPN74uWtR8WcWKxufduyEhwTj/i4iISEGUk20RyV8S4xIJ+jOIy7sup1oWeiKU0BOhHFh2AL9AP/zr+1O0WtE09iIiIgWN2hoiIiJiKYuGF1u2bBkdOnRg8ODB/Pjjj8TGxlo7rgLr5k3js6sreHqaLyte3FgeHQ1Hj+Z+bCIiIvZCbRHJjOtHr7P3072mhEvhCoWp+mhV+v7UlxdPvUjfn/rSbHQzXL1dCT0ZypEVRzj500kS4xNtHLmIiNia2hoiIiJiKYuSLlu2bGHq1Kk4OzszduxYWrRowTvvvMO///5r7fgKnNBQ47OfHxgM5sscHKBsWePrnTtzNy4RERF7oraIZOTqvqus7reamJsxuHq7UntAbeo+WRf/ev4Ur1mcIpWLENgtkM5TOzPq/CgeeO4B43Z7r7J/yX7iouJs/A5ERMSW1NYQERERS1k0QJWLiwtdu3ala9euXLt2jXXr1vHrr7/y3XffUb58eXr27EnPnj3x8/Ozdrz53t1Jl7SULQunThmTLkOG5F5cIiIi9kRtEbmf4P3BfNHxC2IjYvEq7UWd/nVwcku/2etW2I2Wb7QkLjqO498fJyo4iv1L91P5wcq5GLWIiNgTtTVERETEUhb1dLlb8eLFefLJJxk2bBgNGzYkKCiI6dOn06ZNG95++22ioqKsEWeBkTK82P2SLgC7duVOPCIiIvZObRG5W0xYDMsfW86dsDsENAigzoD7J1zuVqRSEeo/XR9XH1diQmNYO2gtsbc0nIyISEGntoaIiIhkRbaSLrt27WLcuHE0b96cl156CWdnZ6ZPn86ePXv46KOPWL9+PS+//LK1Yi0QMurpUq6c8fnIEVC7TkRECjq1ReRuyUnJrH1qLRHnI/Ct6Mujnz+Kk2vWOna7F3Gn3uB6uPm6cevyLQ59fYiE2IQcilhEROyd2hoiIiKSVRYNLzZjxgx+/PFHrl69SkBAAIMGDaJnz56ULFnStE7Xrl05ceIEX3zxhdWCLQhu3DA+p5d08faGMmXg4kXYswfats210EREROyG2iKSlh2f7ODkjydxdHXk8e8ex9Xb1aL9uPm4UWdgHQ59dYjbIbc5uvIotfrVwsEx253ERUQkj1BbQ0RERCxlUdLl888/p2PHjrz33ns0b94cw70zvv9P7dq1GTVqVHbiK1CSkzMeXgygSRNj0mXnTiVdRESkYFJbRO4VeSmSjW9tBKDLjC4ENAgg/Fy4xftz93Wn67yufD/we8LOhnF2w1kqd9EcLyIiBYXaGiIiImIpi5Iu//zzDz4+Ply/ft3U8IiIiODq1atUq1bNtF7Hjh2tE2UBce0axMWBwQC+vumv17gxrFqleV1ERKTgUltE7vX3xL9JiEmgXOtyNBzW0Cr7LF6zONV7VOfIyiNc3nEZ79LeVtmviIjYP7U1RERExFIWjZHg4ODA4MGDGThwoKnswIEDPPbYYzz//PPExMRYLcCC5OxZ47OvLzilkw7z8vpvCLK//sqduEREROyN2iJytxsnbnB2w1kcnBzoOq9runcjW6Jo9aKUaVEGgBM/nCD0VKjV9i0iIvZLbQ0RERGxlEVJl48//phTp07xyiuvmMqaNm3KvHnzOHz4MLNmzbJagAVJStKlWLH7r+fra+wNExYGly/nfFwiIiL2Rm0RSZGUmMTZP4yNqGajm1G8ZnGrH6NC+woUrlCYpPgkfh72M7GRsVY/hoiI2Be1NURERMRSFiVdNm7cyOuvv07nzp1NZS4uLrRv355XXnmFX3/91WoBFiQpSZeiRe+/nqsrFP/f9YSdO3M2JhEREXuktoikCDkQQszNGNz93Gn9VuscOYbBwUD1XtVx9XYl7GwYPwz+geTk5Bw5loiI2Ae1NURERMRSFiVdbt++jbd32mNa+/n5ERYWlq2gCqrMJl0ASpUyPivpIiIiBZE12yKhoaGMGTOGpk2bUr9+fZ577jlOnz5tWn7s2DEGDBhAvXr1aNu2LYsXLzbbPikpiVmzZtGqVSvq1q3L008/zfnz5y17Y5IlSQlJnN9srOuGwxvi4umSY8dyKeRCjcdr4ODswLE1x9g1W5PriYjkZ7ruISIiIpayKOlSs2ZNVq9eneayNWvWULVq1WwFVVBdvGh8zkrSZZe+74uISAFkzbbI8OHDuXjxIgsXLmTVqlW4ubkxaNAgYmJiCAsLY/DgwZQvX57Vq1fz4osvMnPmTLNjz5s3j+XLlzNp0iRWrFiBwWBgyJAhxMXFZft9yv1d3XeV2IhYXLxcqNO/To4fz7u0N63HGXvTrH9tPdcOX8vxY4qIiG3ouocdOTHX+BAREckj0pmu/f6GDx/OkCFD6NmzJ506dcLPz4+bN2/y559/cuTIERYsWGDtOAuES5eMz76+Ga9burTxec8eSEwER8eci0tERMTeWKstEhYWRunSpRk+fDhVqlQB4Pnnn+fRRx/l1KlTbN++HRcXFyZMmICTkxOVKlXi/PnzLFy4kF69ehEXF8eSJUsYM2YMbdq0AWDGjBm0atWK9evX061btxyrg4IuKTGJC1suAFCuVTmc3Cxq1mZZnSfrcHnXZU79coo1/dfw7K5nc+W4IiKSu3LrusfOnTt58skn01xWunRp/vzzT9544w3WrFljtqxEiRJs3rwZMPa6nTNnDt999x2RkZE88MADjB8/nnLlylklRptLiLZ1BCIiIlli0bfTFi1aMH/+fGbNmsWsWbNITk7GYDBQvXp15s2bR+vWOTOedn6WnJy1pEvRosa5XaKi4OhRqF07Z+MTERGxJ9Zqi/j6+jJ9+nTTzzdu3GDx4sX4+/tTuXJlZs+eTaNGjXBy+q/J1LRpUz799FNCQ0O5fPkyt2/fpmnTpqbl3t7e1KhRg927dyvpkoOuHb5G3K04XDxd8K/vn2vHNRgMPLLkEebXnk/IwRD+fPNPmrzYJNeOLyIiuSO3rnvUr1+fLVu2mJWdPHmS5557jmHDhgFw4sQJhg0bxoABA0zrON5152VKr9spU6ZQokQJPv74Y4YMGcJPP/2Ei0vODb0pIiIiabP4lsA2bdrQpk0bYmNjCQ8Px8vLCw8PD2vGVqBERMDt28bXhQtDbOz913dwMPZ2OXPGOK+Lki4iIlLQWLst8vbbb7Ny5UpcXFyYP38+Hh4eBAcHExgYaLZe8eLFAbhy5QrBwcEABAQEpFrn6tWrFseSnJxMdHTBuKszJibG7Dkz4uPjubjVOC6rf0N/EpMTSUhISFVnCQkJxMfHp9o+s+smJSelKktISMDFy4UH5z/Imt5r2DF9B8XrFE9zvcyeQ0vqID9SPagOQHWQQvWQug5Skh65KTeue7i4uFCsWDHTz/Hx8UyZMoXOnTvz+OOPk5iYyOnTp3n++efN1kuhXrciIiL2J1vjMERERBATE0NSUhLh4eGEh4eblpUsWTK7sRUoKb1cChUCF5eMky4A5coZky67dsGzGtlCREQKIGu2RZ566imeeOIJvv32W0aMGME333zDnTt3Ut0h6urqCkBsbKzpQlBa60RERFjwjozi4+M5duyYxdvnRefOncv0utE7oom+Ho3B2YBTWSeuX79OREQE5yPOm61XmMJcv3491faZXTc+Lj5VmWnb8lCuVznOrz7P+jHrCXgwAEc3x9TrZUFW6iA/Uz2oDkB1kEL1YF4Htui1kdvXPb7++muuXr3KkiVLAOP7j42NpVKlSmmuf/z4cfW6FRERsTMWJV3OnTvH2LFjOXDgQLrrFLQLBdmVknTx8cn8NmXLGp937rR+PCIiIvYsJ9oilStXBuC9995j//79fPXVV7i5uREXF2e2Xuz/7ozw8PDAzc0NMN5lmvI6ZR13d/csHf9uzs7Opnjyu5iYGM6dO0f58uUzXWfLX1oOgH89f/xLG4cW8/HxIaCkeY+j6CvRad4VnNl1nV2cU5XdvW3lBZX54tAX3Dx5k8h9kQQ+GpjmehmxpA7yI9WD6gBUBylUD6nr4PTp07l6fFtc94iNjWXBggU89dRTpp61J0+exGAwsGzZMjZv3oyDgwNt2rRh1KhReHl52WWv28z21HJOiCf+nmOkVwakKpfMU+85+6NzYn90TuyPvZ2TrPS6tSjp8t5773Hu3DleeOEF/P39cXBwsGQ3cpeUpEvhwpnfJmVOvMOHITISvL2tHpaIiIhdslZbJDQ0lO3bt/PQQw+ZxkZ3cHCgUqVKXLt2DX9/f65du2a2TcrPJUqUICEhwVRWNuVuiP/9XK1aNYtiAuO8IQVt2FZ3d/dMvecbx28YhxYzQNnmZXF2dgbAyckp1fZxTnGm5XfL7LoOBodUZWbbekDPr3qyuOlibhy5QUC9AIpULpLuMTKS2TrI71QPqgNQHaRQPfxXB7k9tJgtrnv88MMPxMbGMnDgQFPZqVOncHBwoFSpUixYsIDz58/z4YcfcvLkSZYtW2bXvW7v11PLycmJgKgwrp46ZWpPpVdW4mYoACH/K3dyciLg1hoArnr1NK0rGVPvOfujc2J/dE7sjz2dk8z2urUo6bJnzx4mT55M9+7dLdlc0mBJTxcfHyhfHs6dM/Z26dQpJyITERGxP9Zqi1y7do3Ro0fj5+dHs2bNAONFhqNHj9K+fXuKFi3K8uXLSUxMNCVltm/fToUKFfDz88PLywtPT0927txpSrpERkZy9OhRs8luxXr2LNgDgF+gH26F3TJYO+eValSKuoPqsn/Jfk79fIqGwxvi6OKY8YYiImLXbHHdY+3atXTu3BlfX19T2YsvvsigQYPw/t9dloGBgRQrVownnniCQ4cO2WWv28z21HIO8sWzQpWMy075AeBdpcpdZcbhXj2rmK8raVPvOfujc2J/dE7sj72dk6z0urUo6eLp6YlPVrIDkiFLerp4eUGJEsaky7ZtSrqIiEjBYa22SLVq1WjZsiUTJ05k0qRJeHt7s2DBAiIjIxk0aBCurq4sWrSIcePG8eyzz3Lw4EGWLVvGxIkTAeNdLgMGDGDq1KkUKVKEUqVK8fHHH+Pv708nfTBbXdztOPYv3Q9AyYb2M39gs1eacWz1Me6E3+Hc3+eo1CntcfdFRCTvyO3rHjdv3uTff/9l6NChZuUGg8GUcEkRGGgczjI4ONg0rJg99rrNsKeWkzPO9y5PpwwwL0+rTDKk3nP2R+fE/uic2B97OSdZ6XVrUf/YRx99lK+//prk5GRLNpc0WNLTBaBUKePztm3WjUdERMSeWastYjAY+OSTT2jatCmjRo3i8ccfJyIigq+//pqSJUvi5+fHokWLCAoKokePHsyZM4fXXnuNHj16mPYxcuRIevfuzVtvvUXfvn1xdHRk8eLFNpnsN6+LCYsh/Fy42SMm7L/xew8vP0xsRCw+5XzwreR7nz3lLpdCLlTparzT9vKOy0SHasx5EZG8Lreve+zbtw+DwUDjxo3NykePHs0zzzxjVnbo0CHAOB9dtWrVTL1uU6T0um3YsGHOBy4iIiKpWNTTxd3dnb1799KpUydq165t1oUVjBcw3n//fasEWFBY0tMFoEIF4/P27ZCYCI4azUJERAoAa7ZFvLy8mDBhAhMmTEhzeZ06dVixYkW62zs6OjJmzBjGjBmT6fglbbERsaaeLCnqDaqHu6+xK/meecahxWr3q53rY/tnxC/QjyJVinDz1E3O/H6G5qOb2zokERHJhty+7nH8+HHKlCmTaviU7t27M3z4cObPn0+3bt0ICgri3XffpXv37lSqZOxZqV63IiIi9sWipMv333+Pl5cXSUlJHDhwINVye/sSnBdY2tPF3x9cXeHWLThyBOrUsX5sIiIi9kZtkYLn6r9XubrvKo4ujtR4vAYnfjhh65BSqdSlEmFnwrh56iZBfwVRf3B9W4ckIiIWyu22xo0bNyicxl2Y7dq1Y+bMmSxYsIAFCxbg5eXFww8/zKhRo0zrjBw5koSEBN566y3u3LlDo0aN1OtWRETEhixKumzcuNHacRRot25BRITxdVaTLo6OUK4cnDwJW7cq6SIiIgWD2iIFz/7P9wNQ7bFqpp4v9sbDz4NSTUpxafsltkzZQt0n6+LgaNFoviIiYmO53dZIr8ctQJcuXejSpUu6y9XrVkRExL5k61tgUlISx48fZ/PmzURFRREeHm6lsAqWy5eNzz4+cE+P5Uz53xx6fPGF9WISERHJC9QWKRgSYhM49LVx/Pp6g+vZNpgMlGtdDic3J26eummKWURE8i61NURERCSrLOrpAvDDDz8wbdo0rl27hsFgYNWqVcyePRtnZ2emTZumbqxZkDK0WOnSlm1fubLx+eRJ68QjIiKSF6gtUnCc/PEkMTdj8CrlRcVOFYm8GGnrkNLl5OZEmRZlCPoziE3jN1GrTy0cXTTpnohIXqS2hoiIiFjCop4uv/zyC6+//jpNmzZlxowZJCcnA9C5c2c2b97MvHnzrBpkfpfdpEuFCmAwwM2bcPWq9eISERGxV2qLFCwpQ4vlleG6SjUphUcxD8LPhbN34V5TeUxYDOHnws0eMWExNoxURETSo7aGiIiIWMqib60LFiygT58+fPTRR3Tu3NlU3rNnT1544QV+/vlnqwVYEGQ36eLhAf7+xtfbtlknJhEREXumtkjBERUSxenfTgNQb1A92waTSY7OjjR+sTEAm9/bTNztOABiI2LZv3S/2SM2ItaWoYqISDrU1hARERFLWZR0CQoKolOnTmkuq1u3LiEhIdkKqqDJbtIFjL1dQEkXEREpGNQWKTiOf3+c5KRkyrQog1+gn63DybRaT9SicIXC3A65za7Zu2wdjoiIZJHaGiIiImIpi5Iufn5+nDlzJs1lZ86cwc8v73whtgfWSLqUL2983ro12+GIiIjYPbVFCobk5GSOfncUgHqD69k2mCxydHGk7cS2AGz9cCt3wu/YNB4REckatTVERETEUhYlXbp27cqsWbP47bffiIszDpdgMBg4fPgw8+bN48EHH7RqkPnd+fPG5zJlLN9HSk+XffsgRkODi4hIPqe2SMEQeSmSsLNhOHs4U/P/ato6nCyr3a82xWoW4074HbZ+rDtjRETyErU1RERExFJOlmw0atQoTp48yahRo3BwMOZtBg4cSHR0NA0bNuSll16yapD5WXIynDtnfF2hAhw9atl+ihQBLy+4dQv27oWWLa0WooiIiN1RW6RgCNlvHLqlRu8auHq52jiarHNwdKD9pPas6LGCnTN3Ur1HdVuHJCIimaS2hoiIiFjKoqSLi4sLixYtYuvWrWzfvp2IiAi8vLxo3Lgxbdq0wWAwWDvOfCs0FKKijK/LlbN8PwaDcYixQ4eMQ4wp6SIiIvmZ2iL5X2J8ItcOXwPy3tBid6v6aFVKNizJlT1X2LNgD96lvW0dkoiIZILaGiIiImIpi5IuKVq0aEGLFi2sFUuBlNLLpWRJcM3mDZwVKhiTLtu2ZTssERGRPEFtkfzrxrEbJMYl4l3Gm3Kts3Fnio0ZDAbaTWrH1w9+zcGvDtLo+Ua4eue9XjsiIgWV2hoiIiKSVRYlXebMmZPhOi+88IIluy5wUpIu5ctnf18p+9i2zThsmW68ERGR/Eptkfwv+EAwYBxazOCQtxs1lTpXomzLslzYcoEL/1ygSrcqtg5JREQyoLaGiIiIWMrqSRdPT0+KFy+uxkcmWTPpUrq0sbfMjRtw6hQEBmZ/nyIiIvZIbZH87U7EHcLPhgNQvWfenwclpbfLsrbLuLrvKqWbl8bd193WYYmIyH2orSEiIiKWsijpcvz48VRl0dHR7N27lwkTJvD2229nO7CCIijI+GyNpIuvL5Qta0y4TJkCn3+e/X2KiIjYI7VF8reQAyEAFC5fON/MgVK+TXnKtCjDxa0XubD5AlUfrZruujFhMcRGxKYqd/VxVbJGRCSXqK0hIiIilnKw1o48PDxo1aoVI0aM4KOPPrLWbvM9a/Z0AWNvF4Bjx6yzPxERkbxCbZH8ITk52ZR0KVGvhI2jsa5mo5sBxqHTokOj010vNiKW/Uv3p3qklYgREZHco7aGiIiIZIbVki4pAgICOHPmjLV3m2+lJF0qVLDO/lL2k7JfERGRgkZtkbwt8mIkMTdjcHRxpFj1YrYOx6oC6gdQJLAIJMP5TedtHY6IiFhIbQ0RERG5H6slXZKTk7ly5QoLFy6kVKlS1tptvpacbP2eLin7CQmBmzets08REZG8QG2RvCUmLIbwc+FEX4mmMIWJvhJNQlwCwfuDAShaoyiOLo42jtL6KrQz3iFz7fA1bl29ZeNoREQkK9TWEBERkcywaE6XatWqYTAY0lyWnJysbraZdOMGREeDwQBlylhnn56e4OcHoaGwfTt062ad/YqIiNgTtUXyvpQhtOLj47l+/TrFihWjxmM1uH7kOgD+df1z9Pjh58LNfk6IS8jR46Xw9PekeO3iXDt0jTN/nKHl2Ja5clwREckatTVERETEUhYlXUaMGJFm48PT05O2bdtS3lrdNvK5oCDjc8mS4Opqvf2WKWNMumzbpqSLiIjkT2qL5E9BfwaRGJeIW2E3fMr5ZHn7zCZS4qLiOLrqqFlZjd41snw8S1XoUIEbx24QcS6Cs+vPUn1A9Vw7toiIZI7aGiIiImIpi5IuL774orXjKJCsPbRYitKlYf9+2LrVuvsVERGxF2qL5E8nfjgBQIm6JdK9uzg9tk6kZIWbjxulm5bmwpYLbJmyhcD/C7R1SCIicg+1NURERMRSFiVdrly5kqX1S5Ysaclh8r2cSrqULWt83rUL4uPB2dm6+xcREbE1a7ZFwsPDmT59Ops2bSIqKoqqVasyevRoGjZsCMCxY8eYPHkyhw8fpnDhwgwcOJBnnnnGtH1SUhJz5szhu+++IzIykgceeIDx48dTrlw5y95cARUbGculnZcAY9IlvyvTsgxX/71K+Llw9i/cj0d7D1uHJCIid9F1DxEREbGURUmX9u3bZ+nuw2PHjllymHwvp5IuRYuCuzvExMC//0Ljxtbdv4iIiK1Zsy3yyiuvEBoayvTp0ylSpAjffPMNzzzzDGvWrKFIkSIMHjyYjh07MnHiRPbv38/EiRMpXLgwvXr1AmDevHksX76cKVOmUKJECT7++GOGDBnCTz/9hIuLS7bfa0Fx/dB1SAaf8j64+7rbOpwc5+TqRPl25Tn10ym2TdlG6wda2zokERG5S25e97h8+TLt27dPVT5p0iQef/xx3QAiIiKSx1iUdPnkk08YP348NWvW5JFHHqFEiRKEhYWxceNGfv31V4YPH06pUqWsHWu+k5J0qVDBuvs1GIz7PHoU/vlHSRcREcl/rNUWOX/+PFu3buXbb7+lQYMGAIwbN47Nmzfz008/4ebmhouLCxMmTMDJyYlKlSpx/vx5Fi5cSK9evYiLi2PJkiWMGTOGNm3aADBjxgxatWrF+vXr6abJ1TIlOTmZa4euAeBf19/G0eSegPoB3Dx1k9AToZxafIq6TevaOiQREfmf3LzuceLECVxdXdmwYYNZosfLy4uwsDDdACIiIpLHWJR0Wbt2Le3bt2fKlClm5V27dsXPz499+/bxwgsvWCXA/OzMGeNzTsy/V7Hif0mX0aOtv38RERFbslZbxNfXl88++4xatWqZygwGA8nJyURERHD48GEaNWqEk9N/TaamTZvy6aefEhoayuXLl7l9+zZNmzY1Lff29qZGjRrs3r1bSZdMunPtDndu3sHJ3YliNYrZOpxcY3Aw0OrNVqx9ai3nVp7j5ms38airYcZEROxBbl73OHnyJBUqVKB48eKpli1btkw3gIiIiOQxFiVdduzYwdy5c9Nc1rp1a5YvX56toAqC2Fg4fdr4unp16++/YkXj85YtkJQEDg7WP4aIiIitWKst4u3tbbpAkeLXX3/lwoULtGzZkhkzZhAYaD7JecoFkStXrhAcHAxAQEBAqnWuXr2aqRjSkpycTHR0tMXb5wUJCQnEx8cTHx9P5MlIACp2rkiSIYmk+CSz9e6ti5Rt75aUnJSpsqysm1ZZZuPJ7HqlmpeiXMdynN9wng1jNvB/a/8vzfXS22d+EhMTY/ZcEKkOVAcpVA+p6yA5OTlLw31lV25e9zhx4gSVK1dOc9mePXt0A4iIiEgeY1HSxdfXl/3799OiRYtUy7Zu3UqJEpmf/LSgTF67eLHxOSX0EyeMyRAfH7jnOo1VVK8OLi4QGgrHjkHNmtY/hoiIiK1Ysy1yt7179/Lmm2/SoUMH092t9w7L4erqCkBsbKzpQlBa60RERFgUA0B8fHy+nxOvMIW5fv06SQlJRJ2JAqBS10qc3nPabL2IiAjOR5xPc9u7xcfFZ6osK+umVZbZeLKyXoVhFbjw1wXOrz/P34v+JrBFYJpxp7XP/Ohcyhi8BZjqQHWQQvVgXge5OVRWTrU10nLy5EmKFStGv379OHfuHOXKleP555+nVatWBAcH57kbQDKbNHROiCf+nmOkVwaYladVJulTItf+6JzYH50T+2Nv5yQrN4BYlHTp3bs38+fPJyYmhvbt21OkSBFu3LjBL7/8wvLly3nnnXcyva+CMnltZCR4eRmTL5GRxkQIGJMhOXGzjpMTlCsHp04ZhxhT0kVERPITa7ZFUmzYsIFXX32VunXrMn36dADc3NyIi4szWy82NhYADw8P3NzcAIiLizO9TlnH3d3yyeCdnZ3TveM1v4i+Ek2xYsUIPhBMUnwSrj6ulGlShojz5skqHx8fAkoGpLnt3ZxdnDNVlpV10yrLbDxZWa9w28Jc6HuBs1+d5dScUzTo2CDNuNPaZ34SExPDuXPnKF++fLb+fvIy1YHqIIXqIXUdnD59OuONrCgn2hppiYuL49y5c7i7u/Paa6/h4eHBunXrGDJkCJ9//jl37tzJszeA3C9p6OTkREBUGFdPnSIhIeG+ZSVuhgIQ8r/ytMokc5TItT86J/ZH58T+2NM5yWy+waKky/PPP8+tW7dYunQpi//XhSM5ORl3d3deeeUV+vTpk6n9FMTJayMjISICUn5XcjIZUqHCf0mXYcNy7jgiIiK5zVptkRRfffUVkydPplOnTkydOtXUkPL39+fatWtm66b8XKJECdOX/GvXrlG2bFmzdapVq2bx+zMYDHh45O+5PeKc4nB2dubGoRsAFK9THEdHR5ydnc3Wc3JySlUXKdvezcHgkKmyrKybVllm48nKei7uLlR5tgrBvwcTdiqMI18fSTPutPaZH7m7uxeI93k/qgPVQQrVw391kJtDi4H12xrpcXFxYffu3cbPg/+1P2rVqsWZM2dYvHhxnrwBJLNJQ+cgXzwrVMm47JQfAN5Vqty3TNKnRK790TmxPzon9sfezklWbgCxKOliMBgYO3Yszz//PPv37yciIgJfX1/q1auHp6dnpvdTkCev/V8PYGrUyLljVKpkfN68GZKTc6ZHjYiIiC1Yqy0C8M033/Dee+8xcOBA3nzzTRzumgitUaNGLF++nMTERBwdHQHYvn07FSpUwM/PDy8vLzw9Pdm5c6cp6RIZGcnRo0cZMGCA9d5wPhUdGk3khUgwQPG6qScPtlfh58LNfk6Iy/4dts6ezrR+tzW/Df+NnbN28sDQB3DxtJ9e2yIiBY012xoZSSuxFhgYyJYtW/L0DSAZJg2dnHG+d3k6ZYB5eVplkiElcu2Pzon90TmxP/ZyTrJyA4hFSZcUnp6eprFE69Wrl+UunXlt8lpLx5EzGAwkJDiRmAgJCRAfD8HBToCBSpXuEB2dlOZ6d6+fmbJ7l5UqBQ4OTly6ZOD48RjKlUu2uE5sxd7G7isIVOe5T3Weu1TflsntyWszK7ttkaCgIN5//306derE0KFDCQ0NNS1zc3OjV69eLFq0iHHjxvHss89y8OBBli1bxsSJEwHj3akDBgxg6tSpFClShFKlSvHxxx/j7+9Pp06drPdG86mre43ttUJlCuHq7WrjaDInLiqOo6uOmpXV6G2du2hqDajFwSUHubL7CkF/BlH10apW2a+IiFguu22NjBw/fpy+ffuycOFC09y2AIcPH6Zy5cpUr15dN4CIiIjkMRYnXX744QemTZvG9evXMRgMfPfdd8yePRtnZ2emTZtm0XwqeWXy2qyOI+fi4kJoaHESEx24dQuCg+O5ccOYKHJyOsmxY/FprpeYCLduwfXr8Xh5OWdYdu+y6Gjw9/fhyhUXvvkmhMceC71fmHbNnsbuKyhU57lPdZ67VN9ZZ09zpYF12iK///478fHxrF+/nvXr15st69GjBx988AGLFi1i8uTJ9OjRg2LFivHaa6/Ro0cP03ojR44kISGBt956izt37tCoUSMWL15sd/VlbxJiEwg5EAKAdzVvG0djHwwOBh6a9RCLmy0meH8wAQ0D8C6luhERsZWcuO5xr8DAQKpUqcLEiRMZP348vr6+rFy5kv3797Nq1SqKFi2qG0Ay68Rc43PVEbaNQ0RECjyLki6//PILr7/+Oo888gjt2rXj5ZdfBqBz585MnDiRefPmMWrUqCztMy9MXmvpOHIGgwE/Pye8vcHREa5dg+RkAz4+ybRuXdk07Ne966U8A/j6ZlyW1rKaNR24cgWOHCnNG2/knWE7Utjb2H0Fgeo896nOc5fq2zK5PXltRqzVFhk2bBjDMpj4rE6dOqxYsSLd5Y6OjowZM4YxY8Zk6T0UdGfXnyU+Oh4XLxcKlSlk63DsRummpanWoxrHvz/O6d9OU//p+nbZy0xEJL/LieseaXFwcGDBggVMnTqVUaNGERkZSY0aNfj888+pWtXY41E3gGRSQuoRS0RERGzBoqTLggUL6NOnDxMmTCAxMdFU3rNnT0JDQ1m5cmWWGh95bfJaS8aRc3IyJkGcnCAszFhWo4aBQoU80l0v5dnZOXNlaS2rXh3Wr4e//nLCxcUJp2wNKGc79jJ2X0GiOs99qvPcpfrOGnu76GvttojkvkPfHgKMc7kYHO7/+5UTc6jYsxavt+DkTye5dekW1w5eo0TdErYOSUSkwMnNtkaRIkV4//33012uG0BERETyFoeMV0ktKCgo3W6qdevWJSQkJNP7Spm8tn///nzyySdmd2I0atSIvXv3mjVw7h67tFq1aqaxS1OkjF1691io9iYlj1SzZs4fq2xZY6+X8HDYtSvnjyciIpIbrNkWkdwXeiqUS9suAWSYUIiLimP/0v1mj6S4pNwI02Y8S3hSrnU5AM5uOEtC7H9JpvBz4WaPmDDNTyUikhPU1hARERFLWZR08fPz48yZM2kuO3PmDH5+fpnaT1qT116/fp3r169z69YtevXqRVRUFOPGjeP06dOsWbOGZcuWMXToUMB87NI///yT48eP8/LLL9v92KU3bhifa1hnztX7cnCAlKr47becP56IiEhusFZbRGxj36J9ABSpUgRXH1cbR5Nz7k2QZKWHTummpXHzdSMuKo4LWy4AaSegYiNicyp8EZECTW0NERERsZRFg0117dqVWbNmUbx4cdq0aQMYhx05fPgw8+bNo3v37pnaT0GdvDY3e7oAPPggrFwJv/8O776bO8cUERHJSdZqi0juS4xLZP/n+wEIaBBg22ByUFxUHEdXHTUrq9E783fcODg5UKlzJY6sOMKl7Zco+UBJa4coIiL3obaGiIiIWMqipMuoUaM4efIko0aNwsHB2Flm4MCBREdH07BhQ1566aVM7acgTl4bFwc3bxpf16qVO8fs3Nn4vHu3sZdN0aK5c1wREZGcYq22iOS+4z8cJ/p6NIWKF8Iv0I+ExPw9P0t2+FX1o3D5woSfCyfozyAaPNvA1iGJiBQYamuIiIiIpSxKuri4uLBo0SK2bt3Kjh07CA8Px8vLi8aNG9OmTRu7m2zXngQHQ3IyeHpCQC7d3FmqFNSuDYcOwa+/wsCBuXNcERGRnKK2SN61Z/4eAGo8XgODgwESM9igADMYDFTsXJF9n+3j2uFrBB8ItnVIIiIFhtoaIiIiYimLki7Dhg3jySefpEWLFrRo0cLaMeVrly8bn0uWhNxso/XsaUy6fPutki4iIpL3qS2SN4UcCuHcX+cwOBqo3a82Z/5Ie6x8+Y9XgBf+9fwJ3h/Mto+3UfXRqrrQJyKSC9TWEBEREUs5WLLR7t27cXR0tHYsBcKVK8bnkrk8LHe/fsbnP/6A69dz99giIiLWprZI3rRr9i4AqvesjldJLxtHk3eUb18eB2cHQg6EcP2IGnIiIrlBbQ0RERGxlEVJlxYtWvDdd98RGxtr7XjyPVslXQIDoWFDSEyE777L3WOLiIhYm9oieU90aDQHvzoIQOMXG9s4mrzF1cuVMi3KAHB2w1mSEpJsHJGISP6ntoaIiIhYyqLhxVxdXfn1119Zv349pUuXxs/Pz2y5wWBg2bJlVgkwP0lK+i/pUqpU7h+/Xz/Yswe++Qaefz73jy8iImItaovkPf8u/peEmAT86/lTtmVZIs5H2DqkPKVM8zLcOHqD29duc2nHJcq2LGvrkERE8jW1NURERMRSFiVdgoODqV+/vunn5ORks+X3/ixGN25AbCw4OkLx4v+VL14MkZE50/vFy+u//bu5GeeR2boVzp2D8uWtfzwREZHcoLZI3pKUkMTuubsBaDyyseYksYCjsyNNRjVh45sbufDPBfzr++NSyMXWYYmI5Ftqa4iIiIilMp10+fHHH2nVqhWFCxfmyy+/zMmY8q1Ll4zPxYsbEy8pIiMhIsKYIMkJd++/cmU4dcqYiHnvvZw5noiISE5QWyTvOvHjCSIuROBR1IPafWvbOpw8K7BbILtm7yLqahTn/jpHYPdAW4ckIpKvqK0hIiIi1pDpOV1ee+01Lly4YFa2YMECbty4YfWg8quLF43PJUrYLobmzY3P8+dDdLTt4hAREckqtUXyrl2zdgHQYEgDnNws6mgtgMHBQKUulQC4uu8qt6/dtnFEIiL5i9oaIiIiYg2ZTrrc23U2MTGRmTNnEhISYvWg8quUpIu/v+1iqF0bihSB0FD44gvbxSEiIpJVaovkTSEHQzi36RwGRwMNhze0dTh5XuFyhSlavSgkw+nfTmt4GxERK1JbQ0RERKwh00mXtOhLXtbYQ08XBwdo3dr4esYMSEqyXSwiIiLZpbaI/ds5eycA1XtWx6eMj42jyR8qdqqIwdFAeFA4p385betwRETyNbU1REREJKuylXSRzIuJgZs3ja9tmXQB6NABPDzg5En48UfbxiIiIiL5162rtzj4xUEAmoxsYuNo7Ff0lWgKU5joK9GEnwsnIS7hvuu7+7pTtmVZADZP2kxcVFxuhCkiIpLzooJg5xAI3mDrSERERCymQbVzSXCw8dnbG9zdjZPaL14Mnp65H4ubGzRrBn/+CW+9Bd27g6Nj7schIiIi+U9MWAyxEbEAbPlwC4lxiZRsVJIyLcrYODL7FBcVx4FvD3D9+nWKFSuGs7MzNXrXyHC7Mi3KEHIwhKjgKDZN3ETnjzvnQrQiIiI5JCkeDk+CE9OAZDizCEp2g0bzbR2ZiIhIlmW7p4vBYLBGHPleStLl7vlcIiPh1i3bxNOunTH5c/iw5nYREZG8TW0R+xIbEcv+pfvZs2AP+z/fD8ADQx7QebIyR2dHKj9UGYAd03dwefdlG0ckIpJ/6TMsF+x/Aw6/CyRDsZZgcIIrP8OmhyAx1tbRiYiIZEmWerqMGDECFxcXs7Jhw4bh7OxsVmYwGNiwQV1B75aSdAkIsG0cKTw8oGNH4/Bib78NffoYkzAiIiL2TG2RvOPKniskxibiUcyDCh0q2DqcfMmvih+BjwRyct1J1j29jiF7huDkqo7sIiLZobaGDcTehFP/69FSrh+0+BoiT8Cf7SDiCBhWQdl+to1RREQkCzL9raxHjx45GUe+FxJifLb1fC53a9kSDhyACxdg6lRj8kVERMReqS2SdyTGJ3JpxyUAyjQvg8FBdwjnlLbj23Jp+yWuHb7GP5P/od277cyGeEvh6uOKu6/usBERuR+1NWzk9AJIjIbCdcGvubHMuyq0XAUb2kD4AfAoZ9sYRUREsiDTSZcpU6bkZBz5XlrDi9lakSLQpQssXAjvvguPPw7Vqtk6KhERkbSpLZJ3XNlzhfjb8bgVdqN47eK2Didfcy/iTte5XVn1f6v4Z/I/VOxUEZ8yPuxfut9svXqD6inpIiKSAbU1bCAxFk7MNr6uPhri7hqDvVhzaDAd9o6Eq79A5EnwDsza/k/MNT5XHWGdeEVERDIh23O6SMZu3jTO3wL2lXQBY5KlcmVISIAhQyApydYRiYiI2M68efMYOHCgWdmxY8cYMGAA9erVo23btixevNhseVJSErNmzaJVq1bUrVuXp59+mvPnz+dm2HYlPiaei1svAlC2VVkcHNXczGk1H69JnYF1SE5KZk2/NcSExdg6JBERyYLw8HDeeecdWrduTYMGDejbty979uwxLX/jjTeoWrWq2aN169am5Xm6LXL+W7gTDO4loewTqZcHvgCegZCcADufhqTErO0/Idr4EBERyUX6FpwLjhwxPhcpAm5uto3lXgYDdOsGLi6wZQssWGDriERERGxj6dKlzJo1y6wsLCyMwYMHU758eVavXs2LL77IzJkzWb16tWmdefPmsXz5ciZNmsSKFSswGAwMGTKEuLi43H4LduHQV4eMvVx83ShR147GVc3nus7tSpEqRYi8FMn6V9eTnJxs65BERCSTXnnlFQ4cOMD06dNZtWoVNWvW5JlnnuHMmTMAnDhxgmHDhrFlyxbTY+3atabt83Rb5OznxufAF8DRJfVygwHK9AIHV7i+FU7Ozt34RERELKCkSy5ISbqULGnbONJTuLAx8QLw+uvGOV5EREQKipCQEJ599llmzpxJhQrmE76vXLkSFxcXJkyYQKVKlejVqxeDBg1i4cKFAMTFxbFkyRJefPFF2rRpQ7Vq1ZgxYwYhISGsX7/eFm/HpmJvxbLnU+OdueValVMvl1zk6uVK7xW9cXRxJGhjEEEbg2wdkoiIZML58+fZunUr48ePp2HDhlSsWJFx48ZRokQJfvrpJxITEzl9+jS1a9emWLFipkeRIkWAPN4WSYwxJlIAyvVJfz0XXyjZ3fj6wJsQeSrnYxMREckGfRPOBfaedAFo0QKaN4eoKBg+HHRzpIiIFBRHjhzBx8eHdevWUbduXbNle/bsoVGjRjg5/TcNXtOmTQkKCiI0NJTjx49z+/ZtmjZtalru7e1NjRo12L17d669B3ux7eNtxITG4O7nTvE6mssltwXUD+DhRQ8DcHHLRUIOhtg4IhERyYivry+fffYZtWrVMpUZDAaSk5OJiIjg3LlzxMbGUqlSpTS3z9NtkcjjkJwI3lXBs8L91y3SGPw7GhM1O5+GZI2NLiIi9ssp41Uku/JC0sXBARYtgnr14Jdf4Lnn4H838YqIiORr7du3p3379mkuCw4OJjDQfMLW4sWNyYQrV64QHBwMQEBAQKp1rl69anFMycnJREfnrfHHo65GsX3adgDKti1LYlIiif8bdz0hISHV+0lISCA+Pp74+HgA4uPjSUpOMv2cwtplObFPa5WlPGcl7nvrtkqvKjTY2oB9n+7jxLoTOLg5ULhC4TTPgb2JiYkxey6IVAeqgxSqh9R1kJycjMFgsGVIOcLb25s2bdqYlf36669cuHCBli1bcvLkSQwGA8uWLWPz5s04ODjQpk0bRo0ahZeXV461RXJF5FHjc8CDGa9rMECTRfBzLbi+BZyLQLGWlh33xFzjc9URlm0vIiKSASVdckFK0qVUKdvGkZHq1eHtt42P5cvhww+N89CIiIgUVHfu3MHFxXx8cVdXVwBiY2NNF4LSWiciIsLi48bHx3Ps2DGLt7eFg5MPEh8dT7E6xUj0TeT69eumZREREZyPMJ/QtzCFzdYJDw8nPi7erAywellO7DO7ZeHh4QCm56zEnVbdVn+mOif/OElUUBTHvjtGqa6lqBhRMdV69urcuXO2DsHmVAeqgxSqB/M6uPfzNj/au3cvb775Jh06dKB9+/bMmjULBwcHSpUqxYIFCzh//jwffvghJ0+eZNmyZTnWFsnODSCZShomJ+MecQQDcKdIO5L+dyznhHji7zmuc8L/bk4wFMOp5mRcDrxE8tVfSfCobLauab2Myu5EpCrL75TItT86J/ZH58T+2Ns5ycoNIEq65LD4eAgNBUdHCAgAe5/H7rXXYM4cCAmBnj3h0UfB2xueecbWkYmIiOQ+Nze3VJPQxsbGAuDh4YGbmxtgHE895XXKOu7u7hYf19nZmcqVK1u8fW4LORDCxR8uAtBqXCuCDwSbLffx8SGgpPkduNFXoilWrBjx8cakQ+HChXF2caZYsWJm61m7LCf2md2ywoUL/1cHzs5Ziju9uq31eC2Of3ec8KBwrv5xlZiBMVTvWj3VPu1JTEwM586do3z58tn6+8nLVAeqgxSqh9R1cPr0aVuHlOM2bNjAq6++St26dZk+fToAL774IoMGDcLb2xuAwMBAihUrxhNPPMGhQ4dyrC1ijRtA7pc09EwIomp8BEkGV47eKEryzWM4OTkREBXG1VOnSEhIAMDJyYkSN0MBCDl1ioT4ZgQWaozX7V0kX1jBKZcBJCQmpV4vISHTZQWJErn2R+fE/uic2B97OieZvQFESZcc5uwMy5bBn3+Cq6v9Jl28vGDxYvD0hN69Ye5c+PtvqFQJ7hpaVkREpEDx9/fn2rVrZmUpP5coUcL0Rf3atWuULVvWbJ1q1apZfFyDwYCHh4fF2+em5ORkNr22ieSkZGr+X03KNC5D6NFQs3WcnJxSvZ84pzicnZ1NPzs7O+NgcDArA6xelhP7tFaZs7NzuvWQ3vbp1a2ruyu1+tTi4FcHibwYybqn1tH3p75UaJfBmPl2wN3dPc/8/ucU1YHqIIXq4b86yI9Di93tq6++YvLkyXTq1ImpU6eaLuoYDAZTwiVFytCnwcHBpmHFrN0Wyc4NIJlJGjqd+g2A5OJtqFaz/n/HDfLFs0IV81hO+QHgXcVYbij3Ocl/1scl7jLVnf4iIXBYmutlpSy/UyLX/uic2B+dE/tjb+ckKzeAKOmSC/r3h3uu19ilyEhITjYmWlq0gK1b4eefjcOOiYiIFESNGjVi+fLlJCYm4ujoCMD27dupUKECfn5+eHl54enpyc6dO00XOiIjIzl69CgDBgywZei55tA3h7iw5QLOHs50ntaZpARNbGsvHF0cqTOgDoeXHyY8KJyvH/qax797nKoPV7V1aCIicpdvvvmG9957j4EDB/Lmm2/i4OBgWjZ69GjCw8NZvHixqezQoUMAVK5cmTJlyuRIW8QaN4DcN2l4YyMAjqW7m6/j5Izzvds4/e/mhJRyjxoQ0BUur8Xl6Du4VPw/8Cider20tk2vrIBQItf+6JzYH50T+2Mv5yQrN4A4ZLyKFES9eoGHh3GYsX/+sXU0IiIittGrVy+ioqIYN24cp0+fZs2aNSxbtoyhQ4cCxq7FAwYMYOrUqfz5558cP36cl19+GX9/fzp16mTj6K0nJiyG8HPhZo+YsBhiI2NZP2Y9AK3eaoV3ae9093Hv9glxBWs4D1txdHGkdr/aVOxUkcTYRFb2XMnh5YdtHZaIiPxPUFAQ77//Pp06dWLo0KGEhoZy/fp1rl+/zq1bt+jevTtbt25l/vz5XLhwgb///ps333yT7t27U6lSpbzZFkmMgxvbjK/9O1i2D7+m4FEeEm7DvtFWC01ERMQa1NNF0uTlBd27w8qV8NtvcPEilClj66hERERyl5+fH4sWLWLy5Mn06NGDYsWK8dprr9GjRw/TOiNHjiQhIYG33nqLO3fu0KhRIxYvXpyvJvuNjYhl/9L9ZmX1BtVj29RtRF2NokjlIjR7pVm628dFxXF01VGzshq9a+REqJIGBycHus7tyuZ3N3Pwq4Os7reayMuR1Btcj7hI87FvXX1ccfe1fdd9EZGC4vfffyc+Pp7169ezfv16s2U9evTggw8+YObMmSxYsIAFCxbg5eXFww8/zKhRo0zr5bm2yM09kHgHnDzB28KhNQwOUPoxODULLqyE4CFWDVFERCQ7lHSRdDVuDNu3GxMuL70Ea9bYOiIREZGc9cEHH6Qqq1OnDitWrEh3G0dHR8aMGcOYMWNyMjS7c/Xfq+yetxuAbgu64eSqZqU9c3R25LFlj+Hq48ruubtZ/+p6ruy+QpEqRXBw/K/ze71B9ZR0ERHJRcOGDWPYsGH3XadLly506dIl3eV5ri1ybbPx2bMyZGeuHveSUOUFODkLdo+A8oPAQe0RERGxPQ0vJulycDD2dnFwgO+/h7VrbR2RiIiI2IOkxCQ2vrkRkqHuk3Wp2KGirUOSTDA4GHho9kN0+aQLBgcDR1Yc4dBXh4iPibd1aCIiUpDcnXTJrjrvglsJuHUSrmtsdBERsQ9Kush9FS8O7doZX7/wAkRG2jYeERERsb2LWy9y4/gN3P3c6Tyts63DkSwwGAw0fakpfdb1wbmQM+Hnwvl30b/cvn7b1qGJiEhBkJQI17cYX3tZIeni4gP1pxpfX9sAcWHZ36eIiEg2KekiGerUCSpVgsuX4c03bR2NiIiI2NLta7c5//d5AB6c+SAeRT1sHJFYIrBbIP+36v9w9XEl5mYM+z7bx9V9V0lOTrZ1aCIikp+FH4CEW+DsDe6lrLPP8v2hWCtIiocrP1pnnyIiItmgpItkyMUFFiwwvp47F374wbbxiIiIiG0kJyVz4ocTJCclU6FDBWr3q23rkCQbilYrSoMhDfCt6EtSQhInfzzJb6N+IzYy1tahiYhIfpUytFixlmCw0iUpgwEazQUcIOIwXPnNOvsVERGxkJIukikdO8JLLxlfP/kknDxp23hEREQk913afolbV27h6OpI+0ntMWRn8luxCy6FXKg9oDYVOlQAA5xcd5LPHviMSzsv2To0ERHJj0xJl1bW3W/h2lC0hfH1nhch8Y519y8iIpIFSrpIhry8YPFiqF4dWrUyzuvy6KNw9aqtIxMREZHcEn0jmqC/ggCo3KUynv6eNo5IUoSfCzd7JMQlZGl7g8FA2ZZlqTeoHp4lPbl5+iaLmy029nq5FUtMWEyqY8SExeTQuxERkXwrOQmu/y/pUry19ffv3wmcvCDqNBybav39i4iIZJKTrQOQvCEy0vi8ciU88AAcPw7NmsHvv0PVqraNTURERHJWUmISJ9adIDkxGd9KvpSoV8LWIcn/xEXFcXTVUbOyGr1rWLQvn7I+9P+5P9unb+fglwfZOXMnh5cfpsnIJiTcScDg8F/PpnqD6uHu656t2EVEpIAJPwixoeDkCX6N4OZ+6+7f0Q1KdocL38KRyVD28cxve2Ku8bnqCOvGJCIiBZJ6ukiW+PvDP/9A5cpw/jw0bQqffQZJSbaOTERERHLK/qX7ibwYiaOLI4EPB2pYsXzMrbAbPb7oQf/f+uNbyZfbIbfZOG4je+bv4cbxGyQnJ9s6RBERyauC/zQ+F28NDs45c4zC9Yw9XhLvwJb/g6T4zG2XEG18iIiIWIGSLpJlFSvCtm3GhEt4OAwdakzC/Pkn6Hu4iIhI/nL96HW2fbQNgEqdK+Hm42bjiMRSWRmGrHKXyow4OoIHZz2Im68b0TeiObLiCP8u/teYfElKTrU/DTsmIiL3lZJ0KdEh545hMECzZeBW3Niz5sq6nDuWiIhIOjS8mGRaytwukZFQsiQMHgyBgbBiBQQFQceO0Lo1TJwIZ84Yt3nmGdvGLCIiIpZLjE/k+4HfkxiXSJEqRfBv4G+2PPxceKptsjqfiOQOS4Yhc3RxpMmLTSjfpjw/j/iZyzsuc+vyLY6sOMKV3VcoXrs4xWsXx8Hxv/u4NOyYiIikKTHuv/lc/Nvn7LHcA6DZV/BXFwjdCW7+wJicPaaIiMhdlHSRLImMhIgIYwLm9m1o1crY82XDBti9GzZvhnbtoFIlePBBW0crIiIi2bH5vc1c3XcVt8JuqYYVS+siPlg+n4jYL1dvVyp2qEjpJqW5tOMSV/ZcIexsGGFnwwjaGETJRiUp+UBJnD1yaKgYERHJ+27uhoTb4FoUCtfJ+eMFdILaE+HQO3D5Bzi7DCo+lfX9nPkcKg22fnwiIpKvaXgxyTZvb+jZ09i7ZcQIcHExvp4719j7ZfduW0coIiIiWXVp5yX+ef8fANpPao+rl6uNI5Lckt4wZC6eLlTsWJGmLzel6StNcfF0Ie5WHOc2nmPHjB2cWHeCGydu2Dh6ERGxS6ahxdqBIZcuRdV6C4q2NL7e+TScXpj1fSRo2EwREck69XQRq/Dygt9+M/ZwmT4dvvkGdu40zvPSuDH07Qvvvw/ly9s6UhEREclIfHQ8a59cS3JiMrX61qJKtyrsX7rf1mFJLsjMMGROrk7U6V8HZ3dnrh+5zqWdl4i6GkXwv8F8/eDXVOhQgSYvNSGwWyAGBwMiIiKE5MJ8LvcyGKBkd0iKg5u7YNdzEHEMXEvkXuJHREQKJH3KiNWkDD3m6gq9e8Mbb8CgQcZ2zrffQtWqMGYMXL1q60hFRETkfn5/5XdCT4biVdKLrnO62jocsVMOTg6UqFuCBkMaUG9wPYrWKIrBwUDQn0Esf2Q5swNns3PWTmJvxdo6VBERsbXoS8ZER0Cn3D2uwQFK9zIONQZwYgacWQCxNy3f55nPrRObiIjkW+rpIjmmXDljzxY/P/jlFzh2DKZONfaEadMGChUCT08oWhQefhiKFTPOCZOYCD4+8Mwztn4HIiIiBc+hbw+x99O9YIBHlz6KexF3YiN10VzSZzAY8Cnrg09ZHyp2rMiJdSfYt3AfYWfC+O2l39g4biM1Hq9Brb618KviB4Crjyvuvu42jlxERHJNqzUQFwaeFXP/2AYD1HoHvKvBzmfh9jk4OQMKV4cKA43Ls0JDjomISAaUdJEcFRlpTKy8/DIcPQo//mic7+Wvv8zXmzPnv9eFC0OjRtCuHQQEaEgKERGR3HLjxA1+eu4nAFq/1ZpKnSrZOCLJa7xLe9Ppo060Gd+GA18cYNesXdw4foP9n+9n/+f78SrtRUC9ANq/315JFxGRgsS3rq0jgHL/B36NYEN7iD4HO56Cyz9C4wXZ3/eJucbnqiOyvy8REcnzNLyY5AqDAcqWhREjICgIZsyA5s2Nc8BUqAABAcZ5YQDCw2H9euNwZH37uuDg4GLT2EVERAqC6NBovn34W+Ki4ijfrjxtxrexdUiSh7kUcqHR8EY8f+R5Hl36KH5V/cAAty7d4uRPJ1nUeBEre61k/7L93L5+29bhiohIQeFZASoPA/8HweAEF1fBT9Xg5l5ITrZ8vwnRxoeIiAjq6SI2UL48jBplbM9EREDp0nDrljHpcuMG7NkDhw/DiRPwww+OBAVV5vvvoaINeiGLiIgUBAmxCazosYKbp27iU86HXt/2wsFR9+ZI9hkcDJRvU57woHDiouIIORhC8L/BRN+I5tiaYxxbcwyDg4HSzUpTsmlJCpUrxE1uEucXB2gYMhGRfMVeeoMYHKBEe6j7HuwYBBFH4OIKuLkTSrSEYs1tG5+IiOR5SrqIXXF1hVq1oEsX4xBkP/yQzMGD7jRunMy2bRAYaOsIRURE8pfE+ETW9F/DhX8u4OrtSr+f++FZwtPWYUkeFn4u3OznhLgEAFw8XSjTvAylm5WmVKNSXNlzhRPrThD8bzAXt17k4taLpm08inpQqEQhyrUpR0D9AHwr+uJVygs3HzdcfVxxcnPCcNcY/DFhMcRGmM89pISNiIidsbeeIH4N4cF9cHwaHHzHONfL+hbg3xECX4SS3bK3f3tJMomISK5T0kVylZcXLF5snOflfgwG47wuNWokMH26gdBQJ1q0gJ9+giZNcidWERGR/C4hNoFV/7eKE+tO4OjiyOOrHqd4zeK2DkvysLioOI6uOmpWVqN3DbOfDQYDxWsVJ7B7IG0ntCXiQgSnfjnFqd9OEfRXEPGR8UTfiCb6RjTXj1xP8zgOzg64eLrg7O6Ms4czjq6OxEXF4eDsgKOzI47OjhSvUxy/Kn54lfTCq5QXXiW98K3gi6u3a469fxERyWMcXaDmGxB/G4LXQ9heCN5gfLiVAM8q4FkWijYH1yJZ27e9JZlERCTXKOkiuS4yMvNDpRYrBk8+Gc7q1UW4dMmB9u1h5Urols0bTkRERAq6W1dvsbrvas7/fR4nNyee+P4JKnWqlGaPgZSeCiI5waesDw2HNaR8x/L88dEfFPYoTMy1GKJDo/Es4Un0jWjCzoQRFRJFbGQsJENSfBJ3wu5wJ+xOuvsNORiSZrlHMQ98K/riW8GXIlWKUKxGMUo3K03hcoVz6B2KiIjdc/aBMr2h5XI4NR/OLIY7IcbH31uM63hXh2ItICEGijYCn5rg5GHbuEVExC7li6RLUlISc+bM4bvvviMyMpIHHniA8ePHU65cOVuHJlZQqFAyQ4cmsmWLA7//Do8+Cu+9B6+9Bo6Oto5OREQk77VFTv9+mrVPreV2yG1cPF14Yu0TVOxgnDwtNiKW/Uv3m61/b08FEWu4dxiypIQkAJwLOeMR6IEfftQbVI/C5Qub1klOSuba4Wv8+/m/JMYmkhifSGJcIqWblCboryCS4pNIjEskKT6JotWKEn8nnqgrUdy6covIS5HGHjTXjY/LOy+bHb9whcIE1A/Av74//vX9CWgQgFeAV05Xg4iIVeS1tojd8qwA9T+COpMg5C84PAnirkPkCYg8ZnwAnP8aMIBXZShcG+JugZs/3DoNnhWN88ZkVlaGITvzOVQanOW3JSIiuStfJF3mzZvH8uXLmTJlCiVKlODjjz9myJAh/PTTT7i4uNg6PLECV1f48UcYOhQ+/xzefBM2bIDp06FuXVtHJyIiBV1eaYtcP3qdDWM3cPLHkwAUq1GMh2Y/hG9FX9MFcPVqkdyQ1jBk1XpVy3A7g4MBV29X3HzczMrLtS7H7Wu3zcrqDaqXavvbN26z99O9xIQae9LcDrlNVHAUsRGxhAeFEx4UzrE1x0zrFypRyJiIaeBvfK7nj085HxyddeePiNiXvNIWyTMcXaBkF7h1Bqo+D3duwI1tcH0rXPoB4m5C7HW4dcr4SHH+S3D0gMK1jEN8uAVA8APgHQjuJeHkfON6dydYsjIMWUKMdd6fiIjkqDyfdImLi2PJkiWMGTOGNm3aADBjxgxatWrF+vXr6aZxqPINZ2fjfDCtW8OIEbBxI9SrB507Q8+e0LYtVKoETnn+t1pERPKSvNAWCforiL8n/M35zecBMDgaaDSiEQ2HNeTIiiOmclCvFrE/9/aIyWxiML35ZbxLeeNdytusvOqjVbkTdoer/14l+N9ggv8N5sbxG9wOuc3p305z+rfTpnUNDga8SnpRuHxhfMr64OrjapxfppAzLoVccHByAINx7prMPDs6O+Li6YKLpwtJTklEXIsgzDWMpGJJxv16OBvXFRFJR15oi+R5bkWh9CPGh0c5YyImJgQiDkHYQTj3Ldy5CnGhkBgNobv+2/bKOuOzgws4e4NLEbi5G1z9jK9D94Kju3EeGSdPcHA1ruvoCoaUCxz/G6M9NtT4cPI0LhcREbuU5y9PHz9+nNu3b9O0aVNTmbe3NzVq1GD37t1qXOQT3t7GhEtkpPH1v//C+PHG+V3++MP4AHBwgFKloFw5KFMGiheHIkWMD19fcHMDg+G/B5j/nPJwdDT2rrnfw8HBuG7K890PB4f/HvqOLAVRcjIkJpr/jYjkV3mhLbLq/1YRfSMag4OBqo9WpcP7HSharWiqi9ki9ia9xIm1ufu64+7rjm9FX2r0Mu4/JiKG3bN3c+vqLaKuRhEVHEVMaAyJcYlEXook8lKk1eNI8Q///PeDAVwKueDi5WJKzpg9vFxwdnfGyd0JJzcn42s34+tMlbk74eTqhIOTAwYHQ6qHiNi/vNAWyZfcSxgf/h0hKdFYVv0ViDoN4Qfh1KcQEwxJd+D2eUiKg9gbxsetk6n3d+GbzB338DvGZwdnY/IFB/AoZZyXxtnb+Hz7gjFxU7QJOLrilGjAP+IWTkGlwc2L/2fvvsOjKL82jn83jYQSAoHQmyAlEHroCEQBRUBpP6ULCEgVUAFFKSqCShEIvQrqCyIdsSsg0rtAEClBeg09pM77x5qVJX2zyabcn+vKlc3M7Mx5ZpLM2Tkzz4Ozu7m44/xvgcfkbO4SzeRsXt+jPz/63Ygyf0VH/ffa6isac4HIMH8ovLDB/L1oK3MByckl7u+xpjnHnm7VZdsjF3Qe/Tkl8/ShVUTsyGQYSR3SPH368ccfGTRoEIcOHcLd/b9uBl5//XUePnzI3Llzk7W+/fv3YxgGrq6useYZhkFkZCQuLi7Jvtvs3j0TJpP5XBMdbb6obxgkOM2Ry6efWA2iogycnU0YhskyD8wXciMi4OFD8/eICPN70hvT4+f0dComvqTuw6QuZ892P76u9L5PkyPmbyC+eeldTIyPf4+R0LFzxHFNaH/Htayj2RKDkxMUKGBgr94kIiIiMJlMVK9e3T4rzETSMhexVcT9CKIionD1cMXJ+b8PrAYG4ffCrZZ1y+FG+H3bptnyfsMwiI6OxsnJiWw5s9m87dSMMbWnhd0Ls+wDk8mUYeJOjRhD74Ra9kN6jDtbzmxER0cTHRmNEWWYx6ExzJ8TjGgDq49Wcfzvjhm3Jma+k4uTeV3/vs/yfsM8fk16YPW5J73nXvHEZ0pq4PZoXxIOmxHXQql1uK0OXxwNTE6bjcd/NOKcblm1yUR2n+y4uNt2r+fjn7+Vi8QvveUi8V07MUXeNc93yfXvz/cwXHJavTfuadbvS6tp9o3RACMKU8QdMKIwnNwwxRQposOBaMx/kP8WK4gpXjz2R2r8W9CQNJDMk0Kci6f0xJLY++15wcV+q8pwrNI3I+l5g6SJFB0TkwnDLZ+50GwHyclFMvyTLqGh5v4sH++jNFu2bNy+fTvZ64tJCOIqqphMJpv7Qs2lMThtZCKx//y5c6dNJCIiGY/9kkWTyaTubeKRlrmIrdxyxp+/eOTxiD3NzfZpKX1/WkxLb/Fkz5s9Scs5Msa02rc58+VM0nKOjNsJJ1CPLiKp7vHP38pF4pfecpF4r524mrt2tKzVNVfsbDXOaY+9L62m2TVGk/lJjWzecW9HRNIF/W2mP6ldukzWupKRi2T4okvMXRzh4eFWd3SEhYXh4RH3B6qEVKtWzW6xiYiISOanXEREREQcSbmIiIhI+uKU+CLpW6FChQC4evWq1fSrV69SsGBBR4QkIiIiWYhyEREREXEk5SIiIiLpS4YvupQvX56cOXOya9cuy7Q7d+5w7Ngxatas6cDIREREJCtQLiIiIiKOpFxEREQkfcnw3Yu5ubnRpUsXJk2aRN68eSlSpAiffvopBQsWpGnTpo4OT0RERDI55SIiIiLiSMpFRERE0pcMX3QBGDx4MJGRkbz77rs8fPgQf39/Fi5caPOg9yIiIiLJoVxEREREHEm5iIiISPphMgzDcHQQIiIiIiIiIiIiIiIiGV2GH9NFREREREREREREREQkPVDRRURERERERERERERExA5UdBEREREREREREREREbEDFV1ERERERERERERERETsQEUXERERERERERERERERO1DRRURERERERERERERExA5UdBEREREREREREREREbEDFV2SIDo6munTp9OwYUOqVKlCz549OXv2rKPDyjBu3brF6NGjeeqpp6hevTodO3Zk7969lvlBQUF06dKFqlWr0rhxYxYuXGj1/qTs/8TWkZWdOXOGatWqsXr1ass07fPUsXbtWlq0aIGfnx/PP/883333nWWe9rn9RUREMHXqVBo3bky1atXo1KkT+/fvt8zXPhdJX1KaD2Q2tpyfM5OUnDMzg5SewzK6WbNm0bVrV6tp9jhvZyRx7YNff/2Vdu3aUa1aNQICAvj44495+PChZX5m2wcQ93541LvvvktAQIDVtMy4HzILHRvHU76VvmX1/C89yeq5aHqTKXNjQxI1Y8YMo27dusbmzZuNoKAgo2fPnkbTpk2NsLAwR4eWIfTo0cNo3bq1sWfPHuPUqVPGBx98YFSuXNk4efKkcfPmTaN27drGqFGjjJMnTxrffPON4efnZ3zzzTeW9ye2/5OyjqwqPDzcaNu2rVG2bFlj1apVhmEkbX9pnyff2rVrjQoVKhhLliwxgoODjcDAQKN8+fLG/v37tc9TybRp04z69esbv//+uxEcHGyMGjXKqF69unH58mXtc5F0KKX5QGZi6/k5s0jpOTMzSOk5LCNbvHixUa5cOaNLly6WafY4b2ckce2DPXv2GBUqVDDmzp1rBAcHG1u2bDEaNWpkjBw50rJMZtoHhhH3fnjUTz/9ZJQtW9Zo0qSJ1fTMth8yEx0bx1O+lX5l9fwvPVEumv5kxtxYRZdEhIWFGdWqVTO++uory7Tbt28blStXNjZu3OjAyDKG4OBgo2zZssa+ffss06Kjo42mTZsan332mTFnzhyjYcOGRkREhGX+5MmTjebNmxuGkbT9n9g6srLJkycbXbt2tTqpa5/bX3R0tNGkSRNj4sSJVtN79uxpzJkzR/s8lbRu3dqYMGGC5ee7d+8aZcuWNb7//nvtc5F0JqX5QGZjy/k5s0jpOTOzSMk5LKO6fPmy0atXL6Nq1arGs88+a3Wh3R7n7YwgoX3wxhtvGD169LBafu3atYavr68RFhaWafaBYSS8H2JcuXLFqFOnjtGlSxeroktm2g+ZjY6N4ynfSt+ycv6XnigXTZ8yY26s7sUScfz4ce7fv0+dOnUs0zw9PfH19WXPnj0OjCxjyJMnD/PmzaNSpUqWaSaTCcMwuH37Nnv37sXf3x8XFxfL/Dp16nDmzBlu3LiRpP2f2Dqyqj179rBixQo+/vhjq+na5/Z3+vRpLly4QKtWraymL1y4kL59+2qfpxIvLy9+++03zp8/T1RUFCtWrMDNzY0KFSpon4ukMynNBzITW8/PmUVKz5mZRUrOYRnV0aNHyZ07N+vXr6dKlSpW8+xx3s4IEtoHPXv2ZPjw4bHeExkZyb179zLNPoCE9wOAYRiMHDmSF154gVq1alnNy0z7IbPRsXE85VvpV1bP/9IT5aLpU2bMjVV0ScTly5cBKFSokNV0Hx8fLl265IiQMhRPT08aNWqEm5ubZdp3333HP//8Q4MGDbh8+TIFCxa0eo+Pjw8AFy9eTNL+T2wdWdGdO3cYPnw47777bqx9p31uf8HBwQA8ePCAXr16UbduXTp06MCvv/4KaJ+nllGjRuHi4sLTTz+Nn58fU6dO5bPPPqN48eLa5yLpTErzgcwiJefnzCKl58zMIiXnsIwqICCAyZMnU6xYsVjz7HHezggS2ge+vr6UL1/e8nN4eDiLFy+mYsWK5M2bN9PsA0h4PwAsWbKEa9euMWzYsFjzMtN+yGx0bBxP+Vb6pPwvfVEumj5lxtxYRZdEhIaGAlidtACyZctGWFiYI0LK0Pbt28c777zD008/TUBAAA8fPoxz3wKEhYUlaf8nto6saOzYsVStWjVW5R4S31/a58l37949AEaMGEHLli1ZtGgR9evXp3///uzYsUP7PJWcOnUKT09PZs6cyYoVK2jbti0jRozg+PHj2uci6Vxy84HMIiXn58wipefMzCIl57DMyB7n7cwkMjKS4cOHc/LkScaMGQNknc+lx48fJzAwkE8//TRWWyHr7IeMSMcm/cmq+VZ6o/wvfVEumj5lxtzYJfFFsjZ3d3fAfKdRzGswH1QPDw9HhZUh/fzzz7z55ptUqVKFKVOmAOb9Gx4ebrVczB9M9uzZk7T/E1tHVrN27Vr27t3Lhg0b4pyvfW5/rq6uAPTq1Ys2bdoAUKFCBY4dO8bixYu1z1PBhQsXeOutt1iyZAk1a9YEwM/Pj5MnTzJjxgztc5F0zJZ8IDNI6fk5s0jpOTMzSOk5LDOyx3k7s7h37x5Dhgxh165dTJ8+3dL9VlbYB2FhYbz55pv069fP6qmfR2WF/ZBR6dikL1k130pvlP+lP8pF05/MmhvrSZdExDz6d/XqVavpV69ejfVok8Tviy++YNCgQTz11FPMnz/fkoQVLFgwzn0LUKBAgSTt/8TWkdWsWrWKGzdu0LhxY6pVq0a1atUAGDNmDM8//7z2eSqI2S9ly5a1ml6mTBnOnz+vfZ4KDh8+TEREBH5+flbTq1SpQnBwsPa5SDplaz6QGaT0/JxZpPScmRmk9ByWGdnjvJ0ZXL16lc6dO3PgwAHmz59PQECAZV5W2AeHDh3i77//JjAw0PJ/cu7cuVy8eJFq1aqxfv36LLEfMiodm/QjK+db6Y3yv/RHuWj6k1lzYxVdElG+fHly5szJrl27LNPu3LnDsWPHLNU3SdhXX33FBx98QOfOnfnss8+sHgnz9/dn3759REVFWabt2LGDUqVK4e3tnaT9n9g6sppJkyaxadMm1q5da/kCGDx4MPPmzdM+TwW+vr7kyJGDQ4cOWU0/ceIExYsX1z5PBTEf6v766y+r6SdOnKBEiRLa5yLpUErygcwgpefnzCKl58zMIKXnsMzIHuftjO727dt0796dmzdv8tVXX1kNRg5Z43Np5cqV+fHHH1m3bp3l/+TLL7+Mj48Pa9euJSAgIEvsh4xKxyZ9yOr5Vnqj/C/9US6a/mTa3NiQRE2ZMsWoVauW8fPPPxtBQUFGz549jWbNmhlhYWGODi3dO336tFGxYkVjwIABxtWrV62+7ty5Y1y/ft3w9/c3RowYYfz999/GqlWrDD8/P2P16tWWdSS2/5OyjqyubNmyxqpVqwzDSNr+0j5PvpkzZxrVqlUzNmzYYJw9e9aYNWuWUb58eWPnzp3a56kgKirK6NSpk/Hss88aO3bsMM6cOWNMnTrVqFChgnHgwAHtc5F0xh75QGaU3PNzZpHSc2ZGZ49zWEY3YsQIo0uXLpaf7XHezmge3wcjRowwKlasaOzYsSPW/8nIyEjDMDLfPjCM2PvhcdOnTzeaNGliNS0z7ofMQsfGsZRvZQxZNf9LT7J6LpreZNbcWEWXJIiMjDQ++eQTo06dOkbVqlWN3r17G+fOnXN0WBnC7NmzjbJly8b5NWLECMMwDOPQoUPG//73P6NSpUpGkyZNjGXLllmtIyn7P7F1ZHWPntQNQ/s8tSxatMgICAgwKlasaLRu3dr46aefLPO0z+3v1q1bxtixY43GjRsb1apVM1566SVj165dlvna5yLphz3ygcwouefnzCQl58zMIKXnsIwurgvt9jhvZySP7oOoqCjDz88v3v+TMe3MbPvAMGwrumTG/ZBZ6Ng4lvKtjCEr53/pSVbPRdObzJgbmwzDMBz9tI2IiIiIiIiIiIiIiEhGpzFdRERERERERERERERE7EBFFxERERERERERERERETtQ0UVERERERERERERERMQOVHQRERERERERERERERGxAxVdRERERERERERERERE7EBFFxERERERERERERERETtQ0UVEUp1hGI4OIU1klXaKiIhkNFnlHJ1V2ikiIpLRZJVzdFZpp0hiVHQRyUS6du1K165dHR2GlV9++YURI0ZYft61axflypVj165dqbK9Xbt20bx5cypVqkSvXr3iXKZr166UK1fO8lW+fHmqVatG27ZtWbZsGVFRUcne7smTJ+nYsWNKwxcREcnQlIsoFxEREXEk5SLKRUTSAxdHByAimduSJUvSdHsff/wx0dHRzJs3D29v73iX8/X1ZcyYMQBERUVx+/ZttmzZwkcffcS+ffuYOnUqJpMpydv97rvvOHDgQIrjFxEREftSLiIiIiKOpFxEJOtR0UVEMpVbt27h7+9PvXr1ElwuZ86cVK1a1WpaQEAApUqVYsKECQQEBNC6detUjFREREQyI+UiIiIi4kjKRUQcT92LiWRBe/fupUuXLlSpUoVatWoxYsQIbt68aZm/evVqfH19OXToEC+99BJ+fn40btyY+fPnW63n6tWrDB06lFq1auHv78/o0aOZOnUqAQEBgPlx1d27d7N79+5Yj86ePn2aXr16UaVKFerXr8+kSZOIjIxMMO7g4GAGDx5M/fr1qVq1Kl27dmXfvn0AnD9/nnLlynHhwgXWrl1r86O6Xbt2xcfHh+XLl1umPXz4kMmTJ9OsWTMqVapE9erV6dGjB0FBQQDMmDGDwMBAAMqVK8eMGTMAuHnzJuPGjaNJkyZUqlSJWrVqMWDAAM6fP5/suERERDIT5SLxUy4iIiKS+pSLxE+5iEjKqegiksXs2bOHV155BXd3dz777DPeeecddu/eTbdu3Xj48KFluejoaIYMGUKLFi2YN28eNWrUYNKkSfz+++8AhIeH0717d/bv388777zDhAkTOH78OIsWLbKsY8yYMfj6+uLr68uKFSuoWLGiZd6ECROoUaMGc+bMoVmzZsyfP9/qhP64kydP0rZtW86dO8e7777LpEmTMJlMdO/end27d+Pj48OKFSvInz8/jRo1irW9pHJ2dqZu3bocPnzYkuwMHz6cb775hj59+rBo0SJGjhzJiRMnGDp0KIZh0KFDB9q3bw/AihUr6NChA4Zh0LdvX/744w/eeOMNFi5cSP/+/dm+fTujR49OdlwiIiKZhXKRhCkXERERSV3KRRKmXEQk5dS9mEgWM3nyZEqVKsXcuXNxdnYGoEqVKjz//POsWrWKzp07A2AYBv3796dDhw4A1KhRg59++onNmzfTsGFD1q9fz+nTp1m1ahWVKlUCoE6dOjzzzDOWbZUpU4acOXMCxHpktVu3bvTv39/yvt9++42dO3fSpUuXOOMODAzE1dWVpUuXkitXLgAaN25My5Yt+fTTT1m5ciVVq1bFzc2NvHnzxtpecuTLl4+IiAhu3bqFp6cn9+/f57333qNFixYA1KpVi/v37zNx4kSuXbtGwYIFKViwoFU7r1y5goeHByNGjKBmzZoA1K5dm/PnzyeYRImIiGR2ykUSp1xEREQk9SgXSZxyEZGUUdFFJAsJDQ3l0KFD9OrVC8MwLHcsFCtWjNKlS/PHH39YkguAatWqWV7HnLQfPHgAwM6dOylWrJglsQBzf6BNmjRJ0uOrMSdcAJPJRJEiRbhz5068y+/evZsmTZpYEgsAFxcXnn/+eWbOnMn9+/fJkSNHEvZC0plMJtzc3Fi4cCFgfmz47NmznD59mt9++w2AiIiION9boEABli5dCsDFixc5e/Ysp06dYv/+/fG+R0REJLNTLpI8ykVERETsS7lI8igXEbGNii4iWcidO3eIjo5m/vz5sfohBciWLZvVz+7u7lY/Ozk5YRgGACEhIXh7e8daR758+ZIUi4eHR7zrjsvt27fjXHe+fPkwDIN79+7ZLbm4cuUK7u7ueHl5AfD777/z0Ucfcfr0aXLkyEG5cuUs20oo5vXr1zNlyhQuXbqEl5cX5cuXj7VPRUREshLlIkmjXERERCR1KBdJGuUiIimjootIFpIjRw5MJhOvvPIKzz//fKz5j5/wE1KgQAHOnj0ba/qNGzdSFGN8cufOzfXr12NNv3btGgB58uSxy3aioqLYvXs31atXx9nZmX/++YcBAwbw9NNPM3fuXIoXLw7Al19+aenHNS579+5lxIgRdOnShV69elkes/3kk08sg9yJiIhkNcpFEqdcREREJPUoF0mcchGRlHNydAAiknZy5syJr68vp0+fxs/Pz/L15JNPEhgYmKTHX2PUqlWLc+fOERQUZJkWFhbG1q1brZZzcrLPvxl/f39+++037t69a5kWFRXFt99+i5+fH25ubnbZzvLly7l69SodO3YE4MiRI4SFhdG3b19LYgFYEouYOzoeb+eBAweIjo5m8ODBlsQiKiqK7du3A+YB+URERLIa5SKJUy4iIiKSepSLJE65iEjK6UkXkUzm8uXLLFmyJNb0MmXK0KBBA4YNG0afPn144403aN26NVFRUSxatIhDhw7Rr1+/JG+nZcuWzJs3jwEDBvD666/j6enJokWLuHHjBoULF7Ys5+npyYEDB9ixYwe+vr42t2vgwIFs3bqVbt260adPH9zc3Pjiiy84d+4cCxYsSPb67t27x8GDBwHziT4kJIRt27axYsUKWrduTbNmzQCoWLEiLi4ufPrpp/Ts2ZPw8HBWr17N5s2bASx9uXp6egKwceNGqlSpQuXKlQF4//33adeuHXfu3OGLL77g+PHjlvfFDKYnIiKSmSgXSRrlIiIiIqlDuUjSKBcRST0quohkMv/88w8TJkyINb1NmzY0aNCABg0asHDhQgIDAxk8eDCurq5UrFiRxYsXU7Vq1SRvx8XFhYULFzJ+/HjGjh2Li4sLrVu3Jk+ePJw5c8ayXOfOnTly5Ai9e/dmwoQJ+Pj42NSuJ598kq+++oopU6bwzjvvYDKZqFy5MkuXLrUafC6pjh07xksvvQSY78bw9vamVKlSTJw4kVatWlmWK1GiBJMnTyYwMJB+/fqRO3duqlatyrJly+jatSt79+6lXLlyNGvWjHXr1jFy5Ejat2/P2LFjGT16NIsXL+b7778nX7581K5dm8DAQAYMGMC+ffto1KiRTftCREQkPVMukjTKRURERFKHcpGkUS4iknpMRkKjHYmIxOPvv//m9OnTNGvWDJPJZJnerl07ChUqRGBgoAOjExERkcxOuYiIiIg4knIREYmPnnQREZs8ePCA119/nU6dOtG0aVOioqLYuHEjR48e5a233nJ0eCIiIpLJKRcRERERR1IuIiLx0ZMuImKz77//noULF3Lq1CkMw8DX15d+/frRoEEDR4cmIiIiWYByEREREXEk5SIiEhcVXUREREREREREREREROzAydEBiIiIiIiIiIiIiIiIZAYquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4iIiIiIiIiIiIiIiJ2oKKLiIiIiIiIiIiIiIiIHajoIiIiIiIiIiIiIiIiYgcquoiIiIiIiIiIiIiIiNiBii4i6YxhGBly3elxu2klo7QvPcSZHmIQERHbZLb/4ZmtPY/LKO1LD3GmhxhERCTzyuznmYzSvvQQZ3qIQdKGii6Spnr06EGtWrUIDw+Pd5kXXniBDh06JGl9Xbt2pWvXrpafy5Urx4wZM5L1nvhER0ezcuVKOnfuTO3atalevTpt2rRh6dKlCcafEidPnqRjx452X++dO3cYMWIEe/fuTXC5cuXKWX35+vpSu3ZtevTowZYtW2za9i+//MKIESNseu+jdu3aRbly5di1a1eK12Uvce3XpP5+Pa5r165W+758+fJUq1aNtm3bsmzZMqKioqyWDwgIYOTIkUlef1KPw8iRIwkICLB5O/EJDw9nwoQJbNiwId5tiYikhoyUe0RGRrJ8+XJefvllq9xj0aJFhIaGJim+1GDP850tknuOTAp75lxJ+R1Ia7Nnz2bhwoWWn2fMmEG5cuWSvZ6Y9z36VblyZZo1a8bHH3/MnTt3rJZP7rk9qcdh9erVlCtXjvPnz9u0nYSsXLmSjz/+ON5tiYikloyUoxiGQUBAAOXKlePQoUNJiicjimljzFeFChWoWbMmHTt2ZN26dTatc9++ffTt2zfFsZ0/f55y5cqxevXqFK/LXuz5OX/kyJGx8r2qVavSsmVLZs6cSVhYmNXyyc1Fk3ocHs+Z7Jnz2is/k4zBxdEBSNbSvn17tm/fztatW3nmmWdizT9+/DjHjx/n/ffft2n9K1asoGDBgikNk9DQUF577TUOHTpEx44defXVV3F1dWXXrl1MmjSJLVu2MHv2bNzc3FK8rUd99913HDhwwK7rBAgKCmLt2rW0bds20WXbt29vSeoiIiK4du0a33zzDX369OG9996jS5cuydr2kiVLbAk5Q0jOfk0KX19fxowZA0BUVBS3b99my5YtfPTRR+zbt4+pU6diMpkACAwMJGfOnEled1KPQ//+/enWrVuyY0/M1atXWbJkCRMmTEj1bYmIPCqj5B537tyhX79+HD16lE6dOjFgwABMJhN79+5l9uzZrFmzhvnz59tlW8kV1/ku5nyVVpJzjkyK1Mq50ovPPvuMgQMH2m19K1asAMwX3R48eMCff/7J/Pnz+e233/i///s/8uTJAyT/3J7U49C4cWNWrFiBj4+PbQ1IwOzZs6lVq1aabEtE5FEZJUcB2LFjB5cvX6Z06dIsX76cKlWq2GW96VGjRo3o378/YL4hJiQkhE2bNjF8+HCOHz+e7JtKV65cycmTJ1MjVIeL63N+SuTPn5/AwEDAfCP03bt32bNnD7Nnz+aPP/5g8eLFZMuWDUh+LprU49ChQwcaNmyY/OCT4PH8LDW3JY6nooukqaZNm5I7d27Wr18fZ1Kxdu1asmfPzvPPP2/T+qtWrZrCCM0mTJjA/v37WbZsmdU6GzRogK+vL0OGDOHLL7+kR48edtleelKwYMFY+/G5555jwIABTJw4kcaNG1O0aFHHBJfJ5cyZM9a+DwgIoFSpUkyYMIGAgABat24NmC8+pYbixYunynodvS0RyboySu4xbtw4goKC+L//+z8qVKhgmd6gQQNeeOEFOnbsyJtvvsmyZcuSVVxILWXKlEnT7SXnHCn29/i+r1+/PnXr1qVz585MnjyZDz/8EEi9c3vevHnJmzdvqqzbkdsSkawto+QoAKtWraJq1aoEBAQwY8YM3n77bTw9Pe22/vQkb968sfZd06ZN8fb2ZtGiRTzzzDPUqFHDMcFlcm5ubrH2faNGjahSpQoDBw5k0aJF9OvXD0i9XLRgwYJpdpNTWm5L0p66F5M05ebmRqtWrfjtt9+4e/eu1byoqCg2btzIs88+S86cObl58ybjxo2jSZMmVKpUiVq1ajFgwIAEH/V//PHZixcvMnDgQGrUqEH9+vVZvHhxojHevHmTVatW0a5duziTlOeee45evXpZ/WO8e/cuEyZM4JlnnsHPz4+WLVvyzTffWL0vICCA6dOn8/HHH1OvXj0qV65Mr169OHPmDGB+rDCmov9oO6Kjo5k3bx5NmzalUqVKNG/enGXLllnWe/ToUSpWrGjVBVRISAj169ena9eu7Nixw3LHYbdu3Wx6LNJkMvHGG28QERFh1a7z588zfPhwGjRoQMWKFalbty7Dhw8nJCQEMD+GuXv3bnbv3m3VNdjx48cZOHAgderUoWLFijRs2JAPP/yQhw8fJju2x4WFhfHJJ5/QqFEjKlWqRKtWrdi0aZPVMokdixhr1qyhRYsW+Pn50bp1a3bs2IGvry+rV69m165d8e5XwzCYP38+jRs3pnLlyrz00kv8+eefNrepa9eu+Pj4sHz5cqs2PHrMN23aROvWralcuTJ16tThzTff5OrVq5b3P34cYrprW758OU2aNKFevXps27YtzkeBIyIi+PDDD/H398ff358RI0Zw8+ZNy/y43vPoo8/nz5/n6aefBuDtt9+2LPv4+6Kiovjyyy9p1aoVlStXpnHjxkyaNMnqMeKRI0fyyiuvsGrVKpo3b06lSpVo3bq1zd3fiUjmlxFyj7Nnz7Jx40b69u1rVXCJUapUKV5//XX27NnDzp07gfi73YyrC4SVK1fy/PPPU6lSJRo3bsyMGTOIjIy0zL958yZvvvkm9evXx8/PjxdeeIG1a9dathPX+e7x7YSFhTFz5kyeffZZ/Pz8aNasGfPmzSM6OtoqtlGjRjFv3jwaN26Mn58fL7/8coq6KYnrHPnw4UMmT55Ms2bNqFSpEtWrV6dHjx4EBQUB8edcthz/5EjsOCT1HHfgwAE6d+5M1apVady4MZ9//jmvvPKKJS+I6aYiMDAwVpcVmzdvpnXr1vj5+dG8eXPLcbZFlSpVeOaZZ1i7dq2l+7vHz+1Hjx6le/fu1KhRg2rVqvHKK69Yjnd8x6FcuXIEBgbSrl07atSowaxZs+Lt8mvFihWWfKt79+4cO3bMMi++9zyaQwUEBHDhwgXWrFljWTau9/3xxx906tSJGjVqULt2bd544w0uXbpktS1fX18OHTrESy+9hJ+fH40bN2b+/Pk2718RyfwyQo4C5qdxf/rpJxo3bkyrVq0IDw9nzZo1cW7vyy+/ZNSoUdSqVYtq1aoxePBgrl+/blnm3Llz9OvXj9q1a1OlShVeeukly3nu888/p0KFCpbrCQBz5syhXLly/P7775ZpW7ZsoVy5cpw7dw6AEydO0LdvX6pXr0716tUZMGCAZR4Q72ff5Bo8eDBubm5WOUdix2XkyJGsWbOGCxcuWHUNlti1lJRI7BoSJD0n27x5M23btqVy5co0b96cjRs30rRpU2bMmBHv5/wYq1evpnnz5pbrKVu3brW5TU2bNqVy5cpW+/7xXHT79u289NJLVKtWDX9/f/r378/p06eBuI9DzDWLxYsX89xzz1GrVi1Wr14db5dfM2fOpF69elSrVo3+/ftb/Y7F957H8xuwzs/iet+mTZto27Yt1apVo379+owePZrbt29bbatp06Zs3ryZVq1aWY5xXH+T4lgqukiaa9++PeHh4Xz//fdW07dt28a1a9do3749hmHQt29f/vjjD9544w0WLlxI//792b59O6NHj07Sdh48eECXLl0sj+OOHj2alStXJtqFwY4dO4iMjKRJkybxLjN8+HCee+45wPzBvlOnTqxfv56ePXsya9YsatSowahRo5gzZ47V+5YuXcrp06eZMGECH374IUeOHLF86OvQoQPt27cHzB8gY7r4Gjt2LNOnT6d169bMmTOHZ599lo8++oiZM2cCULFiRfr27cuaNWvYsWMHYH7MMjw8nE8++QQ/Pz/LPhs9erTN3YGULl2aQoUKsW/fPsDcBVu3bt04deoUY8aMYeHChXTp0oWNGzcyZcoUSxy+vr74+vqyYsUKKlasyNWrV+ncuTOhoaFMnDiR+fPn89xzz7Fs2bIUd0VmGAYDBgxg+fLl9OjRg9mzZ1OtWjWGDh0a66JCQscCzHcVjRw5kurVqzNr1iyaN29O//79Lf3GV6xYMd79um/fPn766Sfee+89Pv74Y65cucJrr71mdWElOZydnalbty6HDx+Ocx379u3jzTffpFmzZsyfP5+3336bnTt38sYbbwBxH4cYU6dOZcSIEYwYMSLeO6G+++47jhw5wsSJExk+fDibN2+2PG6dFD4+PpaLKv369bO8ftzo0aP56KOPCAgIYPbs2XTu3JkvvviC/v37Ww02d+TIERYuXMjgwYOZOXMmLi4uDB482CoRERF5VHrPPX799VeAOO9yjdGiRQtMJhO//PJLkmKJMXfuXN577z3q1q3LnDlz6Ny5M/Pnz7dq01tvvcXJkycZN24c8+bNw9fXlxEjRrBr164Ez3cxDMPgtddeY8GCBbRv396Sr3z22Wexlv/hhx/45ZdfePfdd5kyZQrXr19n8ODBNo3LAnGfI4cPH27pGnXRokWMHDmSEydOMHToUAzDiDPnssfxT0hSjgMkfo47deoUr7zyCgBTpkxh0KBBzJs3z5KfxbQJzL/3Ma9jjB49mldeeYXZs2fj4+PDyJEjOX78uM3tatCgAREREXHeXHLv3j1effVV8uTJw/Tp05k6dSqhoaH06tWLu3fvxpv7grnLr+bNmzNlyhTLBZ3HXb58mRkzZjBkyBCmTJnC7du36datm9WNIYkJDAwkf/78NGrUKN4uxdatW0fPnj0pUKAAU6ZM4e233+bAgQO89NJL3Lhxw7JcdHQ0Q4YMoUWLFsybN48aNWowadIkqwuFIiKPS+85CsCGDRuIiIjghRdeoECBAtSrVy/W+SXG1KlTiY6OZsqUKZbPjh999BFg/j/Zt29fHjx4wCeffMKsWbPw8vKif//+nD17liZNmhAdHW25wQSwvN6zZ49l2u+//86TTz5JsWLFOHPmDC+//DI3btxg4sSJjB8/nnPnztGxY0er/9ExsSX22Tchnp6eVK5c2XLOTcpx6d+/P40aNSJ//vyWGwWSci0lJRK7hhQjsZxs586d9O/fn0KFCjFjxgw6d+7MmDFjLDcdJPQ5/9KlS8ybN4/XX3+d6dOnYxgGgwYNinVMkqNBgwZcvnyZCxcuxJoXU8yrWLEis2fP5sMPP+T06dP06dOH6OjoOI9DjKlTp9KrVy8+/PBD6tSpE+e29+3bx4YNGxg9ejQffvghx48f55VXXknWeM8J5WcxZs2axdChQ6lSpQrTp09nwIAB/PDDD3Tt2tXqJuVr167x/vvv061bN+bNm0fRokUZOXIkp06dSnI8kvrUvZikuQoVKuDr68uGDRusPlytWbOG0qVLU6NGDa5cuYKHhwcjRoygZs2aANSuXZvz589bVbYTsmbNGi5evMi6desslePKlSvTtGnTBN93+fJlgCR3obV69WpOnDjBV199ZXnEtGHDhkRGRjJr1ixefvllvLy8APNJetasWTg7OwPwzz//MGPGDEJCQqweK4xJAM6cOcPXX3/NsGHD6NOnD2A+0ZhMJubOnUunTp3IkycP/fr147fffmPs2LH069ePH374gcmTJ1OoUCHgv8cuy5Qpk6JHMPPly2e5SyU4OJiCBQsyceJES1cSderU4c8//2T37t2W7cWMOxLTpoMHD1KhQgWmTZtmmVevXj127NjBnj17eO2112yOb/v27fz+++9MnTqVFi1aAOZjERoayqRJk2jZsiUuLuZ/ewkdizx58jBt2jSaNGli6S6jYcOGuLq6MnnyZMDczUl8+9XNzY158+ZZjvu9e/d49913OXnyJOXLl7epbfny5SMiIoJbt26RL18+q3n79u0jW7Zs9O7d29K/qZeXF3/++SeGYcR5HGK8/PLLPPvsswlu29PTkwULFljWkSdPHgYMGMC2bdto0KBBorG7ublZ7twuXrx4nF2jnTx5km+++YYhQ4ZYHheuX78+Pj4+DB8+nK1bt9KoUSPA/GTZ6tWrLb932bNnp0uXLuzcuZPmzZsnGo+IZD3pPfeI+fCYUO6RO3ducufOnaynLu7evcvs2bN56aWXePfddwFzHuHl5cW7775Ljx49ePLJJ9m9ezf9+/e3FH1q166Nl5cXzs7OCZ7vYmzdupXt27fz6aefWrr4ql+/Pu7u7kybNo3u3btb3hcZGcnChQst55T79+8zYsQIgoKCqFSpUpLb9qhHz5Genp7cv3+f9957z5IL1KpVi/v37zNx4kSuXbsWZ85lj+Mfn6Qeh5hlEzrHzZ07l5w5c7JgwQI8PDwAeOKJJ3j55Zct24tpU1xdxn744Yc89dRTABQrVoxmzZqxe/dum/OT/PnzA1jdxRzj5MmT3Lx5k65du1py5CeeeILly5dz7949ChUqFOs4xKhcubIl9wXzEzOPi4qKIjAw0PLemCdvlixZwrBhw5IUv6+vL25ubnF2JQPmC4Sffvop9erVY+rUqZbp1atXp0WLFixatIi33noLMF9869+/v+V/TI0aNfjpp5/YvHmz+msXkXil9xwFzF2L1a9fnwIFCgDQrl07hg4dyu7du63GxAIoW7as1fgehw8fthSUbty4walTp3jttdcsn+0qV65MYGAgYWFhlC1bllKlSrFjxw6ee+45wsPD2b9/PxUrVrRcYwBz3hHzuS8wMBB3d3eWLFliyS3q1q3LM888w4IFC6zGX0nKZ9/E5MuXjyNHjgDm8UwSOy7Fixcnb968Vt1mBQUFJXotxVZJvYYEiedkM2bMoEyZMgQGBlq6tvX29racYxP6nB8dHc3MmTMpXbo0ANmyZaNHjx4cPHgw3pspEhNzHeT69esUKVLEat7hw4d5+PAhffv2tfyeFipUiF9++YUHDx7EeRwePHgAQLNmzSw3gcTHycmJhQsXWrZbunRpXnzxRdasWcNLL72UpPgTys8Abt++zezZs+nQoYPVTUtly5alc+fOrF69mk6dOgHmm6DHjx9P3bp1AShZsiRNmjRhy5Ytln0ujqcnXcQh2rdvz549eywFjrt37/Lrr79a/tEVKFCApUuXUrNmTS5evMiOHTv44osv2L9/PxEREUnaxt69eylWrJjVo3qFChVK9I4GJyfzn8Wj3WEkZPfu3RQpUiRWn56tW7cmLCzM6vFMPz8/y0V+wPJBM6ZLhsft3LkTwzAICAggMjLS8hUQEEBYWJjlDgtXV1cmTpzIhQsXePvtt2nVqhUtW7ZMUvzJFXOyrVChAl999RVFixbl3Llz/P777yxatIjTp08neIwaNGjAF198QbZs2Thz5gy//fYbc+bM4ebNm8m6SyAuO3bswGQy0ahRo1j769q1a/z999+WZRM6FmfPnuXixYuxErKk9qVbpkwZS8EF/ruI9vgj47aIqx9/f39/Hj58SKtWrZg6dSr79u2jQYMGDBw4MNF+/+N6BPZxjRo1siRiYO6Kw9XVle3btye/AfGISS5btWplNf3555/H2dnZqvucvHnzWvUZn9jfkYgIpO/c49Gn+RLi5OSU5GXB3A1VaGhonHkEmLtMAvMFghkzZvD666+zevVqbt68aXUBITG7d+/G2dnZUuSIEVOAefR/+KM3AgCWD8b2+B9uMplwc3Nj4cKFtGjRgqtXr7Jnzx5WrFjBb7/9BhDvsbTH8Y9PUo8DJH6O27lzJ40aNbIUXACqVasW6+JDfB49psWKFQPM3cakhieffJK8efPSr18/xowZw6+//kr+/PkZPny45cag+JQtWzbR9RcuXNjqbyt//vxUrVrVrvnJmTNnuHbtWqz8pHjx4lSrVi1W937VqlWzvI4p5sRc1BERiU96zlH++usvjh49SvPmzblz5w537tyhdu3a5MqVK86Cz+PrK1iwoOUcli9fPsqUKcN7773HyJEj2bRpE4Zh8Pbbb1v+7zdu3Njyf3zfvn04OTnRvXt3jhw5YvmsHvNUDJjPi7Vr18bd3d1yfs2ZMyc1a9aMdT5Iymff5LD1uNh6LSUpknoNCRLOycLDwzlw4ADNmze3uqbQvHlzy42sCcmTJ4/Vxf+YnCO1rolUqVKFbNmy0b59eyZMmMD27dspX748Q4cOtWpjXJKSc1StWtUq1ypfvjxFixa1a85x8OBBwsPDY+UcNWvWpEiRIrFyjkf/1mLyReUc6YuedBGHaNWqFR9//DEbN27k1VdfZdOmTURHR/PCCy9Yllm/fj1Tpkzh0qVLeHl5Ub58edzd3ZO8jdu3b8c5CGb+/PnjvBsvRsw/0osXL1ruOnzctWvXyJMnDy4uLty+fTvWkwfwXxX+0Q+yj35AhsQLPLdu3QLiv9h/5coVy+ty5cpRsWJFDh48GKsvTXu5cuWK1T5ZvHgxc+fOJSQkhHz58lGxYkU8PDwSPJHGPGr85Zdf8uDBAwoVKkTlypUtT2ikxK1btzAMg+rVq8c5/+rVq5Y7MRI6FjHdUnh7e1stE3M3Z2KyZ88e77ptdeXKFdzd3a2KOTGqVavGvHnzWLJkCQsXLmTOnDnkz5+f3r1707179wTX+3gb4/L477eTkxNeXl52vUgT023K4/vYxcWFPHnyWP1OPX7sYpKulOxfEcn8MkLucf78+XjvTrt37x63bt1K9GL1o2LyiEefGHhUzNhfU6dOZc6cOXz33Xd8//33ODk5Ua9ePcaOHWv5kJyQ27dvW/KiR8X8T0/of3hqnCN///13PvroI06fPk2OHDkoV64cOXLkABIucKX0+McnqccBEj/H3bx5M85zty05Ssy+T04h73ExuWhcg8DmyJGDL7/8ktmzZ7Np0yaWL1+Oh4cHrVu3ZtSoUQnmfnHl1klZxtvb22qslZSKOXbx5fqPjiEDxPp9SW6hVESypvSco8SM6fruu+9antaM8eOPP3Lz5k2r9cZ1no/5P2gymVi0aBGzZ8/mp59+Ys2aNbi6uvLMM88wduxYvLy8aNSoEYsXL+bcuXPs3LmT6tWrW7qy3L9/P6dOnSJPnjyWC863bt1i06ZNscZxBWK1NymffRNz5coVq3OercfFlmspSZGca0gJ5WS3bt0iKioq1j6L+XyemMevidjjM3tMvhRTHHpU0aJF+eKLL5g3bx5ff/01S5YswdPTk06dOvH6669b2haXlOQcqXFNJL6c4/HfjUePnz1yOrE/FV3EITw9PWnatCkbNmzg1VdfZe3atQQEBFj+oe/du5cRI0bQpUsXq0HrP/nkE6vKfELy5MnD2bNnY02POQnFp06dOri6urJlyxbLI6+P69u3L6GhoXz33Xfkzp07zu1cu3bNEoetPD09AfOAcjEXCx5VuHBhy+uVK1dy8OBBypcvz0cffUS9evXivEBvq1OnTnH16lXL44wbNmxg4sSJvPHGG7Rv396S0Lz++usJDhofUxwYO3YszZs3J1euXACJPs6ZFLly5SJ79uwsXbo0zvklSpRI0npift8e7280Jf2PpkRUVBS7d++mevXqVk/nPKphw4aWrtR27tzJ0qVL+eijj6hatSpVqlRJ0fYfTySioqIICQmx/L2aTKZYffEn9w6L3LlzA+a/m0e714mIiLB0+SYikhLpOfcICAjg448/5ocffrAaM+vUqVMULlwYDw8PfvrpJ6Kjoy1dQ8X34fX+/fuWnCEmj5g0aRIlS5aMtd2YD3W5cuXirbfe4q233uL06dP88ssvzJo1i3HjxrFgwYJE2507d25CQkKIjIy0KrzEfDhOzf/hj58j//nnHwYMGMDTTz/N3LlzLU+NfPnllwmOrWGP4x+fpB6HpChYsGCc+ciNGzcoVaqUzTHaavv27WTPnt1qvLhHPfHEE3z66adERUVx+PBh1q1bx//93/9RtGjReItQSRXXhY5r165ZctKE/kaSKiaXjuuCZMxNWCIiKZVec5Tw8HA2bNjA008/HetmvkuXLjFixAjLGGpJVaBAAcaOHcuYMWM4fvw433//PfPnzyd37tyMGzeOmjVrkjNnTnbs2MHOnTtp0qQJ3t7elClTht27d3P06FEaN25sucicK1cu6tWrR48ePWJtKylPZCTH7du3OXr0qKUYZutxsfVaSlIk5xpSQry9vXF1dY2Vc0RHRxMSEpKiGG21fft2SpQoEWfRBf7rqi48PJx9+/axYsUK5syZQ7ly5WI9jZ1c8eUcMU+4xuQcUVFRlms2yck34L9rItevX491E9a1a9eSdCOUpC/qXkwcpn379hw/fpzdu3dz4MABq4vuBw4cIDo6msGDB1tOXFFRUZZH95JSHa9Tpw7nz5+3OmndvHmTgwcPJvg+T09P2rdvz9dff83hw4djzd+4caPVidbf358LFy7EOqmuX78eV1dXKleunGisMR6vvvv7+wMQEhKCn5+f5evWrVt89tlnlgTp4sWLTJw4kbZt2zJv3jxCQ0N5//33LeuJ70J9ckyfPh13d3fatGkDmB/1zZUrF3369LEkCffv32ffvn1Wx+fxNu3bt48yZcrQvn17S8HlypUrnDhxIsVPKtSqVYsHDx5gGIbV/vr777+ZOXNmkgeyL1iwIMWLF+enn36ymv7DDz9Y/WyP/ZoUy5cv5+rVq3Ts2DHO+R9//LFlgEUPDw+aNGli6bs25m7PhO7sSMz27dut9t0PP/xAZGQktWvXBsx3soaEhBAWFmZZZv/+/VbrSGxfxfQFvGHDBqvp3377LVFRUbG67xMRsUV6zT1KlixJq1atmD9/vtWd8xMmTKBRo0YsWbKEyZMnU7FiRUt3GjFdJTx6V//t27etBtCsUqUKrq6uXLlyxeq8GDNG2fnz57lw4QKNGjWy9Lf+xBNP0Lt3b+rVq2fp5iQp/8OjoqJi3WW6fv16gFT9H/74OfLIkSOEhYXRt29fq266YgouMXcAPn5etMfxj09SjkNS+fv7s3XrVqtzblBQUKx1pOS8n1RBQUH8/PPPtGvXLs6nVr7//nvq1KnDtWvXcHZ2plq1aowdOxZPT0/L71ZK4ozpYibGpUuXOHDggCU/ietv5PTp07EuMCYUQ6lSpcifP3+s/OTcuXMcPHgw3qerRUSSKz3mKL/++ishISF07NiR2rVrW329+OKLlClThq+//jrJd9cfOHCAevXqcfjwYUwmExUqVGDo0KGULVvWcl5wdXWlfv36/Prrrxw9etTyP71OnTr8/vvv7Nmzx5ILgTkHOXnyJBUqVLCcXytVqsSSJUtifZ5PqTlz5hAREWEZwyOpxyWuayJJuZZii6ReQ0qMs7Mz1atX5+eff7aa/uuvv1pdG0irayKbN2/m8OHD8V4TWbJkCQEBAYSHh+Pm5kbdunX54IMPAPtcEzlw4IDVkyaHDx/mwoUL1KlTB4g753j8mkhiMVSpUgU3N7dYOcfevXu5ePGico4MSE+6iMPUqVOHokWL8t5771GwYEGrAbljChXvv/8+7dq1486dO3zxxRccP34cMN9Fn1i/jC+88AJLly5l4MCBln4cZ8+enaST2LBhw/jzzz/p3r07nTt3pnbt2kRGRvL777/z9ddf89RTT/Hqq68C0LZtW7766isGDhzI4MGDKVasGL/++iurVq1i4MCBljsNkiJm2Y0bN1KlShXKli1L69atee+997hw4QKVKlXizJkzTJ06laJFi1KyZEkMw2DUqFG4u7szYsQIvLy8GDZsGO+//z7NmjXj2WeftRQ3Nm/eTO7cuRMcLPXy5cuWxCsyMpIrV66wZs0atm3bxvvvv29JJipXrsz//d//MXHiRJo0acLVq1dZuHAh169ft1ToY9p04MABduzYga+vL5UrV2bWrFnMmzePqlWrcvbsWebOnUt4eHiS+nP/4YcfCAoKijW9ffv2NGrUCH9/f/r370///v0pXbo0hw8fZsaMGTRo0CDOx6njYjKZGDx4MG+++SZjxoyhadOmHD9+nJkzZwJY3VWT1P2aFPfu3bPs+5g7SLZt28aKFSto3bo1zZo1i/N9devWZfHixYwcOZLWrVsTERHBggUL8PLysiQBjx+H5Lh+/TqDBg2ia9euBAcHM2XKFOrXr28ZtK1JkyYsW7aMd955hw4dOvD333+zaNEiqwQsZl/t2LGD0qVLx3r6pkyZMrRp04bAwEAePnxI7dq1CQoKIjAwkNq1a2sAWhGxi/Sce4wZM4bLly/TuXNnOnXqZLlrc9KkSZYBaadOnWq5k65cuXIUKlSIwMBAcuXKhZOTE/PmzbPqaiBPnjy8+uqrTJs2jXv37lG7dm2uXLnCtGnTMJlMlC9fnly5clGwYEE+/PBD7t27R/HixTly5Ahbtmyhb9++QOLnu6eeeoratWszZswYrl69iq+vL7t372b+/Pm0adOGMmXKJNr+xCT1HFmxYkVcXFz49NNP6dmzJ+Hh4axevZrNmzcD/z2J+XjOldLjf/DgQZYsWRJreoMGDShTpkyixyGpXnvtNTZt2sSrr75Kz549uXPnjmU9j/ZxHnPe37NnT5LH5klIzL43DIP79+/z559/smTJEkqWLMnrr78e53uqV69OdHQ0AwYMoE+fPuTIkYPvvvuOu3fvWo7X48chOXdxZsuWjf79+zN06FCioqKYNm0aXl5elrux69Spg4eHBxMnTmTIkCHcv3+fwMDAWE+Ce3p6cuzYMXbv3h3rZiknJyeGDRvG22+/zdChQ3nxxRcJCQkhMDCQ3Llzx3lntYiILdJjjrJq1Sry5s1r+dz3uBdffJFJkyaxbdu2JH1e8/X1xd3dneHDhzNo0CDy5cvH9u3bCQoKolu3bpblGjVqxDvvvEP27Nnx8/MDzOPPffHFF5aiTIz+/fvz8ssv07dvXzp27Ei2bNlYsWIFP//8M9OnT080prg8WoyKiorixo0b/PDDD2zcuJHXXnvNElNSj4unpyfXr19ny5YtVKhQIcnXUuLzxx9/xPnkxbPPPpuka0hJNXjwYLp27crgwYNp3749Fy9eZNq0acB/T3Yk9jk/ucLDw61yjjt37rB3716WLl1K7dq16dKlS5zvq1OnDpMmTWLAgAF06dIFZ2dnli9fjpubm6VI9/hxSI7o6Gj69OnDa6+9RkhICJMnT7bsazD/zk6YMIH33nuP3r17c/nyZQIDA2M9bZRQfubl5UWfPn0IDAzE1dWVp59+mvPnzzNt2jTKlClD27ZtkxWzOJ6KLuIwJpOJtm3bMn36dAYMGGBV8a1duzajR49m8eLFfP/99+TLl4/atWsTGBjIgAED2LdvX7xdf8Vwc3Pj888/56OPPmL8+PGYTCb+97//UaxYsUS7ifL09GTZsmV88cUXlj6oDcOgRIkSvP3223To0MHyqKqHhwfLli1j8uTJTJ8+nXv37vHEE08wfvz4ZHeZ1axZM9atW8fIkSNp3749Y8eOZcKECcydO5fly5dz+fJlvL29adGiBUOGDMHZ2Zkvv/yS7du3M3XqVMuHyI4dO7JhwwbGjh2Lv78/Tz75JC1btrR0rbFx48Z4Y/jmm28s/ba6urri4+NDpUqV+OKLL6xOCm3atOH8+fOsWrWKr776igIFCtCoUSM6derEe++9x8mTJylTpgydO3fmyJEj9O7dmwkTJtC3b19CQkJYunQpM2fOpFChQrzwwguYTCbmzp3L7du3E0w0vvzyyzinP/PMM+TMmZN58+Yxbdo05s6dy40bNyhQoACvvPIKAwYMSNaxaNWqFQ8ePGDhwoWsWrWKJ598klGjRjFq1ChL/6TJ2a9JcezYMctdM05OTnh7e1OqVCkmTpwYazC1Rz311FNMmjSJRYsWMXDgQEwmEzVq1GDp0qWW34nHj4OPj0+S4/rf//7Hw4cPGTBgAG5ubrRq1Yq33nrLkmjVr1+fESNGsGzZMn788UcqVqxIYGAgL7/8smUdOXPmpEePHqxYsYLNmzdbDRocY/z48ZQoUYJVq1axcOFCfHx86Nq1a6z/DyIitkrPuUeuXLlYsmQJK1euZO3ataxYsYLo6GiKFSvGoEGDCAoK4tVXX6Vbt2688cYbODs7M336dD766COGDRtGvnz56N69O6dPn+bMmTOW9Q4ZMoT8+fPz1VdfsWDBAnLnzk3dunUZNmyY5YNyYGAgU6ZMYdq0aYSEhFCoUCEGDhxo6S4ksfNdzDl8+vTpLF26lJs3b1K0aFGGDh1qt4vSST1HlihRgsmTJxMYGEi/fv3InTs3VatWZdmyZXTt2pW9e/dSrly5OHOulBz/bdu2sW3btljTJ0yYQJkyZZJ0HJKiRIkSLFy4kE8++YTBgwfj7e1N3759mT17ttUH+9dee41Zs2bRu3fvOPu5T66YfQ/miwKFCxemV69edOrUKd4LfT4+PixYsIBp06YxatQoQkNDefLJJ5kxY4blppC4jkNSlStXjueff56xY8dy9+5d6tatyzvvvGO5ySZXrlxMnz6dyZMnM2DAAIoUKcLAgQNZu3at1Xp69uzJRx99RK9evVi8eHGs7bRt25YcOXIwd+5cBgwYQM6cOWnYsCHDhg1L8lg6IiKJSW85ypUrV/jjjz94+eWX4+2mq3Xr1kyZMoXly5cnqeiSLVs2Fi1axOTJkxk/fjx37tyhZMmSvP/++1YXlBs1aoTJZKJ69eqWbdeqVQuTyUStWrWszjvly5fnyy+/ZOrUqQwfPhzDMChbtiwzZ87k6aefTjSmuGzZsoUtW7YA5i7K8uXLR9myZZkzZ47VUzZJPS5t27Zly5YtDBgwgMGDB9O7d+8kXUuJz8aNG+O89lChQgUKFiyY6DWkpKpZsyYzZsxg2rRp9O/fnyJFivDee+8xdOhQS86RlM/5yXHt2jVLzmEymciTJw/FihVj+PDhdOjQAVdX1zjfV758eebMmcPMmTMZNmwYUVFRVKpUiUWLFvHEE08AxDoOyelyrEmTJhQvXpy33nqLyMhImjRpYjU+XalSpfj444+ZPXs2ffr0oXTp0nzwwQeWp21iJJafxRQjv/jiC1auXImXlxfPPvssQ4YMiTUGj6R/JkOj7IiIxLJx40Z8fX0tJ2gw3+Hbt29f1q1bl+KnWkRERJLr999/5/Tp07H6VZesY8eOHbi6ulrdCHP79m3q16/P8OHDre4UFhEREbHVL7/8QsGCBa3Gbfv7779p2bIls2bNsrmoJZJV6EkXEZE4rF+/nqlTpzJkyBAKFSpEcHAw06dPp1atWiq4iIiIQzRs2FDdLWZxR48eZfr06QwbNoyKFSsSEhLCokWLyJUrFy1btnR0eCIiIpJJbNu2jU2bNvHmm29SqlQpLl++zOzZs3niiSesur8TkbjpSRcRkTjE9NO5detWbt68Sb58+WjevDmDBw+O1S+niIiISFqIjo5mzpw5rFu3jkuXLpE9e3Zq1arFG2+8QYkSJRwdnoiIiGQSDx8+ZNq0afzwww9cvXoVLy8vGjZsyBtvvEG+fPkcHZ5Iuqeii4iIiIiIiIiIiIiIiB1oZGIRERERERERERERERE7UNFFRERERERERERERETEDlR0ERERERERERERERERsQMXRweQ3hw4cADDMHB1dXV0KCIiIulGREQEJpOJatWqOTqUTE+5iIiISGzKRdKOchEREZHYkpOL6EmXxxiGYfkKDw/HMAxHh5Sm1G61O7PLim0GtTsrtTu12hxzbpTUl9R9ndl/v9W+jE3ty9jUvowts7ZPuUjaScq+zqy/Z3HJSm2FrNVetTVzUlszL0e3Nzm5iJ50eUzMnRylS5cmKCiIMmXKkD17dgdHlXYePHigdqvdmVpWbDOo3Vmp3anV5j///NNu65KExeQifn5+CS6X2X+/1b6MTe3L2NS+jC2ztk+5SNpJSi6SWX/P4pKV2gpZq71qa+aktmZejm5vcnIRPekiIiIiIiIiIiIiIiJiByq6iIiIiIiIiIiIiIiI2IGKLiIiIiIiIiIiIiIiInagoouIiIiIiIiIiIiIiIgdqOgiIiIiIiIiIiIiIiJiByq6iIiIiIiIiIiIiIiI2IGLowOQhN0Lv0dYZFic87K5ZCOnW840jkhEREQkE4qOBic73I9kr/WIiIhILJFhYRAVFf8Czs64ZMuWdgGJiIjEQUWXdC4sMowZu2fEOW9QrUEquoiIiIjYg5MTrFoF16/bvo58+aBdO/vFJCIiItaioji2eHG8s3179EjDYEREROKmoouIiIiICJgLLpcuOToKERERERERycDU94GIiIiIiIiIiIiIiIgdqOgiIiIiIiIiIiIiIiJiByq6iIiIiIiIiIiIiIiI2IGKLiIiIiIiIiIiIiIiInagoouIiIhIIiIiIpg6dSqNGzemWrVqdOrUif3791vmBwUF0aVLF6pWrUrjxo1ZuHChA6MVEREREREREUdR0UVEREQkEbNnz2bVqlV8+OGHrF27lieeeILevXtz5coVQkJC6NGjByVLlmTVqlUMGjSIadOmsWrVKkeHLSIiIiIiIiJpzMXRAYiIiIikd7/88gstW7akQYMGAIwcOZKVK1dy8OBBgoODcXNzY+zYsbi4uFC6dGnOnj3L/PnzadeunYMjFxEREREREZG0pCddRERERBLh5eXFb7/9xvnz54mKimLFihW4ublRoUIF9u7di7+/Py4u/93LUqdOHc6cOcONGzccGLWIiIiIiIiIpDU96SIiIiKSiFGjRjF06FCefvppnJ2dcXJyYtq0aRQvXpzLly9TtmxZq+V9fHwAuHjxIt7e3snenmEYPHjwIMFlQkNDrb5nNmnZPpPJhIeHBxGRkRARYfuKIiNxxRyzYRgJLqrjl7GpfRmb2pcxGYaByWRydBgiIiIiiVLRRURERCQRp06dwtPTk5kzZ1KgQAFWrlzJiBEj+OKLL3j48CFubm5Wy2fLlg2AsLAwm7YXERFBUFBQkpYNDg62aRsZRVq0z8PDA19fX26FhBBx7ZrN63H18CA/cObMmSRf7NTxy9jUvoxN7ct4Hj/fioiIiKRHKrqIiIiIJODChQu89dZbLFmyhJo1awLg5+fHyZMnmTFjBu7u7oSHh1u9J6bYkj17dpu26erqSpkyZRJcJjQ0lODgYEqWLImHh4dN20nP0rJ9MXdOe+XJAym5MzxPHgBKlSqVpCdddPwyLrUvY1P7MqaTJ086OgQRERGRJFHRRURERCQBhw8fJiIiAj8/P6vpVapUYevWrRQuXJirV69azYv5uUCBAjZt02QyJblg4+HhYXNxJyNIy/a5uriAq6vtK/h3XJ/kXOTU8cvY1L6MTe3LWNS1mIiIiGQUTo4OQERERCQ9K1SoEAB//fWX1fQTJ05QokQJ/P392bdvH1FRUZZ5O3bsoFSpUjaN5yIiIiIiIiIiGZeKLiIiIiIJqFy5MjVr1mTEiBHs3LmT4OBgPvvsM3bs2EGfPn1o164d9+7dY9SoUZw8eZLVq1fz+eef07dvX0eHLumYyTDwvHkTpz17YMsW2LoVjh+Hu3cdHZqIiIiIiIikgLoXExEREUmAk5MTs2bN4rPPPuPtt9/m9u3blC1bliVLllC1alUAFixYwPjx42nTpg358+dn+PDhtGnTxrGBS9rLmROio8EpjvuaDAP27YMNG+DHH/E4eJAnHz6Mez3lykHt2tC6NTz7LOTIkbpxi4iIiIiIiN2o6CIiIiKSiNy5czNmzBjGjBkT5/zKlSuzYsWKNI5K0h13d3PBZdUquH7dPC0iArZvNz/JcuGC1eKGszPkzo3Jzc1crLl7F0JD4a+/zF9Ll0L27NClC7z+Ovj6OqBRIiIiIiIikhzpqugya9YsduzYwbJlyyzTgoKCGD9+PEeOHMHLy4uuXbvSq1cvy/zo6GgCAwNZuXIld+7coUaNGowZM4YSJUo4ogkiIiIiktVdv24usOzfD7//DnfumKe7uEDZslC6NBGFC3MtMpL8BQrg6ur633vv34eHDyFbNnPxJjgY5s0zf7VrB+PHm5+EERERERERkXQp3YzpsmTJEqZPn241LSQkhB49elCyZElWrVrFoEGDmDZtGqtWrbIsM2vWLJYvX86HH37IihUrMJlM9O7dm/Dw8LRugoiIiIgInD0LCxbAt9+aCy6entC8OQwbBh06QPXq4O0ddzdkOXJApUowaRKcPm0e76VtWzCZzEWYihVh6FC4dy/t2yUiIiIiIiKJcnjR5cqVK7z66qtMmzaNUqVKWc37+uuvcXNzY+zYsZQuXZp27drxyiuvMH/+fADCw8NZtGgRgwYNolGjRpQvX56pU6dy5coVfvrpJ0c0R0RERESyqqgoGD0aJk6ES5fM3Y01bw6DBkGdOuDhkbz1mUzw1FPmYsuhQ9CypXkbn31mLr4o3xUREREREUl3HF50OXr0KLlz52b9+vVUqVLFat7evXvx9/fHxeW/XtDq1KnDmTNnuHHjBsePH+f+/fvUqVPHMt/T0xNfX1/27NmTZm0QERERkSzuzh1zweWDD8AwzE+rDBhgLra42KFHXz8/2LABvvsOSpaEf/6BZs3grbdAT3iLiIiIiIikGw4f0yUgIICAgIA4512+fJmyZctaTfPx8QHg4sWLXL58GYBChQrFWubSpUs2x2QYBqGhoQCW744SFR1FREREvPMePHhg1+2ll3anNbU767Q7K7YZ1O6s1O7UarNhGJhMJruuUyTTOHcOVqwwj8fi6WnuQqxo0dTZ1rPPwpEj5mLL7Nnmbsh+/938NEyRIqmzTREREREREUkyhxddEvLw4UPc3NyspmXLlg2AsLAwywWluJa5ffu2zduNiIggODgYwPLdUfIVy8e1a9finBf6IJRz586lynYd3W5HUbuzjqzYZlC7s5LUaPPj51sRAQ4fhnXrIDoaSpSAX381d/uVghuAEpUjB8yaZe66rEcP2LULataE1auhbt3U266IiIiIiIgkKl0XXdzd3Ql/rLuEsLAwALJnz467uztgHtsl5nXMMh7J7TP7Ea6urhQpUoTg4GBKliyZonWl1L3oe+TPnz/OeR7ZPahQoYJdtxcaGpou2p3W1O6s0+6s2GZQu7NSu1OrzSdPnrTbukQyBcOA7dvh55/NP1eoAO+8A088kXYxvPAC7NkDbdrAn39CQAAsX26eLiIiIiIiIg6RrosuBQsW5OrVq1bTYn4uUKAAkZGRlmnFixe3WqZ8+fI2b9dkMlkuVHl4eJA9e3ab15VSoQ9CcXV1jXOes5NzqsXm6HY7itqddWTFNoPanZXYu83qWkzkEYZhLrZs327+uW5daNoUHFHcLV3aHEenTuYxX9q2hTlzoHfvtI9FREREREREcHJ0AAnx9/dn3759REVFWabt2LGDUqVK4e3tTfny5cmZMye7du2yzL9z5w7Hjh2jZs2ajghZRERERDKzxwsuTZuaB7R3ZGEyZ05z12K9epm7OevTB95/3xyriIiIiIiIpKl0XXRp164d9+7dY9SoUZw8eZLVq1fz+eef07dvX8Dct3yXLl2YNGkSv/zyC8ePH2fo0KEULFiQpk2bOjh6EREREclUHi+4PPcc1Kvn2JhiuLjA/Pnw7rvmn8eMgYEDzUUYERERERERSTPpunsxb29vFixYwPjx42nTpg358+dn+PDhtGnTxrLM4MGDiYyM5N133+Xhw4f4+/uzcOFCDfYrIiIiIvYTV8GlVi3HxvQ4kwk++AAKFoRBg2DWLIiMhNmzwSld32slIiIiIiKSaaSrosvEiRNjTatcuTIrVqyI9z3Ozs689dZbvPXWW6kZmoiIiIhkZb/+mr4LLo8aMAC8vKBbN5g3z1yMmTVLhRcREREREZE0oE9eIiIiIiIJ2bkTtm0zv07vBZcYnTvD55+bCy5z55oLMepqTEREREREJNWp6CIiIiIiEp8jR+CHH8yvAwIyRsElRpcu/xVe5swxj/FiGI6OSkREREREJFNT0UVEREREJC6nT8OaNebXtWpBgwZps92cOe33VErnzrBkibnwMns2DB+uwouIiIiIiEgqSldjuoiIiIiIpAuXLsGKFebiR8WK8Oyz5sJFWnB3N4+/smoVXL9u+3ry5YN27cxju0RGQq9eMGkS5MkD77xjv3hFRERERETEQkUXEREREZFH3b4NX34J4eFQqhS8+GLaFVwedf26ufhjDz17mts1bBiMGgW5c5vHeRERERERERG7sql7sZkzZ3LJXh8ARURERFKB8hWxSXg4/N//wf374OMDL70ELpnkPqWhQ+G998yvBw40F5ZERMQmyjPsLzIsjMgHDxL8MtRFpoiIZAA2fYL8/PPPmTlzJrVr16Zt27Y0a9aMbNmy2Ts2EREREZspX5Fki46G1avhyhXIkQM6doTM9jszbhzcugUzZkD37uDpCa1aOToqEZEMJ7XyjFmzZrFjxw6WLVtmmRYUFMT48eM5cuQIXl5edO3alV69elnmR0dHExgYyMqVK7lz5w41atRgzJgxlChRIsXxpKmoKI4tXpzgIhVeeSVtYhEREUkBm5502bZtG5MmTcLV1ZWRI0dSv359Ro8ezYEDB+wdn4iIiIhNlK9Isq1bB3/9Bc7O5idcvLwcHZH9mUzw2WfQtStERUGHDrB5s6OjEhHJcFIjz1iyZAnTp0+3mhYSEkKPHj0oWbIkq1atYtCgQUybNo1Vq1ZZlpk1axbLly/nww8/ZMWKFZhMJnr37k14eLjNsYiIiIjtbHrSxc3NjRYtWtCiRQuuXr3K+vXr+e6771i5ciUlS5akbdu2tG3bFm9vb3vHKyIiIpIkylckWT7/HH74wfy6dWsoVsyx8aQmJydYtAju3DEXmlq1gt9+g5o1HR2ZiEiGYc8848qVK4waNYp9+/ZRqlQpq3lff/01bm5ujB07FhcXF0qXLs3Zs2eZP38+7dq1Izw8nEWLFvHWW2/RqFEjAKZOnUrDhg356aefeP7551Ol/SIiIhI/m550eZSPjw/dunXjtddeo2bNmpw5c4YpU6bQqFEj3nvvPe7du2ePOEVERERspnxFErRtG/TubX7dsCFUruzYeNKCiwssXw4BAXDvHjz3nPkpHxERSbaU5hlHjx4ld+7crF+/nipVqljN27t3L/7+/rg8Mr5YnTp1OHPmDDdu3OD48ePcv3+fOnXqWOZ7enri6+vLnj177NtQERERSZIUjQq6e/du1q1bxw8//MCDBw+oU6eOJbHYsmUL77//PpcvX2b+/Pn2ildEREQkWZSvSIKCg6FNG4iIgGrVoEkTR0eUdtzdYe1ac5v37YNmzWD7dihSxNGRiYhkGPbIMwICAggICIhz3uXLlylbtqzVNB8fHwAuXrzI5cuXAShUqFCsZS5dupSSpomIiIiNbCq6TJ06lQ0bNnDp0iUKFSrEK6+8Qtu2bSlcuLBlmRYtWvDXX3+xdOlSuwUrIiIiklT2zlfWrl3LvHnzOHfuHMWLF2fgwIE899xzQOID3Eo6dfeuuWut69fNBZdXXoGbNx0dlf3kzAnR0ebuxOKTKxd89x00aAAnTpgLL7//DnnzWi+X2HpERLKYtLou8vDhQ9zc3KymZcuWDYCwsDBCQ0MB4lzm9u3bNm/XMAwePHgQ7/yY7cZ8twcXwyAiIiLR5RJaJjqRuG2RGm1Nz7JSe9XWzEltzbwc3V7DMDCZTEla1qaiy+LFi3nmmWf44IMPqFevXrwb8/PzY8iQIbZsQkRERCRF7JmvrFu3jnfeeYcRI0bQuHFjNm7cyLBhwyhYsCAlS5akR48ePPPMM4wbN46DBw8ybtw4vLy8aNeuXSq0TOzCMKBHDzhyBAoWhPXr4dtvHR2Vfbm7mwslq1aZC0sJ6d4dPvkEjh0Df394/XX496Ie+fKBfpdFRKyk1XURd3d3wsPDraaFhYUBkD17dtzd3QEIDw+3vI5ZxsPDw+btRkREEBQUlOhywcHBNm/jceVLl+b6tWsJLmMYRoLLREREcPzUKbvF9Ch7tjUjyErtVVszJ7U183Jkex+/ySE+NhVdfv/9d3Lnzs21a9csicXt27e5dOkS5cuXtyz3zDPP2LJ6SYKboTe58eAG3tk1+K+IiEhc7JWvGIbBtGnT6N69O927dwdgwIAB7N+/n927d7N79+4EB7iVdOqTT8zFCFdXWL0aihZ1dESp5/p1SEoXM506weLFcPo0zJgBL78Mzs6pH5+ISAaUVtdFChYsyNWrV62mxfxcoEABIiMjLdOKFy9utcyjcSSXq6srZcqUiXd+aGgowcHBlCxZMkXFnUe5GAb58udPcBmTyZTgMq6urlSoUMEu8cRIjbamZ1mpvWpr5qS2Zl6Obu/JkyeTvKxNRRcnJyd69OjBpUuX+P777wE4dOgQffr0ISAggMmTJ2eJA+0IJ26cYNs/2zh35xyz986mZdmWvFXvLeoVq+fo0ERERNIVe+Urp0+f5sKFC7Rq1cpq+sKFCwHo3bt3nAPczp07lxs3buDtrRsk0p2ffoJ33jG/nj4d6tZ1bDzphY+PufCydCmcPAnr1pnHuxERkVjS6rqIv78/y5cvJyoqCud/C+E7duygVKlSeHt7kytXLnLmzMmuXbssRZc7d+5w7NgxunTpYvN2TSYT2bNnT3Q5Dw+PJC2XFJEPHuDq6procgkt45TEuG1hz7ZmBFmpvWpr5qS2Zl6Oam9SuxYDG4sun376KX///TejR4+2TKtTpw6zZs1i7NixTJ8+nREjRtiyaknA/kv72XBiAwAmTERGR7L2+Fo2/b2JjR030rR0UwdHKCIikn7YK1+JeXT5wYMH9OrVi2PHjlG0aFH69etHQEBAogPc2lJ0SawfdXB8f7apLbXaZzp7FveOHTFFRxPZrRvhXbtiCg3Fw8ODiMhISEJf8vGKjMQVkrSemP7o4+yXPhnrsVc8FgULYmrXDueVKzH9+SdR7u5Ed+uGK+ZjYRhGklaj38+MTe3L2DJr+5LTj3paSKvrIu3atWPBggWMGjWKV199lcOHD/P5558zbtw4wNzNSZcuXZg0aRJ58+alSJEifPrppxQsWJCmTXWNQERExBFsKrr8+uuvjBgxgmbNmlmmubm5ERAQwJ07d/jss89UdLGza/ev8d3J7wCoXqg6jUs0pm2Ftry/9X1+PPUjL654kW86fEOtIrUAyOaSjZxuOR0ZsoiIiEPZK1+5d+8eACNGjGDgwIG8+eab/PDDD/Tv35/FixcnOsCtLZLajzpk/v577dk+08OHlO/VC9ONG9z39eWvvn0xjh/Hw8MDX19fboWEEJFIX/IJ8bh7lzzAvbt3CU3iem7dumWX9dgrHgA8PfFo1Ig8v/2G8549PMydG9eBAzlz5kyyL+Lq9zNjU/sytszYvqT2o54W0uq6iLe3NwsWLGD8+PG0adOG/PnzM3z4cNo88iTi4MGDiYyM5N133+Xhw4f4+/uzcOHCdLW/REREshKbii7379/H09Mzznne3t6EhISkKCixFhkdyaqgVURGR1I6T2laPtkSk8lE6byl8S/sz6mbpzgVcop2X7ejv39/crrlZFCtQSq6iIhIlmavfCWmC4tevXpZLnBUqFCBY8eOsXjx4kQHuLVFYv2og+P7s01tdm+fYeDWpw8uf/2FkS8fTqtXU75YMeC/x8S98uSBlNwZnisXADlz5SJnIn3SR0REcOvWLby8vGJ3k5KM9dgrnljy5yfK2Rnnn38mx88/w/z5lOrSJVlPuuj3M+NS+zK2zNq+5PSjnhZS67rIxIkTY02rXLkyK1asiPc9zs7OvPXWW7z11ls2bTMriQwLg6iohBdydsbl3xtoREREbGFT0aVixYqsWrWKRo0axZq3evVqypUrl+LA5D97Luzhyv0rZHfNzovlX7R6pNrFyYX/Vfwfiw4s4sr9K/xw6gfaVdCgvSIiIvbKVwoWLAgQqwuxMmXKsHnzZooUKZLgALe2SGo/6pD5+++1W/tmzYKvvgInJ0wrVuARx/F3dXGBJPQlH69/x/VJznpcXV1jF11sWI+94rFSvz48fAjbtsFrr+Hh7Q1t2yZrFfr9zNjUvowts7UvPXUtBroukmFFRXFs8eIEF/Ht0SONghERkczKpqJLv3796N27N23btqVp06Z4e3tz8+ZNfvnlF44ePcqcOXPsHWeWFRUdxe6LuwEIKBUQ59Mrbs5utC7XmgX7F3Dk6hEq+1RO6zBFRETSHXvlK76+vuTIkYNDhw5Rs2ZNy/QTJ05QvHhxqlevnuAAt5IObN8Or79ufv3JJxAQ4Nh4MpKYfbVtG3TsCN9/D02aODYmEZF0QNdFREREJD42FV3q16/P7NmzmT59OtOnT7cMaFehQgVmzZrFU089ZbcAd+3aRbdu3eKcV7RoUX755RfefvttVq9ebTWvQIECbN261W5xOMoPp37g1sNbeLh4JFhMKZyrMLWL1mbn+Z18+/e3fPzMx2kYpYiISPpjr3zF3d2dV199lZkzZ1KgQAEqV67Mt99+yx9//MGSJUsoU6ZMggPcioNdvw7/+x9ERpq/Dxvm6IgyFpMJOnUCHx9YvRpeeAE2b4bq1R0dmYiIQ6XldRERERHJWGwqugA0atSIRo0aERYWxq1bt8iVK1eqPLpcrVo1tm3bZjXtxIkT9OnTh9deew2Av/76i9dee40uXbpYlom50zSjm7d/HgDVC1XH1TnhbiGalGzCsWvHuB12m0UHFzG60ei0CFFERCTdsle+0r9/fzw8PJg6dSpXrlyhdOnSzJgxg9q1awMkOsCtOEh0NHTtChcuQNmysGCBuYggyePkBF9+CS1awG+/wbPPwh9/wJNPOjoyERGHSqvrIiIiIpKx2Fx0Abh9+zahoaFER0dz69Ytbt26ZZlXuHDhlMYGgJubG/kfGfgzIiKCCRMm0KxZMzp06EBUVBQnT56kf//+VstlBoevHGbbP9swYcK/sH+iy7s5u9G4ZGPW/7WeabumMaTOEDyzxT2wn4iISFZhr3ylR48e9Iinj+/EBrgVB/n4Y3N3WO7usHKlZWB5sYG7O6xda+5abP9+aNbMXHixU84vIpJRpcV1EREREclYbCq6BAcHM3LkSA4dOhTvMkFBQTYHlZAvv/ySS5cusWjRIkssYWFhlC5dOlW250iLD5gHd6uQrwK53XMn6T1VClThj3/+4EboDabumMqYxmNSM0QREZF0y5H5iqQDW7bAu++aXwcGQmWNeZdinp7w3XdQvz6cPAnNm8PWrZAnj6MjExFJc8ozREREJD42FV0++OADgoODGThwIAULFsTJycneccUpLCyMOXPm0L17d3x8fABzV2Mmk4nPP/+crVu34uTkRKNGjRgyZAi5bLyb0TAMQkNDASzf05phGKwOMo9TU8G7AhEREXEsRJzTnyr2FGtOrGHyjsn08utFXo+8Sd6uo9vtKGp31ml3VmwzqN1Zqd2p1eaYfsozEkflK5IOXLliHvQ9Ohq6dYOePR0dUebh4wM//mguvBw5Aq1amX9WdzoiksUozxAREZH42FR02bt3L+PHj6dly5b2jidB69atIywsjK5du1qm/f333zg5OVGkSBHmzJnD2bNn+fjjjzlx4gSff/65TYlPREQEwcHBAJbvae347eP8c+cf3F3c8Yz05Nq1a7GWiYqOinO6t+FNBe8KBN0IYvyP43m17KvJ3r6j2u1oanfWkRXbDGp3VpIabXZzc7P7OlOTo/IVcbCoKOjSBS5dAl9fmDVL47jYW6lS8MMP8NRT5i7G/vc/WLMGXBMef1BEJDNRniEiIiLxsanokjNnTnLnTlp3V/a0du1amjVrRp5HujAYNGgQr7zyCp6e5rFLypYtS/78+XnppZf4888/qVKlSrK34+rqSpEiRQgODqZkyZJ4eHjYrQ1J9c22bwAIKBlAIZ9CcS7j7OQc7zg2g8sOpt+mfnxz7hs+bPEhHq5Ja0NoaKhD2+0oanfWaXdWbDOo3Vmp3anV5pMnT9ptXWnFUfmKONj48fDzz+YnL1auhBw5HB1R5uTnBxs3wjPPwLffQq9esGQJ/HvDk8lkwsPDI8M9ISciklTKM0RERCQ+NhVdXnjhBb788ksaNGiQZh+kbt68yYEDB+jbt6/VdJPJZCm4xChbtiwAly9ftqnoEvMhEcDDw4PsDuguYeOpjQA8/+TzXH1wNe6FTOYCUVzaVGjDx9s/JvhWMCtOrKC/f/9kbd9R7XY0tTvryIptBrU7K7F3mzPihVNH5CviYL/8AmPHml/Pnm1+0kVSLmdOc1dtjz9BXr8+fPMNvPACLFsG+fLB5Mnwby7tG9f+j2s9IiIZkPIMERERiY9NRRcPDw/27dtH06ZN8fPzw93d3Wq+yWTio48+skuAMfbv34/JZKJWrVpW09944w1u3brFwoULLdP+/PNPAMqUKWPXGNLKyZsnOXL1CM4mZ5qVbsYXf36R7HW4OLnwRt03GPTdICbvmEyfGn1wcbLpcIuIiGRIjshXxAFiLuJfugSdOoFhmJ+66NbN0ZFlHu7u5n28ahVcvx57fteu5qdcpk6FM2fg2WeJiIzkVkgIXnny4Orybw5arBg8+6x9YlLxRkQcTHmGiIiIxMemq/Br1qwhV65cREdHc+jQoVjzU+Muj+PHj1OsWLFYXaW0bNmSfv36MXv2bJ5//nnOnDnD+++/T8uWLSldurTd40gLa4+vBaBxycbk8ciT8MIJ6FmtJ2M3j+V0yGlWHVvFS5VeslOEIiIi6Z8j8hVxACcn+PpreO89uHoVihSBKlVg7tykr6NMGXj66dSLMbO4ft1c3HpciRLQrBn8+COsXWseV8fPj4hr1yA09L+xXvLlS7h4k1T58kG7dra/X0TEDpRniIiISHxsKrr8+uuv9o4jUdevX8fLyyvW9CZNmjBt2jTmzJnDnDlzyJUrF61atWLIkCFpHqO9/HjqRwBalW2VovVkd83OoFqDGLtlLB//8TH/q/g/JX4iIpJlOCJfEQf5/HM4cQLc3ODFF+HGjeS9P1++VAkrS6lbF+7fhz/+gI0bMbm5Qd68cS8bX/FGRCQDUZ4hIiIi8UlRf1PR0dGcOHGCq1evUr16dSIjI+MsjNjD2Jj+uePQvHlzmjdvnirbTWthkWFs+2cbAM888UyK1zew1kA+2f4JBy4f4Jczv9hlnSIiIhlJWuYr4gA//wzffWd+3bKlCiiO9PTT5sLLwYM4r12L6/PPQ/78jo5KRCRVKc8QERGRx9ncEfK6deto3LgxL774In379uXs2bOMHDmSQYMGER4ebs8Ys5Sd53cSGhmKTw4ffPOnfPBX7+ze9KrWC4CP//g4xesTERHJSJSvZHJXrkCXLuZxXKpXBz8/R0eUtZlM0KoVlCuHKSqKvD/9BHfuODoqEZFUozxDRERE4mJT0WXTpk2MGDGCOnXqMHXqVAzDAKBZs2Zs3bqVWbNm2TXIrOTXM+ZHlANKBditK7BhdYfhbHLm59M/s//SfrusU0REJL1TvpLJRUdDt27mwkvhwvYboF1SxskJ2rbFyJ8f59BQnL/5BiIiHB2ViIjdKc8QERGR+NhUdJkzZw4vv/wyn3zyCc2aNbNMb9u2LQMHDuTbb7+1W4BZza/B5qLL06XsN5hrSa+SvFTpJQCm7pxqt/WKiIikZ8pXMrlPPjEP3O7hAa+++t9g7eJ4bm5EduhAlLs7Tpcvw/r15qeRREQyEeUZIiIiEh+bii5nzpyhadOmcc6rUqUKV65cSVFQWdX98PvsPL8TMD/pkhImk4kbD25YvnpU7QHA8iPLOXbtmNW8R78iTLoTUUREMgflK5nY9u3w7rvm1zNmmJ90kfTFy4uQZ57BcHKCI0fgjz8cHZGIiF0pzxAREZH4uNjyJm9vb06dOkX9+vVjzTt16hTe3t4pDiwr2vbPNiKjIymRuwSlvEqlaF3hUeHM2TvHalrx3MX55/Y/zNk7h7weeeN8X/+a/VO0XRERkfRC+UomdfMmdOwIUVHm7z17wrx5jo5K4hBeqBDRzZrh/P338MsvULs2tGvn6LBEROxCeYaIiIjEx6YnXVq0aMH06dP5/vvvLYPDmUwmjhw5wqxZs3hWfWrbJDXGc3lUnaJ1APji8BeER2lQPxERydyUr2RChgG9esE//0CZMjBnjnnwdkm3oqtXhxo1zD9Mn24+diIimYDyDBEREYmPTU+6DBkyhBMnTjBkyBCcnMx1m65du/LgwQNq1qzJ66+/btcgs4rf//kdgMYlG6fK+st5lyOPex5CHoZw6Moh/Av7p8p2RERE0gPlK5lQYCCsXQtubrBiBXh6OjoiSYpnn4VLl+DiRXjpJejSxdERiYikmPIMERERiY9NRRc3NzcWLFjAH3/8wY4dO7h9+za5cuWiVq1aNGrUKFWe0sjswiLD2H9pPwB1i9ZNlW04mZyoXaQ235/6nl3nd1GzUE0dKxERybSUr2Qy+/fDm2+aX3/6KVSv7th4JOlcXKB9e1i4EHbuhBw5oEEDR0clIpIiyjMyt8gHDyyvXQyD8qVL42IY5unOzrhky+bA6EREJL2zqegSo379+nH2XyrJd+jKIcKiwvD28KZM3jKptp2qBauy/fx2boTe4O+bf1PWu2yqbUtERCQ9UL6SCdy9a35CIjwcXngBBg1ydESSXHnywIAB8Mkn5vFdvL2hQgVHRyUikmLKMzIfwzAIWrLE8nNERATXr10jX/78uLq64tujh+OCExGRDMGmoktgYGCiywwcONCWVWdZO87tAMzjrqTmHTHZXLLR2a8zs/fOZuf5nSq6iIhIpqV8JZMwDOjXD06ehGLFYNEijeOSUdWqBW+8AZMnw7p1ULCguRgjIpIBKc9IX6IiIrj111/sGj2ahyEhmEwmvP38KFCrFgXqpO51FhERkcfZveiSM2dOfHx8lFwk084LO4H/BrtPTT2r9WTO3jmcuXWGy/cuUzBnwVTfpoiISFpTvpI5OC9bBl9+Cc7O8H//B3nzOjokSYkJE2DNGjh9Glatgp494d+xEEREMhLlGemDER3Ntf37uX7oENFhYVbzLu/YwdF588hbsSKVBw2icMOGDopSRESyGpuKLsePH4817cGDB+zbt4+xY8fy3nvvpTiwrGbneXPRJbXGc3lUUc+i+Ob35ei1o+w8v5MXy7+Y6tsUERFJa8pXMj73M2dwe+MN8w8ffADqviXjc3WFV1+FcePgwgXYuhUaN3Z0VCIiyaY8w/GiwsI499NP3PvnHwDccuembMeO5CpRgqiHD7l28CDnfvyRm0ePsvm11yjdrh1VhgxxbNAiIpIl2O22suzZs9OwYUMGDBjAJ598Yq/VZgmX710m+FYwJkz4F/FPk23GPFFz5OoR7oXfS5NtioiIOJrylQwkNJQnRo7E9OABNG0KI0Y4OiKxl7x54fnnza+3boXz5x0bj4iInSjPSDuRDx9yevVq7v3zDyYXF4oEBPBkx4749upFqdatKfO//1H3o49o/eOPlOvaFUwmTq1axa89exJ+966jwxcRkUzO7s/yFypUiFOnTtl7tZlazFMuFX0q4pnNM022WdSzKEU9ixJlRLHnwp402aaIiEh6oXwl/XMdMQKPU6cwfHxg2TJ1QZXZ+PmZvwwDVq+Gx7qEERHJyJRnpK7oqCj++f57wkJCcMmRgydefJE85ctjiiNXcM+blxojRxIwfz7Z8uTh1t9/c2btWsLv3HFA5CIiklXY7dOrYRhcvHiR+fPnU6RIEXutNktIy67FHhWzvb2X9hIRFZGm2xYREXGElOYrZ86coVq1aqxevdoyLSgoiC5dulC1alUaN27MwoUL7Rly1vT117guXIhhMhG2cCEUKODoiCQ1tGgBuXNDSAj88IOjoxERSTFdF0l9hmFwaetWHly8iJOrKyVbtcLDxyfR9xWsW5dnv/6anMWLE3H3LqfXrCHs9u00iFhERLIim8Z0KV++PCaTKc55hmHoMdpk2nF+B/Bfl19ppXy+8uTOlpvbYbc5fPUwNQrVSNPti4iIpCZ75ysRERG8+eabPHjwwDItJCSEHj168MwzzzBu3DgOHjzIuHHj8PLyol27dimKP8s6dQp69wbg8iuvkDsgwMEBSapxd4cXX4TPP4cDB+DJJ6FCBUdHJSKSJLou4hjnfvyRkKAgMJko1qwZ7nnzJvm9OQoXpsncufzYsSNht25xdsMGnmjbFpfs2VMxYhERyYpsKroMGDAgzuQiZ86cNG7cmJIlS6Y0riwjMjrS0r1XWhddnExO1C5amx9P/cjO8zupXrB6mm5fREQkNdk7X5kxYwY5cuSwmvb111/j5ubG2LFjcXFxoXTp0pw9e5b58+er6GKL0FBo3x7u3CGqbl0u9u1LbkfHJKmrZEmoXx/++AM2boTixeGxvzMRkfRI10XSXmRoKAcmTwbAp2ZNcpUokex1eOTLR8kXX+T06tWE37nD2U2bKPXCCzi5uto7XBERycJsKroMGjTI3nFkWX9e+ZPQyFByZ8tN+Xzl03z71QtWZ3PwZq4/uM6pEPU5KyIimYc985U9e/awYsUK1q5dS+PGjS3T9+7di7+/Py4u/6VUderUYe7cudy4cQNvb2+7xZAlvP46HDwI+fMTvnQpqNuPrKFJE/j7b7h6Fb77zlx4ExFJ53RdJO1d+uMPwm/dIlvevOSrbvtNo67Zs1Py+ec5vXo1oVevcv7XXynWrFm8Ty6JiIgkl01Fl4sXLyZr+cKFC9uymSwhpmux2kVr42RK+wFis7lko1rBauy6sMsytoyIiEhmYK985c6dOwwfPpx3332XQoUKWc27fPkyzmWPwwAAwn5JREFUZcuWtZrm82+/4hcvXrS56GIYhlU3ZnEJDQ21+p7ROX/5JdnmzzeP47JoEQ/y5IHbtxNsn8lkwsPDg4jISIhIwfh0kZG4QpquJ+Lf+RFxLeeAeOy9njjbl9B6nn8elyVLMB09SmTZshgJdTP273pCQ0MxDCNZTbGXzPb39zi1L2PLrO0zDCNdXRTXdZG0de/CBW6fOAFOThRp0gQnZ+cUrS9bnjwUb9GCM+vWcefUKW4cPky+KlXsFK2IiGR1NhVdAgICkpXsBAUF2bKZLCGm0FHZpzI3HtyINT/KiEr1GGoXqc3uC7s5FXKKoOtB5CRnqm9TREQktdkrXxk7dixVq1alVatWseY9fPgQNzc3q2nZsmUDICwsLBnRWouIiEhy/hQcHGzzdtIL95MnqfDvHcOX+vThUqFC8G+7Emqfh4cHvr6+3AoJIeLaNZu373H3LnmAe3fvEprG67l161a6isfe63m0fQmux8WFXFWrkuvAAUzffcf1HDmI9vCIc52uHh7kB86cOePwi8qZ4e8vIWpfxpYZ2/f4OdeRdF0k7RiGwZUd5htWS7drh0f+/HZZb45ChShUrx6Xtm3j8o4dePj4kOOxG2xERERsYVPR5bPPPmPMmDFUrFiR1q1bU6BAAUJCQvj111/57rvv6NevH0WKFLFbkBcuXCAgjkFUP/zwQzp06EBQUBDjx4/nyJEjeHl50bVrV3r16mW37aemmKLLpXuXmLF7Rqz5r9V8LdVjyOORh/L5yhN0PYh5++YxrOSwVN+miIhIarNHvrJ27Vr27t3Lhg0b4pzv7u5OeHi41bSYYkv2FAzK6urqSpkyZRJcJjQ0lODgYEqWLIlHPBenM4S7d3Hv1AmnsDCinn4ar0mT8HJySlL7Yi52eeXJYx4Pxla5cgGQM1cucqbkQk4y1hMREcGtW7fw8vLC9fF+5B0Qj73XE2f7EltPs2YY58/jfO0aPvv2EdWmTdwrz5MHgFKlSjn0SZdM8fcXD7UvY8us7Tt58qSjQ7CS1tdFsrI7p08TevUqTi4u+PbsyZl48jJb5PXz48Hly9w+eZJzP/5ImQ4d7LZuERHJumwquqxdu5aAgAAmTJhgNb1FixZ4e3uzf/9+Bg4caJcAAf766y+yZcvGzz//bHUnSa5cuQgJCaFHjx4888wzjBs3joMHDzJu3Di8vLzS/QC21x9c5++bfwNQJJdjk7G6ResSdD2IVUGreKXQKw6NRURExB7ska+sWrWKGzduWI3jAjBmzBgWLlxI4cKFuXr1qtW8mJ8LFChgc+wmkynJRRsPD48UFXgcyjCgRw84cQKKFsX5//6P7Dmtn7hNSvtcXVwgJQPg/jsmjyPW4+rqGrvo4sB47L0eq/Ylth5XV3jxRViwAKegIJwqVQJf33jjSQ8XkzP0318SqH0ZW2ZrX3rqWgzS/rpIVmVER3Nl1y4AvKtWxd3O4+WZTCYKN2nCwxs3CAsJ4dxPP1GxTx+7bkNERLIemwYR2blzJy1btoxz3lNPPcW+fftSFNTjTpw4QalSpfDx8SF//vyWL3d3d77++mvc3NwYO3YspUuXpl27drzyyivMnz/frjGkhl3nzYlDmbxl8HB17IfGop5FKZKrCGFRYXxz9huHxiIiImIP9shXJk2axKZNm1i7dq3lC2Dw4MHMmzcPf39/9u3bR1TUf92B7tixg1KlStk8nkuWMnMmfP21+SL611+DnboLkQyscGFo0MD8+ttv4f59x8YjIhKPtL4uklXdOnGC8Fu3cHZ3T7UxV5xdXSnWvDlOLi7cv3CBo/Pmpcp2REQk67Cp6JInTx4OHjwY57w//vgjRXd2xuWvv/6Kt4uNvXv34u/vj4vLfw/t1KlThzNnznDjRuwxUtKTmK7F/Av7OzgS890ddYrWAeCb4G94GPnQwRGJiIikjD3ylQIFClCiRAmrLwBvb2+KFClCu3btuHfvHqNGjeLkyZOsXr2azz//nL59+9qzKZnT7t0w7N8uTT/9FOrWdWw8kn40agQ+PvDgAXz3naOjERGJU1pfF8mKDMPg+r/7OF/Vqjj/O25eanDPm5fCTZoAcPzzz7l3/nyqbUtERDI/m7oXa9++PbNnzyY0NJSAgADy5s3L9evX2bRpE8uXL2f06NF2DfLEiRPkz5+fTp06ERwcTIkSJejfvz8NGzbk8uXLlC1b1mp5Hx8fAC5evGjTXaaGYVgG5UzNwTm3nd0GQPWC1Ql5EBJPMOY+sdNiXpncZSicqzAX717ky0Nf0qtGxhgXxx7S4ninR1mx3VmxzaB2Z6V2p1abDcNId916JCYt8hVvb28WLFjA+PHjadOmDfnz52f48OG0iW8sCjG7ehXatYOICPP31193dESSnjg7m7sZmz8fjh41dzEWVzdjIiIOlNbXRbKie2fPEnbzJk6uruStWDHVt+f15JPcv3CBkGPHOP/zz5R56SVc0kFXliIikvHYVHTp378/d+/eZcmSJSxcuBAwX4zx8PBg2LBhvPzyy3YLMDw8nODgYDw8PBg+fDjZs2dn/fr19O7dm8WLF/Pw4UPc3Nys3pPt37sfYgayTa6IiAiCg4MBLN/tLcqIYs/FPQBUzFORNWfXxL1cdBTXrl1Ls3ndK3Znws4JfLb7M+p41MHJZNPDUBlWah3v9C4rtjsrthnU7qwkNdr8+Pk2vUutfOWvv/6y+rly5cqsWLEixfFmGRER8L//wfnzUL48LFoEGaygJ2mgUCFzN2O//27uZqxECciRw9FRiYhYpOV1kazq2oEDAOStWDFVn3J5VKH69Yl88IC7wcFc+O03ij/3XJpsV0REMhebii4mk4mRI0fSv39/Dh48yO3bt8mTJw9Vq1Yl52ODn6aUm5sbe/bswcXFxXKxp1KlSpw6dYqFCxfi7u5OeHi41Xtiii22Dhro6upKkSJFCA4OpmTJknYZpDPCFEFY1H9FoKDrQdyPvE921+xUKVqFbRe2xfk+Zydn8sfTv3lqzOtetTvT907n9L3TnHE9Q8sn4+6jNrMJDQ216/HOKLJiu7Nim0HtzkrtTq02nzx50m7rSitpma9IMgwfDlu2QK5csGYNeHo6OiJJrxo1gr/+Mj8ZtWkTdOjg6IhERCyUZ6SuB5cv8+DSJUxOTnhXrpxm23VydaXOhx/yc7du3A0O5uaRI3iWL59m2xcRkczBpqJLjJw5c1q68qpatSqRkZF2CepxcRVPypYty7Zt2yhYsCBXr161mhfzs619qJpMJsuFKg8PD5uLN4+68eAGs/bOsvy875J5UD2fHD44OTnh6uoaTzCk6TwvDy86lOjAklNLmLJnCh0qd8hw3cmkhL2Od0aTFdudFdsMandWYu82Z+RzQVrlK5IEX30Fn31mfr10qflJl3jE5GMZ+XdPUiimm7EFC+DYMXNXY2nQvYyISHIoz0gdNw4fBiB32bK4pnERy6tsWQrUrcvlP/7g8vbtuMVz06qIiEh8bO47at26dTRu3Jg2bdrw2muvcfbsWUaOHMmgQYNiPXmSEsePH6datWrs3bvXavqRI0coU6YM/v7+7Nu3j6ioKMu8HTt2UKpUKZvGc0kr5++YB2UrmquogyOJreMTHXF3cWfXhV1sDt7s6HBERERsllb5SpYSHW3b+w4ehFdfNb8eNQpat05wcQ8PD3x9fbPMU2oSj0KFoGFD8+tvv4V79xwbj4jII5RnpI6IBw+4c/o0AN5+fg6JwbtyZXKVKIERFcWlX3/FUDFNRESSwaYnXTZt2sSIESNo3bo1TZo0YejQoQA0a9aMcePGMWvWLIYMGWKXAMuWLcuTTz7JuHHjGDNmDHny5OHrr7/m4MGDfPPNN+TLl48FCxYwatQoXn31VQ4fPsznn3/OuHHj7LL91HLhzgUAinqmv6KLdzZvulXqxryD8/ho20c0KdXE0SGJiIgkW1rmK1mKkxOsWgXXryf9Pffvw4QJEBpqHhD9qacSXU9EZCS3QkLwypMHV5d4UtYyZeDpp21ohGQoDRvC8eNw5Yq58PL6646OSEQkzfOMCxcuEBAQEGv6hx9+SIcOHQgKCmL8+PEcOXIELy8vunbtSq9evey2/bQUcuwYRnQ0HgUK4OGgp0xMJhNFAgI4uWIF4bducf/IEfIXKuSQWEREJOOxqegyZ84cXn75ZcaOHWv1hEnbtm25ceMGX3/9td2SCycnJ+bMmcOkSZMYMmQId+7cwdfXl8WLF1OuXDkAFixYwPjx42nTpg358+dn+PDhtGnTxi7bTw0PIx9y7YF5IPv0WHQBGFJrCIsOL+Ln0z+z/dx26hWr5+iQREREkiUt85Us5/p1+H/27js8imr/4/hnN70TCKE3QQKBBEJXOgIq7SfFgoA0FQTbtaFyFb2KyFVRqijddkEFEbGCiILSq0iTQOg1JCEhPZnfH0tWAglpm+xm8349zzzZzMye+Z6ZJHMy3z3nnD6dv30zMy3Dil24IAUGSr16SfHxeZeTlqa08+ctiZrchkwNCip47Ch9soYZmzPHkny5pgc8ANhDSbczDhw4IA8PD61evTrb0Jt+fn6KiYnR8OHD1bVrV7366qvauXOnXn31VZUrV079+/e3WQwlwcjI0MW//pJkv14uWVy9vFT9ttsU9c03SomKUvyRIypfv75dYwIAlA6FGl7syJEj6tatW47bmjRporNnzxYpqGuVL19eb7zxhtavX6/du3dr8eLFatGihXV7eHi4lixZoj///FNr1qzR4MGDbXp8W8vq5RLoGSgfdx87R5OzWgG1NKzJMEnShLUT7BsMAACFUNLtFeTil1+kyEjJ1VW65x6J4cJQGJUrW3pISdLixdKZM/aNB0CZV9LtjIMHD6pOnToKDg5WxYoVrYunp6c+//xzubu765VXXlHdunXVv39/DRs2THPmzLFpDCXhUlSU0i9flouXl/zr1rV3OPKtUUOB4eGSpDPr1ik164MjAADcQKGSLhUqVFBkZGSO2yIjIx16LhVHYJ3PxUF7uWQZ32G8XM2uWn14tdYfW2/vcAAAKBDaKw5g3z5p/ZU2RJ8+lgfnQGG1a2f5Gbp8WRo9WjIMe0cEoAwr6XbGgQMHVK9evRy3bd26VS1btpTrVcNxtmnTRkeOHFF0dLRN4yhuMXv3SpLKN2wos4uLnaOxqNiihVzKlVNmSopO/PyzMq/q2QQAQE4KNbxYjx49NG3aNAUHB6tjx46SLONd7tmzR7NmzVKvXr1sGqSzKS1Jl9rlamtE0xH6cPuHevmXl/XzAz9n68YMAIAjo71iZ+fPS8uXW163bi3ZeYgQOIGrhxn7+mvp008lB+/hDsB5lXQ74+DBg6pYsaLuv/9+RUVFqVatWhozZozat2+vM2fOqP41w14FBwdLkk6dOlWoBJBhGEpMTMx1e1JSUravtpB65owSjh+XJPnefLPS0tJy3C+39ZKUmUfcroZxw/fndIyMzEz5tWihuLVrlXjqlPYtWKCbH3wwzzJKq+K4to6Kujon6uq87F1fwzDy/Wy8UEmXJ598UgcPHtSTTz4ps9nSWWbIkCFKTExUixYt9ASTW+bKMAydiC8dSRfJ0ttl4a6F+iXqF/0Y+aPuqHeHvUMCACBfaK/YUXKytGSJlJoq1aol5TL8ClBglSpJPXtKK1ZIjz0mde4sVatm76gAlEEl2c5ITU1VVFSUvLy89Nxzz8nb21srVqzQQw89pAULFig5OVnu7u7Z3uPh4SFJSklJKdQx09LStG/fvjz3i4qKKlT5OTGtWydJcg0K0qWUFMsHOK5hGIYu5LA+S1pamvbn0gNJkhrUrXvD9+d2DBdfX/mEhyth+3btnTtX8cHB8rr55hzfX692bbneoJdOekaGDtnwvBUXW15bR0ddnRN1dV72rO+199vcFCrp4u7urrlz5+r333/Xxo0bFRsbKz8/P7Vq1UodO3akN8QNRCdFKzk9Wa5mV1XyqWTvcPJUM6CmHmv1mN7Z8I6eXfWsut3UTS5mx+jiCwDAjdBesRPDsPRwiY6W/P2lu++29FAAbOX226VTp6StW6UHHpB++omfMQAlriTbGe7u7tqyZYtcXV2tD3saN26syMhIzZs3T56enkpNTc32nqxki7e3d6GO6ebmlutwZpLlU8ZRUVGqXbu2vGwwX5uRmanVL7wgSQpq3FgBFSvmuJ/JZFJQLtskS9wNGzbMdburYdzw/TkdIz0tTbGxsQoOC5MpLk7xkZE6P3euOn/6qdz9/HI8xp83mE8n7KGHbhijvdn62joy6uqcqKvzsnd9Dx06lO99C5V0GT16tB544AG1bdtWbdu2LUwRZVbW0GJVfauWmuTF+PbjNX/HfO05t0cf7fpIwyOG2zskAADyRHvFTn77TTpwwPIQ/J57JB8fe0cEZ+PiYhlaLCJCWrNGevttadw4e0cFoIwp6XZGTsmT+vXra/369apcubLOnTuXbVvW95UqFe7DniaTKV8JGy8vr0Indq52dvNmXT55UmY3N5W/+WaZ3dxy3dftBtvMecSdnph4w/ff6Bhu7u6q3rmzjiUl6fKpU9rz1ltq+9Zb1yXY8jpGXjE6Cltd29KAujon6uq87FXfgnygwlyYA2zZskUufJqsUErLfC5XC/QK1L87/FuS9O9f/q34lHg7RwQAQN5or9jBwYPS2rWW1z17MuwTik/9+tL06ZbX//63tGWLfeMBUOaUZDtj//79ioiI0NatW7Ot37Nnj+rVq6eWLVtq27ZtyrhqgvcNGzaoTp06hZrPxR4iv/pKkhSQR8LF3lzc3dXm9ddlcnHRse+/1+Gs+esAALhKoZIubdu21RdffFHosUHLMkdPuriYXRRUI0gJmQmKToy2Lvc1uk83lbtJp+JP6dVfX7V3mAAA5In2SgmLjpaWLbO8btHC0gsBKE7Dh1uGr0tPlwYOlOL5YBCAklOS7Yz69evr5ptv1quvvqqtW7cqMjJSkyZN0s6dOzV69Gj1799fCQkJGj9+vA4dOqRly5Zp0aJFGjVqVLHHZgup8fE6/tNPkqTABg3sHE3eKoSFKfyxxyRJ2yZO1KUyNpcCACBvhRpezMPDQ99//71WrVql6tWrX/fJCZPJpEWLFtkkQGeSkp6ic5ctXXwdNemSlpGmiasnqmLFitd1h33jtjd039L79N7G9zS0yVCFVQqzU5QAAOSN9koJSkmRliyxfK1RQ7rjDntHhLLAZJI++EDatEmKjJQee0xauNDeUQEoI0qynWE2mzV79my9/fbbevLJJ3Xp0iWFhoZqwYIFCgkJkSTNnTtXEydOVN++fVWxYkU999xz6tu3r02OX9yO/fCDMpKT5V+njrwKORxaSWs4YoTO/PGHzm7erN+feUbdP/tMLvmcXBkA4PwKlXQ5c+aMIq769KJhGNm2X/s9LE7Fn5IhQwEeAfLzuH6yNUfX9aau6tewn5btW6ZHvn1Evw3/TWZToTpLAQBQ7GivlBDDkFaskM6fl3x9LT0PGNYNJSUwUPrkE6lTJ2nRIqlLF+mBB+wdFYAyoKTbGeXLl9cbb7yR6/bw8HAtWbLEpscsKVlDi9Xu3VuZ6el2jiZ/zC4uuuXNN/V9v36K2bdP2954Q61eecXeYQEAHES+ky7ffPON2rdvr3Llyunjjz8uzpic1ol4xx5aLD/eu/09/XjoR/1+/HfN2DxDj7d+3N4hAQBgRXvFDn7/Xdq7VzKbpXvukfxK3wdLUMq1by+99JL06qvSqFFS48ZSs2b2jgqAE6KdYXtxhw4petcumVxcVLtHDx1escLeIeWbd6VKuuXNN7X2kUd06IsvVL5xY9UbMMDeYQEAHEC+uyk899xzOnbsWLZ1s2fP1oULF2welLPKms+lmn/pnVS2RkAN/bfbfyVJz69+XgejD9o5IgAA/kF7pYQdOiT9/LPl9Z13WoYWA+zhpZekHj2k5GSpb19LzysAsDHaGbaXNRF9tY4d5XnNEG2lQdX27a3zu2x9/XVd2L3bzhEBABxBvpMu13aNzcjI0NSpU3X27FmbB+WMDMOwJl1q+JfuBxKjW4xW15u6Kik9SUOXD1V6Zuno/gsAcH60V0pQTIy0dKnldUSE1Ly5feNB2ebiIn36qVSvnnTsmHTvvVIpGaIGQOlBO8O2MtPSdORKz5abSsn8Mzlp9NBDqt61qzLT0rTuySeVHB1t75AAAHZWpAk5GAs9/yJjIpWYligXk4sq+1a2dzhFYjaZNa/PPPl7+GvjiY16ac1L9g4JAIBc0V4pBikp0pIlll4F1apZehiYTPaOCmVduXLS8uWSj4/0yy/Sc8/ZOyIAZQDtjMI7tW6dkqOj5Vmhgqq2b2/vcArNZDbrlokT5X/TTUo6e1Z/vPCCjIwMe4cFALAjZkEvIRtPbJRkGVrM1ZzvqXQcVs2AmprTe44k6c3f39Q3B76xc0QAAKBEGIZl4vKzZy0Pt++5R3It/W0bOIlGjaRFiyyv331X+ugj+8YDAMjV4a++kiTV6dNHZjc3O0dTNG6+vuowbZpcfXx0YccOnVq3joQcAJRhJF1KyKaTmyRJNf1r2jkS27mn0T16vNXjkqQHlj+gbae2KTox+rolITXBzpECAACbee89acsWyWyW7r5b8ve3d0RAdv37Sy++aHn94IP/zDsEAHAYSefP6+Svv0qSbrrrLvsGYyP+deqo7X//K5PZrJi9e3Vhxw57hwQAsJMifyzRxFAS+ZLV06VmgPMkXSTpre5vafOpzdp4YqN6/6+3RkSMuK4nz2OtHpOvu6+dIgQAgPaKzaxZIz37rOV19+5SrVr2jQfIzWuvSYcOSZ9/LvXrJ61bJ4WH2zsqAE6KdkbBRa1cKSMjQxWaNFFAvXr2DsdmqnXqpKZPPaUdb7+tsxs3yt3f36nqBwDInwIlXcaOHSt3d/ds60aPHi23a7qBmkwmrV69uujROYnT8ad1JPaIJKlGQA07R2Nb7i7u+nzA54r4IEKnE07rh0M/qFf9XvYOCwBQhtFeKSZZk5NnZEitW0utWtk7IiB3ZrNlmLEzZ6TffrMkCdetk26+2d6RASjlaGcUnWEYily2TJJU10l6uVzt5nvv1bGfflL07t068fPPcvXxkU+VKtn2SU9MvHEhLi5y9fAoxigBAMUp30mXvn37FmccTm39sfWSpEo+leTp6mnnaArPZDIpOjH6uvXebt6a1XOW7v3yXm07vU3V/auraeWmJR8gAKDMK672SmxsrKZMmaK1a9cqISFBISEhevrpp9WiRQtJ0r59+zRx4kTt2bNH5cqV05AhQzRy5MhiicUukpIsvQUuXJAiIqRBg6To69sEgEPx9JSWL5c6d5Z27ZJuu82SeKGHFoBC4rmIbVzYsUOXDh+Wi5eXavXoYe9wikXlW29Vany84o8c0bHvv9dN/frJo1w5SZak076FC2/4/tDhw4s/SABAscl30mXSpEnFGYdTW3dsnaTSP7RYakaqZm+dneO20S1Gq1OtTlp7dK1WHlypYJ9gVfWrWsIRAgDKuuJqrzz11FOKjo7WlClTVL58eX322WcaOXKkli1bpvLly2v48OHq2rWrXn31Ve3cuVOvvvqqypUrp/79+xdLPCXKMKRHHpG2bZMqVJC++kr64Qd7RwXkT2Cg9NNPUocO0oEDUqdOlmHy6tSxd2QASiGei9jGoS+/lCTVuvNOufk651DkJrNZNbp21ZHly5V0/ryiVqxQnb595e7nZ+/QAAAlwGzvAMqCrJ4utQKc+1N1HWp1UEiFEGUYGVry1xJdTr1s75AAACiyo0eP6vfff9eECRPUokUL3XTTTRo/frwqVaqklStX6vPPP5e7u7teeeUV1a1bV/3799ewYcM0Z84ce4duG++/bxmmyWyWliyhlwBKn+BgafVqqV49KSpKat/ekoABAJS41Ph4HfvxR0lSXWf4cMoNmN3cVKtnT7mXK6e0hARFrVihtLyGFQMAOAWHT7rExsbq5ZdfVocOHdSsWTMNHDhQW7dutW5/4YUXFBISkm3p0KGDHSPOLiMzQ7vP7pZU+nu65MVkMumuBnepglcFXUq5pC/3fqlMI9PeYQEAUCSBgYH68MMP1bhxY+s6k8kkwzAUFxenrVu3qmXLlnJ1/acDcZs2bXTkyBFFl/YhuH7/XXriCcvrN9+0DM8ElEbVq1vmdgkNlU6elNq1kzZtsndUAFDmHP32W2UkJyugXj0FNWli73CKnau3t2r37i03Pz+lxsUpasUKpcTG2jssAEAxy/fwYvZyo+E86tatqwMHDmj06NEaPHiw9T0uLi52jDg7F7OLHm/9uFzNrvJ287Z3OMXO09VT9za6V3N3zFVUXJRWRa7SE62fsHdYAAAUmr+/vzp27Jht3ffff69jx46pXbt2evfdd1W/fv1s24ODgyVJp06dUoUKFQp8TMMwlJjHJyGTkpKyfbU10+nT8uzfX6b0dKX376/UMWNkSkqSl5eX0tLTpbS0wheeni436YblpF1Zn3aj4+SjHFvFY+tybli/UlyvLDnWz8bxJCUlyTCM/L8vIED67jt59O0rlx07ZHTurNSFC5XRq1eBQyju3z97o36lm7PWzzAMmUwme4eBIsoaWqxu//5l5nq6+/mpTp8+Orx8uVIuXtRvjz+uKm3bysXDw96hAQCKiUMnXbKG8/jf//6nZs2aSZLGjx+v3377TStXrtSjjz6qQ4cOacyYMapYsaKdo83dlNunKDoxWtM3T7d3KCWiok9F3dXgLn3+1+faeHKjvtj7hUa3GG3vsAAAsIlt27bpxRdf1G233aYuXbpo0qRJcnd3z7aPx5V/olNSUgp1jLS0NO3bty9f+0ZFRRXqGDdiSktT/VGjZDp7Vkl162r/E08oc/9+eXl5KTQ0VLExMUo7f77Q5XvFxytQUkJ8vJLyKCf2Bp8GLUg5torH1uXkVD9nqFeWq+tnq3jcvLxUUdKRI0cK9VDZPHWqbnrhBQX8/rs87r1Xp0aN0umRIy1D6BVQcfz+ORLqV7o5Y/2uvd+idLm4d69i9u2T2c1Ndfr0sXc4Jco9IMCaeIndv18pFy+qVq9ecvX0tHdoAIBi4NBJl7yG84iKilJKSorq1q1rxyiRk4ZBDdW+ZnutO7ZOT/34lFpXa62IKhH2DgsAgCJZvXq1nnnmGTVp0kRTpkyRJHl6eio1NTXbflnJFm/vwvVydXNzU7169W64T1JSkqKiolS7dm15eXkV6ji5Hv/JJ+W2e7eMgADpq68UcqWtlfWJ1HKBgVJRPkF9ZRJZXz8/+ebywZm0tDTFxsaqXLlycnNzK3Q5torH1uXcsH6luF5ZcqyfreIJDJQk1alTp2A9Xa723XdKe+45uX3wgap+8IGCT5xQ6uzZUvny+Xp7cf7+OQLqV7o5a/0OHTpk7xBQRFm9XGp07SqPcuXsG4wdeAQGqnbv3jr+449KOndOR776yjL0mK+vvUMDANiYQydd8hrO4+DBgzKZTFq0aJF+++03mc1mdezYUU8++aT8rvxTVxiGYdi8S3ZGZkbuw2MYNxg6o4S3GbL845rj9gKW2bZaW526dEqRsZG6a/FdWjdknYK8g3J+v505axf8vJTFepfFOkvUuyzVu7jqzJAe0ieffKKJEyeqW7duevvtt62ftq1cubLOnTuXbd+s7ytVqlSoY5lMpnwnbLy8vAqd3MnRggXSnDmWOD79VF5hYdft4ubqKuWWCMmPK/Pf5KccNze33JMuBSjHVvHYupwc6+cE9cqSrX42jqfID5Nnz5ZatZIeeUSu334r11tukT79VCrA/JA2//1zMNSvdHO2+pX1dkhpl56YqKPffitJqjtggJ2jsR+voCB1/uAD/TxypFJiYnT4q69Uu08feQQE2Ds0AIANOXTS5VrXDucxbdo0mc1mVatWTbNnz9bRo0c1efJkHTx4UIsWLZK5EEMESJbkQVZXbFt1yQ6qEaTzuQyjkJGZ4TDbMjMtE9/nNNRFYcpsW76t0jPTdfTSUd37+b2a2mqqXEyOM+fOtZyxC35+lMV6l8U6S9S7LCmOOpflIT0+++wzvfbaaxoyZIhefPHFbG2Mli1bavHixcrIyLDOK7dhwwbVqVOnUPO52NXWrdIjj1hev/KK1LOnXcMBit2IEVLTptJ990l//y116iSNHi1NmmSZAwYAYBPHfvxRaQkJ8q1RQ5VatbJ3OHblf9NNuqlvX0V9841S4+IsPV569ZJnkGN+SBUAUHClJumS03Aejz32mIYNGyZ/f39JUv369VWxYkXde++9+vPPP9WkSZNCHcvNzU3VqlWzaZfshMyEXOedcTG7OMy2rIdIOQ11UdgyF7ZbqB6f9dDG8xu1ImaFXmz7Yo772ZOzdsHPS1msd1mss0S9y1K9i6vOZXlIjyNHjuiNN95Qt27dNGrUKEVHR1u3eXp6qn///po7d67Gjx+vBx98ULt379aiRYv06quv2jHqQjh/XurXT0pJkXr3ll56yd4RASWjWTNp+3bpySelefOk99+Xli+Xpk+3/E7w6XoAKLLIr76SJNXt31+mQn5A1pm4+/urTt++OvrNN0qOjtbh5ctVo2tX+dWube/QAAA2UCqSLrkN52EymawJlyz169eXJJ05c6bQSReTyWR9UGWrLtlJiUm5D41hksNsM8nyT2WOQ10UssywSmH6oNcHemD5A3rjjzfUvk573V7v9pzLsTNn64KfX2Wx3mWxzhL1LktsXeeyPKTHjz/+qLS0NK1atUqrVq3Ktq1v37568803NXfuXE2cOFF9+/ZVxYoV9dxzz6lv3752ijgXmZm5TxSenm75pP/x49LNN0sff1yoScWBUsvXV5o7V7r/fktPl7//lgYMkHr1kiZPlkJD7R0hAJRqmampcvf310133WXvUByGm7e36vzf/+noDz8o8dQpHf3uO1Vq00ZBEcyHCwClncMnXW40nMfTTz+t2NhYzZs3z7ruzz//lKQ8J59FyRrSZIjWH1uvD7d/qEHLBmn7qO2qGVDT3mEBAJCn0aNHa/To0TfcJzw8XEuWLCmhiArJbJaWLpUuXLh+25dfSmvWSB4e0sCB0uLFOZdRr550223FGydgT126SLt3SxMnWpItK1dK330nDRkiTZgg1alj7wgBoFTqMneuMtLS5BkYaO9QHIqLp6dq9+6t0+vWKWbvXp3duFHJ0dEKuf9+uZaxD40BgDNx6I8w5jScx/nz53X+/HnFx8erV69e+v333/X+++/r2LFj+vXXX/Xiiy+qV69eqlu3rr3DxzWm3jlVzao0U3RStO754h6lZqTaOyQAAMqWCxek06ezL99+K61ebdnep49lKKVr98lacpjzDXA6np7Sa69Ju3ZJfftaeoktWiSFhEhjxkhHjtg7QgAoddx8fUm45MLs4qJqnTqpSocOktmsuL//1poHH9SlMjgvJQA4C4dOulw9nEe7du2yLRMnTlTnzp01depU/fTTT+rdu7fGjx+v7t2764033rB36MiBp6unvrz7S5XzLKdNJzfpmZ+esXdIAACUbUePWpIuktShA0MoAVdr2FBatkzatEnq1k1KS7PM91KvntwHDZLPrl2SYdg7SgCAk6jQuLHq9O4tF09PxR44oO8HDNChL76Qwb0GAEodhx5eLD/Dedx+++26/XbHnB8E16sTWEcf9/1Yvf/XW9M3T9etNW7VfY3vs3dYAACUPTEx0uefWz7FHxoqdepk74gAx9SqlfTTT9LatdKkSdJPP8l1+XI1WL5cGe+/L40dK919t+TjY+9IAQClnE+1aqp3zz2K2btX57Zu1eZXXtGp335Tq//8p0A9hdJTUqSMjBvv5OIiVw+PIkYMAMiJQydd4Jx61e+lF9q9oEnrJ+nBFQ+qSaUmalixob3DAgCg7EhJsczbkpgoVaki3XWXZVgxALnr1Mmy7Nmj9Lfflvl//5PL1q3S8OHS449L990njRxpSdLw+wQAKCQ3X191nDlTh774Qrvee08n1qzRhV271Oz551Xrzjtlys89JiNDexcsuOEuocOH2yhiAMC1HHp4MTiv/3T+jzrX7qzLaZfVd0lfxSbH2jskAADKhsxMaelS6dw5ydfX8qDYzc3eUQH55+tr+Tm2hcKU07ixXBculPn4cWniRKluXSk+XpozR2rTRmrQQHrpJenPPxl+DABQKCazWQ2HD9ftixcroG5dJUdH649nn9WakSMVd/iw0lNSlJ6YmOvCkGQAYF/0dEGxM5lMik6Mvm79zB4z1e3jbjoQfUD3fXmfVt6/Uq5mfiQBACg2hiGtXCn9/bfk6mpJuPj72zsqoGA8PSWz2ZI8vHCh8OXUqyfddluhyklLT1dsTIzKBQbK7c03pYoVpXnzpC+/lA4elF5/3bI0bCjdc490772W1wAAFEBgw4a644svtHf+fO2dM0dnN23S9337qv6gQTK5ucnF3T3H9zUcNqxkAwUAZMMTbhS71IxUzd46O8dtH/X9SL0+66UfI3/UUz8+pal3TM1fV1kAAFBw33wj7dhhGfpowACpWjV7RwQU3oUL0unThX9/UFDhy0lLU9r581JSkiWBOWCA1LGjNHOmJbG5ZIn0/ffSvn3Sq69aloYNpZ49pV69pFtvpYcZACBfXDw8FPbII6rTq5e2TpqkU7/+qv2LFsnF01MVmzVT+caNZXbl8R4AOBKGF4NdNanURB/3/ViSNH3zdE3+fbKdIwIAwEl98IH03XeW1z17SiEh9o0HcEZ+ftLAgdLy5ZYh/D76yPL75uZmScC8/bZlXpiKFS29Xz7+WDp/3t5RAwBKAd8aNdRp1ix1mD5dfrVqKSM5WWf++EMHP/1UF/fsUWZGhr1DBABcQdIFdtc/tL+mdJ8iSXrh5xc0Z9scO0cEAICTWb5cGjPG8rpDB6l5c7uGA5QJAQHSkCGWni/nzkmLF1u+r1BBiouTPv9ceuABKThYCg+XnnjC8rt68aK9IwcAOLDqXbro9sWLVa1zZ7n5+ir98mWd+u03HfzkE13YuVMZqan2DhEAyjz6H8KusuZ7eaDJAzoad1RTN03VqJWjFJ8ar4ebPyxfd197hwgAQOlmGNLYsZYJw9u2tXzKHoDt+Ppafr/MN/g8W7lylp4t994rZWRImzdbkjHffivt2iX9+adlmTbNMvxfkyaW39XWraUWLaS6dS3rAQCQZHZ1VWDDhgqoX18xf/2l89u3K/3yZZ354w+d27pVmampkskkNx8fe4cKAGUSSRfY1dXzvQR4BKhl1ZbacmqLnv7paSWmJerfHf5t5wgBACjlTCbpqacsQxjVrGn5xD0A2/H0tCRcli61zA+TXzVrSo88Il26JB08KB0/Lh09Ku3fL+3caVmylCtn6aHWooVladTIkojJZQLlojKZTPLy8mKuRQBwcGYXF1UID1dgo0aKPXBAF3buVGpsrA589JFkNsu/Th1VCAuTd5Uq/E0HgBJE0gUOw2Qy6c56d8rN7KY/Tvyhl355SWcSzujd29+VmwsTjQIAUGhPP235+sEH9o0DcGYXLkinTxfuvdWqWXq2DBxoSYyuXSutWydt3WrpCRMbK/38s2XJ4uIi1aljmZ8pJESqX9+SiKlRw1Keb+F7jHt5eSk0NFRGZmahywAAlByzi4vKh4YqsGFDxUdFKfHUKV3YtUuXIiN1KTJSHuXLq0JYmALq15eLG89XAKC4kXSBQzGZTOp6U1d5uXnp5yM/a+aWmdp7fq8+7vuxqvlXs3d4AAAAQPHI6jHz+++WOV/Cwy1Lerp06pSlF8yxY5avZ89KKSnSoUOW5dtvry/Pz8/SQyYw8J+lfPl/loAAS+ImB2np6Urw8FDggw8Wb50BADZlMpnkX6eOWr/6qra//bYu7tmj2IMHlXLxok79+qvObNigciEhKh8aau9QAcCpkXSBwzGZTGpXs52GNhmqMd+N0S9Rv6jx+401484Zuj/sfrrEAgAAwHnl1GPGzU2qV8+ySJa5muLjpehoy/7R0ZYlNlZKSJCSky3b4+Mtw5blxGSS/P0tyZeAAKlCBSkoSKpYUfLzU7qfX7FWEwBQvLyCglStUydVbtNGMQcO6OKePUqNi9PFP/+0LH/9pZv+7/9Uo1u3bHO/uBqGGtStywNDACgC/obCYfW4uYe2PLRFQ74aoq2ntmrwV4P14fYPNaX7FDWv2tze4QEAAAD2kZUw8fe3DDF2tcaNpa5dpXfekSIjLXPGxMVd/zUz0/I1Lu664l1NJgWWLy9t3ixFREitWkmtW1uSMgCAUsXF01NBTZqoQni4Eo4fV8zevboUFaWLe/bo4p492v7f/yqgXj0FhobKKzhY6enpunD+vDq/+KK9QweAUoukCxxag6AG+mPEH3pz/Zt6Y/0b+u3ob2oxp4V61e+lcW3HqW2NtvR8AQAAALKYTJZhxapXz3X4MGVmSpcv/5N0iYn5p9fM+fMypaTINTpa+uYby5LlppssyZfWraVbb7UkZFz5lxIASgOTySS/mjXlV7Om0hMT5e7np/0ff6zU2FjF7NunmH375FG+vAJCQpRZrpy9wwWAUo0WMhyem4ubXur4koY2HaoXf35Rn/35mVYeXKmVB1eqcXBjjWg6QgNCB6hGQA17hwoAAAA4PrPZMueLn58lOXM1w1BabKwux8erXLNm0pYtlh4v+/dLhw9blv/9z7JvQIDUsaPUpYtladTIUjYAwKG5ensrZMgQZaSnK/H0acXs3au4yEilXLyocxs2SCaT1sXG6qb/+z9V79Il2/BjAIC8kXRBqVEzoKY+6feJXu74siatn6TFexZrz7k9euqnp/TUT08pvFK47qx3p/4v5P/UpnobesAAAAAABWUySb6+SqtYUXr00X/Wx8ZaEjCbNlmW9est61assCySZT6Yzp3/ScLUq2cpDwDgkEwmk3yqVpVP1aqq0r69Yg8eVMz+/Uo+f15nN2zQ2Q0b5OLlpSpt26p6ly6q1rGjPOgFAwB5IumCUqd+hfp6u9vbquRTSXvO7dHus7t1/NJx7T67W7vP7tbk3yerql9Vda/bXbfXvV3dbuqmCt4V7B02AAAAUHqVKyd162ZZJCkjQ9q5U1qzRvr5Z2ndOun8eenzzy2LZOlF07nzP4mYWrXsFT0AIA8uHh6qEBYm/wYNdPbIEVWpXVvHf/pJCceO6cTq1TqxerVMLi6q2KyZqrRtq0qtWql8o0YyM8wkAFyHv4xwWCaTSdGJ0TluyzAy5OnqqRZVW6hF1Ra6nHpZB6MP6kD0AR2LO6ZT8ae0cOdCLdy5UCaZ1LRyU3Wu3Vm33XSbmlVuJjcXt+zlZWaoUo1KJVEtAAAAoPRzcZGaN7cszz4rpaZahiFbs8aybNggnTghffyxZZGkOnX+ScB07ixVrWrfOgAAcuTi66tGDz+spk8+qZh9+3RizRqd+PlnxR48qHNbtujcli2SLMOUVWzeXBWbNlVgw4YKbNhQXhUrymQyKT0lxZKgv+GBXOTq4ZHr5jzLyOP9AGAvJF3gsFIzUjV76+wct41uMTrb9z7uPoqoEqGIKhEa1nSYXlrzkiJjIhUZE6lzl89px5kd2nFmh6ZsnCJ3F3fVKVdHdcvXVb3Aegr0ClRaWpoebvJwSVQLAAAAcD7u7lK7dpbl5ZelxERL4mXNGumXXywJmSNHLMv8+Zb31K4ttWplWVq3lpo1k7y97VoNAMA/TCaTyoeGqnxoqMIffVQJJ07o5K+/6uzmzTq3ZYtS4+J0et06nV63zvoezwoVFFCvnnyqVtXlM2fk7u8vd39/uXp7y9XLS6ar5v4KHT78xgFkZGjvggW5bs7z/QBgJyRd4HQ8XT1Vt3xd1S1fV5IUnxJvTcCcij+li0kXdSD6gA5EH5AkVfSuqHqB9dS8UnN1u6mbPUMHAAAAHILZ31/KzJSuejhWIN7e0m23WZbMTOnyZcs8MFlJmO3bpagoy5I1HJmLi9S4sRQRITVqZFlCQ6WaNS1zwxQlHgBAkflWr66QQYMUMmiQjMxMxR44oLNbt+riX38pZt8+XTp8WMnR0UqOznnUEplMcvXysiRgvL11+eRJeQUHy7NCBXmWL2/5emVxDwgo2coBgA2RdIHT8/PwU9PKTdW0clM93PxhvbL2FUVetCRhjsUd0/nE8zqfeF79v+qvIO8g9arfS73r91b3ut3l6+5r7/ABAACAEmf29rYkOJYulS5cKHxB9epZEi8//WQpp149y5KUJB09akm6HDli+RoXJ+3aZVmu5u4uBQdLTZpYhiirVUuqVMmyBAdblqAgy375YDKZ5OXlJZPJVPh6AUAZl5GWJr9ateRXq5bUv78kKT05WXGRkYqPirL2ikmNi1NaQoLSk5Ikw1B6YqLSExMlSQnHjuVavslslke5cjIkay8Z61cfH7l5eysuMlK+NWrIPSCAv+kAHIpTJF0yMzM1Y8YMffHFF7p06ZKaN2+uCRMmqBYTNeIaZpNZVf2qqqpfVbWv1V5JaUk6FHNI+8/v1/FLx3Uh8YJ1Lhh3F3d1qt1JHWt1VNsabdWqWit5uXnZuwoAAAdEWwSA07pwQTp9uvDvDwrKvZyAAEsipUkTy/eXLkknT0pnz0rnz1uW6GjLfDEnTliWGylXTvLzk3x9LYuPzz+vvbwkDw/J01OeHh4K9fSUspYr67O9zmndta/NZkvvHMABlIa2SF7zcxiGUYLRoMjyGPqr0cMPy3xVMtzIzFR6UpIl6XL5stISE1W+QQOlxsdbe8ckR0cr5eJFpcTGysjMVPLFi5KklCtfrxX1zTeSJLO7u7wqVrQsQUHyzHp9zeIRGJhteDMAKC5OkXSZNWuWFi9erEmTJqlSpUp666239NBDD2nlypVyz+ennVA2ebl5KSw4TA0CG2h44+H6O+5vrTq6St8c/EaHLh7ST5E/6afInyRJbmY3NavSTGHBYWpYsaEaBjVUg6AGqu5fXW4ubnauCQDAnmiLAIAN+PtbloYN/1mXkSHFxloSHKGhll4xx49L5879s5w//89+sbF5HsZmn4U2mXJOxvj7S4GBUvnyeS+BgZIb/0ug6EpFWySPh/QNhw0ruVhQ4kxms9x8fOTm4yNVrCjJMieLaw5zeWWmpSklNlYJJ07o4OLFSk9KUkZWwiYxUWlXvhrp6Uq9dEmZqam6fPKkLp88eeMYXF3lWaGCvIKC5BUcLLfAQMUbhg7/+ad8goKs88+4+/vL3c9P7gEBcimB35+8EpJycZGrh0exxwHAdkp90iU1NVXz58/Xs88+q44dO0qS3n33XbVv316rVq1Sz5497RwhSgs3Fzd1rNlRdza4U+90f0cHog/op8if9Pvx37Xu6DqdTjitTSc3adPJTdneZ5JJFX0qqopvFVXxq2L56ltFFX0qKtAzUOU8yynQy/K1nGc5BXoGytfdl66vAOAkaIsAQDFycZEqVJCqVJFGjcp5n8xMKSbGknxJSMi+XL4sxcdLyclSSorla3Kykv74Qx7JyTJnZloedKWnX7/ktD4z85/jGoZlmLSkpKLV0df3nyTN1V9vtM7PzzJvjpeX7ee5uXbunMxMy7m7eklNvX5dWpplX8OwfPXxkdq3Zx6eEkBbBM7G7OYmr4oV5ebjI7+aNXPdr+GwYfpr7tx/kjGXL1/32tXDQ8kXLyr54kUZ6elKOntWSWfPSn/9ZS0nlxloJEkuHh5y8/WVq5eXXDw9s3119fKSi7e33Hx8ZHZ1ldnFRaarFrOrq+W12Wz5ajJJJpNMJpOlx82V15np6Tr1++/W7ZKs22QyqXqnTnLx9Mz2fpnN1u/Nrq6WY135av3ezc0aV3JamtJjY5UaGyu3zEzrvta4ANhUqU+67N+/X5cvX1abNm2s6/z9/RUaGqotW7bQuEChmEwmNQhqoAZBDfR468cVnxKvv6P/1tbTW3Uw+qD+jv5bf1/8W5ExkUrNSNW5y+d07vI57Tq7K+/CJbmYXOTn4ScPFw95uHrI3cVdHi6Wr+4u7tety/re3XzVaxd3ebp6ysvVS15uXgX+ajY57z8/mUam0jPTlZaRZvmamWb9Pv5yvI4mHJUuSG4ebtftk2lkys3sZj3HVy9uLtevd+bz6Mgyjcwcr+911zsxXn/H/q34U/FycXNRema6JF13La+95lnbXc2ucjHZrxFqGIYyjAylZqQqLSNNaZlp2V6nZ6Znq3t6ZroSkhIUeSFSyWeSdWudW2lAlwDaIgBQAnx9r08GZDGbLYmZChXyXVziG2/I9fJlmQvay8QwLMmXWrWkXr0syYerEzpJSZZh0mJipIsXc19iYiy9cgzjnwTR8eMFiyWLp6clAePtLfn4yNPTUyGZmfLw9pZcXS0P8K48oLN+lSxJkqwESlYSJet1QoJl+7WJpoKaN08aMaLw70e+0BZBWWZ2dbX2TslJVm+azLQ0JV+8qKTz55V07pySLlzQpVOnlHzunKJ375aRlqaMlBTrkpmSIknW7+3pxKpVNisrMod1JhcXmbMSNFcnb66ssyaQrl1/dYLn2oTPVUkdIzNTysyUYRjXv77y1cjMVGZ6uoyMDMu6jIwc9zEMQybJus26f1bS32RSpmEoMTlZ0T4+cnF1tSS9shJWWcmurHXXbMu235XvTSbTP8k0s9lStxwSa9bXV693cfknGXf1+bmyz7Xn6tpznu3cZpXh5mYttzhdff5lGJYhIK++Jjl8n9c+kmWowVwOmGMMV0tOTlbq2bNK8PVVhqdnnnVw8fKSd3BwwStvAyajlA+a+dNPP+mxxx7Trl275HnVyX7iiSeUnJysDz74oEDlbd++XYZhyNXVVenp6XJ1dbXJA6tMZepS8qUct/l7+jvUtpjLMTJn/aFx4Dhtuc0wDAV4BUiGch1vILcyfdx9dCnlkjKNTGUalhtApixfXcwulu+NTGUYGdbtjsBkMsl0pbImmXKst8lGgy8YukGdc9h0w/3z2tco2PuLKuv35OpzZX1t0nXbyrocr42Rx/Zrt5XwNZZyuc45rMtLvuK+Uj9DRpH/XgT7BMvHzadIZWRJS0uTyWRSs2bNbFKeMymutohbHg8CDcMoUFvFZDJZPvF9o6EL8uLmZvlUdQmUY8gyPr3ZbM79t6wE47F1OTesXymuV5Yc6+cE9cqSrX4OEI+tyzEkGa6uMnt7O0Q82cpJTi5aEsDFRfLwUGZCgkyZmYVvpdkiHsOwJEBcXS3JmisPjnTlgZT1dW5f7eWaT2Jn+3r1Pq6uMipUsNnwabRFcmePtkhB2yFZ0i7l/H+1JLn7+yv1Btvzs49bLg/e8xtDTse49p5W1GPkp54lcYzc9smqr2e5csUeg73PZdYD/NT4+OvuB4ZlB7n5+Cg1IeGfB8JZD46vPEx28fCwvr6q4GxlXL0uhyAkSZnp6bluN7m6Xrf/1d8b127LWpfb93Ae1ucSRePMPx8egYE5DmNYGAVpi5T6ni5JV7pyXztGqYeHh+Li4gpcXlZjwWw223TcUxe5KNArMNftjrQtyDfIYWIp6W03+it1w3Pmnfs5AwBnkPUJH1yvuNoieZ1vk8lU8LaKj22ScCVRjklSvj+7VYrqlSVf9SuF9cpyw/qV4nplybF+TlCvLCZd1Sx2gHiyycenGvPD7Otrk3JsFY+zzutiy5YDbZHc2aMtUqh2iCT3gIAibc/vPo5+jKKWb6tjlJV65ibrZ9wjjzI8A2/wHAlAmVGQtkipT7pkfYojNTU12yc6UlJS5OXlVeDyIiIibBYbAABwfrRFAACAPdEWAQDAsZT6yQiqVKkiSTp37ly29efOnVPlypXtERIAAChDaIsAAAB7oi0CAIBjKfVJlwYNGsjX11ebNm2yrrt06ZL27t2rFi1a2DEyAABQFtAWAQAA9kRbBAAAx1Lqhxdzd3fX4MGD9fbbb6t8+fKqVq2a3nrrLVWuXFndunWzd3gAAMDJ0RYBAAD2RFsEAADHUuqTLpL0+OOPKz09Xf/+97+VnJysli1bat68eYWa1A0AAKCgaIsAAAB7oi0CAIDjMBmGYdg7CAAAAAAAAAAAgNKu1M/pAgAAAAAAAAAA4AhIugAAAAAAAAAAANgASRcAAAAAAAAAAAAbIOkCAAAAAAAAAABgAyRdAAAAAAAAAAAAbICkCwAAAAAAAAAAgA2QdAEAAAAAAAAAALABki45yMzM1LRp09S+fXs1adJEI0aM0NGjR+0dVqHNmjVLQ4YMybZu3759Gjx4sJo2bapOnTpp3rx52bbn5xzkVUZJi42N1csvv6wOHTqoWbNmGjhwoLZu3Wrd7ox1lqTo6Gg9++yzatOmjSIiIvTwww/r0KFD1u3OWu8sR44cUUREhJYtW2Zd58x1PnnypEJCQq5bvvjiC0nOW/fly5erR48eCgsLU8+ePfX9999btzljnTdt2pTjdQ4JCdFtt92Wr5hLY72Rt8Lc0x1dUe/fjq6o9+nSpDD3ZEdX1PtuaVCUe6wjs8W91NGlpaXp3XffVadOnRQREaH7779f27dvt24v7fWD43K2ZyY3ktd9wFk4YxszNznV9YUXXrjuGnfo0MFOERaNs7etr5ZXXZ3pukpl6/+KvOpaKq6tgetMnz7duOWWW4y1a9ca+/btM0aMGGF069bNSElJsXdoBbZgwQIjJCTEGDx4sHXdxYsXjdatWxvjx483Dh06ZHz55ZdGWFiY8eWXX1r3yesc5KeMkjZ8+HCjT58+xpYtW4zIyEjjtddeM8LDw41Dhw45bZ0NwzDuvvtu49577zV2795tHDp0yHjssceMtm3bGomJiU5db8MwjNTUVKNfv35G/fr1jaVLlxqG4bw/31l+/vlnIywszDh79qxx7tw565KUlOS0dV++fLnRsGFDY+HChUZUVJQxY8YMo0GDBsb27dudts4pKSnZru+5c+eM9evXG6Ghocbnn3/utPXGjRX2nu7oinr/dnRFvU+XFoW9Jzu6ot53HV1R77GOzBb3Ukc3depUo23btsa6deuMqKgoY/z48UazZs2MM2fOOEX94Lic6ZlJXm50H3AWztrGzElOdTUMw+jbt68xZcqUbNc4OjraTlEWjbO3ra92o7oahnNdV8MoO/9XGMaN62oYpePaknS5RkpKihEREWF89tln1nVxcXFGeHi4sXLlSjtGVjBnzpwxRo4caTRt2tS44447st1QZs+ebbRv395IS0uzrnvnnXeM22+/3TCM/J2DvMooaVFRUUb9+vWNbdu2WddlZmYa3bp1M9577z2nrLNhWBpC//rXv4yDBw9a1+3bt8+oX7++sWvXLqet99VxDBkyJNsDHmev8/vvv2/06dMnx23OWPfMzEyjc+fOxptvvplt/YgRI4zZs2c7ZZ1zkpqaavTs2dN48sknDcNwzmuN3BXlnu7oinr/dnRFvU+XJoW5J5cGRbnvOrqi3mNLm4LeS0uDPn36GJMmTbJ+Hx8fb9SvX9/44YcfnKJ+cEzO8swkv250HyjtnLmNea0b1TU9Pd0ICwszVq1aZccIbcPZ29ZXy6uuznRdDaNs/V+RV11Ly7VleLFr7N+/X5cvX1abNm2s6/z9/RUaGqotW7bYMbKC+euvvxQQEKAVK1aoSZMm2bZt3bpVLVu2lKurq3VdmzZtdOTIEUVHR+frHORVRkkLDAzUhx9+qMaNG1vXmUwmGYahuLg4p6yzZKn3lClTdPPNN0uSLly4oHnz5qly5cqqV6+e09ZbkrZs2aIlS5Zo8uTJ2dY7c50l6cCBA6pXr16O25yx7ocPH9bJkyfVu3fvbOvnzZunUaNGOWWdc/Lpp5/q9OnTeuGFFyQ557VG7opyT3d0Rb1/O7qi3qdLi8Lek0uDotx3HV1R77GlTUHvpaVBuXLl9Msvv+jEiRPKyMjQkiVL5O7uroYNGzpF/eCYnOWZSX7d6D5Q2jlzG/NaN6prVFSUUlJSVLduXTtFZzvO3ra+Wl51dabrKpWd/yukvOtaWq4tSZdrnDlzRpJUpUqVbOuDg4N1+vRpe4RUKF26dNE777yjGjVqXLftzJkzqly5crZ1wcHBkqRTp07l6xzkVUZJ8/f3V8eOHeXu7m5d9/333+vYsWNq166dU9b5Wi+99JLatm2rH374QRMnTpS3t7fT1vvSpUt67rnn9O9///u62J21zlkOHjyo6Oho3X///br11ls1cOBArVu3TpJz1j0qKkqSlJiYqJEjR+qWW27R3XffrTVr1khyzjpfKyUlRbNnz9bQoUOtcZWFeuMfRbmnO7qi3r9Lk8Lcp0uDotyTS4Oi3HcdXVHvsaVJYe6lpcH48ePl6uqq2267TWFhYXr33Xf13nvvqWbNmk5RPzgmZ3lmkl83ug+Uds7cxrzWjep68OBBmUwmLVq0SF26dFHXrl312muvKT4+3g6RFk1ZalvnVVdnuq7Xctb/K3KSU11Ly7Ul6XKNpKQkScr2SytJHh4eSklJsUdINpecnJxj/STLPyT5OQd5lWFv27Zt04svvqjbbrtNXbp0KRN1Hjp0qJYuXao+ffpo7Nix+uuvv5y23q+88oqaNm163SczJef++U5NTVVUVJQSEhL05JNP6sMPP1RYWJgeeughbdiwwSnrnpCQIEkaN26cevXqpfnz56tt27YaM2aM09b5Wl9//bVSUlKyTfZYFuqN/HG261jQ+3dpUpj7dGlQlHuyoyvqfdfRFfUeW5oU5l5aGkRGRsrf318zZ87UkiVL1K9fP40bN0779+93ivrBMZWFZyZZ8roPOLOy9Dfk77//ltlsVrVq1TR79myNGzdOv/76q8aMGaPMzEx7h1ckzty2vta1dXXm6+qs/1fkJKe6lpZr65r3LmWLp6enJMvNNeu1ZPkB9fLysldYNuXp6anU1NRs67J+Ab29vfN1DvIqw55Wr16tZ555Rk2aNNGUKVMkOX+dJVm7PL/22mvauXOnPvnkE6es9/Lly7V161Z98803OW53xjpncXd315YtW+Tq6mq9mTZu3FiRkZGaN2+eU9bdzc1NkjRy5Ej17dtXktSwYUPt3btXCxYscMo6X2v58uXq3r27AgMDrevKQr2RP850HQtz/y5NCnOfdnRFvSc7uqLedx1dUe+xpUlh7qWO7uTJk3r22We1cOFCtWjRQpIUFhamQ4cOafr06aW+fnBcZeGZSZa87gO33HKLnSMsPmXpb8hjjz2mYcOGyd/fX5JUv359VaxYUffee6/+/PPP64YjKy2cvW19tZzq6qzXVXLO/ytyk1Nd33jjjVJxbenpco2sLrLnzp3Ltv7cuXPXddMqrSpXrpxj/SSpUqVK+ToHeZVhL5988okee+wxdejQQXPmzLE2Ap21ztHR0Vq5cqUyMjKs68xms+rWrWuN3dnqvXTpUkVHR6tTp06KiIhQRESEJGnChAnq2bOnU9b5at7e3td9eqF+/fo6e/asU9Y9K6769etnW1+vXj2dOHHCKet8tYsXL2rHjh3q0aNHtvXOXm/kn7Ncx8Levx1dUe/Tjq6o9+TSoCj3XUdX1HtsaVHYe6mj2717t9LS0hQWFpZtfZMmTRQVFVXq6wfHVRaemVztRvcBZ1aW/oaYTCbrw9ssWffGrOH0ShtnbVvnJLe6Ott1dfb/K66WV11Ly7Ul6XKNBg0ayNfXV5s2bbKuu3Tpkvbu3Wv9BFFp17JlS23bti3bD++GDRtUp04dVahQIV/nIK8y7OGzzz7Ta6+9pkGDBum9997L1jBy1jqfO3dOTz/9tDZv3mxdl5aWpr1796pu3bpOWe+3335b3333nZYvX25dJOnxxx/Xhx9+6JR1zrJ//35FRERo69at2dbv2bNH9erVc8q6h4aGysfHR7t27cq2/uDBg6pZs6ZT1vlq27dvl8lkUqtWrbKtd/Z6I/+c4ToW5f7t6Ip6n3Z0Rb0nO7qi3ncdXVHvsaVFYe+lji7rwfeBAweyrT948KBq1apV6usHx1UWnplkyes+4MzK0t+Qp59+WiNHjsy27s8//5SkUnmdnbltfa0b1dXZrquz/19xtbzqWmqurYHrTJkyxWjVqpWxevVqY9++fcaIESOM7t27GykpKfYOrVDGjRtnDB482Pr9hQsXjJYtWxrjxo0z/v77b2Pp0qVGWFiYsWzZMus+eZ2D/JRRkg4fPmw0atTIGDt2rHHu3Llsy6VLl5yyzoZhGJmZmcaIESOM22+/3diyZYtx4MAB41//+pfRsmVL4+TJk05b72vVr1/fWLp0qWEYzvnznSUjI8O4++67jV69ehlbtmwxDh06ZLzxxhtG48aNjf379ztt3WfOnGlEREQY33zzjXH06FFj1qxZRoMGDYyNGzc6bZ2zTJ8+3ejevft165293shdYe7pjswW929HZov7dGlT0HuyI7PFfdfRFfUeWxoU5V7qyDIyMoz777/fuOOOO4wNGzYYR44cMd59912jYcOGxo4dO0p9/eDYnO2ZSW7yug84E2drY97ItXVds2aNERISYsyaNcs4evSosXbtWqNLly7GU089ZccoC8fZ29ZXy6uuznRdDaNs/V+RV11Ly7Ul6ZKD9PR047///a/Rpk0bo2nTpsZDDz1kHD9+3N5hFdq1NxTDMIxdu3YZ99xzj9G4cWOjc+fOxscff5xte37OQV5llKT333/fqF+/fo7LuHHj8hVvaatzlkuXLhkTJkww2rZta4SHhxsjRowwDh48aN3urPW+2tUPeAzDuescHR1tvPDCC0bbtm2NsLAw49577zW2bNli3e6sdZ8/f77RpUsXo1GjRkafPn2MVatWWbc5a50NwzAmTJhg3HPPPTluc+Z6I3eFuac7Mlvcvx1dUe/TpU1B78mOrqj33dKgKPfY0qAo91JHFxsba7zyyitGp06djIiICOPee+81Nm3aZN1e2usHx+Vsz0xuJK/7gLNwtjbmjeRU1x9++MG46667jPDwcKNt27bGm2++aSQnJ9spwsIrC23rLPmpq7Nc1yxl6f+KvOpaGq6tyTAMw969bQAAAAAAAAAAAEo75nQBAAAAAAAAAACwAZIuAAAAAAAAAAAANkDSBQAAAAAAAAAAwAZIugAAAAAAAAAAANgASRcAAAAAAAAAAAAbIOkCAAAAAAAAAABgAyRdABQ7wzDsHUKJKCv1BACgtCkr9+iyUk8AAEqbsnKPLiv1BPJC0gVwIkOGDNGQIUPsHUY2P//8s8aNG2f9ftOmTQoJCdGmTZuK5XibNm3S7bffrsaNG2vkyJE57jNkyBCFhIRYlwYNGigiIkL9+vXTxx9/rIyMjAIf99ChQxo4cGBRwwcAoFSjLUJbBAAAe6ItQlsEcASu9g4AgHNbuHBhiR5v8uTJyszM1IcffqgKFSrkul9oaKgmTJggScrIyFBcXJx+/fVXvfHGG9q2bZveffddmUymfB/3+++/144dO4ocPwAAsC3aIgAAwJ5oiwBlD0kXAE4lNjZWLVu21K233nrD/Xx9fdW0adNs67p06aI6depo0qRJ6tKli/r06VOMkQIAAGdEWwQAANgTbRHA/hheDCiDtm7dqsGDB6tJkyZq1aqVxo0bp4sXL1q3L1u2TKGhodq1a5fuvfdehYWFqVOnTpozZ062cs6dO6d//etfatWqlVq2bKmXX35Z7777rrp06SLJ0l118+bN2rx583VdZw8fPqyRI0eqSZMmatu2rd5++22lp6ffMO6oqCg9/vjjatu2rZo2baohQ4Zo27ZtkqQTJ04oJCREJ0+e1PLlywvdVXfIkCEKDg7W4sWLreuSk5P1zjvvqHv37mrcuLGaNWum4cOHa9++fZKk6dOna8aMGZKkkJAQTZ8+XZJ08eJFvfrqq+rcubMaN26sVq1aaezYsTpx4kSB4wIAwJnQFskdbREAAIofbZHc0RYBio6kC1DGbNmyRcOGDZOnp6fee+89vfjii9q8ebMeeOABJScnW/fLzMzUk08+qR49eujDDz9U8+bN9fbbb2vdunWSpNTUVA0dOlTbt2/Xiy++qEmTJmn//v2aP3++tYwJEyYoNDRUoaGhWrJkiRo1amTdNmnSJDVv3lyzZ89W9+7dNWfOnGw39GsdOnRI/fr10/Hjx/Xvf/9bb7/9tkwmk4YOHarNmzcrODhYS5YsUcWKFdWxY8frjpdfLi4uuuWWW7R7925rY+e5557Tl19+qYcffljz58/X888/r4MHD+pf//qXDMPQ3XffrQEDBkiSlixZorvvvluGYWjUqFH6/fff9fTTT2vevHkaM2aM/vjjD7388ssFjgsAAGdBW+TGaIsAAFC8aIvcGG0RoOgYXgwoY9555x3VqVNHH3zwgVxcXCRJTZo0Uc+ePbV06VINGjRIkmQYhsaMGaO7775bktS8eXOtWrVKa9euVfv27bVixQodPnxYS5cuVePGjSVJbdq0UdeuXa3Hqlevnnx9fSXpui6rDzzwgMaMGWN93y+//KKNGzdq8ODBOcY9Y8YMubm56aOPPpKfn58kqVOnTurVq5feeustffHFF2ratKnc3d1Vvnz5645XEEFBQUpLS1NsbKz8/f11+fJlvfTSS+rRo4ckqVWrVrp8+bLefPNNnT9/XpUrV1blypWz1fPs2bPy8vLSuHHj1KJFC0lS69atdeLEiRs2ogAAcHa0RfJGWwQAgOJDWyRvtEWAoiHpApQhSUlJ2rVrl0aOHCnDMKyfWKhRo4bq1q2r33//3dq4kKSIiAjr66ybdmJioiRp48aNqlGjhrVhIVnGA+3cuXO+uq9m3XAlyWQyqVq1arp06VKu+2/evFmdO3e2NiwkydXVVT179tTMmTN1+fJl+fj45OMs5J/JZJK7u7vmzZsnydJt+OjRozp8+LB++eUXSVJaWlqO761UqZI++ugjSdKpU6d09OhRRUZGavv27bm+BwAAZ0dbpGBoiwAAYFu0RQqGtghQOCRdgDLk0qVLyszM1Jw5c64bh1SSPDw8sn3v6emZ7Xuz2SzDMCRJMTExqlChwnVlBAUF5SsWLy+vXMvOSVxcXI5lBwUFyTAMJSQk2KxxcfbsWXl6eqpcuXKSpHXr1umNN97Q4cOH5ePjo5CQEOuxbhTzihUrNGXKFJ0+fVrlypVTgwYNrjunAACUJbRF8oe2CAAAxYO2SP7QFgGKhqQLUIb4+PjIZDJp2LBh6tmz53Xbr73h30ilSpV09OjR69ZHR0cXKcbcBAQE6MKFC9etP3/+vCQpMDDQJsfJyMjQ5s2b1axZM7m4uOjYsWMaO3asbrvtNn3wwQeqWbOmJOnTTz+1juOak61bt2rcuHEaPHiwRo4cae1m+9///tc6yR0AAGUNbZG80RYBAKD40BbJG20RoOjM9g4AQMnx9fVVaGioDh8+rLCwMOty8803a8aMGfnq/pqlVatWOn78uPbt22ddl5KSot9++y3bfmazbf7MtGzZUr/88ovi4+Ot6zIyMvTtt98qLCxM7u7uNjnO4sWLde7cOQ0cOFCStGfPHqWkpGjUqFHWhoUka8Mi6xMd19Zzx44dyszM1OOPP25tWGRkZOiPP/6QZJmQDwCAsoa2SN5oiwAAUHxoi+SNtghQdPR0AZzMmTNntHDhwuvW16tXT+3atdNTTz2lhx9+WE8//bT69OmjjIwMzZ8/X7t27dIjjzyS7+P06tVLH374ocaOHasnnnhC/v7+mj9/vqKjo1W1alXrfv7+/tqxY4c2bNig0NDQQtfr0Ucf1W+//aYHHnhADz/8sNzd3fXJJ5/o+PHjmjt3boHLS0hI0M6dOyVZbvQxMTFav369lixZoj59+qh79+6SpEaNGsnV1VVvvfWWRowYodTUVC1btkxr166VJOtYrv7+/pKklStXqkmTJgoPD5ck/ec//1H//v116dIlffLJJ9q/f7/1fVmT6QEA4Exoi+QPbREAAIoHbZH8oS0CFB+SLoCTOXbsmCZNmnTd+r59+6pdu3Zq166d5s2bpxkzZujxxx+Xm5ubGjVqpAULFqhp06b5Po6rq6vmzZuniRMn6pVXXpGrq6v69OmjwMBAHTlyxLrfoEGDtGfPHj300EOaNGmSgoODC1Wvm2++WZ999pmmTJmiF198USaTSeHh4froo4+yTT6XX3v37tW9994ryfJpjAoVKqhOnTp688031bt3b+t+tWrV0jvvvKMZM2bokUceUUBAgJo2baqPP/5YQ4YM0datWxUSEqLu3bvr66+/1vPPP68BAwbolVde0csvv6wFCxbohx9+UFBQkFq3bq0ZM2Zo7Nix2rZtmzp27FiocwEAgCOjLZI/tEUAACgetEXyh7YIUHxMxo1mOwKAXPz99986fPiwunfvLpPJZF3fv39/ValSRTNmzLBjdAAAwNnRFgEAAPZEWwRAbujpAqBQEhMT9cQTT+j+++9Xt27dlJGRoZUrV+qvv/7Ss88+a+/wAACAk6MtAgAA7Im2CIDc0NMFQKH98MMPmjdvniIjI2UYhkJDQ/XII4+oXbt29g4NAACUAbRFAACAPdEWAZATki4AAAAAAAAAAAA2YLZ3AAAAAAAAAAAAAM6ApAsAAAAAAAAAAIANkHQBAAAAAAAAAACwAZIuAAAAAAAAAAAANkDSBQAAAAAAAAAAwAZIugAAAAAAAAAAANgASRcAAAAAAAAAAAAbIOkCAAAAAAAAAABgAyRdAAAAAAAAAAAAbICkCwAAAAAAAAAAgA2QdAEAAAAAAAAAALABki4AAAAAAAAAAAA2QNIFAAAAAAAAAADABki6AAAAAAAAAAAA2ABJFwAAAAAAAAAAABsg6QIAAAAAAAAAAGADJF0AAAAAAAAAAABsgKQLAAAAAAAAAACADZB0AQAAAAAAAAAAsAGSLgAAAAAAAAAAADZA0gUAAAAAAAAAAMAGSLoAAAAAAAAAAADYAEkXAAAAAAAAAAAAGyDpAgAAAAAAAAAAYAMkXQAAAAAAAAAAAGyApAsAAAAAAAAAAIANkHQBAAAAAAAAAACwAZIuAAAAAAAAAAAANkDSBQAAAAAAAAAAwAZIugAAAAAAAAAAANgASRcAAAAAAAAAAAAbIOkCAAAAAAAAAABgAyRdAAAAAAAAAAAAbICkCwAAAAAAAAAAgA2QdAEAAAAAAAAAALABki4AAAAAAAAAAAA2QNIFAAAAAAAAAADABki6AAAAAAAAAAAA2ABJFwAAAAAAAAAAABsg6QIAAAAAAAAAAGADJF0AAAAAAAAAAABsgKQLAAAAAAAAAACADZB0AQAAAAAAAAAAsAGSLgAAAAAAAAAAADZA0gUAAAAAAAAAAMAGSLoAAAAAAAAAAADYAEkXAAAAAAAAAAAAGyDpAgAAAAAAAAAAYAMkXQAAAAAAAAAAAGyApAsAAAAAAAAAAIANkHQBAAAAAAAAAACwAZIuAAAAAAAAAAAANkDSBQAAAAAAAAAAwAZIugAAAAAAAAAAANgASRcAAAAAAAAAAAAbIOkCAAAAAAAAAABgAyRdAAAAAAAAAAAAbICkCwAAAAAAAAAAgA2QdAEAAAAAAAAAALABki4AAAAAAAAAAAA2QNIFAAAAAAAAAADABki6AAAAAAAAAAAA2ABJFwAAAAAAAAAAABsg6QIAAAAAAAAAAGADJF0AAAAAAAAAAABsgKQLAAAAAAAAAACADZB0AQAAAAAAAAAAsAGSLgAAAAAAAAAAADZA0gUAAAAAAAAAAMAGSLoAAAAAAAAAAADYAEkXAAAAAAAAAAAAGyDpAgAAAAAAAAAAYAMkXQAAAAAAAAAAAGyApAsAAAAAAAAAAIANkHQBAAAAAAAAAACwAZIuAAAAAAAAAAAANkDSBQAAAAAAAAAAwAZIugAAAAAAAAAAANgASRcAAAAAAAAAAAAbIOkCAAAAAAAAAABgAyRdAAAAAAAAAAAAbICkCwAAAAAAAAAAgA2QdAEAAAAAAAAAALABki4AAAAAAAAAAAA2QNIFAAAAAAAAAADABki6AAAAAAAAAAAA2ABJFwAAAAAAAAAAABsg6QIAAAAAAAAAAGADJF0AAAAAAAAAAABsgKQLAAAAAAAAAACADZB0AQAAAIqBYRj2DqHInKEO13LGOmUpTXVzhFgdIQYAAAA4H5IuAAAAKBOef/55hYSE3HDp0qWLTY71xRdfaPLkyfna99ChQ3rppZd02223KTw8XJ06ddJTTz2lXbt22SSWwvr55581btw46/ebNm1SSEiINm3aVOzHzjrW1Uvjxo3Vvn17Pf3004qMjCxUue+//77mzZtX5PimT5+ukJCQIpdjS4cOHdLAgQOzrQsJCdH06dMLXNa15z40NFStW7fW8OHD9euvv2bb98SJEwoJCdGyZcvyXX5+r0OXLl30/PPPF/o4uTlz5oxGjRqlkydP5ngsAAAAoChc7R0AAAAAUBLGjBmj++67z/r9rFmztHfvXs2YMcO6zt3d3SbHev/999WqVas89/vmm280fvx4NWzYUI8++qiqVaumM2fO6Msvv9TAgQP17LPPavjw4TaJqaAWLlyY7ftGjRppyZIlqlevXonF8PLLL6tRo0aSpOTkZB0/flxz5szRgAEDtGjRIoWHhxeovPfee0+PPvpocYRqd99//7127Nhhs/IGDBigu+++W5KUlpam8+fP68svv9TDDz+sl156SYMHD5YkBQcHa8mSJapZs2a+y87vdZgxY4Z8fX0LV4Eb+OOPP7R27Vq99NJLxX4sAAAAlD0kXQAAAFAm1KxZM9uD4fLly8vd3V1Nmza1SzwHDx7Uiy++qJ49e+qNN96Q2fxPJ/Q+ffpo4sSJmjx5skJCQnTrrbfaJcar+fr6lvi5qlevXrZjtmnTRt27d1ffvn01btw4rVy5Ui4uLiUaU1lRuXLl6673nXfeqbFjx+rNN99Up06dVL169WL9HQoNDS2Wcu19LAAAADg3hhcDAAAArnLw4EGNGjVKzZo1U7NmzTR27FgdP3482z4ff/yx7rjjDoWFhal9+/Z65ZVXlJCQIMkyTNHJkyf11VdfKSQkRCdOnMjxOB9++KG8vLz08ssvZ0u4ZHn22WdVpUoVzZw507puyJAhGjJkSLb9chr269SpU3rqqafUqlUrNWnSREOHDtXevXuzve+7775Tnz59FB4erjZt2uiZZ57RuXPnrMfZvHmzNm/ebC07p+P8+eefGjlypFq3bq1mzZpp9OjR+vvvv6+LbcOGDRoxYoSaNGmiW2+9VZMnT1Z6evoNr0NuAgIC9OCDD+rw4cPavHmzdf2WLVs0cuRItWzZUo0bN1aXLl00ffp0ZWZmSpJ1OLAZM2ZkGxps9erVuv/++xUREaHGjRvrjjvu0CeffFKo2K6V13XIGjLr+++/1+OPP66IiAi1bNlS48eP1+XLl637paWl6e2331aHDh0UHh6ukSNHavny5dafr+nTp1t7bF07pFhCQoLGjx+vVq1aKSIiQo8//riio6MLVR+TyaSnn35aaWlp+vLLL7PVIWvYr8zMTE2dOlVdunSxXocpU6YoLS3NGp+U/TpMnz5d3bp104wZM9S6dWt17dpVMTExOQ75dfbsWY0aNUrh4eHq2LGjpk2bpoyMDOv2nN6zbNky67latmyZXnjhBUnSbbfdZt332vfFx8dr0qRJ6tq1q8LCwtSrVy9rna8+1rRp0zR58mTdeuut1mtz5MiRQp1fAAAAOAeSLgAAAMAVR44c0X333afo6Gi9+eabmjhxoo4fP66BAwdaH1R/++23mjx5sgYNGqR58+Zp7Nix+vrrr/X6669LsjxMrlixojp27KglS5YoODg4x2OtWbNGbdu2lbe3d47b3d3d1bVrV23btk0xMTH5rsPFixd133336a+//tJLL72kd955R5mZmRo0aJB1LpRt27bpmWeeUffu3TVnzhy98MIL2rhxo55++mlJ0oQJExQaGqrQ0FAtWbLEOsTX1TZu3KiBAwcqMzNTEydO1Ouvv67Tp0/rvvvuu27OlWeeeUbNmzfX7Nmz1bt3b82fP/+6B9gF0b59e2s9JGn//v0aNmyYypUrp3fffVfvv/++mjVrphkzZujbb7+VJC1ZskSSZdisrNdr167V2LFj1ahRI82aNUvTp09XtWrV9Nprr2n79u2Fjk/K33XIMmHCBFWrVk2zZs3Sgw8+qKVLl2r27NnW7S+//LIWLVqkwYMHa+bMmQoKCso2NNbdd9+tAQMGWOuZNSyYJH300UdKS0vT1KlT9a9//Utr1qzRq6++Wuh61a1bV1WqVLGe+2vNmTNHn376qcaOHav58+dr4MCBmjt3rrU+OV0HyZKgWrVqlaZMmaInn3xSgYGBOZY/ffp0lS9fXjNnzlT//v01e/ZsTZs2Ld/xd+rUSY888ogky+/qmDFjrtsnOTlZ999/v1asWKERI0Zo1qxZat68ucaPH5/tukiW83v48GFNmjRJr7/+uvbs2cPcMAAAAGUcw4sBAAAAV8yYMUOenp5auHChdX6HW265RV27dtXcuXM1btw4bdq0SdWqVdOgQYNkNpvVqlUreXt7WxMjoaGhcnd3V/ny5XMddik2NlaXL19WtWrVbhhPrVq1ZBiGTp06letD6GstWrRIsbGx+t///mctv0OHDurRo4emTp2qadOmadu2bfLw8NBDDz0kDw8PSVK5cuX0559/yjAM1atXz1r/3OrwzjvvqEaNGpo7d651iK927dqpW7dumj59ut577z3rvnfffbfGjh1rPZ+rV6/W2rVrs82xUxBBQUGSpPPnz0uyJF1uvfVWvfXWW9ZeQ23bttXatWu1ZcsW9e7d21qPq4fNOnTokO666y6NHz/eWnZERIRat26tLVu2qFmzZoWKT8rfdcjSsWNHjRs3TpLl/Pz+++9au3atnn76aR07dkxfffWVxo0bZ53fp3379rpw4YLWr19vrVPlypUlXX+9wsLC9N///tda9u7du/Xbb78Vul6S5fxfuHAhx22bN29Wo0aN1L9/f0lSq1at5OXldd3P07XDl6Wnp2vcuHF5DqV3yy23aNKkSZIs5yEhIUEfffSRRowYoYCAgDxjL1++vHWYwYYNG6p69erX7bNs2TIdPHhQn332mZo3b249Vnp6umbNmqX77rtP5cqVkyT5+/tr1qxZ1t+BY8eOafr06YqJicn37ywAAACcCz1dAAAAgCs2btyo1q1by9PTU+np6UpPT5evr69atGihP/74Q5JlXpGoqCj169dPs2bN0t69e9W7d28NHTo038cxDEOSZbimG8nanjVEVn5s2LBBDRs2VKVKlax1MJvN6tChg7UOLVu2VHJysnr37q13331X27ZtU7t27fToo4/mGZMkJSYm6s8//1SPHj2yzani7++vzp07ZxuCTLIkMq5WuXJlJSYm5rtOucmK9a677tKcOXOUlpamv//+W6tXr9b06dOVkZFhHdYqJw8++KAmT56sxMRE7d+/X99//70+/PBDSbrh+/IjP9chy7WJkqvPz6ZNm2QYhu64445s+/Tq1StfcWQlDbLUqFFDly5dKmBtrpfbz0nr1q31xx9/6P7779eCBQsUGRmpwYMH66677sqzzPr16+e5T48ePbJ93717dyUmJmrnzp35CTtfNm/erGrVql137vr06aOUlBTt2rXLui4sLCzb70BW8ispKclm8QAAAKB0oacLAAAAcEVsbKy+++47fffdd9dtK1++vCTLQ9/MzEx99tlnmjFjhqZOnapq1arp6aefVs+ePfN1nMDAQPn4+Fw3V8y1suaDqVq1aoHqcPTo0RyHBJMsD4MjIiL04YcfauHChZo3b55mz56tihUr6qGHHspX8ig+Pl6GYVh7nFwtKChI8fHx2dZ5enpm+95sNlsTT4Vx9uxZSf884E5OTtZrr72mr7/+Wunp6apevboiIiLk6up6w+NcvHhREyZM0OrVq2UymVSrVi3rg/aixCfl7zpk8fLyyrbt6vNz8eJFSVKFChWy7ZPTuc/JtcPXFfXcS5bzf/PNN+e47cEHH5SPj4+WLl2qyZMn680331T9+vX14osv6pZbbrlhufmp07X7ZP1exsXF5TP6vMXFxeX6sy0pW9Iqp2snFSxRCgAAAOdC0gUAAAC4ws/PT7feeqt1GKerubr+03Tu1auXevXqpfj4eK1fv15z5szRs88+qxYtWqhSpUr5Olbnzp3122+/6fLly/Lx8ZEkpaam6siRIwoJCVFGRoZWr16tRo0aZXvgfvWk4ZKu6zHi5+enVq1a6bnnnsvxuO7u7pIswyW1b99eSUlJ2rhxoz766CO98cYbatq0qZo0aXLD2P38/GQymXIcYur8+fPWoZeKy9U9diRp4sSJ+vHHH/Xee+/p1ltvtSYa8nrI/8wzzygyMlILFixQs2bN5O7urqSkJH3xxRdFjjG/1yEvWT9P0dHRqlKlinV91hxDJS0yMlLnzp3T/fffn+N2s9msQYMGadCgQYqOjtavv/6q2bNn67HHHtMff/yR73rn5tpeOlk/gwX5HclLQECAjh49et36rOHsGDYMAAAAN8LwYgAAAMAVrVq10qFDh9SwYUOFhYUpLCxMjRs31sKFC7Vq1SpJ0pNPPqlHH31UkuXB+p133qkxY8YoIyND586dk/TPp91vZNSoUUpOTtarr75q/VT8nj17dNddd2nUqFGaNGmSjh07Zp0LRZJ8fX115syZbOVcO+F7q1atdOTIEdWpU8dah7CwMK1YsUJffPGFXFxcNHnyZA0YMECGYcjLy0udO3e2zily+vTpPOvg7e2txo0b67vvvsv2gDs+Pl5r1669blgmW0pISND8+fMVEhJinXNl27Ztat26tbp27WpNuOzZs0cXL17M1uPg2jpt27ZNt99+u9q0aWNNBmTNd1LUngr5uQ750bx5c7m4uOinn37Ktv7a7/PzM2cL06ZNk6enp/r27Zvj9vvuu0+vv/66JEsipF+/fho0aJDi4+OVkJBQ5FjXrVuX7ftvv/1WXl5e1kRhfn5H8jp+y5YtdfLkSW3bti3b+hUrVsjNzU3h4eGFDR8AAABlAD1dAAAAgCvGjBmj++67T6NGjdLAgQPl4eGhJUuWaPXq1daJz9u0aaMJEyZo8uTJ6tChgy5duqQZM2aodu3aatCggSTL3CZ79+7V5s2bFR4eft3wWpJl/oo333xTL7zwgo4dO6b77rtP1atX15NPPqmpU6cqIyNDt9xyi7p06WJ9T+fOnbVmzRpNnDhRXbt21bZt27R8+fJs5Q4bNkxff/21hg0bphEjRigwMFDfffedPv/8c73wwguSLD1AFixYoOeff159+vRRWlqa5s6dq3LlyqlNmzbWOuzYsUMbNmxQaGjodfE//fTTGjlypB588EENHjxYaWlp+vDDD5WammpNShXVoUOH5OHhIUlKSUnR4cOH9fHHHysmJkZTp061zisSHh6u77//Xv/73/9Ut25d7d+/X++//75MJlO2Ybyy6rRlyxa1aNFC4eHh+uabb9SoUSNVrlxZO3bs0AcffHDd+3KzcOHC69b5+vpqwIAB+boO+VGjRg31799fU6ZMUVpamho0aKBVq1bpl19+kfRPAsHf31+StHLlSjVp0kQ1atTI9zFycubMGes8Kenp6Tp79qy++uorrV+/Xv/5z3+sQ7tdq2XLlpo/f76CgoIUERGhs2fPasGCBWrVqpV1KLBrr0NB/PTTT6pUqZJuvfVWrV+/XkuWLNETTzwhX19fSZbfkQ8++ECzZ89W06ZNtXbtWm3YsCFbGVnnatWqVerQoYPq1q2bbXu/fv302Wef6dFHH9Xjjz+uGjVqaM2aNVq6dKkeffRR6/sBAACAnJB0AQAAAK5o0KCBPv30U7377rt67rnnZBiG6tevr5kzZ+q2226TZPkkf1pamhYvXqzPPvtMnp6euuWWW/Tss8/Kzc1NkjRixAi98cYbGjlypBYsWJDrg+WePXuqfv36WrhwoaZNm2Ydmqtr164KCwvT3Llz1b9/f73++usKDQ1V//79dezYMX311VdasmSJWrVqpalTp2rgwIHWMitVqqTFixfrnXfe0SuvvKKUlBTVrl1bEydO1IABAyRJHTp00Ntvv6358+fr0UcflclkUvPmzfXRRx9ZhwYbNGiQ9uzZo4ceekiTJk1ScHBwttizEjfTpk3TU089JXd3d7Vo0UKTJ0/Odb6PgvrPf/5jfe3t7a3g4GC1a9dOw4YNy5ZUeP7555WWlqb33ntPqampql69uh555BEdOnRIa9asUUZGhlxcXDR69GjNmjVLDz30kL777ju9+eabeu211/Taa69JkmrXrq1XX31VK1as0NatW/OMb9KkSdetq1atmgYMGJCv65BfL730kry9vTV//nwlJCTolltu0SOPPKKZM2dae/Z0795dX3/9tZ5//nkNGDBAr7zySoGOca0vv/xSX375pSTJzc1NwcHBaty4sT755JMbJkqeeOIJubu7a+nSpZo5c6b8/PzUpUsXPf3009Z9rr0OBfH888/rhx9+0MKFC1WxYkW98MIL2eYhGjVqlC5evKj58+crLS1NnTp10sSJE/XII49Y92ndurVuvfVWvfPOO9qwYYM+/PDDbMfw8vLSxx9/rHfeeUfTpk1TQkKCbrrppkJdOwAAAJQ9JqOosygCAAAAKBYXL17Uxx9/rP79+6t69er2Dgd2EBsbq99++03t27fPNpfI5MmTtWzZMm3atMmO0QEAAAC4FkkXAAAAAHBQKSkp6tChgxo2bKihQ4fK29tb27dv18yZMzV69GibDeUGAAAAwDZIugAAAACAA9u3b5/ee+897dy5U0lJSapZs6buu+8+DRo0yDqvDQAAAADHQNIFAAAAAAAAAADABsz2DgAAAAAAAAAAAMAZkHQBAAAAAAAAAACwAZIuAAAAAAAAAAAANuBq7wAAAADwjx07dsgwDLm5udk7FAAAHEZaWppMJpMiIiLsHQoAAMAN0dMFAADAgRiGIcMw7B2GlWEYSk1NdaiYHB3nrOA4ZwXHOSsYzlfBOdo5c7T7IwAAQG7o6QIAAJCHtLQ0zZgxQ19//bXi4uLUsGFDPfPMM2rWrJkkad++fZo4caL27NmjcuXKaciQIRo5cmShjpXVwyUsLMxm8RdFYmKi9u3bp3r16snb29ve4ZQKnLOC45wVHOesYDhfBedo5+zPP/+0dwgAAAD5Qk8XAACAPLz//vtaunSpXn/9dS1fvlw33XSTHnroIZ09e1YxMTEaPny4ateuraVLl+qxxx7T1KlTtXTpUnuHDQAAAAAAShg9XQAAAPLw888/q1evXmrXrp0k6fnnn9cXX3yhnTt3KioqSu7u7nrllVfk6uqqunXr6ujRo5ozZ4769+9v58gBAAAAAEBJoqcLAABAHsqVK6dffvlFJ06cUEZGhpYsWSJ3d3c1bNhQW7duVcuWLeXq+s9nWdq0aaMjR44oOjrajlEDAAAAAICSRk8XAACAPIwfP17/+te/dNttt8nFxUVms1lTp05VzZo1debMGdWvXz/b/sHBwZKkU6dOqUKFCgU+nmEYSkxMtEnsRZWUlJTtK/LGOSs4zlnBcc4KhvNVcI52zgzDkMlksncYAAAAeSLpAgAAkIfIyEj5+/tr5syZqlSpkr744guNGzdOn3zyiZKTk+Xu7p5tfw8PD0lSSkpKoY6Xlpamffv2FTluW4qKirJ3CKUO56zgOGcFxzkrGM5XwTnSObv2fgsAAOCISLoAAADcwMmTJ/Xss89q4cKFatGihSQpLCxMhw4d0vTp0+Xp6anU1NRs78lKtnh7exfqmG5ubqpXr17RAreRpKQkRUVFqXbt2vLy8rJ3OKVCWT1nRfkEekpKik6dOqWqVatak5ZXMwyjKKE5pbL6c1ZYnK+Cc7RzdujQIXuHAAAAkC8kXQAAAG5g9+7dSktLU1hYWLb1TZo00W+//aaqVavq3Llz2bZlfV+pUqVCHdNkMhU6YVNcvLy8HC4mR1fWzlmmYchcyMSLl5eXypUrZ/Nyy4Ky9nNWVJyvgnOUc8bQYgAAoLQg6QIAAHADVapUkSQdOHBA4eHh1vUHDx5UrVq11LRpUy1evFgZGRlycXGRJG3YsEF16tQp1HwuQGllNpm0dO9eXSjEfETp6emKiYlRYGCgXF3/+RclyNtb/UNDbRkmAAAAABQrki4AAAA3EB4erhYtWmjcuHGaMGGCKleurOXLl2vDhg367LPPVKNGDc2dO1fjx4/Xgw8+qN27d2vRokV69dVX7R06UOIuJCbqdEJCgd+Xlpam8zExSnJ1lZubWzFEBgAAAAAlg6QLAADADZjNZs2aNUvvvfeeXnjhBcXFxal+/fpauHChmjZtKkmaO3euJk6cqL59+6pixYp67rnn1LdvX/sGDgAAAAAAShxJFwAAgDwEBARowoQJmjBhQo7bw8PDtWTJkhKOCgAAAAAAOBqzvQMAAAAAAAAAAABwBiRdAAAAAAAAAAAAbICkCwAAAAAAAAAAgA2QdAEAAAAAAAAAALABki4AAAAAAAAAAAA2QNIFAAAAAAAAAADABki6AAAAAAAAAAAA2ABJFwAAAAAAAAAAABsg6QIAAAAAAAAAAGADJF0AAAAAAAAAAABsgKQLAAAAAIfk6+6uTMOwebnFUSYAAAAASJKrvQMAAAAAgJx4urrKbDJp6d69upCYaJMyg7y91T801CZlAQAAAMC1SLoAAAAAyLfEtDT9HR2tA9HROhYXp9Px8TqdkKDTCQn6OzpayenpSsvMVHpmpjINQ65ms1zNZrmZzXJzcZGvm5v8PDzk5+4uPw8PVfDyUqC7+w2PeSExUacTEkqohgAAAABQeCRdAAAAAFzHMAwdjYvT9tOnte3UKe04c0Z7z5/Xsbg4FcfgXN4uLqp07pyqBQSoVkCAavj7F8NRAAAAAKB4kXQBAAAAoOT0dG07dUrrjx3T78eP64/jxxWdlJTjvoGengoJCtJNgYGq4utrWfz8tOnECV1KSZGbi4tczWaZTSalX+n1kpaRodSMDCWkpir+ynIpOVnnExMVl5KixIwMHYmL05G4OK2XZJJUNzBQ206flgxDbi4uMplMJXpOAAAAAKCgSLoAAAAAZVBiWprWHT2qX6KitP7YMW05dUqpGRnZ9nEzm9U4OFjNq1RRRJUqCgsOVoOgIAV5e+eYAIlPSSnUMGAJSUn6+9Qppbm769TlyzoaF6fY5GQdionRpPXrJUkBHh5qGBSkRsHBqubnRwIGAAAAgEMi6QIAAACUARmZmdp2+rRWRUZq9ZEj+uP48euSLJV8fNS2Zk21q1FDbWvWVJNKleThWvz/Mni4uqqSl5cqVqyoVm5ukqS45GRlGoZOJyTo6wMHFJeSoo0nT2rjyZOq7OurVlWrqnFwsNxcXIo9PgAAAADIL5IuAAAAgJOKTU7Wd3//reX792vV4cOKTU7Otr1mQIC61qmjDrVqqW3NmqobGOgwPUgCPD0VFhys/qGhmr5pk34/flx7z5/XvgsXdCYhQSsOHtSqw4cVUbmybqlRQ77u7vYOGQAAAABIugAAAACOKNMwZC5EAiQmKUlL/vpLS/ft09qoKKVnZlq3BXh4qHOdOup+003qetNNqle+vMMkWW7E3cVFDYKC1CAoSIlpadpx5oy2njql2ORk/XHihDafOqUWVauqfc2a8r7SUwYAAAAA7IGkCwAAAOCAzCaTlu7dqwuJiXnum5GZqb0XLmjjiRPadfZstkRLFV9fNalUSeGVKql5lSq6p3Hj4gy72Hm7ualtjRq6pXp1/R0drfXHj+vEpUvaeOKEdp45ow41a6pVtWpyMZvtHSoAAACAMoikCwAAAOCgLiQm3nBi+pT0dG07fVobT5xQfGqqdX2wj4/Cr0x6X8Hb27o+5prhxUozs8mkkKAg1a9QQZExMVp9+LDOXr6snw4f1o4zZ9S7fn3VCAiwd5gAAAAAyhiSLgAAAEApczk1VZtOntSWU6eUnJ4uSfJydVVYpUpqWqmSKvv6lophw2zBZDKpXvnyuikwUDvPnNHPR47ofGKi5u/cqTbVqum2m26SK71eAAAAAJQQki4AAABAKZGSnq7fjx/XhhMnrEOIVfDy0q01aii8UqUynVwwm0xqVqWKGgQFadXhw9p55ow2njypqLg49W/YUEFX9fgBAAAAgOJC0gUAAABwcIZh6M9z5/RTZKQup6VJkqr6+aldjRoKCQqSuYz0askPbzc3/V9IiBpUqKCvDxzQmYQEfbhtm+6sV09NK1e2d3gAAAAAnBxJFwAAAMCBxSYn65uDB3U4JkaSVN7LS11vukkNKlQoM0OIFUZIUJAe8fPTV/v360hsrFYcPKiouDg9FBFh79AAAAAAOLGyO/4AAAAA4MAMw9DGEyf0/tatOhwTIxeTSV1q19aYFi3UMCiIhEs++Hl4aEh4uG6rU0cmSbvPntV7mzbp/OXL9g4NAAAAgJMi6QIAAJAPy5cvV48ePRQWFqaePXvq+++/t27bt2+fBg8erKZNm6pTp06aN2+eHSOFM0hMS9PQ5cu1cNcupWZkqIa/vx5p0ULta9WSSxmet6UwTCaT2tWsqcHh4fJwcVFkTIxaz52rvefP2zs0AAAAAE6I/9gAAADy8PXXX+vFF1/Uvffeq5UrV6pHjx566qmntGPHDsXExGj48OGqXbu2li5dqscee0xTp07V0qVL7R027MRkMsnLy6vQPVGOxMTo1nnz9PHu3TKbTOpcu7aGNW2qCkwEXyQ3BQbqwWbNFOTtrSOxsbpl3jytioy0d1gAAAAAnAxzugAAANyAYRiaOnWqhg4dqqFDh0qSxo4dq+3bt2vz5s3avHmz3N3d9corr8jV1VV169bV0aNHNWfOHPXv39/O0aMkZBpGtonsvby8FBoaWqiyNhw/rj6LF+tCYqKCfXw0KCxM/h4etgq1zAvy9tbzbdvq6wMHtO7YMfX87DP9r39/9S/k9QIAAACAa5F0AQAAuIHDhw/r5MmT6t27d7b1WUOIPfTQQ2rZsqVcXf9pVrVp00YffPCBoqOjVaFChRKNFyXPbDJp6d69upCYKElKT09XTEyMAgMDs/1c5GXH6dOav3On0jIzdXP58lozdKi+PXhQpxMSiiv0MsnX3V2rhgzR0OXLteSvv3TPl19qfp8+Gtq0qb1DAwAAAOAESLoAAADcQFRUlCQpMTFRI0eO1N69e1W9enU98sgj6tKli86cOaP69etne09wcLAk6dSpU4VKuhiGocQrD/DtLSkpKdtXZJc1lNiZS5d0Kj5ekpSWlqbY2FhdMgy5ubnlq5zd587p20OHZEiqFxio8W3bqrq/v9LT05WWlmazeNPT0yVZrqdhGDYrN+s8FDberPdc+96seG15HtLT0+Xh6qq5d94pT7NZi/78U8O+/loxly/r4YgImxyjJPC7WTCcr4JztHNmGEahh20EAAAoSSRdAACAU5o5c6b69eunKlWqFKmchCu9DMaNG6dHH31UzzzzjH788UeNGTNGCxYsUHJystzd3bO9x+PKcFApKSmFOmZaWpr27dtXpLhtLSv5hOyyhhKLiYnR+ZiYbNtiY2PzVcbe2Fj9fmVS9xB/f7WrUEFpVx5yxsfH67wNJ3z3upLEOHLkiE0fpN7oPBTEtecs/so8NrY8D1nn4NjRoxpbs6ZS4uO1OCpK/1q9WodPnNDQevVscpySwu9mwXC+Cs6Rztm191sAAABHRNIFAAA4pUWLFmnmzJlq3bq1+vXrp+7du1uTIQWR1VNh5MiR6tu3rySpYcOG2rt3rxYsWCBPT0+lpqZme09WssW7kBOfu7m5qZ6DPPhNSkpSVFSUateuLS8vL3uH43CyPnUdGBiopCtDiWX1dClXrlyePV12nztnTbi0rFJFXWvXlslkkp+fnyTJz89PFW0Yb+CVcuvUqWPzni5S9vNQELmds+I4D9eeg7kNG6rm+vX678aNmr5/v6pUrqwnWra00dGKD7+bBcP5KjhHO2eHDh2ydwgAAAD5QtIFAAA4pfXr12v16tVavny5nn/+eb366qvq0aOH+vbtq4gCDCFUuXJlSbpuCLF69epp7dq1qlatms6dO5dtW9b3lSpVKlTsJpOp0Amb4uLl5eVwMTkSV1fX6xIsbm5uN0y67Dt/Xt9eeYjYplo1da9b15q8yJoLJqdyixqnpGJ7gFrUeK89Z8VxHnI6B5Nvv10+np6asHatXly7Vv5eXhrbqpVNjlfc+N0sGM5XwTnKOWNoMQAAUFqY7R0AAABAcXB3d1ePHj304Ycf6pdfftHo0aP1119/6f7779edd96pOXPmKDo6Os9yQkND5ePjo127dmVbf/DgQdWsWVMtW7bUtm3blJGRYd22YcMG1alTp1DzuaBsOBwTo6X79smQ1LRy5WwJF9jHSx066MV27SRJj37/veZt327niAAAAACURiRdAACA0wsODtYDDzyg0aNHq0WLFjpy5IimTJmijh076qWXXrLO25ITT09PPfjgg5o5c6ZWrlypY8eO6f3339fvv/+u4cOHq3///kpISND48eN16NAhLVu2TIsWLdKoUaNKsIYoTY7HxWnxnj3KMAyFBgWpd/36JFwcgMlk0utduuhfbdpIkh765ht9unu3naMCAAAAUNowvBgAAHBqmzdv1tdff60ff/xRiYmJatOmjTXh8uuvv+o///mPzpw5ozlz5uRaxpgxY+Tl5aV3331XZ8+eVd26dTV9+nS1bt1akjR37lxNnDhRffv2VcWKFfXcc89Z538BrhadmKjP9uxRWmam6gYGqm/DhjKTcHEYJpNJ73TvruT0dL2/daseWL5cHq6uGhAaau/QAAAAAJQSJF0AAIBTevfdd/XNN9/o9OnTqlKlioYNG6Z+/fqpatWq1n169OihAwcO6KOPPsqzvOHDh2v48OE5bgsPD9eSJUtsFjucU3J6uv63Z4+S09NV3c9P9zRqJFczHc8djclk0owePZScnq4FO3dq4NKl8nBxUe+QEHuHBgAAAKAUIOkCAACc0oIFC9S1a1e99tpruvXWW3MdviksLExPPvlkyQaHMifTMLR0715FJyXJ38ND9zZuLHcXF3uHhVyYTSbN6d1bKRkZ+uzPPzXgiy+0cuBAdatb196hAQAAAHBwJF0AAIBTWrdunQICAnT+/HlrwiUuLk6nT59WgwYNrPt17drVXiGiDFl1+LAOxcTI1WzWfY0aydfd3d4hlVm+7u7KNIw8h3VzMZu16K67lJyermX79un/Fi/WT0OGqF3Nmrm+Jz/lAgAAAHBuJF0AAIBTMpvNGj58uE6fPq0ffvhBkrRr1y49/PDD6tKli9555x15eXnZOUqUBTtOn9bGEyckSXc1aKAqfn52jqhs83R1ldlk0tK9e3UhMTHP/bvUrq0DFy7or/Pn1e3jj/Wv1q1Vq1y56/YL8vZWf+Z+AQAAAMo8BpEGAABO6a233tLff/+tp556yrquTZs2mjVrlvbs2aNp06bZMTqUFScvXdLKv/+WJHWsVUuNKla0c0TIciExUacTEvJczicm6v9CQlQrIEDJ6el6b9Mm7Tp79rr98pPAAQAAAOD8SLoAAACntGbNGo0bN07du3e3rnN3d1eXLl301FNP6fvvv7djdCgLktLT9cXevco0DDUIClLHWrXsHRIKyc3FRQMbN1Y1Pz8lpafr4927FU2SBQAAAEAOSLoAAACndPnyZfn7++e4rUKFCoqJiSnhiFCWGIahbw8dUlxKigI9PfV/ISHWuYVQOnm4umpQWJgq+fgoITVVH+3erbjkZHuHBQAAAMDBkHQBAABOqVGjRlq6dGmO25YtW6aQkJASjghlyZ+xsTp48aJcTCbdHRoqT1emUnQGXm5uGhwergpeXrqUkqKPdu9WfEqKvcMCAAAA4ED47w8AADilRx55RA899JD69eunbt26qUKFCrp48aJ+/vln/fXXX5o9e7a9Q4STOhkfr80XLkiSbq9bV1X8/OwcEWzJ191dDzRpogU7d+piUpI+3r1bw5o2tXdYAAAAABwEPV0AAIBTatu2rd5//32ZTCZNmzZNL7/8sqZOnaqMjAzNmjVLHTp0sHeIcEJJaWn66sABGZIaVqigFlWr2jskFAN/Dw89EB4uP3d3nU9M1Ce7dyspLc3eYQEAAABwAPR0AQAATqtjx47q2LGjUlJSFBsbKz8/P3l7e9s7LDgpwzD0zcGDupSaKn83N/WoW5d5XJxYoJeXhoSHa+GuXTqdkKBpmzdreESEAjw97R0aAAAAADuipwsAAHBqcXFxiomJUUZGhmJjY3Xq1CnrAtjSzrNnte/CBZlNJnWpXFkezOPi9Cr6+GhIeLg8XV11JDZW3T/5RLHJyfYOCwAAAIAd8Z8gAABwSlFRUXr++ee1a9euXPfZt29fCUYEZ3bu8mX9cOiQJKlDjRqq6OFh54hy5uvurkzDkJkeODZT2ddXQ5s00Se7d2vzyZPq9vHH+mnwYAV6edk7NAAAAAB2QNIFAAA4pddee01RUVF69NFHVblyZZnNdPBF8UjLyNCCnTuVmpGhWgEBalOtmqIvXLB3WDnydHWV2WTS0r17dSEx0Wbl1itfXrfddJPNyittKvv66l9t2mj2tm3aeuqUbvvoI60aMkQVGM4QAAAAKHNIugAAAKe0detWTZw4Ub169bJ3KHByr//2m47ExsrDxUV9GzQoFb1ILiQm6nRCgs3KCyK5oOr+/vpl6FDd9tFH2nHmjDovWqQfBg9WVT8/e4cGAAAAoATxkU8AAOCUfH19FRAQYO8w4OT+OH5cr69bJ0nqVb8+k6iXcY2Dg7V26FBV8fXVn+fOqe38+fo7OtreYQEAAAAoQSRdAACAU/q///s/ffrppzIMw96hwEldTk3V0OXLlWkYal2tmhoHB9s7JDiAhhUr6vcRI1SvfHlFxcaq7fz52n76tL3DAgAAAFBCGF4MAAA4JS8vL23btk3dunVTWFiYPK/pgWAymfTGG2/YKTo4g+dXr9ahixdV3d9f9zVqpNiUFHuHBAdRJzBQv48YoTs//VTbT59Wp4ULtfy++9SlTh17hwYAAACgmJF0AQAATumrr76Sn5+fMjMztWvXruu2m0rBvBtwXGuOHNGMLVskSfP69NGRmBiSLsgm2MdHvwwdqrsWL9YvUVG645NP9EGvXhoeEWHv0AAAAAAUI5IuAADAKa1Zs8beIcBJXUpJ0fCvv5YkjW7eXN3r1tUHW7faOSo4In8PD303aJCGLV+uJX/9pRErVmjv+fN6s2tXuZgZ6RkAAABwRrT0AQCAU8vMzNT+/fv122+/KSEhQbGxsfYOCaXcUz/+qGNxcapTrpze6t7d3uHAQfi6uyszhzmkPF1d9b/+/TWhY0dJ0tsbNqjf558rvgA9o3IqFwAAAIBjoqcLAABwWl9//bXeeecdnTt3TiaTSV9++aWmT58uNzc3vfPOO3J3d7d3iChlvvv7b83bsUMmSQvvuku+/AzhCk9XV5lNJi3du1cXEhOv217F11cjIyK0aNcurThwQA1nztSo5s0V7ONzw3KDvL3VPzS0uMIGAAAAYGP0dAEAAE7pu+++07hx49SmTRu9++67Mq58Urx79+767bffNGvWLDtHiNLmYlKSHlyxQpL0ZJs26lCrlp0jgiO6kJio0wkJOS7V/f01tEkT+bq762R8vCauW6dfoqJy3f90QkKOCRzJMi+Vl5cX81MBAAAADoakCwAAcEqzZ8/Wfffdp//+97/qftUQUP369dOjjz6qb7/91o7RoTR6/PvvdTohQSEVKmhily72DgelVHV/fz3UrJlq+PsrJSNDS/76S6sPH851CLHchi3z8vJSaGiovLy8Ch0Lw5YBAAAAtsfwYgAAwCkdOXJE48aNy3FbkyZNNH369BKOCKXZsn379Omff8psMmnRXXfJy83N3iGhFPP38NDQJk206vBhbTp5Ur8fP66Tly6pX8OG8vPwyLZvbsOWpaenKyYmRoGBgXJ1Lfi/dQxbBgAAABQPki4AAMApVahQQZGRkWrbtu112yIjI1WhQgU7RIXS6Nzlyxq9cqUkaVzbtmpdvbqdI4IzcDGbdUe9eqrh768VBw8qKi5O72/dqv8LCVFIUNB1+2cNW5YlLS1N52NilOTqKjeSgAAAAIDDYHgxAADglHr06KFp06bphx9+UGpqqiTLHAh7/r+9O4+rssz/P/4+cDjsIKKioimCYrjhmqWpWVqjZblVlrRZuWU1bfa1zWZ+ZlNm0+Q0pWKLlluYFWVl21jmhmsoauK+scm+Hg737w+VCcUNDtyAr+fjcR5Hrvs+1/3mM8To+ZzrvuLj9c477+imm24yOSFqA8MwNP6rr5SSl6cOjRrppb59zY6EOqZdo0Z6qEsXNfbxUX5xsRZt366v//hDdofD7GgAAAAAKoCVLgAAoE56/PHHtXv3bj3++ONycTn5OZOoqCjl5eWpW7dueuyxx0xOiOpWYhhyucRNxxfGx2tZQoKsLi76aOhQuVfgNk7AhTTw8tKYzp31w969WnvkiDYcPaoDmZkafuWVZkcDAAAAcIn4VyMAAKiTbDab5s6dq9WrV2vNmjXKzMyUr6+vevToob59+8pyiW++Syf3iRk2bJheeOEFDRs2TJKUkJCgadOmKT4+XvXq1VNUVJTGjBnj7G8HTlDevhjnk1FQoL+tWiVJ+ktYmNYdPqx1hw+XOSesfn1d36qV07Pi8mN1cdGNYWEKrV9fy3fuVHJuruZs2qTikhINo/kCAAAA1Bo0XQAAQJ3Wq1evcvd1uVR2u11PPfWU8v70hn16erruv/9+3XDDDXr55Ze1ZcsWvfzyy6pXr56GDx9e6WvC+c7cF+NcDMPQJ/HxyrPb1dTXV52Cgsp9XQMvr6qIictYWP36Gtetmz7fuVN70tM1Z9MmJefm6torrjA7GgAAAICLQNMFAADUSbNmzbrgOY888shFz/f222/L29u7zNiSJUtks9k0depUWa1WhYaG6sCBA5ozZw5Nl1pu8/Hj2nPihFwtFt0WHi5XF7ZCRPXxsdl0V4cOWnfkiH7Yt0+f79qln/fv163h4QoJCDA7HgAAAIDzoOkCAADqpPM1XXx8fNSoUaOLbrps2LBBixcv1vLly9WvX7/S8bi4OHXv3l3WP+3z0bNnT7333ntKS0tTYGBghfPDPBkFBfo2MVGS1D8kRA3PaLYB1cFisahns2a6PiRE0Zs3a1damuZv26Y+LVqoT4sWZscDAAAAcA40XQAAQJ20c+fOs8by8vK0ceNGTZ06VS+88MJFzZOVlaVnnnlGzz//vJo0aVLm2PHjx9WmTZsyY40aNZIkHT16tMJNF8MwytzGzEz5+fllnmsri8UiT09PFRcXy263n/M8wzC0PCFBRQ6Hmvn6qmtQ0HnPLy4uLn0+fd6ZzxVR3rzOUFPnPVfNqiJvTa3BuVxRv742PvywBnz0kdYcOaL/Hjig/RkZGhQSIqniP2en8+bn58swDKflranqyu+y6lTTamYYRoX2YwMAAKhuNF0AAMBlw8vLS9dee60mTpyo1157TZ999tkFXzN16lRFRkbqlltuOetYQUGBbDZbmTF3d3dJUmFhYYVz2u12JSQkVPj1VWH//v1mR6gUT09PRUREKD09XSnp6ec8Lz4jQweysmS1WNSrfn2lpaaed97sU3u6ZGdnKyUlpcyxjIyMCuc937yVUdPnPbNmVZG3ptegvHm9bTYNadFC7sXF+jU5WQcyM/XB77/rusaNKzyv56mmy759+2rMm+rVobb/LjNDTarZmf+fCwAAUBPRdAEAAJedJk2aKPHU7aPOZ/ny5YqLi9OXX35Z7nEPDw8VFRWVGTvdbPGqxAbrbm5uCgsLq/DrnSk/P1/79+9Xy5Yt5enpaXacCjv96eiAgADlW8v/K3Bafr42nPq5uL5lS4WesbKpPL6+vqXPDU+N2e12ZWRkqF69enJzc6tQ3vLmdYaaOu+5alYVeWtqDS5m3mtCQ9WmSRN9tnu3UvLy9PWRI7q6aVP1bdFCLpe4AiDg1LwhISGXzUqXuvC7rDrVtJrt2bPH7AgAAAAXhaYLAAC4bBiGoWPHjmnOnDkKDg6+4PkxMTFKS0srs4+LJL300kuKjo5W06ZNlZycXObY6a+DgoIqnNNisVSqaVMVPD09a1ymirBareU2QkoMQ1/t2aPikhK1qldPVzVvflG3sTm9n09587q5uVW46XK+eSujps97Zs2qIm9Nr8GF5m3i76+HunTR13/8oS1JSVpz9KiO5eVpZESEvC7huqfnrQlvplenuvK7rDrVlJpxazEAAFBb0HQBAAB1Utu2bc/5Bo1hGHrttdcuOMeMGTNUUFBQZmzgwIF69NFHNWjQIH311VdatGiRHA6HXF1dJUlr1qxRSEhIhfdzgTl+O3RIh7Oz5e7qqiHh4by5hxrNzdVVg0JDFWCxaHVysvZnZGjupk26s317NfL2NjseAAAAcFmj6QIAAOqkiRMnlvvGuY+Pj/r166eWLVtecI5zrVYJDAxUcHCwhg8frrlz5+q5557Tgw8+qG3btunDDz/Uyy+/XNn4qEZJOTn6+dSeBTeFhcnfw8PcQMBFCvP1VWhQkD7dtUvpBQWK3rxZw6+8Um1o+gIAAACmoekCAADqpEmTJlX5NQIDAzV37lxNmzZNQ4cOVcOGDfXMM89o6NChVX5tOIejpETLd+2SwzDUJjBQnSpxWzjADI28vfVQly5aun279mdmamF8vG5o1UrXNGvGii0AAADABDRdAABAnXT06NFLOr9p06YXdd6uXbvKfN2xY0ctXrz4kq6FmmPVwYM6npMjT6tVt7Rpw5vUqJW83Nw0umNHrdizRxuPHdP3e/cqu7BQN4aG8jMNAAAAVDOaLgAAoE7q37//Jb3ZmJCQUIVpUBMdycrSLwcOSJIGt24tH5vN5ERAxbm6uOjmNm3UwMtL3yYmat2RI8qz23VreLhcXVzMjgcAAABcNmi6AACAOumf//ynXnrpJbVr105DhgxRUFCQ0tPT9eOPP2rFihUaP368goODzY4JkxQ5HFq2c6cMSe0aNlS7Ro3MjgQ4Rc9mzeTl5qbPd+3S78nJyi8u1siICNlcXc2OBgAAAFwWaLoAAIA6afny5erfv7+mT59eZnzQoEEKDAzUpk2b9Mgjj5iUDmb7Zs8encjPl5+7uwa3bm12HMCpOgYFydNq1ZIdO7TnxAnN37ZNd3foIA8r//wDAAAAqhrrzAEAQJ20du1a3XzzzeUe69OnjzZu3FjNiVBTJKSmavPx45KkoW3bytPNzeREgPO1DgzUPR07ysNq1eGsLC3Ytk2FxcVmxwIAAADqPJouAACgTgoICNCWLVvKPbZ69WoFBQVVbyDUCBkFBfpy1y5J0jXNm6tlvXrmBgKqUHN/f93bqZM8rVYdyc7Wx7//TuMFAAAAqGKsLwcAAHXSiBEj9J///Ef5+fnq37+/6tevr9TUVH399ddatGiRXnzxRbMjopqVGIY+2rpV+cXFauzjo/4tW5odCahyjX18FNWxoz7atk2HsrL0SXy87u7QwexYAAAAQJ1F0wUAANRJEyZMUHZ2tj744ANFR0dLkgzDkKenp5544gndeeedJidEdXt73TrtSE2V1cVFw9q2lasLi75xeWji63uy8bJ1qw5mZmrh77/riauvNjsWAAAAUCfRdAEAAHWSxWLRs88+qwkTJmjLli3KzMxUQECAIiMj5ePjY3Y8VLPfk5I0+fvvJUkDW7VSQ29vkxMB1aupr69Gd+yo+du2aX9mpuZu2qTx3bvLSvMRAAAAcCr+hg0AAOo0Hx8fNWrUSP7+/oqMjFQx+xlcdgqKi3X3smUqdDjUoVEjdWva1OxIgCma+fnp7g4dZHVx0bbkZI2PjZVhGGbHAgAAAOoUmi4AAKDO+vzzz9WvXz8NHTpU48aN04EDB/Tss89q0qRJKioqMjseqskzK1fq9+RkNfTyUlTHjrJYLGZHAkxzhb+/hl95pSyS5m7erKk//2x2JAAAAKBOoekCAADqpK+//lqTJ09Wz549NXPmTJWUlEiSBg4cqFWrVumdd94xOSGqw2cJCXp7/XpJ0ge33SY/d3eTEwHma9uggUa1by9J+tuqVXovLs7kRAAAAEDdQdMFAADUSe+++67uvPNOvfbaaxo4cGDp+LBhw/TII4/oq6++MjEdqsOBjAw98MUXkqSnrr5ag1q3NjkRUHP0adFCL/bpI0ma8PXX+mLXLpMTAQAAAHUDTRcAAFAn7du3TwMGDCj3WKdOnZSUlFTNiVCd7A6H7oyJUUZBga4KDta06683OxJQ40zt108Pdu6sEsPQXTEx2nL8uNmRAAAAgFqPpgsAAKiTAgMDlZiYWO6xxMREBQYGVnMiVKfnf/xRaw8flr+7uxaNGCGbq6vZkYAax2Kx6J3Bg3VDq1bKtds1ZOFCHc/JMTsWAAAAUKvRdAEAAHXSoEGD9K9//UvffPONioqKJJ18gzE+Pl7vvPOObrrpJpMToqqs+OMPvfbbb5Kkebfeqpb16pkbCKjB3FxdtWTECIUHBupQVpZuW7RI+Xa72bEAAACAWoumCwAAqJMef/xxRUZG6vHHH1fXrl0lSVFRURo5cqRatmypxx57zOSEqApHsrJ0z/LlkqRHunfXsCuvNDcQUAsEeHrqy1GjFODhoXVHjmjMF1/IMAyzYwEAAAC1ktXsAAAAAFXBZrNp7ty5Wr16tdauXauMjAz5+vqqR48e6tu3rywWi9kR4WTFJSW6a9kypeblqXPjxnp94ECzIwG1RuvAQMXcfrsGLlighfHximjYUM/36WN2LAAAAKDWoekCAADqpHHjxumee+5Rr1691KtXL7PjoBq8/PPPWnXggHxsNi0eMUIeVv6qC1yK60JC9M6gQXo4NlYv/PSTOjRqpFvbtjU7FgAAAFCrcHsxAABQJ23YsEGubJ5ea5Vc4q2NYnfv1v/75RdJ0uybb1brwMCqiAXUeQ917apHuneXJI3+7DPtSEkxOREAAABQu/DxPwAAUCf16tVLS5cuVWRkpNzd3c2Og0vkYrEoZscOpeblXfDc5NxcTf/1V0lSvxYtlFVYqPfi4sqcE1a/vq5v1apKsgJ1zcwbb1R8Sop+3r9fty5apPUPPqgAT0+zYwEAAAC1Ak0XAABQJ7m7u2vFihVauXKlmjVrpsAzVj5YLBZ9+OGHJqXDxUjNy9OxnJzznmN3ODR382blFxeruZ+fel9xRbmvaeDlVVUxgTrHzdVVS0aMUPc5c7TnxAndGROjr++6S64u3CgBAAAAuBD+1gwAAOqk48ePq3PnzurYsaPq168vwzDKPEpKSsyOiEoyDENf7t6t5Nxcebu5aWREBG8KA07S0Ntby++8U55Wq75LTNT//fCD2ZEAAACAWoGVLgAAoM748ssvde2116pevXqaP3++2XFQxTYcParfk5NlkTQyIkK+3EYOcKrIxo31/q236s6YGL3+22/qFBSkuzt2NDsWAAAAUKPxUUAAAFBnPPPMMzp48GCZsXfffVepqakmJUJVOZiZqW8TEyVJA0JD1aJePXMDAXXUHe3b6/9695YkPfjll9p49KjJiQAAAICajaYLAACoMwzDKPO1w+HQW2+9paSkJJMSoSrkFBVp6Y4dKjEMtWvYUD2Dg82OBNRpf7/uOg1q3VoFxcW6bfFiJV1gryUAAADgckbTBQAA1GlnNmJQuzlKSrR0xw7lFBWpoZeXhoSHy2KxmB0LqNNcXVz0ybBhahMYqMNZWRqxdKmKHA6zYwEAAAA1Ek0XAACAC8jIyNCLL76oPn36qEuXLho1apTi4uJKjyckJGj06NGKjIxUv379FB0dbWLausswDH31xx86mJkpd1dX3dGunWyurmbHAi4L/h4e+vzOO+Xn7q5fDx7UYytWmB0JAAAAqJFougAAAFzAE088oa1bt2rmzJn69NNP1a5dO40ZM0aJiYlKT0/X/fffr5YtWyomJkaTJk3SW2+9pZiYGLNj1znrjhzR5uPHZZE0/MorFejlZXYk4LLStkEDfTJsmCyS3t24Ue/9qfkMAAAA4CSr2QEAAACqWmVuP3XgwAGtXr1aCxcuVJcuXSRJzz33nFatWqXY2Fh5eHjIZrNp6tSpslqtCg0N1YEDBzRnzhwNHz7cWd/CZW/PiRP6LjFRkjQgNFStAwNNTgRcnga3aaNp/ftryo8/6pEVKxTRsKGubdHC7FgAAABAjUHTBQAA1CkTJ06UzWYrMzZu3Di5ubmVGbNYLPr+++8vOF9AQIBmz56t9u3bl3mtYRjKzMxUfHy8unfvLqv1f3+t6tmzp9577z2lpaUpkOZApaXk5urTHTtkSOrcuLF6BgebHQm4rD3bu7e2JCVpyfbtGrF0qeIeekjN/f3NjgUAAADUCDRdAABAnTF06FCnz+nn56e+ffuWGVuxYoUOHjyo3r17680331SbNm3KHG/UqJEk6ejRozRdKinPbtfC+HgVOhy6wt9fg1u3rtTKJQCVZ7FYNG/IEO1KTdXWpCTdtnixfr3/fnme0dwGAAAALkc0XQAAQJ0xffr0Kr/Gxo0bNWXKFF1//fXq37+/pk+fftbKGnd3d0lSYWFhha5hGIby8vIqndUZ8vPzyzxXB4vFIk9PTxUWFWlJfLzSCwrk7+6uoW3aqMThUInDcclzFhcXlz7b7XanZS1v3jOfnTWvM9TUec9Vs6rIW1NrcKnzVvbn7PS8+fn5Mgzjkl9vkbTw1lt17fz52nTsmO7/7DNFDx5cY5uiZvwuq+1qWs0Mw6ixP18AAAB/RtMFAADgIn3//fd66qmn1KlTJ82cOVOS5OHhoaKiojLnnW62eFVwo3e73a6EhITKhXWy/fv3V9u1PD09deWVV2rB1q06kJUlN4tFNwQFKS8jQxVtRWWf+t8iOztbKSkpTst6vnkzMjKqZN7KqOnznlmzqshb02twqfNW9OfM81TTZd++fZV6U31ap06auG6dFickqLGkqNDQCs9VHarzd1ldUZNqduaHHAAAAGoimi4AAAAXYcGCBZo2bZoGDBigGTNmlL7x07hxYyUnJ5c59/TXQUFBFbqWm5ubwsLCKhfYSfLz87V//361bNlSnp6e1XJNi8WiN9eu1YZTdbwtPFyt69ev1Jy+vr6lzw0rnfD889rtdmVkZKhevXpn7SVUmXmdoabOe66aVUXemlqDS523sj9nAafmDQkJqdBKl9OulJTr7a0nf/hBb+/cqevatdOAkJAKz1dVzPhdVtvVtJrt2bPH7AgAAAAXhaYLAADABXzyySf6+9//rqioKE2ZMkUuLi6lx7p3765FixbJ4XDI1dVVkrRmzRqFhIRUeD8Xi8VS4VUyVcXT07PaMi3dvl1PfvedJGlAq1aKqGDz6s+sVmvpc0UbIZc6r5ubW4WvZUbemjDvmTWrirw1vQaXOm9Ff85Oz+uMN9P/2quXtqelad6WLbovNlYbHnpIYZVslFaV6vxdVlfUlJpxazEAAFBbuFz4FAAAgMvXvn379Morr2jAgAEaO3as0tLSlJKSopSUFGVnZ2v48OHKycnRc889pz179mjZsmX68MMPNXbsWLOj10q/HjyoqM8+kyT1a9FCVzdrZnIiABdisVj0zuDB6tmsmTIKCjRk4UJlVXBPKwAAAKC2o+kCAABwHt9++63sdrtWrlyp3r17l3lMmzZNgYGBmjt3rvbt26ehQ4dq1qxZeuaZZzR06FCzo9c6u1JTdeuiRSp0OHRb27a6vV07PtkM1BLuVquW3X67mvr6KiE1VVGffaaSSty2DAAAAKituL0YAADAeYwbN07jxo077zkdO3bU4sWLqylR3XQ8J0d/+fhjncjP11XBwfp42DDN37rV7FgALkETX18tu/129fngA32xa5eeWblSMwYONDsWAAAAUK1Y6QIAAABTZRQU6MYFC7QvI0OhAQH6ctQoeTlxTwwA1eeqZs0UPWSIJOmNNWs047ffTE4EAAAAVC+aLgAAADBNnt2umz/5RNuSktTYx0ffjh6tht7eZscC6jwfm63Kbv91V4cOeu2GGyRJT69cyao1AAAAXFa4vRgAAABMUeRwaMSSJVp96JDqeXjo29GjFVq/vtmxgMuCh9UqF4tFMTt2KDUvz2nzNvDy0vCICD11zTU6npOjmWvX6oEvvlBDb2/dFBbmtOsAAAAANRVNFwAAAFQ7R0mJ7l2+XCv27JGn1aqv7rpLHYOCzI4FXHZS8/J0LCfH6fNaLBa9PnCgknJz9fHvv2v4kiX6PipKVzdv7vRrAQAAADUJtxcDAABAtSoxDI2LjdWi+Hi5ubho2R136BreiAXqHBeLRfNuvVU3hoYqz27XjQsWaO3hw2bHAgAAAKoUTRcAAABUm9MNl7mbN8vFYtH8oUO55RBQh9lcXRVz++3q26KFsouKNHD+fBovAAAAqNNougAAAKBalBiGJnz1leZs2lTacLmjfXuzYwGoYt42m766664yjZc1hw6ZHQsAAACoEjRdAAAAUOUMw9DEr77Sexs3yiLpw9tu010dOpgdC0A1Od146deypbKLinTjggVaffCg2bEAAAAAp6PpAgAAgCrlKCnRuNhYvfunhsvojh3NjgWgmnnbbIodNaq08XLD/Pn6LCHB7FgAAACAU9F0AQAAQJUpLC7WnTExmr1pkyyS3r/1VkV16mR2LAAmOd14Gdy6tQqKizV8yRL9a906s2MBAAAATkPTBQAAAFUip6hINy9cqE937JDN1VVLRo7UvZGRZscCYDJvm03L77xTY7t2lSHpsW++0RPffqsSwzA7GgAAAFBpNF0AAADgdKl5ebr+o4/0/d698nZz01d33aURERFmxwJQxXxstotqnlhdXPSfwYM1/frrJUlvrl2rYYsXK6OgoNzzacgAAACgtrCaHQAAAAB1y67UVA1ZtEi709JU39NTK+6+Wz2Cg82OBaAaeFitcrFYFLNjh1Lz8i54foCHhx6IjNRH27bp81271Ppf/9KDXbqoZb16pec08PLScJq2AAAAqCVougAAAMBpvktM1O1LlyqzsFDN/fz07ejRurJhQ7NjAahmqXl5OpaTc1HnNvf3132dOunThASl5ufrtd9+04BWrXRVcLAsFksVJwUAAACci9uLAQAAoNIMw9Bba9fqLx9/rMzCQl3TvLk2PPQQDRcAFyXYz09ju3bVlQ0aqMQw9G1iohZv366coiKzowEAAACXhKYLAAAAKiXPbteYL77Q46c2wr4/MlI/3nOPgnx8zI4GoBbxsFo1MiJCN4WFycVi0a60NP17wwb9dugQe7oAAACg1uD2YgAAAKiwrceP686YGO1MTZWLxaLXBwzQX3v25JZAACrEYrHoquBgtfD31xe7dulYTo4+2rZNf5w4oX/95S/q1rSp2REBAACA82KlCwAAAC7Z6duJ9Zg7VztTU9XEx0ffjR6tJ66+moYLgEpr7OOjB7t00Q2tWsnd1VVrDh9W9zlzNHTxYm06dszseAAAAMA5sdIFAAAAl+RgZqbGxcZqxZ49kqRuTZrozvbttefECe05caLS84fVr6/rW7Wq9DwAajcXi0W9mjfXDSEh2p6SogXbtmn5zp1avnOnbm7TRi/06aMewcFmxwQAAADKoOkCAACAi2J3OPTm2rV6+b//VZ7dLndXV70xcKBcLRYdz81VtpM2vG7g5eWUeQDUDfU8PPTR0KH6v9699cqvv+qT339X7O7dit29W12bNNH9kZEa1aGD6nt6mh0VAAAAoOkCAACAC1t9+LD++v332p6SIkm69oor9O7NNyuiYUO9FxdncjoAl4MrGzbU/KFD9UKfPpr2yy9a+Pvv2njsmDYeO6YnvvtOt7Vtq9vCwzUgNJTmLQAAAExD0wUAAADn9HtysiZv2KD/JiVJOrkK5fUBA3Rvp07s3QLAFG0CA/XhbbfpjYED9fG2bXp/yxZtTUrSku3btWT7dlkkdWvaVDeGhqrXFVeoS5Mm8uH3FQAAAKoJTRcAAACcZUdKiqb+/LOW7tghSbJIGtO5s1694QYF8glyADVAAy8vPdazpx7r2VObjx3Twvh4fZuYqG1JSdpw9Kg2HD1aem6wr69CvbzUPSVF4Q0bqlVAgFoFBCjYz082V1cTvwsAAADUNTRdAAAAIEkqMQytTEzUvzdsUOzu3TJOjQ9o2lSv3nSTujRvbmo+ADiXzk2aqHOTJnptwAAdzc7Wd4mJWrl3r+KOHtXutDQdyc7WkexsrTq1au/P/Nzd1cDLq8yjvoeHvG02ebm5ycvNTd6nnr3c3MqMe7m5ydNq/d+f3dzkwqoaAACAyxpNFwAAgMtcSm6u5m/bpv/ExWnPiROl40PbttWzPXvKNTVVbQMDTUwIABevqa+v7ouM1H2RkZKkrMJCrTtwQN9u3aocd3cdzM7W3vR07c/IUKHDoazCQmUVFmpverpTru/u6lqmCXOuBo23m5v83N3l7+Eh//M8+7q7lzZySgyjSpo6VTUvAADA5YimCwAAwGUoJTdXn+3cqSXbt+un/ftVYpxc1+Lv7q77IiM1vls3hTdooLy8PCWkppqcFgAqzs/dXb2bN1dwcbFCQkLk6ekp6WSjIT0/Xx///rsOZ2Yqx25XTlGRcoqKlGe3q8jhKH0U/unPRQ6HCouLZS8pUZHDIbvDIXtJSen1Ck+dn15Q4JT8FkkBnp5qeGoVjt3hkJurq3xtNvmcevi6u6ueh4fqeXjIy2q9pD23Gnh5aXhEhFOyAgAAgKYLAADAZaG4pEQbjhzRyr179f3evfrt0CE5DKP0eLemTfVwly66q0MHedtsJiYFgLJ8bLZKr8Tw9PRUxBmNBReLRYFeXidXpths8rLZ1Mjbu0LzG4Yhe0mJ7A6Hmvn5aUBoqAqKi5VntyvfblfeqUf+qbG8Uw2ezIICZZ16ziwsPOu5yOGQIelEfr5O5OdrV1raBbO4ubjI191dvjab/E49+7q7l/7Z38NDPjYbK1sAAACqCE0XAACASiopKdGsWbO0dOlSZWVlqWvXrnrppZfUokULs6NJkqb88IP+vWGDsgoLy4x3bdJEIyMiNLJdO7UKCCj3tRaLRZ6enpf0qWkAcCYPq1UuFotiduxQal5eheYoLi5Wenq6AgICZLWe/GdwWP36ur5VK6dktFgssrm6yubqqmZ+fopo2PCced1cXE7ePszdXcG+vued1+5wKM9uV67dLn8PD13h76/PEhJ0LCdHuacaOrmnGjjZhYXKP7UC53ST5px5pdJGTCNvb+1OS1Nzf3818/NTcz8/NfPzk5+LS2XLAgAAcFmi6QIAAFBJ77zzjhYtWqTp06crKChIr7/+uh566CHFxsbKVgNWjSyMj1dWYaHqe3qqf0iIBrRqpQGtWinkHI2WPyvv0+EAYIbUvDwdy8mp0GvtdrtS0tOVb7XKzc1N0snbalWlyuQ9k8ViUQt/fw2PiFDaeea1OxzKPtWAyTr9XFj4v7FTfy4xjNK9bA5nZWnTsWNnzWV1cVEDd3e13LRJLQICSpsxwX5+auTtXfqo5+HBqhkAAIA/oekCAABQCUVFRZo3b56efvpp9e3bV5L05ptv6tprr9XKlSs1ePBgkxNKvz3wgJJzc7UrLU3p+fkyDEPfJSZe1GvL+3T4ac78lDgAoPLcXF1V39NT9U/tW1OeEsNQblGRsgoLlXlqBeQV/v46lJWlw1lZOpSZqaPZ2SouKdHx/Hwdz8/X2qNHzzmf1cVFDby8SpswDb28FOjpqRb16umhLl3k7+Hh9O8TAACgJqPpAgAAUAk7d+5Ubm6uevbsWTrm5+eniIgIbdiwoUY0XZr4+qqJr6/WHj58yZ+6Lu/T4adV9afEAQDO52KxnNzzxd1dwZJa16+vUR06lFmtUlxSoqScHB061YQpbchkZelYdrZS8vKUnJurjIKCk82ZnBwdL+f/X7zd3DS+e/dq/O4AAADMZzGMP+2gCgAAgEvy3XffadKkSdq6das8/vRp3scee0wFBQV67733Lmm+TZs2yTCMsxoclWWxWJRbVCTHpf7VzzD+t4H1GbePcXNxkaebW8XmPY+qmLdas56nZjUyb02Y9xw1q/U/C1U5byV/zmpTHZwyZzn1qk01qI55C4qLVfKneQ3DkGEYslgs59zXyzAMlejk3mYlOrmKpsQwJMOQ1cVFvu7ucnXSrcfsdrssFou6dOnilPkAAACqCitdAAAAKiH/1EbFZ+7d4u7urszMzEue7/QbW1Wxcb13Fe0vU5vmrU1Zmbdq561NWZm36uZk3v/xsNbstwfO1/wBAACoSWr236oAAABquNOrW4qKisqsdCksLJTnee6pfy6dO3d2WjYAAAAAAFC9XMwOAAAAUJs1adJEkpScnFxmPDk5WY0bNzYjEgAAAAAAMAlNFwAAgEpo27atfHx8tG7dutKxrKws7dixQ926dTMxGQAAAAAAqG7cXgwAAKASbDabRo8erRkzZqh+/foKDg7W66+/rsaNG2vAgAFmxwMAAAAAANWIpgsAAEAlPfrooyouLtbzzz+vgoICde/eXdHR0bJV0WbHAAAAAACgZrIYhmGYHQIAAAAAAAAAAKC2Y08XAAAAAAAAAAAAJ6DpAgAAAAAAAAAA4AQ0XQAAAAAAAAAAAJyApgsAAAAAAAAAAIAT0HQBAAAAAAAAAABwApouAAAAAAAAAAAATkDTBQAAAAAAAAAAwAlougAAAOAs77zzjqKiosqMJSQkaPTo0YqMjFS/fv0UHR1tUrqaISMjQy+++KL69OmjLl26aNSoUYqLiys9Tr3OlpaWpqefflo9e/ZU586d9fDDD2vPnj2lx6nZue3bt0+dO3fWsmXLSseoV/mOHDmi8PDwsx5Lly6VRN3Ks3z5cg0aNEgdOnTQ4MGDtWLFitJj1AsAAODS0HQBAABAGR988IH+9a9/lRlLT0/X/fffr5YtWyomJkaTJk3SW2+9pZiYGJNSmu+JJ57Q1q1bNXPmTH366adq166dxowZo8TEROp1DuPHj9ehQ4c0Z84cffrpp/Lw8NB9992n/Px8anYedrtdTz31lPLy8krHqNe57dq1S+7u7vrll1/066+/lj5uueUW6laOzz//XFOmTNEdd9yh2NhYDRo0SE888YQ2b95MvQAAACrAanYAAAAA1AxJSUl67rnntHHjRoWEhJQ5tmTJEtlsNk2dOlVWq1WhoaE6cOCA5syZo+HDh5uU2DwHDhzQ6tWrtXDhQnXp0kWS9Nxzz2nVqlWKjY2Vh4cH9TpDenq6mjVrpvHjx6t169aSpAkTJujWW2/VH3/8oTVr1lCzc3j77bfl7e1dZoz/Js9t9+7dCgkJUaNGjc469uGHH1K3PzEMQ2+99Zbuvfde3XvvvZKkiRMnatOmTVq/fr3Wr19PvQAAAC4RK10AAAAgSdq+fbv8/f31xRdfqFOnTmWOxcXFqXv37rJa//eZnZ49e2rfvn1KS0ur7qimCwgI0OzZs9W+ffvSMYvFIsMwlJmZSb3KERAQoJkzZ5Y2XFJTUxUdHa3GjRsrLCyMmp3Dhg0btHjxYv3jH/8oM069zm3Xrl0KCwsr9xh1K2vv3r06cuSIbrnlljLj0dHRGjt2LPUCAACoAJouAAAAkCT1799fb7zxhpo3b37WsePHj6tx48Zlxk5/ivzo0aPVkq8m8fPzU9++fWWz2UrHVqxYoYMHD6p3797U6wJeeOEF9erVS998842mTZsmLy8valaOrKwsPfPMM3r++efVpEmTMseo17nt3r1baWlpuuuuu3TNNddo1KhR+uWXXyRRtzPt379fkpSXl6cxY8bo6quv1siRI/Xjjz9Kol4AAAAVQdMFAAAAF1RQUFCmwSBJ7u7ukqTCwkIzItUoGzdu1JQpU3T99derf//+1OsC7r33XsXExGjIkCGaOHGitm/fTs3KMXXqVEVGRp61CkHiv8lzKSoq0v79+5WTk6PHH39cs2fPVocOHfTQQw9pzZo11O0MOTk5kqTJkyfr5ptv1rx589SrVy9NmDCBegEAAFQQe7oAAADggjw8PFRUVFRm7PQbbl5eXmZEqjG+//57PfXUU+rUqZNmzpwpiXpdyOlbP/3973/Xli1btGDBAmp2huXLlysuLk5ffvllucepV/lsNps2bNggq9Va2ixo3769EhMTFR0dTd3O4ObmJkkaM2aMhg4dKkm68sortWPHDr3//vvUCwAAoAJY6QIAAIALaty4sZKTk8uMnf46KCjIjEg1woIFCzRp0iT16dNHc+bMkYeHhyTqVZ60tDTFxsbK4XCUjrm4uCg0NFTJycnU7AwxMTFKS0tTv3791LlzZ3Xu3FmS9NJLL2nw4MHU6zy8vLzOWp3Rpk0bJSUlUbcznL51WJs2bcqMh4WF6fDhw9QLAACgAmi6AAAA4IK6d++ujRs3lnnDfM2aNQoJCVFgYKCJyczzySef6O9//7vuvvtu/fOf/yzzJi/1OltycrKefPJJrV+/vnTMbrdrx44dCg0NpWZnmDFjhr7++mstX7689CFJjz76qGbPnk29zmHnzp3q3Lmz4uLiyozHx8crLCyMup0hIiJC3t7e2rp1a5nx3bt364orrqBeAAAAFUDTBQAAABc0fPhw5eTk6LnnntOePXu0bNkyffjhhxo7dqzZ0Uyxb98+vfLKKxowYIDGjh2rtLQ0paSkKCUlRdnZ2dSrHG3btlXv3r318ssvKy4uTrt379bkyZOVlZWl++67j5qdISgoSC1atCjzkKTAwEAFBwdTr3No06aNWrduXfpzlpiYqOnTp2vLli0aN24cdTuDh4eHHnzwQf373/9WbGysDh48qP/85z9avXq17r//fuoFAABQARbDMAyzQwAAAKBmefbZZ3XkyBHNnz+/dGzbtm2aNm2aduzYoYYNG+qBBx7Q6NGjTUxpnnfffVdvvvlmuceGDh2qV199lXqVIzs7W2+88Ya+//57ZWdnq1u3bnr22WfVunVrSfyMXUh4eLimT5+uYcOGSaJe53LixAnNmDFDq1atUlZWliIiIvTUU0+pW7dukqhbed5//30tWLBASUlJCg0N1aRJk3TDDTdIol4AAACXiqYLAAAAAAAAAACAE3B7MQAAAAAAAAAAACeg6QIAAAAAAAAAAOAENF0AAAAAAAAAAACcgKYLAAAAAAAAAACAE9B0AQAAAAAAAAAAcAKaLgAAAAAAAAAAAE5A0wUAAABAnWYYhtkRqsXl8n0CAAAANRlNFwAAAABOERUVpaioKLNjlPHDDz9o8uTJpV+vW7dO4eHhWrduXZVcb926dbrxxhvVvn17jRkzptxzoqKiFB4eXvpo27atOnfurGHDhmn+/PlyOByXfN09e/Zo1KhRlY0PAAAAoJKsZgcAAAAAgKrywQcfVOv1/vGPf6ikpESzZ89WYGDgOc+LiIjQSy+9JElyOBzKzMzUf//7X73yyivauHGj3nzzTVkslou+7ooVK7R58+ZK5wcAAABQOTRdAAAAAMBJMjIy1L17d11zzTXnPc/Hx0eRkZFlxvr376+QkBBNnz5d/fv315AhQ6owKQAAAICqwO3FAAAAAFSruLg4jR49Wp06dVKPHj00efJknThxovT4smXLFBERoa1bt+qOO+5Qhw4d1K9fP82ZM6fMPMnJyfrrX/+qHj16qHv37nrxxRf15ptvqn///pJO3sZr/fr1Wr9+/Vm3FNu7d6/GjBmjTp06qVevXpoxY4aKi4vPm3v//v169NFH1atXL0VGRioqKkobN26UJB0+fFjh4eE6cuSIli9fXuFbmEVFRalRo0ZatGhR6VhBQYHeeOMNDRw4UO3bt1eXLl10//33KyEhQZL09ttva9asWZKk8PBwvf3225KkEydO6OWXX9Z1112n9u3bq0ePHpo4caIOHz58ybkAAAAAXByaLgAAAACqzYYNG3TffffJw8ND//znPzVlyhStX79e99xzjwoKCkrPKykp0eOPP65BgwZp9uzZ6tq1q2bMmKFffvlFklRUVKR7771XmzZt0pQpUzR9+nTt3LlT8+bNK53jpZdeUkREhCIiIrR48WK1a9eu9Nj06dPVtWtXvfvuuxo4cKDmzJlTptFxpj179mjYsGE6dOiQnn/+ec2YMUMWi0X33nuv1q9fr0aNGmnx4sVq2LCh+vbte9b1Lparq6uuvvpqbdu2rbQJ9Mwzz+jTTz/Vww8/rHnz5unZZ5/V7t279de//lWGYWjkyJEaMWKEJGnx4sUaOXKkDMPQ2LFjtXr1aj355JOKjo7WhAkT9Ntvv+nFF1+85FwAAAAALg63FwMAAABQbd544w2FhITovffek6urqySpU6dOGjx4sGJiYnT33XdLkgzD0IQJEzRy5EhJUteuXbVy5Ur9/PPPuvbaa/XFF19o7969iomJUfv27SVJPXv21A033FB6rbCwMPn4+EjSWbfyuueeezRhwoTS1/30009au3atRo8eXW7uWbNmyc3NTR999JF8fX0lSf369dPNN9+s119/XUuXLlVkZKRsNpvq169/1vUuRYMGDWS325WRkSE/Pz/l5ubqhRde0KBBgyRJPXr0UG5url599VWlpKSocePGaty4cZnvMykpSZ6enpo8ebK6desmSbrqqqt0+PDh8zaXAAAAAFQOTRcAAAAA1SI/P19bt27VmDFjZBhG6UqO5s2bKzQ0VKtXry5tukhS586dS/98upmRl5cnSVq7dq2aN29e2nCRTu6Tct11113Ubb1ONyIkyWKxKDg4WFlZWec8f/369bruuutKGy6SZLVaNXjwYP373/9Wbm6uvL29L6IKF89ischmsyk6OlrSydupHThwQHv37tVPP/0kSbLb7eW+NigoSB999JEk6ejRozpw4IASExO1adOmc74GAAAAQOXRdAEAAABQLbKyslRSUqI5c+actT+LJLm7u5f52sPDo8zXLi4uMgxDkpSenq7AwMCz5mjQoMFFZfH09Dzn3OXJzMwsd+4GDRrIMAzl5OQ4remSlJQkDw8P1atXT5L0yy+/6JVXXtHevXvl7e2t8PDw0mudL/MXX3yhmTNn6tixY6pXr57atm17Vk0BAAAAOBdNFwAAAADVwtvbWxaLRffdd58GDx581vEzGyHnExQUpAMHDpw1npaWVqmM5+Lv76/U1NSzxlNSUiRJAQEBTrmOw+HQ+vXr1aVLF7m6uurgwYOaOHGirr/+er333nu64oorJEkff/xx6f425YmLi9PkyZM1evRojRkzpvT2Y6+99po2btzolKwAAAAAzuZidgAAAAAAlwcfHx9FRERo79696tChQ+mjdevWmjVr1kXdFuy0Hj166NChQ0pISCgdKyws1KpVq8qc5+LinH/ydO/eXT/99JOys7NLxxwOh7766it16NBBNpvNKddZtGiRkpOTNWrUKElSfHy8CgsLNXbs2NKGi6TShsvplS5nfp+bN29WSUmJHn300dKGi8Ph0G+//SZJKikpcUpeAAAAAGWx0gUAAACA0xw/flwffPDBWeNhYWHq3bu3nnjiCT388MN68sknNWTIEDkcDs2bN09bt27V+PHjL/o6N998s2bPnq2JEyfqsccek5+fn+bNm6e0tDQ1bdq09Dw/Pz9t3rxZa9asUURERIW/r0ceeUSrVq3SPffco4cfflg2m00LFizQoUOHNHfu3EueLycnR1u2bJF0sgGSnp6uX3/9VYsXL9aQIUM0cOBASVK7du1ktVr1+uuv64EHHlBRUZGWLVumn3/+WZJK97jx8/OTJMXGxqpTp07q2LGjJOlvf/ubhg8frqysLC1YsEA7d+4sfZ2Pj0+F6wEAAACgfDRdAAAAADjNwYMHNX369LPGhw4dqt69e6t3796Kjo7WrFmz9Oijj8rNzU3t2rXT+++/r8jIyIu+jtVqVXR0tKZNm6apU6fKarVqyJAhCggI0L59+0rPu/vuuxUfH6+HHnpI06dPV6NGjSr0fbVu3VqffPKJZs6cqSlTpshisahjx4766KOP1K1bt0ueb8eOHbrjjjsknVylEhgYqJCQEL366qu65ZZbSs9r0aKF3njjDc2aNUvjx4+Xv7+/IiMjNX/+fEVFRSkuLk7h4eEaOHCgPv/8cz377LMaMWKEpk6dqhdffFHvv/++vvnmGzVo0EBXXXWVZs2apYkTJ2rjxo3q27dvhWoBAAAA4Nwsxvl2XgQAAACAGuiPP/7Q3r17NXDgQFksltLx4cOHq0mTJpo1a5aJ6QAAAABcrljpAgAAAKDWycvL02OPPaa77rpLAwYMkMPhUGxsrLZv366nn37a7HgAAAAALlOsdAEAAABQK33zzTeKjo5WYmKiDMNQRESExo8fr969e5sdDQAAAMBliqYLAAAAAAAAAACAE7iYHQAAAAAAAAAAAKAuoOkCAAAAAAAAAADgBDRdAAAAAAAAAAAAnICmCwAAAAAAAAAAgBPQdAEAAAAAAAAAAHACmi4AAAAAAAAAAABOQNMFAAAAAAAAAADACWi6AAAAAAAAAAAAOAFNFwAAAAAAAAAAACf4/5vKT/hUc3dTAAAAAElFTkSuQmCC" + }, + "metadata": {}, + "output_type": "display_data" + } + ], + "execution_count": 14 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-17T06:32:13.070801Z", + "start_time": "2024-10-17T06:32:13.062389Z" + } + }, + "cell_type": "code", + "source": "# todo ans outlier check", + "id": "b60a79f50886a141", + "outputs": [], + "execution_count": 15 + }, + { + "cell_type": "markdown", + "id": "ac03dc37-364f-44e3-aa7f-331505bbaf35", + "metadata": {}, + "source": "## train, test, validation의 각각 con, question, ans의 길이 비교\n" + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-17T06:32:44.444300Z", + "start_time": "2024-10-17T06:32:44.428534Z" + } + }, + "cell_type": "code", + "source": [ + "# 각 데이터셋의 con_len, qu_len, ans_len을 합치기\n", + "combined_df = pd.DataFrame({\n", + " 'train_con_len': train_df[\"con_len\"],\n", + " 'train_qu_len': train_df[\"qu_len\"],\n", + " 'train_ans_len': train_df[\"ans_len\"],\n", + " 'valid_con_len': valid_df[\"con_len\"],\n", + " 'valid_qu_len': valid_df[\"qu_len\"],\n", + " 'valid_ans_len': valid_df[\"ans_len\"],\n", + " 'test_qu_len': test_df[\"qu_len\"]\n", + "})" + ], + "id": "c8e6ae53ccabca5a", + "outputs": [], + "execution_count": 16 + }, + { + "cell_type": "code", + "id": "29ababfe-7b0c-4f18-8d41-dbb0e59786ed", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-17T06:32:45.007459Z", + "start_time": "2024-10-17T06:32:44.981941Z" + } + }, + "source": [ + "display(combined_df[[\"train_con_len\",\"valid_con_len\"]].describe())\n", + "display(combined_df[[\"train_qu_len\",\"valid_qu_len\",\"test_qu_len\"]].describe())\n", + "display(combined_df[[\"train_ans_len\",\"valid_ans_len\"]].describe())" + ], + "outputs": [ + { + "data": { + "text/plain": [ + " train_con_len valid_con_len\n", + "count 5547.000000 617.000000\n", + "mean 864.144943 879.175041\n", + "std 469.751184 523.134644\n", + "min 301.000000 302.000000\n", + "25% 578.000000 566.000000\n", + "50% 746.000000 767.000000\n", + "75% 1036.500000 1056.000000\n", + "max 9227.000000 7016.000000" + ], + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
train_con_lenvalid_con_len
count5547.000000617.000000
mean864.144943879.175041
std469.751184523.134644
min301.000000302.000000
25%578.000000566.000000
50%746.000000767.000000
75%1036.5000001056.000000
max9227.0000007016.000000
\n", + "
" + ] + }, + "metadata": {}, + "output_type": "display_data" + }, + { + "data": { + "text/plain": [ + " train_qu_len valid_qu_len test_qu_len\n", + "count 5547.000000 617.000000 600.000000\n", + "mean 32.875969 33.058347 29.555000\n", + "std 11.745488 11.537481 8.962376\n", + "min 8.000000 12.000000 8.000000\n", + "25% 25.000000 25.000000 23.000000\n", + "50% 31.000000 32.000000 29.000000\n", + "75% 39.000000 39.000000 35.000000\n", + "max 135.000000 86.000000 62.000000" + ], + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
train_qu_lenvalid_qu_lentest_qu_len
count5547.000000617.000000600.000000
mean32.87596933.05834729.555000
std11.74548811.5374818.962376
min8.00000012.0000008.000000
25%25.00000025.00000023.000000
50%31.00000032.00000029.000000
75%39.00000039.00000035.000000
max135.00000086.00000062.000000
\n", + "
" + ] + }, + "metadata": {}, + "output_type": "display_data" + }, + { + "data": { + "text/plain": [ + " train_ans_len valid_ans_len\n", + "count 5547.000000 617.000000\n", + "mean 5.552911 5.346840\n", + "std 4.868543 4.233405\n", + "min 1.000000 1.000000\n", + "25% 3.000000 3.000000\n", + "50% 4.000000 4.000000\n", + "75% 6.000000 6.000000\n", + "max 83.000000 36.000000" + ], + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
train_ans_lenvalid_ans_len
count5547.000000617.000000
mean5.5529115.346840
std4.8685434.233405
min1.0000001.000000
25%3.0000003.000000
50%4.0000004.000000
75%6.0000006.000000
max83.00000036.000000
\n", + "
" + ] + }, + "metadata": {}, + "output_type": "display_data" + } + ], + "execution_count": 17 + }, + { + "cell_type": "markdown", + "id": "200f5820-dc20-4695-af97-575a488b1ee0", + "metadata": {}, + "source": "### train qusetion의 outlier가 좀 더 크다\n" + }, + { + "cell_type": "markdown", + "id": "95a74930-982a-41ef-897c-11b6374b57b2", + "metadata": {}, + "source": [ + "## test_data의 question도 train,valid와 길이 거의 유사" + ] + }, + { + "cell_type": "markdown", + "id": "c6a22c3e-7444-41ee-86c0-444d2c53ff2e", + "metadata": {}, + "source": [ + "#### 결측치 & 중복" + ] + }, + { + "cell_type": "code", + "id": "3cff8022-1b1f-4a91-ac4c-f91dfdc9e4b5", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-04T13:27:34.557204Z", + "start_time": "2024-10-04T13:27:34.537230Z" + } + }, + "source": [ + "# Train DataFrame 결측치 확인\n", + "print(\"Train DataFrame Missing Values:\")\n", + "print(f\"Context missing: {train_df['context'].isnull().sum()}\")\n", + "print(f\"Question missing: {train_df['question'].isnull().sum()}\")\n", + "print(f\"Answers missing: {train_df['answers_text'].isnull().sum()}\")\n", + "\n", + "# Valid DataFrame 결측치 확인\n", + "print(\"\\nValid DataFrame Missing Values:\")\n", + "print(f\"Context missing: {valid_df['context'].isnull().sum()}\")\n", + "print(f\"Question missing: {valid_df['question'].isnull().sum()}\")\n", + "print(f\"Answers missing: {valid_df['answers_text'].isnull().sum()}\")\n", + "\n", + "# Test DataFrame 결측치 확인\n", + "print(\"\\nTest DataFrame Missing Values:\")\n", + "print(f\"Question missing: {test_df['question'].isnull().sum()}\")\n" + ], + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Train DataFrame Missing Values:\n", + "Context missing: 0\n", + "Question missing: 0\n", + "Answers missing: 0\n", + "\n", + "Valid DataFrame Missing Values:\n", + "Context missing: 0\n", + "Question missing: 0\n", + "Answers missing: 0\n", + "\n", + "Test DataFrame Missing Values:\n", + "Question missing: 0\n" + ] + } + ], + "execution_count": 114 + }, + { + "cell_type": "code", + "id": "695fb010-1997-4081-b167-17f677ca19fa", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-04T13:29:27.645176Z", + "start_time": "2024-10-04T13:29:27.610421Z" + } + }, + "source": [ + "# Train DataFrame의 고유 값 개수 출력\n", + "print(f\"Train DataFrame len: {len(train_df)}\")\n", + "print(f\"Unique contexts: {train_df['context'].nunique()}\")\n", + "print(f\"Unique questions: {train_df['question'].nunique()}\")\n", + "print(f\"Unique answers_text: {train_df['answers_text'].nunique()}\")\n", + "\n", + "# Valid DataFrame의 고유 값 개수 출력\n", + "print(f\"\\nValid DataFrame len: {len(valid_df)}\")\n", + "print(f\"Unique contexts: {valid_df['context'].nunique()}\")\n", + "print(f\"Unique questions: {valid_df['question'].nunique()}\")\n", + "print(f\"Unique answers_text: {valid_df['answers_text'].nunique()}\")\n", + "\n", + "# Test DataFrame의 고유 값 개수 출력 (answers는 없기 때문에 question만 계산)\n", + "print(f\"\\nTest DataFrame len: {len(test_df)}\")\n", + "print(f\"Unique questions: {test_df['question'].nunique()}\")\n" + ], + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Train DataFrame len: 3952\n", + "Unique contexts: 3340\n", + "Unique questions: 3952\n", + "Unique answers_text: 3622\n", + "\n", + "Valid DataFrame len: 240\n", + "Unique contexts: 235\n", + "Unique questions: 240\n", + "Unique answers_text: 240\n", + "\n", + "Test DataFrame len: 600\n", + "Unique questions: 600\n" + ] + } + ], + "execution_count": 117 + }, + { + "metadata": {}, + "cell_type": "markdown", + "source": "### train set에서 유니크한 답변의 갯수가 적다?", + "id": "d416710e0ec2af60" + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-04T13:35:47.327371Z", + "start_time": "2024-10-04T13:35:47.298227Z" + } + }, + "cell_type": "code", + "source": [ + "# 중복된 'answers_text' 값을 가진 행들을 필터링하고, 'answers_text' 기준으로 정렬\n", + "duplicated_answers_text = train_df[train_df[['answers_text']].duplicated(keep=False)].sort_values('answers_text')\n", + "\n", + "# 중복된 'answers_text' 값만 따로 추출 (중복된 값 리스트)\n", + "duplicated_values = train_df['answers_text'][train_df['answers_text'].duplicated()].unique()\n", + "\n", + "# 중복된 값 출력\n", + "print(\"중복된 'answers_text' 값들:\")\n", + "print(duplicated_values)\n", + "\n", + "# 중복된 값을 포함한 모든 행 출력\n", + "display(duplicated_answers_text)\n" + ], + "id": "3ba1ebcc665a1079", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "중복된 'answers_text' 값들:\n", + "['중국' '프랑스' '2004년' '화이트워터 사건' '일본' '1966년' '1578년' '이탈리아' '1962년'\n", + " '포전 담당 책임제' '광동제약' '영국' '독일' '1945년' '미국' '2008년' '2015년' '1992년' '12년'\n", + " '1995년' '북한' '윤보선' '1951년' '2006년' '3년' '1944년' '스페인' '2010년' '1916년'\n", + " '히로시마 도요 카프' '1907년' '1990년' '다산 정약용' '현삼과' '1931년' '2017년' '러시아' '경찰'\n", + " '상하이' '조선중앙일보' '교회' '3' '9월' '1919년' '근우회' '1948년' '1937년' '라틴어' '4개'\n", + " '1927년' '1935년' '인도' '2007년' '2014년' '1999년' '발' '자장율사' '헤로인' '경원대군'\n", + " '1982년' '2년' '인간' '명령형 프로그램' '영어' '8월 13일' '튜더 왕조 시대' '마오쩌둥' '일제시대'\n", + " '공산주의' '5' '사슴' '1991년' '파리' '부산' '1946년' '율리우스 카이사르' '녹색' '홍준표' '이집트'\n", + " '화살' '파즈르' '총리' '2005년' '병인박해' '동로마 황제 콘스탄스 2세' '여름' '마드리드' '《동아일보》'\n", + " '레이프 에이릭손' '2001년' '이승만' '1994년' '학교' '1972년' '유금당' '근대철학' '알렉산드로스 대왕'\n", + " '브뤼셀' '1978년' '제1기' '농업' '2012년' '남편' '사회주의' '페르시아' '1963년' '보리스 옐친 대통령'\n", + " '정난정' '《황금어장 무릎팍도사》' '도널드 트럼프' '1975년' '1918년' '기독교' '14세기' '미드웨이 해전'\n", + " '시베리아' '2016년' '러셀' '사형' '아일랜드' '스파르타' '1990년대' '일관' '수소' '제트팬이 설치된 종류식'\n", + " '울릉도' '코끼리' '기병' '몽골' '노예제' '《어린이와 가정을 위한 이야기》' '네빌 체임벌린' '1900년' '1920년'\n", + " '토지' '상점' '1860년' 'SBS' '부산고등법원' '대공' '네덜란드' '바그라트' '열' '자동차' '1974년'\n", + " '총독부' '1970년' '선거인단' '66명' '1934년' '경제' '나가타' '제2차 세계 대전' '아르헨티나' '눈'\n", + " '2002년' '1939년' '무료' '바이러스 감염' '1930년대' '항공모함' '평양' '무역' '화산암' '1940년'\n", + " '펠로폰네소스 전쟁' '로마 제국' '베트남' '1603년' '뉘른베르크' '김원겸' '1965년' '동아일보' '노르웨이'\n", + " '부리' '2011년 7월 15일' '모스크바' '당 태종' '오딘' '잡귀' '도서해안굿' '태양' '9세' '해밀턴' '바그너'\n", + " '평민' '결핵' '바그다드' '1960년' '나무' '각막 궤양' '4척' '에스타디오 메트로폴리타노 역' '1865년' '상인'\n", + " '국립중앙박물관' '말' '로맨스' '세키가하라 전투' '아인슈타인' '1812년' '청동기시대' '1362년' '1936년'\n", + " '다블뤼 주교' '부황 순치제' '물리학자' '흑사병' '고려시대' '조선민주주의인민공화국' '노르만족' '루뭄바']\n" + ] + }, + { + "data": { + "text/plain": [ + " title \\\n", + "534 팔라 제국 \n", + "806 하워드 마셜 \n", + "3831 교황 우르바노 5세 \n", + "3181 교황 우르바노 5세 \n", + "2859 모르겐슈테른 (무기) \n", + "... ... \n", + "110 빌 클린턴 \n", + "3219 크레시 전투 \n", + "3891 팔레올로고스 왕조 치하의 비잔티움 제국 \n", + "1164 1980년 일본 프로 야구 올스타전 \n", + "247 1987년 일본 프로 야구 올스타전 \n", + "\n", + " context \\\n", + "534 데바팔라 사후 팔라 제국은 점차 힘을 잃기 시작하였다. 데바팔라의 조카였던 비그라하... \n", + "806 그는 구두로는 안나 니콜 스미스에게 자신의 재산의 반을 주겠다고 약속했다 하나 유언... \n", + "3831 우르바노 5세 치세의 큰 특징으로는 로마로 귀환하려고 노력한 점과 로마에 대한 세속... \n", + "3181 우르바노 5세 치세의 큰 특징으로는 로마로 귀환하려고 노력한 점과 로마에 대한 세속... \n", + "2859 모르겐슈테른(Morgenstern금성)은 중세 시대 무기의 하나이다. 영어명인 모닝... \n", + "... ... \n", + "110 클린턴의 첫 기간의 말기가 접근하면서 새로운 스캔들이 일어났다. 스캔들은 클린턴과 ... \n", + "3219 프랑스군이 퇴각하자 잉글랜드군은 부상자 중에서 몸값을 받을 만한 사람을 추려냈다. ... \n", + "3891 팔레올로고스 왕조 치하의 비잔티움 제국은 제4차 십자군 전쟁(1204년) 이후 건국... \n", + "1164 전년도에 구단 창단 이래 첫 일본 시리즈 우승을 이끈 히로시마 도요 카프의 고바 다... \n", + "247 전년도 일본 시리즈 정상에 오른 세이부 라이온스의 모리 마사아키 감독이 퍼시픽 리그... \n", + "\n", + " question id \\\n", + "534 라지야팔라의 통솔 기간은? mrc-0-001011 \n", + "806 하워드 마셜의 재산 상속을 위해 안나 니콜 스미스가 법정 소송을 벌인 기간은? mrc-0-002386 \n", + "3831 우르바노 5세가 십자군동원을 명령한 연도는? mrc-1-001198 \n", + "3181 우르바노 5세가 이태리 전역에 십자군 원정을 명령한 해는? mrc-1-001750 \n", + "2859 모닝스타를 사용하기 시작한 시기는? mrc-0-003745 \n", + "... ... ... \n", + "110 클린턴의 두 번째 임기는 어떤 스캔들로 인해 내리막을 걷게 되었나? mrc-0-004136 \n", + "3219 에드워드 3세가 프랑스에서 철수한 것은 무엇 때문인가? mrc-0-000144 \n", + "3891 튀르크인이 영토를 빼앗아갈 무렵 유행하던 전염병은? mrc-1-000102 \n", + "1164 1979년 일본시리즈 우승팀은? mrc-0-003978 \n", + "247 아난 준로 감독이 감독으로 부임한 해에 리그 우승을 차지한 팀은? mrc-0-003206 \n", + "\n", + " answers document_id \\\n", + "534 {'answer_start': [209], 'text': ['12년']} 35229 \n", + "806 {'answer_start': [108], 'text': ['12년']} 36640 \n", + "3831 {'answer_start': [131], 'text': ['1362년']} 6773 \n", + "3181 {'answer_start': [131], 'text': ['1362년']} 6773 \n", + "2859 {'answer_start': [488], 'text': ['14세기']} 9139 \n", + "... ... ... \n", + "110 {'answer_start': [257], 'text': ['화이트워터 사건']} 4633 \n", + "3219 {'answer_start': [453], 'text': ['흑사병']} 9059 \n", + "3891 {'answer_start': [627], 'text': ['흑사병']} 59729 \n", + "1164 {'answer_start': [30], 'text': ['히로시마 도요 카프']} 41406 \n", + "247 {'answer_start': [84], 'text': ['히로시마 도요 카프']} 41453 \n", + "\n", + " __index_level_0__ con_len qu_len answers_text ans_len \n", + "534 667 647 14 12년 3 \n", + "806 1564 619 43 12년 3 \n", + "3831 784 1521 24 1362년 5 \n", + "3181 1142 1521 32 1362년 5 \n", + "2859 2459 1020 19 14세기 4 \n", + "... ... ... ... ... ... \n", + "110 2707 624 37 화이트워터 사건 8 \n", + "3219 88 564 30 흑사병 3 \n", + "3891 63 970 28 흑사병 3 \n", + "1164 2608 619 17 히로시마 도요 카프 10 \n", + "247 2106 730 36 히로시마 도요 카프 10 \n", + "\n", + "[542 rows x 11 columns]" + ], + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionidanswersdocument_id__index_level_0__con_lenqu_lenanswers_textans_len
534팔라 제국데바팔라 사후 팔라 제국은 점차 힘을 잃기 시작하였다. 데바팔라의 조카였던 비그라하...라지야팔라의 통솔 기간은?mrc-0-001011{'answer_start': [209], 'text': ['12년']}352296676471412년3
806하워드 마셜그는 구두로는 안나 니콜 스미스에게 자신의 재산의 반을 주겠다고 약속했다 하나 유언...하워드 마셜의 재산 상속을 위해 안나 니콜 스미스가 법정 소송을 벌인 기간은?mrc-0-002386{'answer_start': [108], 'text': ['12년']}3664015646194312년3
3831교황 우르바노 5세우르바노 5세 치세의 큰 특징으로는 로마로 귀환하려고 노력한 점과 로마에 대한 세속...우르바노 5세가 십자군동원을 명령한 연도는?mrc-1-001198{'answer_start': [131], 'text': ['1362년']}67737841521241362년5
3181교황 우르바노 5세우르바노 5세 치세의 큰 특징으로는 로마로 귀환하려고 노력한 점과 로마에 대한 세속...우르바노 5세가 이태리 전역에 십자군 원정을 명령한 해는?mrc-1-001750{'answer_start': [131], 'text': ['1362년']}677311421521321362년5
2859모르겐슈테른 (무기)모르겐슈테른(Morgenstern금성)은 중세 시대 무기의 하나이다. 영어명인 모닝...모닝스타를 사용하기 시작한 시기는?mrc-0-003745{'answer_start': [488], 'text': ['14세기']}9139245910201914세기4
....................................
110빌 클린턴클린턴의 첫 기간의 말기가 접근하면서 새로운 스캔들이 일어났다. 스캔들은 클린턴과 ...클린턴의 두 번째 임기는 어떤 스캔들로 인해 내리막을 걷게 되었나?mrc-0-004136{'answer_start': [257], 'text': ['화이트워터 사건']}4633270762437화이트워터 사건8
3219크레시 전투프랑스군이 퇴각하자 잉글랜드군은 부상자 중에서 몸값을 받을 만한 사람을 추려냈다. ...에드워드 3세가 프랑스에서 철수한 것은 무엇 때문인가?mrc-0-000144{'answer_start': [453], 'text': ['흑사병']}90598856430흑사병3
3891팔레올로고스 왕조 치하의 비잔티움 제국팔레올로고스 왕조 치하의 비잔티움 제국은 제4차 십자군 전쟁(1204년) 이후 건국...튀르크인이 영토를 빼앗아갈 무렵 유행하던 전염병은?mrc-1-000102{'answer_start': [627], 'text': ['흑사병']}597296397028흑사병3
11641980년 일본 프로 야구 올스타전전년도에 구단 창단 이래 첫 일본 시리즈 우승을 이끈 히로시마 도요 카프의 고바 다...1979년 일본시리즈 우승팀은?mrc-0-003978{'answer_start': [30], 'text': ['히로시마 도요 카프']}41406260861917히로시마 도요 카프10
2471987년 일본 프로 야구 올스타전전년도 일본 시리즈 정상에 오른 세이부 라이온스의 모리 마사아키 감독이 퍼시픽 리그...아난 준로 감독이 감독으로 부임한 해에 리그 우승을 차지한 팀은?mrc-0-003206{'answer_start': [84], 'text': ['히로시마 도요 카프']}41453210673036히로시마 도요 카프10
\n", + "

542 rows × 11 columns

\n", + "
" + ] + }, + "metadata": {}, + "output_type": "display_data" + } + ], + "execution_count": 127 + }, + { + "metadata": {}, + "cell_type": "markdown", + "source": "#### 큰 의미는 없이 우연히 겹치는걸로", + "id": "1f784550293406c3" + }, + { + "cell_type": "code", + "execution_count": 399, + "id": "6cd08777-5a5e-4e80-bb9e-c53826a155e1", + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionidanswersdocument_id__index_level_0__con_lenqu_lenans_len
2181시간이동\"시간이동\"은 미국의 방송사 ABC의 텔레비전 드라마 시리즈 로스트의 시즌 프리미어...시간이동' 에피소드의 다음 에피소드의 제목은 무엇인가?mrc-1-000565{'answer_start': [234], 'text': ['거짓말']}25858368650303
2164시간이동\"시간이동\"은 미국의 방송사 ABC의 텔레비전 드라마 시리즈 로스트의 시즌 프리미어...ABC에서 방영되는 '시간이동'의 장르는?mrc-0-004810{'answer_start': [21], 'text': ['텔레비전 드라마']}258583135650238
3408히이라기자와 에리오르'사쿠라 카드 편'에서부터 등장하는 인물로 종종 알 수 없는 웃음과 아이답지 않은 ...사쿠라가 성장할 때 스피넬 선을 만든 이유는?mrc-0-005352{'answer_start': [356], 'text': ['자신에게서 크로우 리드...4988834878702523
1350히이라기자와 에리오르'사쿠라 카드 편'에서부터 등장하는 인물로 종종 알 수 없는 웃음과 아이답지 않은 ...에리오르에게는 효력이 없는 마법은?mrc-0-005385{'answer_start': [120], 'text': ['달 속성의 마법']}498883511870198
2353하인리히 4세1090년 교황 우르바노 2세의 주선으로 43세의 토스카나 여후작 마틸다가 결혼을 ...마틸다와 결혼한 인물은?mrc-0-002459{'answer_start': [81], 'text': ['벨프 5세']}1119516081214135
.................................
1946탐무즈활달한 대지의 여신 이슈타르-인니나(이하 이슈타르)가 식물과 생명의 성장의 신인 자...무엇이 이슈타르가 사랑한 대상을 죽음에 이르게 했나?mrc-0-002377{'answer_start': [249], 'text': ['멧돼지']}130121559612293
2743효문태후효문태후 박씨(孝文太后 薄氏, ? ~ 기원전 155년)는 전한 고제 유방의 후궁 중...위표가 항우 쪽으로 돌아서는 계기가 된 발언을 한 인물은 누구인가?mrc-1-000310{'answer_start': [252], 'text': ['허부']}34137204990372
2684효문태후효문태후 박씨(孝文太后 薄氏, ? ~ 기원전 155년)는 전한 고제 유방의 후궁 중...본래, 한왕 측에서 팽성 대전에 참전했으나 한을 배신하고 항우의 편으로 넘어간 인물은?mrc-0-002695{'answer_start': [278], 'text': ['위표']}341371768990482
1449힐힐은 전쟁중에 논쟁을 피하지 못했다. 병약한 체질이라서 여러 번 병치레를 했기에, ...힐이 사관학교 병원에서 임질의 치료를 받은 때는 몇 월이었나요?mrc-0-001005{'answer_start': [216], 'text': ['9월']}94736611082352
389힐힐은 전쟁중에 논쟁을 피하지 못했다. 병약한 체질이라서 여러 번 병치레를 했기에, ...남군의 소장들 중 힐이 가장 뛰어난 사람이라고 언급한 인물은?mrc-0-004349{'answer_start': [825], 'text': ['로버트 E. 리 장군']}9473284810823411
\n", + "

1191 rows × 10 columns

\n", + "
" + ], + "text/plain": [ + " title context \\\n", + "2181 시간이동 \"시간이동\"은 미국의 방송사 ABC의 텔레비전 드라마 시리즈 로스트의 시즌 프리미어... \n", + "2164 시간이동 \"시간이동\"은 미국의 방송사 ABC의 텔레비전 드라마 시리즈 로스트의 시즌 프리미어... \n", + "3408 히이라기자와 에리오르 '사쿠라 카드 편'에서부터 등장하는 인물로 종종 알 수 없는 웃음과 아이답지 않은 ... \n", + "1350 히이라기자와 에리오르 '사쿠라 카드 편'에서부터 등장하는 인물로 종종 알 수 없는 웃음과 아이답지 않은 ... \n", + "2353 하인리히 4세 1090년 교황 우르바노 2세의 주선으로 43세의 토스카나 여후작 마틸다가 결혼을 ... \n", + "... ... ... \n", + "1946 탐무즈 활달한 대지의 여신 이슈타르-인니나(이하 이슈타르)가 식물과 생명의 성장의 신인 자... \n", + "2743 효문태후 효문태후 박씨(孝文太后 薄氏, ? ~ 기원전 155년)는 전한 고제 유방의 후궁 중... \n", + "2684 효문태후 효문태후 박씨(孝文太后 薄氏, ? ~ 기원전 155년)는 전한 고제 유방의 후궁 중... \n", + "1449 힐 힐은 전쟁중에 논쟁을 피하지 못했다. 병약한 체질이라서 여러 번 병치레를 했기에, ... \n", + "389 힐 힐은 전쟁중에 논쟁을 피하지 못했다. 병약한 체질이라서 여러 번 병치레를 했기에, ... \n", + "\n", + " question id \\\n", + "2181 시간이동' 에피소드의 다음 에피소드의 제목은 무엇인가? mrc-1-000565 \n", + "2164 ABC에서 방영되는 '시간이동'의 장르는? mrc-0-004810 \n", + "3408 사쿠라가 성장할 때 스피넬 선을 만든 이유는? mrc-0-005352 \n", + "1350 에리오르에게는 효력이 없는 마법은? mrc-0-005385 \n", + "2353 마틸다와 결혼한 인물은? mrc-0-002459 \n", + "... ... ... \n", + "1946 무엇이 이슈타르가 사랑한 대상을 죽음에 이르게 했나? mrc-0-002377 \n", + "2743 위표가 항우 쪽으로 돌아서는 계기가 된 발언을 한 인물은 누구인가? mrc-1-000310 \n", + "2684 본래, 한왕 측에서 팽성 대전에 참전했으나 한을 배신하고 항우의 편으로 넘어간 인물은? mrc-0-002695 \n", + "1449 힐이 사관학교 병원에서 임질의 치료를 받은 때는 몇 월이었나요? mrc-0-001005 \n", + "389 남군의 소장들 중 힐이 가장 뛰어난 사람이라고 언급한 인물은? mrc-0-004349 \n", + "\n", + " answers document_id \\\n", + "2181 {'answer_start': [234], 'text': ['거짓말']} 25858 \n", + "2164 {'answer_start': [21], 'text': ['텔레비전 드라마']} 25858 \n", + "3408 {'answer_start': [356], 'text': ['자신에게서 크로우 리드... 49888 \n", + "1350 {'answer_start': [120], 'text': ['달 속성의 마법']} 49888 \n", + "2353 {'answer_start': [81], 'text': ['벨프 5세']} 11195 \n", + "... ... ... \n", + "1946 {'answer_start': [249], 'text': ['멧돼지']} 13012 \n", + "2743 {'answer_start': [252], 'text': ['허부']} 34137 \n", + "2684 {'answer_start': [278], 'text': ['위표']} 34137 \n", + "1449 {'answer_start': [216], 'text': ['9월']} 9473 \n", + "389 {'answer_start': [825], 'text': ['로버트 E. 리 장군']} 9473 \n", + "\n", + " __index_level_0__ con_len qu_len ans_len \n", + "2181 368 650 30 3 \n", + "2164 3135 650 23 8 \n", + "3408 3487 870 25 23 \n", + "1350 3511 870 19 8 \n", + "2353 1608 1214 13 5 \n", + "... ... ... ... ... \n", + "1946 1559 612 29 3 \n", + "2743 204 990 37 2 \n", + "2684 1768 990 48 2 \n", + "1449 661 1082 35 2 \n", + "389 2848 1082 34 11 \n", + "\n", + "[1191 rows x 10 columns]" + ] + }, + "execution_count": 399, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "train_df[train_df[['context']].duplicated(keep=False)].sort_values('context')" + ] + }, + { + "cell_type": "code", + "execution_count": 400, + "id": "8de86812-9364-47b2-b44f-e7e1fb7e7b14", + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionidanswersdocument_id__index_level_0__con_lenqu_lenans_len
74버트런드 러셀러셀은 1890년 케임브리지 대학교의 트리니티 칼리지에 장학생으로 들어갔다. 그는 ...러셀의 여자 친구의 종교는?mrc-0-003677{'answer_start': [215], 'text': ['퀘이커 교']}52652418667155
231버트런드 러셀러셀은 1890년 케임브리지 대학교의 트리니티 칼리지에 장학생으로 들어갔다. 그는 ...러셀은 누구의 가족과 함께 1889년 파리 박람회에 갔는가?mrc-0-001162{'answer_start': [215], 'text': ['퀘이커 교도였던 앨리스...52657606673320
6자수장수를 놓을 때에 사용하는 기법을 문양의 형태에 따라 나누어 보면 선을 잇는 수, 면...징금수는 서양 자수의 어떤 기법과 같은 기술을 사용하는가?mrc-0-002076{'answer_start': [192], 'text': ['코칭 스티치']}199751366597326
81자수장수를 놓을 때에 사용하는 기법을 문양의 형태에 따라 나누어 보면 선을 잇는 수, 면...수를 놓을 때에 사용하는 기법 중 아주 작은 점으로 표현하는 방식은?mrc-1-001132{'answer_start': [101], 'text': ['점수']}19975744597382
129송나라요나라와의 전연의 맹세에 지불한 것으로 알려진 재물은 비단 20만필, 은 10만량이...송나라가 돈을 지불하여 피하고자 했던 것은?mrc-0-004495{'answer_start': [251], 'text': ['전쟁']}730529321567242
205송나라요나라와의 전연의 맹세에 지불한 것으로 알려진 재물은 비단 20만필, 은 10만량이...송이 금에게 바친 공물은 은 30만량과 비단 몇 필인가?mrc-0-003437{'answer_start': [163], 'text': ['10만필']}730522571567314
162태양권계면태양권계면(Heliopause)은 천문학에서 태양의 태양풍을 성간매질이 멈추게 하는...입자들의 속도가 줄 때, 방출되는 에너지가 만들어내는 것은?mrc-0-003637{'answer_start': [435], 'text': ['충격파']}76352390712333
189태양권계면태양권계면(Heliopause)은 천문학에서 태양의 태양풍을 성간매질이 멈추게 하는...태양풍을 멈추게 하는 것과 말단 충격의 틈을 무엇이라 부르는가?mrc-1-000714{'answer_start': [609], 'text': ['헬리오시스']}7635458712355
73티칼현재 우리가 볼 수 있는 티칼의 모습은 펜실베이니아 대학교와 과테말라 정부의 협조 ...돌을 캐고 난 빈 채석장은 어떠한 용도로 이용하였나?mrc-0-004899{'answer_start': [435], 'text': ['저수지']}121903183897293
236티칼현재 우리가 볼 수 있는 티칼의 모습은 펜실베이니아 대학교와 과테말라 정부의 협조 ...공놀이 경기장 중 일부는 어디에 위치하고 있나?mrc-0-002095{'answer_start': [343], 'text': [''일곱 개의 신전 광장...1219013788972613
\n", + "
" + ], + "text/plain": [ + " title context \\\n", + "74 버트런드 러셀 러셀은 1890년 케임브리지 대학교의 트리니티 칼리지에 장학생으로 들어갔다. 그는 ... \n", + "231 버트런드 러셀 러셀은 1890년 케임브리지 대학교의 트리니티 칼리지에 장학생으로 들어갔다. 그는 ... \n", + "6 자수장 수를 놓을 때에 사용하는 기법을 문양의 형태에 따라 나누어 보면 선을 잇는 수, 면... \n", + "81 자수장 수를 놓을 때에 사용하는 기법을 문양의 형태에 따라 나누어 보면 선을 잇는 수, 면... \n", + "129 송나라 요나라와의 전연의 맹세에 지불한 것으로 알려진 재물은 비단 20만필, 은 10만량이... \n", + "205 송나라 요나라와의 전연의 맹세에 지불한 것으로 알려진 재물은 비단 20만필, 은 10만량이... \n", + "162 태양권계면 태양권계면(Heliopause)은 천문학에서 태양의 태양풍을 성간매질이 멈추게 하는... \n", + "189 태양권계면 태양권계면(Heliopause)은 천문학에서 태양의 태양풍을 성간매질이 멈추게 하는... \n", + "73 티칼 현재 우리가 볼 수 있는 티칼의 모습은 펜실베이니아 대학교와 과테말라 정부의 협조 ... \n", + "236 티칼 현재 우리가 볼 수 있는 티칼의 모습은 펜실베이니아 대학교와 과테말라 정부의 협조 ... \n", + "\n", + " question id \\\n", + "74 러셀의 여자 친구의 종교는? mrc-0-003677 \n", + "231 러셀은 누구의 가족과 함께 1889년 파리 박람회에 갔는가? mrc-0-001162 \n", + "6 징금수는 서양 자수의 어떤 기법과 같은 기술을 사용하는가? mrc-0-002076 \n", + "81 수를 놓을 때에 사용하는 기법 중 아주 작은 점으로 표현하는 방식은? mrc-1-001132 \n", + "129 송나라가 돈을 지불하여 피하고자 했던 것은? mrc-0-004495 \n", + "205 송이 금에게 바친 공물은 은 30만량과 비단 몇 필인가? mrc-0-003437 \n", + "162 입자들의 속도가 줄 때, 방출되는 에너지가 만들어내는 것은? mrc-0-003637 \n", + "189 태양풍을 멈추게 하는 것과 말단 충격의 틈을 무엇이라 부르는가? mrc-1-000714 \n", + "73 돌을 캐고 난 빈 채석장은 어떠한 용도로 이용하였나? mrc-0-004899 \n", + "236 공놀이 경기장 중 일부는 어디에 위치하고 있나? mrc-0-002095 \n", + "\n", + " answers document_id \\\n", + "74 {'answer_start': [215], 'text': ['퀘이커 교']} 5265 \n", + "231 {'answer_start': [215], 'text': ['퀘이커 교도였던 앨리스... 5265 \n", + "6 {'answer_start': [192], 'text': ['코칭 스티치']} 19975 \n", + "81 {'answer_start': [101], 'text': ['점수']} 19975 \n", + "129 {'answer_start': [251], 'text': ['전쟁']} 7305 \n", + "205 {'answer_start': [163], 'text': ['10만필']} 7305 \n", + "162 {'answer_start': [435], 'text': ['충격파']} 7635 \n", + "189 {'answer_start': [609], 'text': ['헬리오시스']} 7635 \n", + "73 {'answer_start': [435], 'text': ['저수지']} 12190 \n", + "236 {'answer_start': [343], 'text': [''일곱 개의 신전 광장... 12190 \n", + "\n", + " __index_level_0__ con_len qu_len ans_len \n", + "74 2418 667 15 5 \n", + "231 760 667 33 20 \n", + "6 1366 597 32 6 \n", + "81 744 597 38 2 \n", + "129 2932 1567 24 2 \n", + "205 2257 1567 31 4 \n", + "162 2390 712 33 3 \n", + "189 458 712 35 5 \n", + "73 3183 897 29 3 \n", + "236 1378 897 26 13 " + ] + }, + "execution_count": 400, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "valid_df[valid_df[['context']].duplicated(keep=False)].sort_values('context')" + ] + }, + { + "cell_type": "markdown", + "id": "0e3bd7bd-5e0c-4c78-a594-f4412afb8080", + "metadata": {}, + "source": "#### 중복을 제거하는게 의미X" + }, + { + "cell_type": "markdown", + "id": "40ce0df5-4a42-4d21-a8d2-6bf14a884ec3", + "metadata": {}, + "source": [ + "---" + ] + } + ], + "metadata": { + "kernelspec": { + "display_name": "Python 3 (ipykernel)", + "language": "python", + "name": "python3" + }, + "language_info": { + "codemirror_mode": { + "name": "ipython", + "version": 3 + }, + "file_extension": ".py", + "mimetype": "text/x-python", + "name": "python", + "nbconvert_exporter": "python", + "pygments_lexer": "ipython3", + "version": "3.8.5" + } + }, + "nbformat": 4, + "nbformat_minor": 5 +} diff --git a/notebooks/EDA_wiki.ipynb b/notebooks/EDA_wiki.ipynb new file mode 100644 index 0000000..631a661 --- /dev/null +++ b/notebooks/EDA_wiki.ipynb @@ -0,0 +1,1908 @@ +{ + "cells": [ + { + "cell_type": "markdown", + "id": "1321e6ff-9980-411a-83d5-90364c486710", + "metadata": {}, + "source": "# EDA를 통한 데이터의 형태, 문장길이, 데이터 수, 결측치 등을 파악" + }, + { + "cell_type": "code", + "id": "f9c80410-55e7-4a38-9454-f2dc7c1fe8e5", + "metadata": { + "collapsed": true, + "jupyter": { + "outputs_hidden": true + }, + "tags": [], + "ExecuteTime": { + "end_time": "2024-10-04T12:32:38.923349Z", + "start_time": "2024-10-04T12:32:36.198622Z" + } + }, + "source": [ + "!pip install seaborn\n", + "!pip install pyarrow" + ], + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Requirement already satisfied: seaborn in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (0.13.2)\n", + "Requirement already satisfied: numpy!=1.24.0,>=1.20 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from seaborn) (1.26.4)\n", + "Requirement already satisfied: pandas>=1.2 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from seaborn) (2.2.2)\n", + "Requirement already satisfied: matplotlib!=3.6.1,>=3.4 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from seaborn) (3.9.2)\n", + "Requirement already satisfied: contourpy>=1.0.1 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from matplotlib!=3.6.1,>=3.4->seaborn) (1.2.0)\n", + "Requirement already satisfied: cycler>=0.10 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from matplotlib!=3.6.1,>=3.4->seaborn) (0.11.0)\n", + "Requirement already satisfied: fonttools>=4.22.0 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from matplotlib!=3.6.1,>=3.4->seaborn) (4.51.0)\n", + "Requirement already satisfied: kiwisolver>=1.3.1 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from matplotlib!=3.6.1,>=3.4->seaborn) (1.4.4)\n", + "Requirement already satisfied: packaging>=20.0 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from matplotlib!=3.6.1,>=3.4->seaborn) (24.1)\n", + "Requirement already satisfied: pillow>=8 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from matplotlib!=3.6.1,>=3.4->seaborn) (10.4.0)\n", + "Requirement already satisfied: pyparsing>=2.3.1 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from matplotlib!=3.6.1,>=3.4->seaborn) (3.1.2)\n", + "Requirement already satisfied: python-dateutil>=2.7 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from matplotlib!=3.6.1,>=3.4->seaborn) (2.9.0.post0)\n", + "Requirement already satisfied: pytz>=2020.1 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from pandas>=1.2->seaborn) (2024.1)\n", + "Requirement already satisfied: tzdata>=2022.7 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from pandas>=1.2->seaborn) (2023.3)\n", + "Requirement already satisfied: six>=1.5 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from python-dateutil>=2.7->matplotlib!=3.6.1,>=3.4->seaborn) (1.16.0)\n", + "Requirement already satisfied: pyarrow in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (17.0.0)\n", + "Requirement already satisfied: numpy>=1.16.6 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from pyarrow) (1.26.4)\n" + ] + } + ], + "execution_count": 21 + }, + { + "cell_type": "markdown", + "id": "30f5a4a2-60f9-483c-a452-60ca1ed104c8", + "metadata": {}, + "source": "# wiki.json" + }, + { + "cell_type": "code", + "id": "f1e68eea-4382-4db3-8f8c-1e7dec2d116f", + "metadata": { + "tags": [], + "ExecuteTime": { + "end_time": "2024-10-04T13:43:32.540576Z", + "start_time": "2024-10-04T13:43:24.389587Z" + } + }, + "source": [ + "import json\n", + "import pandas as pd\n", + "from pandas import json_normalize\n", + "from datasets import load_from_disk\n", + "import os\n", + "\n", + "current_dir = os.getcwd()\n", + "parent_dir = os.path.dirname(current_dir)\n", + "file_path = os.path.join(parent_dir, 'data', \"wikipedia_documents.json\")\n", + "\n", + "with open(file_path, \"r\", encoding=\"utf-8\") as json_file:\n", + " json_data = json.load(json_file)\n", + " \n", + "df_wiki=pd.read_json(file_path).transpose()" + ], + "outputs": [], + "execution_count": 131 + }, + { + "cell_type": "markdown", + "id": "22f9f520-ea09-4414-b021-84fa12ed3267", + "metadata": {}, + "source": "## 데이터의 형태" + }, + { + "cell_type": "code", + "id": "355a79f2-7f84-4530-b28d-430b4ddaf5ec", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-04T13:44:32.420465Z", + "start_time": "2024-10-04T13:44:32.413441Z" + } + }, + "source": "json_data[\"0\"]", + "outputs": [ + { + "data": { + "text/plain": [ + "{'text': '이 문서는 나라 목록이며, 전 세계 206개 나라의 각 현황과 주권 승인 정보를 개요 형태로 나열하고 있다.\\n\\n이 목록은 명료화를 위해 두 부분으로 나뉘어 있다.\\n\\n# 첫 번째 부분은 바티칸 시국과 팔레스타인을 포함하여 유엔 등 국제 기구에 가입되어 국제적인 승인을 널리 받았다고 여기는 195개 나라를 나열하고 있다.\\n# 두 번째 부분은 일부 지역의 주권을 사실상 (데 팍토) 행사하고 있지만, 아직 국제적인 승인을 널리 받지 않았다고 여기는 11개 나라를 나열하고 있다.\\n\\n두 목록은 모두 가나다 순이다.\\n\\n일부 국가의 경우 국가로서의 자격에 논쟁의 여부가 있으며, 이 때문에 이러한 목록을 엮는 것은 매우 어렵고 논란이 생길 수 있는 과정이다. 이 목록을 구성하고 있는 국가를 선정하는 기준에 대한 정보는 \"포함 기준\" 단락을 통해 설명하였다. 나라에 대한 일반적인 정보는 \"국가\" 문서에서 설명하고 있다.',\n", + " 'corpus_source': '위키피디아',\n", + " 'url': 'TODO',\n", + " 'domain': None,\n", + " 'title': '나라 목록',\n", + " 'author': None,\n", + " 'html': None,\n", + " 'document_id': 0}" + ] + }, + "execution_count": 134, + "metadata": {}, + "output_type": "execute_result" + } + ], + "execution_count": 134 + }, + { + "cell_type": "code", + "id": "db0eae65-6ea5-4545-a2a1-57269f73c44a", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-04T13:44:32.700420Z", + "start_time": "2024-10-04T13:44:32.696152Z" + } + }, + "source": [ + "for key,value in json_data[\"0\"].items():\n", + " print(f\"{key} : {value}\\n\")" + ], + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "text : 이 문서는 나라 목록이며, 전 세계 206개 나라의 각 현황과 주권 승인 정보를 개요 형태로 나열하고 있다.\n", + "\n", + "이 목록은 명료화를 위해 두 부분으로 나뉘어 있다.\n", + "\n", + "# 첫 번째 부분은 바티칸 시국과 팔레스타인을 포함하여 유엔 등 국제 기구에 가입되어 국제적인 승인을 널리 받았다고 여기는 195개 나라를 나열하고 있다.\n", + "# 두 번째 부분은 일부 지역의 주권을 사실상 (데 팍토) 행사하고 있지만, 아직 국제적인 승인을 널리 받지 않았다고 여기는 11개 나라를 나열하고 있다.\n", + "\n", + "두 목록은 모두 가나다 순이다.\n", + "\n", + "일부 국가의 경우 국가로서의 자격에 논쟁의 여부가 있으며, 이 때문에 이러한 목록을 엮는 것은 매우 어렵고 논란이 생길 수 있는 과정이다. 이 목록을 구성하고 있는 국가를 선정하는 기준에 대한 정보는 \"포함 기준\" 단락을 통해 설명하였다. 나라에 대한 일반적인 정보는 \"국가\" 문서에서 설명하고 있다.\n", + "\n", + "corpus_source : 위키피디아\n", + "\n", + "url : TODO\n", + "\n", + "domain : None\n", + "\n", + "title : 나라 목록\n", + "\n", + "author : None\n", + "\n", + "html : None\n", + "\n", + "document_id : 0\n", + "\n" + ] + } + ], + "execution_count": 135 + }, + { + "cell_type": "markdown", + "id": "658db3a9-ce48-43c5-bffa-8b18fcefa3f1", + "metadata": {}, + "source": "## 데이터의 수 & 문장 길이" + }, + { + "cell_type": "code", + "id": "ca6bd72e-64fb-43fc-889b-d91ce5660cd6", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-04T16:44:34.574418Z", + "start_time": "2024-10-04T16:44:32.963564Z" + } + }, + "source": [ + "import seaborn as sns\n", + "import matplotlib.pyplot as plt\n", + "\n", + "# 텍스트 길이를 저장하는 열 추가 (이미 있다면 생략 가능)\n", + "df_wiki['text_len'] = df_wiki['text'].apply(len)\n", + "\n", + "# 서브플롯 설정: 1행 2열로 그래프 배치\n", + "plt.figure(figsize=(14, 6))\n", + "\n", + "# 첫 번째 서브플롯: 히스토그램\n", + "plt.subplot(1, 2, 1)\n", + "sns.histplot(df_wiki[\"text_len\"], kde=True, color='blue')\n", + "plt.xlabel(\"Length of Data\")\n", + "plt.ylabel(\"Frequency\")\n", + "plt.title(\"Wiki Text Data Length Distribution\")\n", + "\n", + "# 두 번째 서브플롯: 박스플롯\n", + "plt.subplot(1, 2, 2)\n", + "sns.boxplot(y=df_wiki[\"text_len\"], color='green')\n", + "plt.ylabel(\"Length of Data\")\n", + "plt.title(\"Wiki Text Data Length (Boxplot)\")\n", + "\n", + "# 그래프 보여주기\n", + "plt.tight_layout()\n", + "plt.show()\n" + ], + "outputs": [ + { + "data": { + "text/plain": [ + "
" + ], + "image/png": "iVBORw0KGgoAAAANSUhEUgAABWgAAAJICAYAAAD8eA38AAAAOXRFWHRTb2Z0d2FyZQBNYXRwbG90bGliIHZlcnNpb24zLjkuMiwgaHR0cHM6Ly9tYXRwbG90bGliLm9yZy8hTgPZAAAACXBIWXMAAA9hAAAPYQGoP6dpAACbbUlEQVR4nOzdfXzN9f/H8ec5Z2ZjxszFNCkXsYQhq+Wi+Sq+fUsXo34rjVAiuSq5itA30oWLSEsNJRlznXy7+Ep9VZKLQgqVi5RrZixjV+ec3x9zDsfGZjv2Oefscb/d3M7O5/M+n/PaeUufPff+vD4mu91uFwAAAAAAAACgxJmNLgAAAAAAAAAASisCWgAAAAAAAAAwCAEtAAAAAAAAABiEgBYAAAAAAAAADEJACwAAAAAAAAAGIaAFAAAAAAAAAIMQ0AIAAAAAAACAQQhoAQAAAAAAAMAgBLQAShW73V4q3/tq86bvzehajX5/AABQunD+e3X48vfmbnxWQMEIaIFSZsCAAYqKisrzP8kdO3aoQYMGioyMVGZmpsu+3377TQ0aNND8+fO1f/9+NWjQQEuXLpUkLV26VA0aNND+/fsv+Z4NGjTQm2++me++4cOHq0GDBpf9065du2J+17lWr16tYcOGXXbMm2++mef9mzRpog4dOujVV19VWlraFb9vWlqahg0bpk2bNhW1dKeuXbuqa9euxT6OO138ua5fv14NGjTQ+vXrr+g4jtdd+KdRo0Zq06aNBg8erN27d7uML8zfvQsVdh6K8ne8sH744Qf17t37ku8FAADcj/Nfzn/dzV3nvw5///237rjjDuf5bteuXfPMSYsWLdStWzdt2LDBLd9DUbRr107Dhw+/otdc/FmdOHFCMTEx+uuvv9xdHuDV/IwuAEDJatmypT7//HPt2rVLN9xwg3P7N998o0qVKunkyZPasGGD2rRp49y3ceNGSVLr1q1VrVo1JScnq1atWoV+z+TkZIWFheW7r2/fvnr44YedzxMSErR9+3ZNnz7duc3f37/Q73U577//fqHHJicnS8r9be+ZM2e0bds2JSYm6quvvtL8+fMVEhJS6GPt2LFDy5cvV6dOna60ZK9wJZ9rYYwePVo33XSTJCkjI0N//fWXEhMT9eCDD2rOnDlq0qSJJKlt27ZKTk5WtWrVCnXcws5DUf6OF9aiRYu0a9euEnkvAACQi/PfwuH8t/Dcff47fvx4/eMf/1DdunWd2xo2bKgxY8ZIkqxWq1JTUzV//nw9/vjjWrp0qcvfZU928WdVuXJlde/eXc8//7w++OADmUwmYwoDPAwBLVDKtGzZUpL0448/5jlB7dChg9atW6dvvvnG5QR106ZNqlWrlq699lpJUtOmTa/oPS83vlatWi4nu5UrV5a/v/8Vv4e7Xfz+rVq10m233aZHH31UkyZN0rhx44wprBSoV6+ey+cfHR2tDh06KDY2VsOGDdPKlStlsVhUuXJlVa5c2e3vX5J//zzh7zoAAL6O89/C4fzXGL/88otWrFihr776ymV7UFBQnjlp2bKlbrvtNi1durTAldGerEuXLpoxY4a++OILtW/f3uhyAI9AiwOglKlVq5bCw8P1448/Orelp6dr8+bNuu2229SqVSt9++23Lq/ZtGmTWrVqJangS7LT0tJ0//33q127ds7Lvi53iVdh/fbbb+rdu7eaN2+u5s2b6+mnn3a5LKZ///5q3Lix9uzZ49yWkJCgiIgIrVu3Tl27dtWGDRu0YcOGIl9+FBkZqTvvvFPLly/X2bNnndsXLVqkTp06qWnTpmrSpInuv/9+ffLJJ5JyL3fq1q2bJKlbt27Oy7OsVqveffdddezYUU2aNFHTpk318MMPa926dUX6fC62adMmxcfHKzIyUrfccouGDRumEydOOPcvXbpUDRs21NatWxUXF6fGjRurbdu2SkxMdDnO0aNH9cwzz+iWW25RVFSURo8erSlTpjgvu7vc57pnzx49/vjjioyMVKtWrTRx4kTl5OQU6fupWLGinnjiCe3Zs8d5WdfFlxeeOHFCzz33nFq1aqXGjRvr/vvv1/LlyyVdeh66du2q5557TgMGDFDz5s315JNPXvLv+I8//qgHHnhAjRs31r333uucY+nS/10MHz7c+VkNHz5cy5Yt04EDB5xj83vdH3/8oQEDBqhVq1Zq2rSpunbtqh9++CHPe3366acaMGCAmjVrpqioKI0cOVLp6elF+nwBAPBlnP9y/it57vnvO++8o1tvvVXVq1cv8HsMDAxU2bJl86w6/eSTT9SpUyc1a9ZMrVq10ujRo3Xq1ClJ0unTp9WuXTvdddddysrKkpS7Srpnz5667bbbdPz4ceff8f/85z/q06ePIiMjFRMTozfffFM2m+2S9fz999+aMGGC7rzzTjVu3FgdO3bU4sWLnfsv9VmVLVtWHTp00DvvvFPg9wyUFgS0QCl02223uZygfv/997JarWrZsqVat26t3bt36+DBg5Kkffv26ejRo2rdunWBx01PT1evXr2UlpamOXPmqGbNmm6pd+/evXr44YeVkpKiV155RePHj9dff/2lRx55RCkpKZKksWPHqnz58hozZozsdrt27NihhIQEde/eXbfddpvGjBmjhg0bqmHDhkpOTnZeQn+lWrdurezsbG3btk2SNG/ePI0ePVp33HGH3nnnHb3++usqU6aMhgwZooMHD+qmm27S6NGjJeVeuu+4TGnixIl66623FBcXp5kzZ+rf//63UlNTNXDgQJ05c6ZYn9fGjRvVvXt3BQQE6I033tDzzz+vDRs2qFu3bsrIyHCOs9lsGjRokO6++269++67uvnmmzVx4kR98803kqSsrCw99thj+vHHH/X8889rwoQJ2rlzp2bPnu08xuU+1wkTJujmm2/WjBkz1KFDByUmJmrBggVF/r4cq1ouDCsvNGTIEO3atUsvvvii3n33XTVs2FDDhg3T+vXrLzkPkvTpp5+qTJkyeuutt5w/TOTnhRde0F133aW33npL9erV0zPPPJPnh7nL6du3r2JiYlS1alUlJyerbdu2ecbs2rVLnTp10l9//aVRo0Zp4sSJMplMeuyxx/L0GxszZozCw8OVkJCgJ554QkuWLNGMGTMKXQ8AAKUJ57+c/0qed/6bnp6uL7/8UnfddVeefXa7XTk5OcrJyVF2draOHTumyZMnKysrS507d3aOS0hI0DPPPKPIyEhNmzZNTz/9tD7//HN17dpVGRkZCgoK0vjx4/XHH384zxWTkpK0du1ajR8/XlWqVHEea+zYsQoKCtKbb76pBx54QAkJCXrttdfyrT0jI0NdunTRihUr1LNnTyUkJOjmm2/WyJEjne9zuc/qX//6l7Zt26a9e/de8vMBShNaHAClUMuWLbV48WIdO3ZMVatW1TfffKPGjRurUqVKuu222+Tn56dvvvlGcXFx2rhxo/z8/BQdHX3ZY2ZmZuqpp57S4cOH9eGHHzovB3OH6dOnKyAgQO+//76CgoIk5Z5k33nnnZo5c6aGDRum0NBQjR07VgMHDtSiRYv04Ycfqk6dOnr22Wcl5V4273htcS4fq1q1qiTp+PHjkqS//vpLPXv21NNPP+0cU7NmTXXq1Ek//vijOnbsqHr16jlrcHzt+M38hTc8CAgIUP/+/fXrr7+qWbNmRa5x0qRJql27tt555x1ZLBZJuasf7rnnHi1ZskSPPvqopNyTvr59++qhhx6SJN18881atWqV/ve//6lNmzZasWKF9uzZoyVLlqhRo0aSctsN3Hnnnc73utzn2q1bN/Xt29f5uq+++krff/+94uPji/R9OU4ejx07lu/+DRs2qG/fvs76br31VlWqVEkWi0VBQUH5zoMkmc1mvfTSSypXrpwkXfKGH08//bSefPJJSdLtt9+uP/74Q9OnTy/UD29S7uqdiy9hvPiHkenTp6tMmTL64IMPVKFCBUm5vXY7duyo119/XYsWLXKOjYmJcV7adtttt2nt2rX63//+p8GDBxeqHgAAShPOf5sWuRbOf6/e+e+mTZuUnZ3tvMfChTZu3JhvqP7ss886e9WeOnVKb7/9th566CGXBQj169fXo48+qqVLl6pLly667bbb1KVLF7377rtq2rSpJk6cqLi4uDw3o2vYsKEmTpwoKfd898yZM/rwww/Vt29fBQcHu4xdunSpfvvtNyUlJenmm2+WlLugIicnRwkJCXr44Ycv+1k1btxYkrRu3TrVrl07388HKE1YQQuUQtHR0TKZTNq8ebMk6dtvv3WGTEFBQWrSpIm+++47SbknBk2aNHH+j/VShg4dqvXr16t///5uPTmVclc43HrrrQoICHD+FjkoKEgtWrRw1ilJd911l+655x6NGTNGf/zxhyZOnOi2GyxcyvDhwzVkyBD9/fff2rZtmz7++GPNmzdPkpSdnX3J102aNEndu3fXiRMntHnzZi1dulQrVqwo8HUFOXv2rLZu3aqYmBiX37pfe+21qlu3rtauXesy/sITYX9/f1WuXNkZGn7//fe69tprnSenUu7fj3/84x+FqqVFixbOr00mk8LDw4t0F+CLXepGArfeeqvefPNNDRw4UEuXLtWJEyc0bNgwlzryU7NmTWc4ezn/+te/XJ7feeed2rJli1vbCmzYsEH/+Mc/nOGsJPn5+emee+7Rtm3bXN7r4pPcsLCwYq8+AQDAV3H+6z6c/17alZ7/OhYG5Lfy+qabbtLixYu1ePFiLVq0SLNmzdJjjz2mKVOmaMqUKZKkLVu2KCsrS/fee2+eOsLDw13aLzz33HOqUaOGevfurWrVqmnEiBF53vO+++5zef7Pf/5T2dnZ2rJlS56xGzZsUHh4uDOcvfAYmZmZ2rp16yW/b0mqUKGCgoODL7k4AihtWEELlEKhoaGqX7++fvzxR9WvX19//fWXyyrA1q1b68MPP5TdbtemTZsUGxtb4DGPHDmiRo0a6a233tK//vUvlS9f3m31njx5Up988olLz0+Hi28S9cADD+g///mPrrvuOpe7oLrLkSNHJMl5V94///xTo0eP1vfffy8/Pz/VqVNHDRo0kJT7G/pL2bZtm1588UVt27ZNAQEBqlevnsLDwwt8XUHS0tJks9mUmJiYp5+WlNvv6UIBAQEuz81ms/P9U1NTFRoamucYF14GdTmBgYGXPHZRXPzZX2zKlCmaMWOGPv30U3322Wcym81q2bKlxo4de9kfmgr7/ThWjziEhobKbrfr9OnThfwOCnbq1Kl866lSpUqe93L35wsAgC/j/LfoOP+9eue/f//9d76vk6Ty5cs7V5k6tG7dWmfOnNHMmTPVrVs3Z5/ZS50/Oo4vSeXKldM///lPJSYmKjo6Ot/3rFatmstzx9+1/ELmy523Xuo1FwsMDHTruTTgzQhogVKqZcuW2rp1q6699lpVqFBBkZGRzn2tW7fWtGnT9P3332v//v2FuoR7+vTpCgoK0gMPPKApU6Zo1KhRbqu1QoUKatmypXr06JFnn5/f+X/GMjIyNH78eNWvX1+7d+9WYmKi+vTp47Y6JOm7775TuXLldNNNN8lms+nJJ59UmTJltHDhQjVs2FB+fn7atWuXczVAfk6fPq0nnnhCDRo00MqVK1W3bl2ZzWatWbNGn3/+ebHqK1++vEwmk7p376577rknz/78TsQupXr16tq3b1+e7Y6+ZyXNsVokKioq3/0VKlTQkCFDNGTIEO3Zs0erV69WQkKCXnzxRc2cObPY73/q1CmXE/rjx4/LYrGoYsWKzs/EarW6vOZKV7RWrFjRefnghRxtHUJCQnT06NErLR0AAIjz36Li/Pfqnf+GhIRIyg0zLw7eL+XGG2/UokWLtH//flWsWFFS7nnpxeH8sWPHXBYp7Nq1S3PmzNGNN96ohQsX6t57781zpdnJkyddnju+7/xC64oVK+b7WV143lqQtLS0Qo0DSgNaHACl1G233aYdO3bo+++/V8uWLZ29miQ5+3EtWLBAwcHBeX5zm58qVaqoXr166tGjh+bNm+e8fMwdbrnlFu3atUs33nijGjdurMaNG6tRo0Z6//33tWrVKue4SZMm6eDBg5o6daoee+wxTZ8+Xb/++qtzv9lcvH/yduzYoS+++EKdO3dW2bJllZqaqr179+rBBx9UkyZNnCfLX3/9tSQ573h64Wcr5d7d9eTJk+rWrZtuuOEGZ10Xv64ogoKC1LBhQ+3Zs8f5WTVu3Fg33HCDpk+ffkV3773lllv0119/aceOHc5tmZmZzjodivu5Fsbp06c1e/ZsNWjQQM2bN8+z/8CBA4qJidFnn30mSapTp4569eqlli1b6vDhw5LyzsOVctw8Qsqdo88++0yRkZEKCAhwXgLpeC8p91K9n376yeUYBX1WUVFR+uqrr1xWO1itVv3nP/9R48aNr/oliwAA+DLOf68c579X9/z3mmuukeR6DlmQzZs3y2Kx6Nprr1VkZKT8/f318ccfu4zZtGmTDh486DxvzsnJ0bBhwxQeHq758+erUaNGGjFiRJ7FBF9++aXL888//1yBgYEuv8xwiIqK0oEDB/LcwHfFihUqU6aMs6/upT6rkydP6uzZs87PACjtWEELlFJRUVHKycnRV1995bzLqoPZbFZ0dLRWr16tdu3aXVGw9fTTT+s///mPRo0apWXLlrklUOrbt68efvhh9e7dW4888ojKli2r5ORkffHFF5o2bZqk3F5hc+fO1aBBg1SnTh31799fn3/+uYYPH66FCxeqTJkyCg4O1ubNm7Vu3To1bNjQ+Rvn/Dj6LNntdqWnp2vbtm16//33df3112vgwIGScn+THB4ernnz5iksLEzBwcH69ttvNWfOHEm5/bAkOfuJ/u9//1PFihVVu3ZtBQUFacaMGfLz85Ofn58+//xzLV682OV1l3L48GG9//77ebbXq1dPrVu31rPPPqsnn3xSgwcP1n333Ser1arZs2dr69ateuqppwr9uXfs2FHvvvuunn76aQ0cOFDBwcGaPXu2UlJSXE6kLv5ci2vXrl3OS9EyMzO1Z88ezZ07V6mpqZo6dWq+PWjDw8MVFhamcePG6fTp06pVq5Z+/vlnrVmzRr1795aUdx4iIiKuqK433nhDVqtVNWrU0Pz587V371699957knJXEDRr1kwffvihrrvuOoWEhGju3LnKyMhw6W8bHBys48ePa82aNbrxxhvzvEe/fv309ddfq1u3bnryySfl7++vDz/8UH/99ZdbVgEDAFCacf7L+W9BSvr8t0WLFgoICNCPP/6Y5zinT5926f2anZ2t1atX6+OPP1ZcXJxzxe2TTz7pvNHsHXfcof3792vq1KmqV6+eOnXqJEl655139Msvv+jDDz9UYGCgXnrpJXXu3FkTJ050+W/hs88+U5UqVRQTE6MNGzZo3rx5euaZZ/K9X0OnTp2UlJSkfv36acCAAbr22mv15ZdfasmSJerXr5/zpmKX+jvoCHYLe8NdwNexghYopcqVK6fIyEhlZ2erVatWefa3bt36kvsuJyAgQKNHj9auXbs0Y8YMt9QaERGhefPmyWQyaejQoRowYICOHTumt956Sx06dNCZM2c0YsQI1a9fX48//rjz+xszZoy2b9+ut99+W5L06KOPqkyZMurVq1ee34JfLC4uTnFxcXr44Yc1ePBg/fe//9Xjjz+uBQsWuNzAKSEhQdWrV9fw4cM1aNAgbdmyRW+//bbq1KmjTZs2SZJuuOEGdezYUfPmzdNzzz2nChUqKCEhQXa7XQMHDtTQoUN18OBBffjhhypfvrzzdZfy559/asKECXn+rFy5UlLu3M2aNUuHDx/WgAEDNHToUFksFr333ntXdAdfPz8/zZo1Sw0bNtTYsWM1dOhQ1a9fX+3bt3c5SbuSz7Uw/v3vfzs//z59+uj999/XbbfdpuXLl+d7J1uH6dOnq02bNpo6dap69uyp+fPnq1+/fs47DF88D1dq/Pjx+uCDD9S3b18dOXJEiYmJuuWWW5z7X3nlFTVq1EgvvPCChg8frhtvvFGPPfaYyzE6deqk8PBwPf3001q+fHme97jhhhuUlJSkKlWq6Pnnn9eQIUNkt9v1wQcfqGXLlldcMwAAOI/zX85/C1LS57+BgYG6/fbbtWbNmjz7tm/f7pyTuLg4Pf744/r222/1zDPP6IUXXnCO69+/v8aOHasNGzaoT58+mj59uu666y4lJSUpMDBQO3fu1Ntvv62HH37Y2dIgIiJC3bt3V1JSktatW+c81sCBA7V792717dtXn3/+uUaPHq0nn3zykrXPnTtX7dq107Rp0/TUU0/phx9+0Pjx49W/f/8CP6uvv/5aTZo0cfYhBko7k507igAA8vH7779rz5496tChg8uq1c6dO6tGjRqaPn26gdUBAAAA7mXE+e+2bdsUFxenVatWGRZW7t+/X3fccYcmTJjgXHV7NaWnp6tNmzZ67bXXdOedd1719wO8AS0OAAD5OnPmjAYOHKguXbqoffv2slqtWrlypX755RcNGTLE6PIAAAAAtzLi/Ldx48a66667NHPmTI0ZM+aqvIenSUpKUv369XXHHXcYXQrgMQhoAQD5ioyM1BtvvKFZs2Zp+fLlstvtatiwoWbOnKno6GijywMAAADcyqjz39GjR6tTp07atWuX6tWrd9XexxOcOHFCH3zwgT788MN87y0BlFa0OAAAAAAAAAAAg3CTMAAAAAAAAAAwCAEtAAAAAAAAABiEgBYAAAAAAAAADEJACwAAAAAAAAAG8TO6AG9lt9tls13d+6uZzaar/h4wBnPru5hb38Xc+i7m1nOYzSbu6GyQkji3BQAAKE2u5NyWgLaIbDa7TpxIv2rH9/MzKySkvNLSzignx3bV3gclj7n1Xcyt72JufRdz61kqVy4vi4WA1ghX+9wWAACgtLmSc1taHAAAAAAAAACAQQhoAQAAAAAAAMAgBLQAAAAAAAAAYBACWgAAAAAAAAAwCAEtAAAAAAAAABiEgBYAAAAAAAAADEJACwAAAAAAAAAGIaAFAAAAAAAAAIMQ0AIAAAAAAACAQQhoAQAAAAAAAMAgBLQAAAAAAAAAYBACWgAAAAAAAAAwCAEtAAAAAAAAABiEgBYAAAAAAAAADEJACwAAAAAAAAAGIaAFAAAAAAAAAIP4GV0AAAAAAABAQbKysrRs2SIdOLBf4eE1FRv7kPz9/Y0uCwCKjYAWAAAAAAB4tISEqUpOTpLVar1g2zTFxXVR374DDawMAIqPgBYAAAAAAHishISpSkqaq5CQyurVq69atWqttWu/VWJigpKS5koSIS0Ar0YPWgAAAAAA4JGysrKUnJykkJDKWrbsE9133wMKDa2i++57QMuWfaKQkMpKTk5SVlaW0aUCQJER0AIAAAAAAI+0bNkiWa1W9erVV35+rhcB+/n5qVevPrJarVq2bJFBFQJA8RHQAgAAAAAAj3TgwH5JUqtWrfPd37JlG5dxAOCNCGgBAAAAAIBHCg+vKUlau/bbfPd/9903LuMAwBsR0AIAAAAAAI8UG/uQLBaLEhMTlJOT47IvJydHiYkzZLFYFBv7kEEVAkDxEdACAAAAAACP5O/vr7i4LkpNPaHY2Lu1YsVSHT9+TCtWLFVs7N1KTT2huLgu8vf3N7pUACgyv4KHAAAAAAAAGKNv34GSpOTkJL322svO7RaLRV26dHXuBwBvRUALAAAAAAA8Wt++A/XEE09p2bJFOnBgv8LDayo29iFWzgLwCQS0AAAAAADA4+W2O3jU6DIAwO3oQQsAAAAAAAAABiGgBQAAAAAAAACDENACAAAAAAAAgEEIaAEAAAAAAADAIAS0AAAAAAAAAGAQAloAAAAAAAAAMAgBLQAAAAAAAAAYhIAWAAAAAAAAAAxCQAsAAAAAAAAABiGgBQAAAAAAAACDENACAAAAAAAAgEEIaAEAAAAAAADAIIYHtCkpKRoyZIiio6PVrFkzPfnkk9q1a5dz/44dOxQfH6+mTZuqbdu2mjVrlsvrbTabpk2bpjZt2igyMlI9e/bUvn37XMYUdAwAAAAAAAAAMILhAe1TTz2lv/76S4mJiVq8eLECAgLUvXt3nT17VqmpqerRo4euv/56LVmyRP3799fUqVO1ZMkS5+sTEhK0YMECjRs3TsnJyTKZTOrVq5eysrIkqVDHAAAAAAAAAAAj+Bn55qmpqapZs6aeeuop3XDDDZKkvn376v7779fvv/+udevWyd/fX2PHjpWfn5/q1q2rffv2KTExUZ07d1ZWVpZmz56tIUOGKCYmRpI0ZcoUtWnTRqtWrdI999yjhQsXXvYYAAAAAAAAAGAUQ1fQhoSEaPLkyc5w9vjx45o1a5bCwsJUr149bdq0SVFRUfLzO58jR0dHa+/evUpJSdHOnTuVnp6u6Oho5/7g4GA1bNhQGzdulKQCjwEAAAAAAAAARjF0Be2FXnjhBedq17ffflvlypXT4cOHVb9+fZdx1apVkyQdPHhQhw8fliTVqFEjz5hDhw5JUoHHCA0NvSrfDwAAAAAAAAAUxGMC2scee0xxcXGaP3++nn76aSUlJSkjI0P+/v4u48qWLStJyszM1NmzZyUp3zGnTp2SpAKPURx+fldvAbLFYnZ5hO9gbn0Xc+u7mFvfxdwCAAAAMJrHBLT16tWTJL300kvasmWLPvzwQwUEBDhv9uXgCFXLlSungIAASVJWVpbza8eYwMBASSrwGEVlNpsUElK+yK8vrODgwKv+HjAGc+u7mFvfxdz6LuYWAAAAgFEMDWhTUlK0bt06/etf/5LFYpEkmc1m1a1bV0ePHlVYWJiOHj3q8hrH8+rVqysnJ8e5rVatWi5jIiIiJKnAYxSVzWZXWtqZIr++IBaLWcHBgUpLOyur1XbV3gclj7n1Xcyt72JufRdz61mCgwNZzQwAAIBSx9CA9ujRoxo8eLBCQ0N12223SZKys7O1fft2tWvXTlWqVNGCBQtktVqdAe66detUu3ZthYaGqkKFCgoKCtL69eudAW1aWpq2b9+u+Ph4SVJUVNRlj1EcOTlX/wc5q9VWIu+Dksfc+i7m1ncxt76LuQUAAABgFEOXKERERKh169Z68cUXtWnTJv32228aNmyY0tLS1L17d3Xu3FmnT5/WyJEjtWvXLi1dulRz5sxR7969JeX2no2Pj9fEiRO1evVq7dy5U88884zCwsLUvn17SSrwGAAAAAAAAABgFJPdbrcbWcDff/+tSZMm6YsvvtDff/+tFi1aaPjw4brhhhskST/99JPGjx+v7du3q2rVqurZs6dzdawkWa1WTZ48WUuXLlVGRoaioqI0evRo1axZ0zmmoGMUhdVq04kT6cU6xuX4+ZkVElJeqanprOjxMcyt72JufRdz67uYW89SuXJ5WhwY5Gqf2wIAAJQ2V3Jua3hA660IaFFUzK3vYm59F3Pru5hbz0JAaxwCWgAAAPe6knNbzoABAAAAAAAAwCAEtAAAAAAAAABgEAJaAAAAAAAAADAIAS0AAAAAAAAAGISAFgAAAAAAAAAMQkALAAAAAAAAAAYhoAUAAAAAAAAAgxDQAgAAAAAAAIBBCGgBAAAAAAAAwCAEtAAAAAAAAABgED+jCwAAAAAAAChIVlaWli1bpAMH9is8vKZiYx+Sv7+/0WUBQLER0HqJN97w16BBWUaXAQAAAABAiUtImKrk5CRZrdYLtk1TXFwX9e070MDKAKD4CGi9hN1udAUAAAAAAJS8hISpSkqaq5CQyurVq69atWqttWu/VWJigpKS5koSIS0Ar0YPWgAAAAAA4JGysrKUnJykkJDKWrbsE9133wMKDa2i++57QMuWfaKQkMpKTk5SVhZXnALwXgS0AAAAAADAIy1btkhWq1W9evWVn5/rRcB+fn7q1auPrFarli1bZFCFAFB8BLQAAAAAAMAjHTiwX5LUqlXrfPe3bNnGZRwAeCMCWgAAAAAA4JHCw2tKktau/Tbf/d99943LOADwRgS0AAAAAADAI8XGPiSLxaLExATl5OS47MvJyVFi4gxZLBbFxj5kUIUAUHwEtAAAAAAAwCP5+/srLq6LUlNPKDb2bq1YsVTHjx/TihVLFRt7t1JTTygurov8/f2NLhUAisyv4CEAAAAAAADG6Nt3oCQpOTlJr732snO7xWJRly5dnfsBwFsR0AIAAAAAAI/Wt+9APfHEU1q2bJEOHNiv8PCaio19iJWzAHwCAS0AAAAAAPB4ue0OHjW6DABwO3rQAgAAAAAAAIBBCGgBAACAIti7d6+aNWumpUuXOrft2LFD8fHxatq0qdq2batZs2a5vMZms2natGlq06aNIiMj1bNnT+3bt89ljDuOAQAAAO9BQAsAAABcoezsbD333HM6c+aMc1tqaqp69Oih66+/XkuWLFH//v01depULVmyxDkmISFBCxYs0Lhx45ScnCyTyaRevXopKyvLbccAAACAdyGgBQAAAK7Qm2++qfLly7tsW7hwofz9/TV27FjVrVtXnTt3Vvfu3ZWYmChJysrK0uzZs9W/f3/FxMQoIiJCU6ZM0ZEjR7Rq1Sq3HQMAAADehYAWAAAAuAIbN25UcnKyXn31VZftmzZtUlRUlPz8zt+HNzo6Wnv37lVKSop27typ9PR0RUdHO/cHBwerYcOG2rhxo9uOAQAAAO9CQAsAAAAUUlpamoYOHapRo0apRo0aLvsOHz6ssLAwl23VqlWTJB08eFCHDx+WpDyvq1atmg4dOuS2YwAAAMC7+BU8BAAAAIAkjR07Vk2bNtW9996bZ19GRob8/f1dtpUtW1aSlJmZqbNnz0pSvmNOnTrltmMUlZ8fazcAAACMQEDrJUwmoysAAAAo3ZYvX65Nmzbp448/znd/QEBAnht1ZWZmSpLKlSungIAASbl9ZB1fO8YEBga67RhFYTabFBJSvuCBAAAAcDsCWgAAAKAQlixZopSUFLVt29Zl+5gxYzRr1ixdc801Onr0qMs+x/Pq1asrJyfHua1WrVouYyIiIiRJYWFhxT5GUdhsdqWlnSny6wEAAOAqODhQFkvhrlAioPUSJpM0ebK/nn02q+DBAAAAcLuJEycqIyPDZVuHDh00YMAA3X333frPf/6jBQsWyGq1ymKxSJLWrVun2rVrKzQ0VBUqVFBQUJDWr1/vDFfT0tK0fft2xcfHS5KioqKKfYyiysmxFev1AAAAKBoaTXkRu93oCgAAAEqv6tWr67rrrnP5I0mhoaEKDw9X586ddfr0aY0cOVK7du3S0qVLNWfOHPXu3VtSbt/Y+Ph4TZw4UatXr9bOnTv1zDPPKCwsTO3bt5cktxwDAAAA3oUVtAAAAIAbhIaGaubMmRo/frxiY2NVtWpVDR06VLGxsc4xAwYMUE5OjkaNGqWMjAxFRUVp1qxZzpt+ueMYAAAA8C4mu511mUVhtdp04kT6VTu+n59ZISHllZqarpwcm6ZO9VdOjjR4MC0OvN3Fcwvfwdz6LubWdzG3nqVy5fKF7tMF97ra57YAAAClzZWc23IGDAAAAAAAAAAGIaAFAAAAAAAAAIMQ0AIAAAAAAACAQQhoAQAAAAAAAMAgBLQAAAAAAAAAYBACWgAAAAAAAAAwCAEtAAAAAAAAABiEgBYAAAAAAAAADEJACwAAAAAAAAAGIaAFAAAAAAAAAIMQ0AIAAAAAAACAQQhoAQAAAAAAAMAgBLQAAAAAAAAAYBACWgAAAAAAAAAwCAEtAAAAAAAAABiEgBYAAAAAAAAADEJACwAAAAAAAAAGIaAFAAAAAAAAAIMQ0AIAAAAAAACAQQhoAQAAAAAAAMAgBLQAAAAAAAAAYBACWgAAAAAAAAAwCAEtAAAAAAAAABiEgBYAAAAAAAAADEJACwAAAAAAAAAGIaAFAAAAAAAAAIMQ0AIAAAAAAACAQQhoAQAAAAAAAMAghge0J0+e1OjRo3X77berefPmeuSRR7Rp0ybn/hEjRqhBgwYuf26//XbnfpvNpmnTpqlNmzaKjIxUz549tW/fPpf32LFjh+Lj49W0aVO1bdtWs2bNKrHvz51MJqMrAAAAAAAAAOBOhge0zz77rLZu3arJkydr8eLFuummm/T4449r9+7dkqRff/1Vffr00bfffuv8s3z5cufrExIStGDBAo0bN07JyckymUzq1auXsrKyJEmpqanq0aOHrr/+ei1ZskT9+/fX1KlTtWTJEiO+XQAAAAAAAABwMjSg3bdvn9auXasxY8aoRYsWqlOnjkaOHKnq1atr5cqVslqt2rVrlxo3bqyqVas6/1SuXFmSlJWVpdmzZ6t///6KiYlRRESEpkyZoiNHjmjVqlWSpIULF8rf319jx45V3bp11blzZ3Xv3l2JiYlGfusAAAAAAAAAYGxAGxISonfffVeNGjVybjOZTLLb7Tp16pT++OMPZWZmqm7duvm+fufOnUpPT1d0dLRzW3BwsBo2bKiNGzdKkjZt2qSoqCj5+fk5x0RHR2vv3r1KSUm5St8ZAAAAAAAAABTM0IA2ODhYMTEx8vf3d2779NNP9eeff6p169b67bffZDKZNGfOHLVr10533nmnXnrpJf3999+SpMOHD0uSatSo4XLcatWq6dChQ84xYWFhefZL0sGDB6/a9wYAAAAAAAAABfEreEjJ+eGHH/T888/rjjvuULt27TRt2jSZzWaFh4drxowZ2rdvn1599VX99ttvmjNnjs6ePStJLgGvJJUtW1anTp2SJGVkZOS7X5IyMzOLVa+f39XLty0Ws8uj2WyS3X513xMl4+K5he9gbn0Xc+u7mFsAAAAARvOYgPaLL77Qc889p8jISE2ePFmS1L9/f3Xv3l3BwcGSpPr166tq1aqKi4vTtm3bFBAQICm3F63jayk3eA0MDJQkBQQEOG8YduF+SSpXrlyR6zWbTQoJKV/k1xdWcHDu9xEYKFmtUkiIfwGvgLdwzC18D3Pru5hb38XcAgAAADCKRwS0H374ocaPH6/27dtr4sSJzhWvJpPJGc461K9fX1Ju6wJHa4OjR4+qVq1azjFHjx5VRESEJCksLExHjx51OYbjefXq1Ytcs81mV1ramSK/viAWi1nBwYFKSzsrq9Wms2fLyGqVUlOzr9p7omRcPLfwHcyt72JufRdz61mCgwNZzQwAAIBSx/CANikpSS+99JK6du2q559/Xmbz+ZPywYMH6+TJk5o1a5Zz27Zt2yRJ9erV07XXXqugoCCtX7/eGdCmpaVp+/btio+PlyRFRUVpwYIFslqtslgskqR169apdu3aCg0NLVbtOTlX/wc5q9WmnBybbDa7bLaSeU+UDMfcwvcwt76LufVdzC0AAAAAoxi6RGHv3r16+eWX1b59e/Xu3VspKSk6duyYjh07pr///lsdO3bU2rVr9fbbb+vPP//UmjVr9Pzzz6tjx46qW7eu/P39FR8fr4kTJ2r16tXauXOnnnnmGYWFhal9+/aSpM6dO+v06dMaOXKkdu3apaVLl2rOnDnq3bu3kd86AAAAAAAAABi7gvbzzz9Xdna2Vq1apVWrVrnsi42N1SuvvKKpU6dqxowZmjFjhipUqKB7771XgwYNco4bMGCAcnJyNGrUKGVkZCgqKkqzZs1ytkkIDQ3VzJkzNX78eMXGxqpq1aoaOnSoYmNjS/JbBQAAAAAAAIA8THa73W50Ed7IarXpxIn0q3Z8Pz+zQkLKKzU1XTk5Nk2d6i+rVXr22ayCXwyPdvHcwncwt76LufVdzK1nqVy5PD1oDXK1z20BAABKmys5t+UMGAAAAAAAAAAMQkALAAAAAAAAAAYhoAUAAAAAAAAAgxDQAgAAAAAAAIBBCGgBAAAAAAAAwCAEtAAAAAAAAABgEAJaAAAAAAAAADAIAS0AAAAAAAAAGISAFgAAAAAAAAAMQkALAAAAAAAAAAYhoAUAAAAAAAAAgxDQAgAAAAAAAIBBCGgBAAAAAAAAwCAEtAAAAAAAAABgEAJaAAAAAAAAADAIAS0AAAAAAAAAGISAFgAAAAAAAAAMQkALAAAAAAAAAAYhoAUAAAAAAAAAgxDQAgAAAAAAAIBBCGgBAAAAAAAAwCAEtAAAAAAAAABgEAJaAAAAAAAAADAIAS0AAAAAAAAAGISAFgAAAAAAAAAMQkALAAAAAAAAAAYhoPUSNpv0+ed+Wr7cz+hSAAAAAAAAALgJAa2XOHTIpM2bLXr9dX+jSwEAAAAAAADgJgS0XsJqzX08e9ZkbCEAAAAAAAAA3IaA1kvYbLmPWVnG1gEAAAAAAADAfQhovYTdnvuYnc0KWgAAAAAAAMBXENB6CUdAywpaAAAAAAAAwHcQ0HqJ8ytoja0DAAAAAAAAgPsQ0HoJuz23tUFWlskZ1gIAAAAAAADwbgS0XsJxkzBJyskxrg4AAAAAAAAA7kNA6yUuXDVLH1oAAAAAAADANxDQeokLA1r60AIAAAAAAAC+gYDWS1wY0GZmmowrBAAAAAAAAIDbENB6CVbQAgAAAAAAAL6HgNZL0IMWAAAAAAAA8D0EtF7CdQUtLQ4AAAAAAAAAX0BA6yVYQQsAAAAAAAD4HgJaL0EPWgAAAAAAAMD3ENB6CZvt/NdZWbQ4AAAAAAAAAHwBAa2XYAUtAAAAAAAA4HsIaL0EAS0AAAAAAADgewhovQQ3CQMAADBeSkqKhgwZoujoaDVr1kxPPvmkdu3a5dy/Y8cOxcfHq2nTpmrbtq1mzZrl8nqbzaZp06apTZs2ioyMVM+ePbVv3z6XMe44BgAAALwHAa2XcF1BSw9aAAAAIzz11FP666+/lJiYqMWLFysgIEDdu3fX2bNnlZqaqh49euj666/XkiVL1L9/f02dOlVLlixxvj4hIUELFizQuHHjlJycLJPJpF69einr3G/g3XEMAAAAeBcCWi/BCloAAABjpaamqmbNmnrppZfUuHFj1a1bV3379tWxY8f0+++/a+HChfL399fYsWNVt25dde7cWd27d1diYqIkKSsrS7Nnz1b//v0VExOjiIgITZkyRUeOHNGqVaskyS3HAAAAgHchoPUSdvv5VbP0oAUAACh5ISEhmjx5sm644QZJ0vHjxzVr1iyFhYWpXr162rRpk6KiouTn5+d8TXR0tPbu3auUlBTt3LlT6enpio6Odu4PDg5Ww4YNtXHjRklyyzEAAADgXfwKHgJP4LqClhYHAAAARnrhhRecq13ffvttlStXTocPH1b9+vVdxlWrVk2SdPDgQR0+fFiSVKNGjTxjDh06JEluOQYAAAC8CwGtl6DFAQAAgOd47LHHFBcXp/nz5+vpp59WUlKSMjIy5O/v7zKubNmykqTMzEydPXtWkvIdc+rUKUlyyzGKys+Pi+sAAACMQEDrJWy2818T0AIAABirXr16kqSXXnpJW7Zs0YcffqiAgIA8N+rKzMyUJJUrV04BAQGScvvIOr52jAkMDJQktxyjKMxmk0JCyhf59QAAACg6AlovceEK2uxsWhwAAACUtJSUFK1bt07/+te/ZLFYJElms1l169bV0aNHFRYWpqNHj7q8xvG8evXqysnJcW6rVauWy5iIiAhJcssxisJmsyst7UyRXw8AAABXwcGBslgKd4USAa2XoMUBAACAsY4eParBgwcrNDRUt912myQpOztb27dvV7t27VSlShUtWLBAVqvVGeCuW7dOtWvXVmhoqCpUqKCgoCCtX7/eGa6mpaVp+/btio+PlyRFRUUV+xhFlZNjK3gQAAAA3I5GU17CdQWtcXUAAACUVhEREWrdurVefPFFbdq0Sb/99puGDRumtLQ0de/eXZ07d9bp06c1cuRI7dq1S0uXLtWcOXPUu3dvSbl9Y+Pj4zVx4kStXr1aO3fu1DPPPKOwsDC1b99ektxyDAAAAHgXVtB6CdcVtLQ4AAAAKGkmk0lvvPGGJk2apEGDBunvv/9WixYtNG/ePF1zzTWSpJkzZ2r8+PGKjY1V1apVNXToUMXGxjqPMWDAAOXk5GjUqFHKyMhQVFSUZs2a5bzpV2hoaLGPAQAAAO9istsvjP5QWFarTSdOpF+14/v5mRUSUl6pqenKybGpU6dAffttbp7eq1eWxo/PvGrvjavr4rmF72BufRdz67uYW89SuXL5Qvfpgntd7XNbAHAHq9WqrVs3KyXluEJDqygyspmzHQwAeJorObdlBa2XsF3wMyM9aAEAAAAApcmaNV9q+vQ3dOjQQee2GjWuUb9+gxQT087AygCg+Fii4IXoQQsAAAAAKC3WrPlSo0YNU506dTVjxnv673+/1owZ76lOnboaNWqY1qz50ugSAaBYCGi9BD1oAQAAAACljdVq1fTpb6hly9aaMGGSGjVqrHLlyqlRo8aaMGGSWrZsrenTp8pqtRpdKgAUGQGtl7iwxQEraAEAAAAApcHWrZt16NBBde3aU2aza4RhNpvVtWsPHTp0QFu3bjaoQgAoPgJaL+G6gta4OgAAAAAAKCkpKcclSXXq1M13v2O7YxwAeCPDA9qTJ09q9OjRuv3229W8eXM98sgj2rRpk3P/jh07FB8fr6ZNm6pt27aaNWuWy+ttNpumTZumNm3aKDIyUj179tS+fftcxhR0DG9wYUCbnU2LAwAAAACA7wsNrSJJ2rNnd777Hdsd4wDAGxke0D777LPaunWrJk+erMWLF+umm27S448/rt27dys1NVU9evTQ9ddfryVLlqh///6aOnWqlixZ4nx9QkKCFixYoHHjxik5OVkmk0m9evVS1rllpoU5hjew28+HsqygBQAAAACUBpGRzVSjxjWaO3e2bBf2/lPugq25c99TjRrhioxsZlCFAFB8fka++b59+7R27VrNnz9fzZs3lySNHDlSX3/9tVauXKmAgAD5+/tr7Nix8vPzU926dbVv3z4lJiaqc+fOysrK0uzZszVkyBDFxMRIkqZMmaI2bdpo1apVuueee7Rw4cLLHsNb0OIAAAAAAFDaWCwW9es3SKNGDdOIEYPVtWsP1alTV3v27Nbcue/pu+++1bhxr8pisRhdKgAUmaEraENCQvTuu++qUaNGzm0mk0l2u12nTp3Spk2bFBUVJT+/8zlydHS09u7dq5SUFO3cuVPp6emKjo527g8ODlbDhg21ceNGSSrwGN6CFgcAAADudebMGX399ddGlwEAKEBMTDuNG/eq9uzZrT59eqpDhxj16dNTe/bs0bhxryompp3RJQJAsRi6gjY4ONi58tXh008/1Z9//qnWrVtrypQpql+/vsv+atWqSZIOHjyow4cPS5Jq1KiRZ8yhQ4ckSYcPH77sMUJDQ4tcv5/f1cu3LRazy6NrQHt13xtX18VzC9/B3Pou5tZ3Mbe+78CBAxo9erQ2btyo7OzsfMfs2LGjhKsCAFypmJh2at06Rlu3blZKynGFhlZRZGQzVs4C8AmGBrQX++GHH/T888/rjjvuULt27TRhwgT5+/u7jClbtqwkKTMzU2fPnpWkfMecOnVKkpSRkXHZYxSV2WxSSEj5Ir++sIKDAyVJF/4/x2q1lMh74+pyzC18D3Pru5hb38Xc+q4JEyZo8+bN+r//+z/9+OOPCgwMVNOmTbV27Vr99ttvevPNN40uEQBQSBaLRc2btzC6DABwO48JaL/44gs999xzioyM1OTJkyVJAQEBzpt9OThC1XLlyikgIECSlJWV5fzaMSYwMLBQxygqm82utLQzRX59QSwWs4KDA5WWdlZWq03Z2QGSclPajAybUlPPXrX3xtV18dzCdzC3vou59V3MrWcJDg50+2rmjRs3atCgQerWrZvmzZunL774QkOGDNGzzz6rnj17avXq1brjjjvc+p4AAADAlfCIgPbDDz/U+PHj1b59e02cONG54jUsLExHjx51Get4Xr16deXk5Di31apVy2VMREREoY5RHDk5V/8HOavVppwcmy68WWVWVsm8N64ux9zC9zC3vou59V3Mre9KT0/XjTfeKEmqW7euc8WsxWLRo48+qldeecXI8gAAAABjbxImSUlJSXrppZf06KOP6o033nBpRxAVFaUffvhBVqvVuW3dunWqXbu2QkNDFRERoaCgIK1fv965Py0tTdu3b1eLFi0KdQxvcWEP2osWBAMAAOASqlWrpmPHjkmSrrvuOp06dcr5y/qKFSt61U1jAQAA4JsMDWj37t2rl19+We3bt1fv3r2VkpKiY8eO6dixY/r777/VuXNnnT59WiNHjtSuXbu0dOlSzZkzR71795aU23s2Pj5eEydO1OrVq7Vz504988wzCgsLU/v27SWpwGN4i4tvEgYAAICCxcTEaOrUqfrxxx9Vo0YNhYWFafbs2Tp9+rSWLFlS7CuqAAAlJysrS8nJ8zR58qtKTp6Xp50hAHgrk91+YfRXsmbMmKEpU6bkuy82NlavvPKKfvrpJ40fP17bt29X1apV1bNnT8XHxzvHWa1WTZ48WUuXLlVGRoaioqI0evRo1axZ0zmmoGMUhdVq04kT6cU6xuX4+ZkVElJeqanpysmxqW3bctq+PbcHrb+/Xfv3n75q742r6+K5he9gbn0Xc+u7mFvPUrlyebf3oE1NTdWTTz6p8uXL6/3339eKFSs0fPhwOU6BR48erUceecSt7+mNrva5LQAUV0LCVCUnJ7lcHWuxWBQX10V9+w40sDIAyN+VnNsaGtB6s5IOaGNiymnHjtyA1mKx69AhAlpvRRjgu5hb38Xc+i7m1rNcjYDW4ejRo6pWrZokadOmTdqyZYuaNGmiW2655aq8n7choAXgyRISpiopaa5CQiqrV6++atWqtdau/VaJiQlKTT2hLl26EtIC8DhXcm5reA9aFM6FMbrV6vocAAAA+Zs+fbqOHDniDGclqUWLFnriiSd0zTXX6N///reB1QEACpLb1iBJISGVtWzZJ7rvvgcUGlpF9933gJYt+0QhIZWVnJxEuwMAXo2A1kvYXBb1mHTBVR0AAAC4hLfeektHjhzJd9/WrVu1aNGiEq4IAHAlli1bJKvVql69+srPz89ln5+fn3r16iOr1aply/j3HID38it4CDzBxStms7IkP2YPAAAgj4cfflhbt26VJNntdsXFxV1ybOPGjUuqLABAERw4sF+S1KpV63z3t2zZxmUcAHgjIj4vcXFAm51tTB0AAACebvz48fr0009lt9v11ltvqXPnzgoLC3MZYzabFRwcrA4dOhhUJQCgMMLDc28Avnbtt7rvvgfy7P/uu29cxgGANyKg9RJ5V9CaJNGIFgAA4GJ169ZVv379JEkmk0kPPfSQqlevbnBVAICiiI19SAkJ05SYmKC77+7o0uYgJydHiYkzZLFYFBv7kIFVAkDx0IPWS9jtJpfn9D8HAAAoWL9+/VS9enUdP35chw4d0sGDB3Xw4EHt379fv//+u+bPn290iQCAy/D391dcXBelpp5QbOzdWrFiqY4fP6YVK5YqNvZupaaeUFxcF/n7+xtdKgAUGStovUR+PWgBAABweTt37tSzzz6rvXv35rvfZDLpkUceKeGqAABXom/fgZKk5OQkvfbay87tFotFXbp0de4HAG9FQOsl8vagpcUBAABAQV577TWlpaVp2LBh+uqrr+Tv769//OMf+vrrr/X111/rgw8+MLpEAEAh9O07UE888ZSWLVukAwf2Kzy8pmJjH2LlLACfUKSA9q233lKnTp1Uo0YNd9eDS2AFLQAAwJXbunWrhg8froceekjlypXTRx99pC5duqhLly4aMGCA5s6dqxYtWhhdJgCgEHLbHTxqdBkA4HZF6kE7Z84c3XHHHerRo4c+/vhjZWZmursuXMRmc32enW1MHQAAAN4kKytLtWvXliTVqVNHv/76q3Nfp06dtGXLFoMqAwAAAHIVKaD99ttvNXHiRJUpU0bDhw9Xq1atNHr0aG3evNnd9eGcvCtoTfkPBAAAgNM111yjv/76S5J03XXX6fTp09q/f7+k3JVYp06dMrI8AAAAoGgBrb+/v+6++269++67+uqrr9SnTx/98ssv6tKli/71r38pMTFRKSkp7q61VMvbg9aYOgAAALxJhw4dNHHiRH322WeqWrWq6tSpoylTpujXX3/V7Nmzde211xpdIgAAAEq5IgW0F6pWrZq6deumPn36qEWLFtq7d68mT56smJgYvfDCCzp9+rQ76iz16EELAABw5fr166ebb75ZS5YskSSNGDFCX3zxhR544AF9//336t+/v8EVAgAAoLQr0k3CHDZs2KCPPvpIn3/+uc6cOaPo6GhnOLtmzRr9+9//1uHDh5WYmOiuekstVtACAABcubJly2ratGnKPnfy1KZNG61cuVI///yzbrrpJtWqVcvgCgEAAFDaFSmgnTJlij7++GMdOnRINWrUUPfu3dWpUyddc801zjF33323fv31V33wwQduK7Y0owctAABA0dhsNv3999+SpJCQEF177bW0NgAAAIDHKFJA+9577+nOO+/USy+9pJYtW8pkyj8sbNy4sQYNGlSc+nCOzeb6nBW0AAAAl7dy5UotWLBAW7duVU5OjiQpICBAzZs31yOPPKI777zT4AoBAACAIga033zzjSpWrKhjx445w9lTp07p0KFDioiIcI7jpNf9zGa7bDYTPWgBAAAuwWaz6bnnntMnn3yiatWq6e6771aVKlUkSUeOHNGGDRvUv39/3X///XrllVcMrhYAAAClXZECWrPZrB49eujQoUP67LPPJElbt27Vk08+qXbt2mnSpEkKDAx0a6GlnaPFgZ9f7g3CsrNpcQAAAJCfpKQkffbZZxo+fLi6desms9n1vrg2m03z58/Xyy+/rDZt2uiee+4xqFIAAABAMhc8JK/XX39dv//+u5599lnntujoaCUkJOjnn3/WtGnT3FYgcjlaHJQpk/vICloAAID8LV26VHFxcerevXuecFbKXWzw6KOP6v/+7/+0cOFCAyoEABTF2bNnNWnSK3rmmac1adIrOnv2rNElAYBbFCmg/fLLLzVs2DB16NDBuc3f31/t2rXTs88+q08//dRtBSKXYwWtxZL7SEALAACQvz/++EMxMTEFjmvTpo327NlTAhUBAIprxIjBat++jZYtW6yNG9dr2bLFat++jUaMGGx0aQBQbEUKaNPT0xUcHJzvvtDQUKWmpharKOR1vsVB7he0OAAAAMjf2bNnVbFixQLHhYSE6MSJEyVQEQCgOEaMGKxvvlmjMmXKKD6+uxYsWKb4+O4qU6aMvvlmDSEtAK9XpID2pptu0pIlS/Ldt3TpUjVo0KBYRSEvuz03kPU71zWYFbQAAAD5s9vtsjguO7oMs9ksm6OPFADAI509e9YZzn7++Rr16dNPNWteqz59+unzz9c4Q1raHQDwZkUKaJ966il98cUX6tSpk95++20tXLhQM2bM0EMPPaTPP/9c/fr1c3edpd6FNwmTpOxs42oBAAAAAKAkJCRMlSTFxT0qf39/l33+/v76v/97xGUcAHgjv6K8qFWrVnr77bc1bdo0TZs2TXa7XSaTSTfeeKMSEhJ0++23u7vOUs8R0J6/SRgtDgAAAC5l7NixCgoKuuyY06dPl1A1AICi2r//L0lSx47357u/Y8f7NW/eB85xAOCNihTQSlJMTIxiYmKUmZmpkydPqkKFCipXrpw7a8MFHFffne9Ba2AxAAAAHiwqKkpSbquDyylfvrxatGhREiUBAIqoZs1rtXHjeq1c+ZH69Ml7te7KlR85xwGAtypyQCtJp06d0tmzZ2Wz2XTy5EmdPHnSue+aa64pbm24wMUtDuhBCwAAkL+5c+caXQIAwE369h2oZcsWKzl5nnr2fNKlzUFWVpYWLpzvHAcA3qpIAe0ff/yh4cOHa+vWrZccs2PHjiIXhUujBy0AAAAAoLQIDAxUmzYx+uabNfrnP2P0f//3iDp2vF8rV36khQvnKzs7W23axCgwMNDoUgGgyIoU0L700kv6448/1K9fP4WFhclsLtK9xnAFzrc4yH2kBy0AAAAAoDSYMGGSRowYrG++WaN58z7QvHkfOPe1aROjCRMmGVgdABRfkQLaTZs2afz48erYsaO768ElXNzigBW0AAAAAIDSYsKESTp79qwSEqZq//6/VLPmterbdyArZwH4hCIFtEFBQapYsaK7a8FlnA9oc7+gBy0AAAAAoDQJDAzU4MHDjS4DANyuSL0J7r//fs2bN6/AO+PCffKuoKXFAQAAQH569eql33//XZK0ceNGpaenG1wRAAAAcGlFWkEbGBioH374Qe3bt1fjxo0VEBDgst9kMunll192S4HIdXFAywpaAACA/H3//fdKSUnRDTfcoG7duik5OVlNmjQxuiwAAAAgX0UKaJctW6YKFSrIZrNp69atefabTKzudDd60AIAABTONddcozFjxqh58+ay2+1KSEhQSEhIvmNZWAAAAACjFSmg/fLLL91dBwpgs+U+OnrQZmYSggMAAOTnpZde0quvvqoNGzbIZDLp559/lr+/f75jWVgAAAAAoxUpoHWw2Wz67bffdPToUTVv3lw5OTmqVKmSm0rDhVhBCwAAUDi33HKLlixZIkmKiIhQQkICLQ4AAADgsYoc0H700UeaNGmSjh49KpPJpMWLF+vNN99UmTJlNGnSpEuuUkDRENACAABcudWrV6tatWqSpLNnz+r06dOqVKmSypQpY3BlAAAAQC5zUV70ySefaNiwYYqOjtaUKVNkP5cedujQQV9//bUSEhLcWmRpl/vx5l5+d/4mYVyOBwAAUJDw8HBt3bpVcXFxuvnmm3X77berSZMmiouL0/fff290eQAAAEDRVtDOmDFDDz/8sMaOHSur1erc3qlTJ6WkpGjhwoUaNGiQu2os9Rz9ZyVW0AIAAFyJH3/8Ud27d9e1116rvn37qkqVKjp69Kj+85//6IknntDcuXPVrFkzo8sEAABAKVakFbR79+5V+/bt890XGRmpI0eOFKsouLowoC1TJne1claWQcUAAAB4kTfeeEMtWrTQypUr1a9fPz388MMaMGCAPv30U0VFRenNN980ukQAAACUckUKaENDQ7V79+589+3evVuhoaHFKgquLlikzApaAACAK7Bt2zZ169ZNFovFZbvZbFZ8fLx++ukngyoDAAAAchUpoL377rs1bdo0ffbZZ8o6t5TTZDLp559/VkJCgu666y63FlnaXbiC1vGzBT1oAQAACla+fHnl5OTkuy87O9t5LwUAAADAKEXqQTto0CD99ttvGjRokMzm3Iy3a9euOnPmjFq0aKGBAwe6tcjSzrXFQe4jK2gBAAAK1rx5c82YMUOtWrVS+fLlndtPnz6td999Vy1atDCwOgAAAKCIAa2/v79mzpyptWvXat26dTp16pQqVKigW265RTExMTKZWN3pTq43CaMHLQAAQGENHjxYnTp10p133qm2bduqatWqOnbsmP73v/8pMzNTL7/8stElAgAAoJQrUkDr0KpVK7Vq1cpdteAS8mtxYLOZZLWefw4AAIC8rrvuOi1cuFBvvvmmvv76a506dUoVK1bUrbfeqn79+qlevXpGlwgAAIBSrkgB7fTp0wsc069fv6IcGvnIr8WBlLuKNjCw5OsBAADwJnXr1tUbb7xhdBkAAABAvtwe0AYFBalatWoEtG5ktZ5vGXHhitnsbAJaAAAAAAAAwJsVKaDduXNnnm1nzpzRDz/8oLFjx+qFF14odmE47/wKWrtLQJuVZZLEnYcBAAAAAAAAb2V214HKlSunNm3a6Omnn9Zrr73mrsNCkv1cBms2SyaTZDbnbsjONrAoAAAAAAAAAMXmtoDWoUaNGtq9e7e7D1uqWa25j6ZznQ4cq2gzM42pBwAAAAAAAIB7uC2gtdvtOnjwoBITExUeHu6uw0LnWxxcHNBmZ5vyfwEAAAAAAAAAr1CkHrQREREymfIPB+12Oy0O3OxSAW1WljH1AAAAeAubzab58+dr/fr1SktLk+18c39Jkslk0pw5cwyqDgAAAChiQPv000/nG9AGBQWpbdu2uv7664tbFy5wqRYH9KAFAAC4vClTpigxMVE1atRQeHh4nnNYu50brgIAAMBYRQpo+/fv7+46cBmOnxtYQQsAAHBlli1bpkcffVQvvPCC0aUAAAAA+SpSQHvw4MErGn/NNdcU5W1wjtWam8yaz3UMtljskkz0oAUAACjA6dOn1aFDB6PLAAC4gdVq1datm5WSclyhoVUUGdlMFscKJgDwYkUKaNu1a3fJHrT52bFjR1HeBudc1CqNFbQAAACFdPPNN2vLli269dZbjS4FAFAMa9Z8qenT39ChQ+cXjNWocY369RukmJh2BlYGAMVXpID2jTfe0JgxY3TTTTfpvvvuU/Xq1ZWamqovv/xSn376qZ566imFh4e7u9ZS61I3CaMHLQAAQF4bN250ft2+fXu98sorOnPmjJo3b65y5crlGR8VFVWS5QEArtCaNV9q1KhhatmytcaMGa86depqz57dmjt3tkaNGqZx414lpAXg1YoU0C5fvlzt2rXThAkTXLbffffdCg0N1Y8//qh+/fq5pUCcv0mYo8WB4zErixYHAAAAF+vatavzai/HTcDeeecdSXK5Csxut8tkMnG1FwB4MKvVqunT31DLlq01YcIkmc/9QNyoUWNNmDBJI0YM1vTpU9W6dQztDgB4rSIFtN9//73eeuutfPfdfvvtWrBgQbGKgqtL3SSMFbQAAAB5ffDBB0aXAABwk61bN+vQoYMaM2a8M5x1MJvN6tq1h/r06amtWzerefMWBlUJAMVTpIA2JCREW7ZsUatWrfLsW7t2rapXr17swnDepVoc0IMWAAAgr1tuucX59caNG9WwYUOVL18+z7i0tDR98803JVkaAOAKpaQclyTVqVM33/2O7Y5xAOCNzAUPyevBBx/U22+/rYkTJ+rHH3/UH3/8oU2bNunf//633n//ffXs2dPddZZqjhYH5wPa3CW12dm0OAAAALicbt26affu3fnu2759u0aMGFHCFQEArkRoaBVJ0p49+f9b7tjuGAcA3qhIK2j79u2rv//+W++//75mzZolKbeHV2BgoJ599lk9/PDDbi2ytGMFLQAAQOENGzZMhw4dkpR7jjp27FgFBQXlGffHH3+oShV+oAcATxYZ2Uw1alyjuXNnu/SglSSbzaa5c99TjRrhioxsZmCVAFA8RQpoTSaThg8frr59+2rLli06deqUQkJC1LRp03xPflE8NltuMmsy5a6cpQctAADApf3zn//Ue++957LNcbMwB4vFoqZNm+rRRx8tydIAAFfIYrGoX79BGjVqmEaMGKyuXXuoTp262rNnt+bOfU/fffetxo17lRuEAfBqRQpoHYKCglStWjVJUtOmTZWTk+OWouDqUitoMzNpcQAAAHCxdu3aqV27dpKkrl27auzYsapbN//ehQAAzxcT007jxr2q6dPfUJ8+51sq1qgRrnHjXlVMTDsDqwOA4ityQPvRRx9p0qRJOnbsmEwmkxYtWqQ333xTZcqU0aRJk+Tv73/Fx0xISNC6des0d+5c57YRI0Zo6dKlLuOqV6+ur7/+WlLuJQ3Tp0/XokWLlJaWpptvvlljxozRdddd5xy/Y8cOjR8/Xj///LMqVaqkrl276vHHHy/id17yLg5oHVd0sIIWAADg8i48rwQAeK+YmHZq3TpGW7duVkrKcYWGVlFkZDNWzgLwCUUKaD/55BMNGzZM9913n/7xj3/omWeekSR16NBBL774ohISEjRo0KArOub777+vadOmKSoqymX7r7/+qj59+ig+Pt657cJ/gBMSErRgwQJNmDBB1atX1+uvv65evXpp5cqV8vf3V2pqqnr06KE777xTL774orZs2aIXX3xRlSpVUufOnYvy7Ze4S62gJaAFAAC4vHbt2slkyv+qI7PZrHLlyum6665T165d85yHAgA8i8ViUfPmLYwuAwDczlzwkLxmzJihhx9+WK+99po6dOjg3N6pUyf169dP//nPfwp9rCNHjuiJJ57Q1KlTVbt2bZd9VqtVu3btUuPGjVW1alXnn8qVK0uSsrKyNHv2bPXv318xMTGKiIjQlClTdOTIEa1atUqStHDhQvn7+zsvbevcubO6d++uxMTEonzrhrBacx8dK2ctltweatwkDAAA4PLuvfdeHTt2TGfOnNEtt9yie+65R9HR0crKytLBgwd1/fXX6+DBg3rssce0bt06o8sFAABAKVSkgHbv3r1q3759vvsiIyN15MiRQh/rl19+UcWKFbVixQpFRka67Pvjjz+UmZl5yZ5hO3fuVHp6uqKjo53bgoOD1bBhQ23cuFGStGnTJkVFRcnP7/xi4ejoaO3du1cpKSmFrtNIl15BSw9aAACAyzl58qQaNmyoL774QhMmTNCzzz6r8ePH64svvtDNN9+sqlWravHixbrvvvuUkJBgdLkAAAAohYrU4iA0NFS7d+9Wq1at8uzbvXu3QkNDC32sC2/icLHffvtNJpNJc+bM0ddffy2z2ayYmBgNGjRIFSpU0OHDhyVJNWrUcHldtWrVdOjQIUnS4cOHVb9+/Tz7JengwYNXVOvF/PyKlG8XisVidj46LsszmSSz2SQ/v9znOTmmq1oDro4L5xa+hbn1Xcyt72Jufd9nn32mCRMmqHz58i7by5Ytqx49emj48OEaNWqUOnbsqIEDBxpUJQAAAEqzIgW0d999t6ZNm6Zq1aopJiZGkmQymfTzzz8rISFBHTt2dEtxv//+u8xms8LDwzVjxgzt27dPr776qn777TfNmTNHZ8+elaQ8NyQrW7asTp06JUnKyMjId78kZWZmFrk2s9mkkJDyBQ8spuDgQJUrl/u1xWJWYKC/AgIce8soJKTMVa8BV0dwcKDRJeAqYW59F3Pru5hb35aenp7v9r///ls5OTmSJD8/v0v2qgUAAACupiIFtIMGDdJvv/2mQYMGyXyuMWrXrl115swZtWjRwm2rD/r376/u3bsrODhYklS/fn1VrVpVcXFx2rZtmwLOJZVZWVnOr6Xc4DUwMPcHrYCAAGVd1KzVEcyWcySfRWCz2ZWWdqbIry+IxWJWcHCg0tLOKi3NJClAkk1nz+bIZjNL8tPp09lKTaURrbe5cG6tVpvR5cCNmFvfxdz6LubWswQHB7p9NXPLli01efJk1atXTzfeeKNz+86dO/XGG284rwhbtWrVJdtqAQAAAFdTkQJaf39/zZw5U2vXrtX333+vkydPqkKFCrrlllsUExPjttUHJpPJGc46ONoVHD582Nna4OjRo6pVq5ZzzNGjRxURESFJCgsL09GjR12O4XhevXr1YtWXk3P1f5CzWm3Kzj7/g4rNZpfZnHuTsMzMkqkBV4fVamP+fBRz67uYW9/F3Pqu559/Xt26dVOnTp107bXXqnLlyjpx4oT++usv1alTRyNHjtR///tfJSUlaerUqQUe7+TJk5o8ebL+97//6fTp02rQoIEGDx6sFi1y7yq+Y8cOjR8/Xj///LMqVaqkrl276vHHH3e+3mazafr06Vq0aJHS0tJ08803a8yYMbruuuucY9xxDAAAAHiPIi1R6NOnj7777ju1atVKgwcP1ksvvaShQ4eqbdu2br00bPDgwS4no5K0bds2SVK9evUUERGhoKAgrV+/3rk/LS1N27dvd54kR0VF6YcffpDVanWOWbdunWrXrl2s/rMlyVH6xTcJK0aHBgAAgFKhatWq+uijj/TSSy8pMjJS5cuXV1RUlCZMmKAVK1aoevXqqlOnjpKTk9WhQ4cCj/fss89q69atmjx5shYvXqybbrpJjz/+uHbv3q3U1FT16NFD119/vZYsWaL+/ftr6tSpWrJkifP1CQkJWrBggcaNG6fk5GSZTCb16tXLecWXO44BAAAA71KkFbQbN25Ujx493F1LHh07dtRTTz2lt99+W/fcc4/27t2rf//73+rYsaPzErT4+HhNnDhRlStXVnh4uF5//XWFhYWpffv2kqTOnTtr5syZGjlypJ544gn99NNPmjNnjl588cWrXr+72HMXzDoDWr9zs5adTZ80AACAgvj7++vBBx/Ugw8+mO/+evXqFeo4+/bt09q1azV//nw1b95ckjRy5Eh9/fXXWrlypQICAuTv76+xY8fKz89PdevW1b59+5SYmKjOnTsrKytLs2fP1pAhQ5z3cZgyZYratGmjVatW6Z577tHChQuLfQwAAAB4lyIFtK1atdKiRYvUtGlT5w23roZ//OMfmjp1qmbMmKEZM2aoQoUKuvfeezVo0CDnmAEDBignJ0ejRo1SRkaGoqKiNGvWLOeNwUJDQzVz5kyNHz9esbGxqlq1qoYOHarY2NirVre72c5dcckKWgAAgCu3du1affXVVzp79qxsNtdWFiaTSS+//HKhjhMSEqJ3331XjRo1cnm93W7XqVOn9PPPPysqKkp+fudPsaOjo/XOO+8oJSVFBw4cUHp6uqKjo537g4OD1bBhQ23cuFH33HOPNm3aVOxjAAAAwLsUKaAtW7asPv30U61atUo1a9bM0yrAZDJpzpw5V3zcV155Jc+2f/7zn/rnP/95yddYLBYNGTJEQ4YMueSYJk2aKDk5+Yrr8RSOFgfn7sfmDGizs42pBwAAwFvMnDlTEydOVNmyZVW5cuU87biupD1XcHCwc9Wqw6effqo///xTrVu31pQpU5z3S3CoVq2aJOngwYM6fPiwJDnvo3DhmEOHDknKvc9CcY9RVH5+7r1BGwAAAAqnSAHt4cOH1axZM+dzu+Ma/Es8R/FcagVtVhYtDgAAAC5n3rx5uvfeezV+/HjnFVbu8sMPP+j555/XHXfcoXbt2mnChAl53sNxtVlmZqbOnj0rSfmOOXXqlCQpIyOj2McoCrPZpJCQ8kV+PQAAAIqu0AHtxx9/rDZt2qhSpUqaO3fu1awJF8kb0OYG4NwHAgAA4PJSUlL04IMPuj2c/eKLL/Tcc88pMjJSkydPliQFBATkuVFX5rmeVOXKlVNAQIAkKSsry/m1Y0xgYKDbjlEUNptdaWlnivx6AAAAuAoODpTFUrgrlAod0A4dOlTJycmqVKmSc9uMGTP04IMPqkqVKldcJArvfECbG8yeX0FrUEEAAABeomHDhvr999916623uu2YH374ocaPH6/27dtr4sSJzvA3LCxMR48edRnreF69enXl5OQ4t9WqVctlTEREhNuOUVQ5ObaCBwEAAMDtCt1o6uK2BVarVVOnTtWRI0fcXhRc2Wy5S2dpcQAAAHBlnn/+ec2ePVtLly7V7t27dfDgwTx/rkRSUpJeeuklPfroo3rjjTdcVuZGRUXphx9+kNVxAwFJ69atU+3atRUaGqqIiAgFBQVp/fr1zv1paWnavn27WrRo4bZjAICvysrKUnLyPE2e/KqSk+flueIAALxVkXrQOtBrtmRcugetMfUAAAB4i0ceeUQ2m03PP//8JW8ItmPHjkIda+/evXr55ZfVvn179e7dWykpKc59AQEB6ty5s2bOnKmRI0fqiSee0E8//aQ5c+boxRdflJTbNzY+Pl4TJ05U5cqVFR4ertdff11hYWFq3769JLnlGADgixISpio5OcnlF1gJCdMUF9dFffsONLAyACi+YgW0KBmO//8Q0AIAAFyZcePGue1Yn3/+ubKzs7Vq1SqtWrXKZV9sbKxeeeUVzZw5U+PHj1dsbKyqVq2qoUOHKjY21jluwIABysnJ0ahRo5SRkaGoqCjNmjXLuRI3NDS02McAAF+TkDBVSUlzFRJSWb169VWrVq21du23SkxMUFJS7j1yCGkBeDOTvZDLYCMiIrRw4UI1adJEUm6Lg5tuuklLlizRTTfddFWL9ERWq00nTqRfteP7+ZkVElJeqanpevddi4YPD1CDBlY9+GCOjh836Z13/BUcbNeuXaevWg24Oi6cW3q9+Rbm1ncxt76LufUslSuXL/SNFOBeV/vcFgCKKisrS+3bt1FwcEUtW/aJ/PzOrzPLyclRbOzdSks7pVWrvuEXVQA8ypWc2xb7DPhSl4rBfRwRuuOj9vPL3cAKWgAAgIJlZWUpKSlJ/fr1U1xcnHbv3q358+frp59+Mro0AEABli1bJKvVql69+rqEs5Lk5+enXr36yGq1atmyRQZVCADFd0UtDp5++uk8v5Hq06ePypQp47LNZDLpiy++KH51kHS+xYH5XJxOiwMAAIDCOXHihB577DHt2bNHderU0a5du5SRkaE1a9bolVde0fvvv69mzZoZXSYA4BIOHNgvSWrVqnW++1u2bOMyDgC8UaED2gv7XqFkXXyTMMcvDW02k3Jyzj8HAACAq9dee03p6en65JNPFB4erkaNGkmSpk6dqscff1zTpk3Te++9Z3CVAIBLCQ+vKUlau/Zb3XffA3n2f/fdNy7jAMAbFTramzBhwtWsA5dxcUDrWEEr5a6iJaAFAADI31dffaXnn39e1113ncudv8uWLauePXtq+PDhBlYHAChIbOxDSkiYpsTEBN19d8c8PWgTE2fIYrEoNvYhA6sEgOLhLgxewGrNTWYvFdACAAAgf5mZmapUqVK++ywWi7Kzs0u2IADAFfH391dcXBelpp5QbOzdWrFiqY4fP6YVK5YqNvZupaaeUFxcF24QBsCrsfbSC1x8kzDzBbF6VpZJkr3EawIAAPAGjRs3VlJSkmJiYvLs+/jjj50tDwAAnqtv34GSpOTkJL322svO7RaLRV26dHXuBwBvRUDrBS5ucWAySRaLXVariRW0AAAAlzFw4EB1795d999/v2JiYmQymbRy5Uq9+eab+vbbbzVz5kyjSwQAFELfvgP1xBNPadmyRTpwYL/Cw2sqNvYhVs4C8AkEtF7A0S7NEdBKuW0OrFZaHAAAAFxOixYt9N5772nSpEmaOXOm7Ha73n//fTVs2FDvvPOOoqOjjS4RAFBIue0OHjW6DABwOwJaL3DxClrpfB9aWhwAAABcXlRUlBYsWKCMjAydOnVKQUFBKl++vNFlAQAAAJK4SZhXuFxAy30tAAAACicgIEDVq1d3hrNr167ViBEjDK4KAAAApR0BrRdwBLRm8/mVso6ANjPTgIIAAAB8wK5du7R8+XKjywAAAEApR0DrBfJfQZsb1mZnm/J5BQAAAAAAAABvQEDrBS7X4oAVtAAAAAAAAID3IqD1AlZrbjJLD1oAAAAAAADAtxDQeoH8VtD6+eU+ZmbS4gAAAAAAAADwVn5GF4CC2c/dG+zCgNZ8LlpnBS0AAICrbt26FWrc4cOHr3IlAAAAQMEIaL2A1Zr7mP8K2pKvBwAAwJPZHb/dLkD16tVVvXr1q1wNAAAAcHkEtF4gvxYHZnPuDx7Z2bQ4AAAAuNDcuXONLgEAAAAoNHrQeoHLraDNyir5egAAAAAAAAC4BwGtF3CsoDVfMFsWS+4jAS0AAAAAAADgvQhovUB+Nwk7H9DS4gAAAAAAAADwVgS0XsBqzQ1h8w9oDSgIAAAAAAAAgFsQ0HqB/G4SZrHkLqsloAUAAAAAAAC8FwGtF8g/oM19pMUBAAAAAAAA4L0IaL2A1Zr7SIsDAAAAAAAAwLcQ0HqBy98krOTrAQAAAAAAAOAeBLRe4HyLA7tzm59f7iMtDgAAAAAAAADv5Wd0ASiYo8WB+YI43fF1dnbJ1wMAAAAAQEmzWq3aunWzUlKOKzS0iiIjm8niuLwUALwYAa0XyO8mYX5+uatpMzMNKAgAAAAAgBK0Zs2Xmj79DR06dNC5rUaNa9Sv3yDFxLQzsDIAKD5aHHiB/AJaxy8Js7NpcQAAAAAA8F1r1nypUaOGqU6dupox4z39979fa8aM91SnTl2NGjVMa9Z8aXSJAFAsBLRewGbLDWHzC2hZQQsAAAAA8FVWq1XTp7+hli1ba8KESWrUqLHKlSunRo0aa8KESWrZsrWmT58qq6M3IAB4IQJaL3D5FbQlXw8AAAAAACVh69bNOnTooLp27Smz2TXCMJvN6tq1hw4dOqCtWzcbVCEAFB8BrRe4XECbmUmLAwAAAACAb0pJOS5JqlOnbr77Hdsd4wDAGxHQegHHlRoX/rLQcZMwVtACAAAAAHxVaGgVSdKePbvz3e/Y7hgHAN6IgNYLXG4FbVZWydcDAAAAAEBJiIxspho1rtHcubNlc/xwfI7NZtPcue+pRo1wRUY2M6hCACg+AlovYLfn3XY+oKXFAQAAAADAN1ksFvXrN0jfffetRowYrJ9//klnzqTr559/0ogRg/Xdd9+qX7+Bsjh+SAYAL+RndAEoWH4tDlhBCwAAAAAoDWJi2mncuFc1ffob6tOnp3N7jRrhGjfuVcXEtDOwOgAoPgJaL5BfiwO/czOXmVny9QAAAAAAUJJiYtrptttaa9myRTpwYL/Cw2sqNvYh+fv7G10aABQbAa0XsNlyk9kLA1rHatrsbFocAAAAAAB825o1X2r69Dd06NBB57bFi5PVr98gVtAC8Hr0oPUC+a+gzW1MS4sDAAAAAIAvW7PmS40aNUx16tTVjBnv6b///VozZrynOnXqatSoYVqz5kujSwSAYiGg9QL5BbT0oAUAAAAA+Dqr1arp099Qy5atNWHCJDVq1FjlypVTo0aNNWHCJLVs2VrTp0+V1XHzFgDwQgS0XuByAW1Ojsm5HwAAAAAAX7J162YdOnRQXbv2lNnsGmGYzWZ17dpDhw4d0Natmw2qEACKj4DWCzh+EWg2253bHAGtxCpaAAAAAIBvSkk5LkmqU6duvvsd2x3jAMAbEdB6gcutoJUIaAEAAAAAvik0tIokac+e3fnud2x3jAMAb0RA6wXs9rzbXANaU94BAAAAAAB4ucjIZqpR4xrNnTtbGRkZSk6ep8mTX1Vy8jxlZGRo7tz3VKNGuCIjmxldKgAUmZ/RBaBg51scnN9mMuW2PLDZTKygBQAAAAD4JIvFon79BmnkyKG6887WLvvefHOKJGn8+NdkuXAVEwB4GVbQeoH8WhxI51fREtACAAAAAHzVL79sk6R8bxJ24X4A8FasoPUCNltuMptfQJud7WhxkE8fBAAAAAAAvFhWVpaSk5MUElJZixd/rF9+2aaUlOMKDa2im25qrAcfvFfJyUl64omn5O/vb3S5AFAkrKD1Ao4WB6ygBQAAAACUJsuWLZLValWvXn1VtmxZNW/eQu3b36XmzVuobNmy6tWrj6xWq5YtW2R0qQBQZKyg9QKOm4QR0AIAAAAASpMDB/ZLklq1ai2r1aqtWzc7V9BGRjZTy5ZtXMYBgDcioPUCl+5Ba5dkOtfiAAAAAAAA3xIeXlOS9N57M7V+/Xc6dOigc1+NGtfo1lujXcYBgDeixYEXcLQ4uKgfuvzOxeusoAUAAAAA+KLY2IdkNpu1fPli1a5dRzNmvKf//vdrzZjxnmrXrqPly5fKbDYrNvYho0sFgCIjoPUCl1pB6whss7NLth4AAAAAAEqCxWJRYGCgJGn79l+0Z8/vOnMmXXv2/K7t23+RJAUGlpPF0QMQALwQLQ68wKUCWscK2sxMWhwAAAAAAHzP1q2blZ6erg4d7tLq1av02msvO/dZLBa1b3+XVq36TFu3blbz5i0MrBQAio6A1guwghYAAAAAUBqlpByXJD333PMaPny0li1bpAMH9is8vKZiYx9STk62Vq36zDkOALyRR7U4SEhIUNeuXV227dixQ/Hx8WratKnatm2rWbNmuey32WyaNm2a2rRpo8jISPXs2VP79u27omN4OpstN5m99AraEi4IAAAAAIASEBpaRZK0Z89u+fv7Ky7uUT377DDFxT0qf39/7dmz22UcAHgjjwlo33//fU2bNs1lW2pqqnr06KHrr79eS5YsUf/+/TV16lQtWbLEOSYhIUELFizQuHHjlJycLJPJpF69einr3J2zCnMMT3fpFbR2SVJ2Ni0OAAAAAAC+JzKymWrUuEZz586WzfHD8Tk2m01z576nGjXCFRnZzKAKAaD4DA9ojxw5oieeeEJTp05V7dq1XfYtXLhQ/v7+Gjt2rOrWravOnTure/fuSkxMlCRlZWVp9uzZ6t+/v2JiYhQREaEpU6boyJEjWrVqVaGO4Q2s1txHk8nusp0VtAAAAAAAX2axWNSv3yB99923GjFisH7++SedOZOun3/+SSNGDNZ3332rfv0GcpMwAF7N8ID2l19+UcWKFbVixQpFRka67Nu0aZOioqLk53e+VW50dLT27t2rlJQU7dy5U+np6YqOjnbuDw4OVsOGDbVx48ZCHcMbXGoFreP/P/SgBQAAAAD4qpiYdho37lXt2bNbffr0VIcOMerTp6f27NmjceNeVUxMO6NLBIBiMfwmYe3atVO7dvn/Y3r48GHVr1/fZVu1atUkSQcPHtThw4clSTVq1Mgz5tChQ4U6RmhoaPG/iavMfm7h7KUC2sxMWhwAAAAAAHxXTEw7tW4do61bNysl5bhCQ6soMrIZK2cB+ATDA9rLycjIkL+/v8u2smXLSpIyMzN19uxZScp3zKlTpwp1jOLw87t6C5AtFrPz0dHiwGIxyXzuLe328y0OrFbTVa0F7nXh3MK3MLe+i7n1XcwtAADew2KxqHnzFkaXAQBu59EBbUBAgPNmXw6OULVcuXIKCAiQlNuL1vG1Y0xgYGChjlFUZrNJISHli/z6wgoODnS2OAgM9Ne5b0t2u3QuZ5bZ7K+QEP/8DwCPFRwcaHQJuEqYW9/F3Pou5hYAAACAUTw6oA0LC9PRo0ddtjmeV69eXTk5Oc5ttWrVchkTERFRqGMUlc1mV1ramSK/viAWi1nBwYFKSzsrmy1AkkmZmVk6t2hYdrtkt1skWZSWlqXUVBrReosL59ZqtRX8AngN5tZ3Mbe+i7n1LMHBgaxmBgBcUlZWlpYtW6QDB/YrPLymYmMfynPFLAB4I48OaKOiorRgwQJZrVZnX5l169apdu3aCg0NVYUKFRQUFKT169c7A9q0tDRt375d8fHxhTpGceTkXP0f5HJybLLZHD1m7c7VtHa7ZLHkNqfNyCiZWuBeVquNefNRzK3vYm59F3MLAIBnS0iYquTkJFkdPQAlJSRMU1xcF/XtO9DAygCg+Dx6iULnzp11+vRpjRw5Urt27dLSpUs1Z84c9e7dW1Ju79n4+HhNnDhRq1ev1s6dO/XMM88oLCxM7du3L9QxPJ3jBmFS3puEOfrRXtTBAQAAAAAAn5GQMFVJSXMVHFxRQ4eO0kcffaahQ0cpOLiikpLmKiFhqtElAkCxeHRAGxoaqpkzZ2rv3r2KjY3V9OnTNXToUMXGxjrHDBgwQA8++KBGjRqlRx55RBaLRbNmzXJe5lCYY3gy2wWLeS4OaB03CcvKumgHAAAAAAA+ICsrS8nJSQoJqazFiz9WzZo19eOPm1SzZk0tXvyxQkIqKzk5Kc+9ZwDAm3hUi4NXXnklz7YmTZooOTn5kq+xWCwaMmSIhgwZcskxBR3Dk11w9UaegPZcxwZW0AIAAAAAfNKyZYtktVoVE9NOjz76oA4fPuTcFxZWQzExbbV8+VItW7ZIcXGPGlgpABSdRwW0yOtyK2gdPWgJaAEAAAAAvujAgf2SpOXLF+fZd/jwIS1fvtRlHAB4I49ucYDCraDNzi65egAAAAAAKCk1alzj/LpSpRCXHrSVKoXkOw4AvA0BrYe7cAWt+aLZcvSgzcykBy0AAAAAwPfUqnW98+vk5OUuPWiTk5fnOw4AvA0tDjyc3X7+64tX0DoCW1bQAgAAAAB80Zdf/tf59V13tZX9gh+STRf8kPzll/9Vq1ZtSrQ2AHAXVtB6uMu1OGAFLQAAAADAl505c8b59YXh7MXPLxwHAN6GFbQe7vI3Cct9ZAUtAAAAAMAXNWoUqW++WSNJuvXW2xQQEKC///5bFSpUUEZGhtavX+ccBwDeioDWw10+oM39bWFmZgkWBAAAAABACalbt57z6y1bflTmBT8Aly1bNt9xAOBtaHHg4azW3FTWZLLn2edoccAKWgAAAACAL9q2bYvz68yLVidd+PzCcQDgbQhoPZxjBe3Fq2el8y0OsrLoQQsAAAAA8D02W+5ipdDQKi43BZNybxIWGlrFZRwAeCNaHHg4R8/zywW0tDgAAAAAAPii4OCKkqRKlSopOXm5PvpoiQ4c2K/w8Jq6//7OevLJ7kpJOe4cBwDeiBW0Hs5qzX28XEBLiwMAAAAAgC+qXLmyJGn37l164YXh8vMro/r1I+TnV0YvvDBce/bschkHAN6IFbQeztHiwJxPlO7n57hJGC0OAAAAAAC+p2rVas6v1637VuvWfVvgOADwNqyg9XCF6UHLCloAAAAAgC+KjGymkJCQy44JCamsyMhmJVQRALgfAa2HK0yLg6wsk7NXLQAAAAAAviQzM0uS8r1J2IX7AcBbEdB6uMKsoJVYRQsAAAAA8D2bN/+gM2fSJUn+/v4u+/z9y0qSzpw5rc2bfyjx2gDAXehB6+EKG9BmZUkX/b8KAAAAAACv9sMPGyRJjRo11ptvvqtt27YqJeW4QkOrqHHjSPXr96R++WWbfvhhg1q0uMXgagGgaAhoPZzNlpvMFiagBQAAAADAlxw9elSSdOedd6lMmTJq3ryFy/477+ygX37Z5hwHAN6IFgce7nIraM1myWTKbT6blZXPAAAAAAAAvFi1atUlSatWfSqb4wfkc2w2m1at+txlHAB4I1bQerjLBbRS7iranBxW0AIAAAAAfM/NN0dp7tz39MsvP+u55wYqI+Os0tJOKTi4ogICArV9+8/OcQDgrVhB6+Gs1tzHSwW0fucidgJaAACAkpWQkKCuXbu6bNuxY4fi4+PVtGlTtW3bVrNmzXLZb7PZNG3aNLVp00aRkZHq2bOn9u3b5/ZjAICvaNbsZoWEhEiSNmxYp59+2qI//tirn37aog0b1kmSQkIqq1mzm40sEwCKhYDWwzlW0JovMVOO7bQ4AAAAKDnvv/++pk2b5rItNTVVPXr00PXXX68lS5aof//+mjp1qpYsWeIck5CQoAULFmjcuHFKTk6WyWRSr169lHXut+3uOAYA+BKLxaJy5cpfdky5cuVkufAmLQDgZQhoPVxBLQ5YQQsAAFByjhw5oieeeEJTp05V7dq1XfYtXLhQ/v7+Gjt2rOrWravOnTure/fuSkxMlCRlZWVp9uzZ6t+/v2JiYhQREaEpU6boyJEjWrVqlduOAQC+5PTp0zpwYL8kqXr1MJd9jucHDuzX6dOnS7w2AHAXAloPdz6gtee7//wK2hIqCAAAoBT75ZdfVLFiRa1YsUKRkZEu+zZt2qSoqCj5+Z2/zUN0dLT27t2rlJQU7dy5U+np6YqOjnbuDw4OVsOGDbVx40a3HQMAfMm4caMlSf/8591auPAjTZs2Q2PGjNO0aTO0cOFH6tDhXy7jAMAbcZMwD1fwClq7JBMtDgAAAEpAu3bt1K5du3z3HT58WPXr13fZVq1aNUnSwYMHdfjwYUlSjRo18ow5dOiQ245RVH5+rN0A4HkOHTooSYqP76ayZcvolltucdnfpUtX/fe/n+rQoYP8OwbAaxHQeriCAlpHmx1W0AIAABgrIyND/v7+LtvKli0rScrMzNTZs2clKd8xp06dctsxisJsNikk5PI9HgHACNdff512796lxYvna9y4cUpKStKff/6pWrVqqUuXLlqyZL5zHP+OAfBWBLQezmrNfSSgBQAA8GwBAQF5btSVmZkpKfcGNgEBAZJy+8g6vnaMCQwMdNsxisJmsyst7UyRXw8AV8uIEWO0evVqffTRR1qxYoXs9vPt/1555RXn8xEjxig1Nd2oMgEgj+DgQFkshVvZT0Dr4Wy23GS2oIA2O5sWBwAAAEYKCwvT0aNHXbY5nlevXl05OTnObbVq1XIZExER4bZjFFVOjq1YrweAqyEgoJwqVw7ViRMpstvtql49TPXq3aBdu37XkSO5bV8qVw5VQEA5/h0D4LVo0OLhCu5Bm/t4hgUPAAAAhoqKitIPP/wgq+MSKEnr1q1T7dq1FRoaqoiICAUFBWn9+vXO/Wlpadq+fbtatGjhtmMAgC/JysrSqVMnZTr3Q/GRI4e1du03znDWZDLp1KmTea4+AABvQkDr4QoKaP39cy/nOH2aFbQAAABG6ty5s06fPq2RI0dq165dWrp0qebMmaPevXtLyu0bGx8fr4kTJ2r16tXauXOnnnnmGYWFhal9+/ZuOwYA+JJlyxbJarW6tDa4kN1ul9Vq1bJli0q4MgBwH1oceDhHQGu+RJR+7p4RSk8noAUAADBSaGioZs6cqfHjxys2NlZVq1bV0KFDFRsb6xwzYMAA5eTkaNSoUcrIyFBUVJRmzZrlvOmXO44BAL7kr7/+dH5tMpllt9vyfX7hOADwNgS0Hq6gFbRlyuQ+ptMLHQAAoES98sorebY1adJEycnJl3yNxWLRkCFDNGTIkEuOcccxAMBXHD16xPm1n59F2dm2fJ9fOA4AvA0BrYdztB+7VEBbtiwtDgAAAAAAvunUqVPOr1u0uEWPPfaE6tSpqz17dmvOnJlat25tnnEA4G3oQevhCu5Bm/tIQAsAAAAA8DVnLrgj9o4d27Vnz+86cyZde/b8rh07tuc7DgC8DStoPVzhbxJWQgUBAAAAAFBCQkIqa+/e3bJYLDp5MlWvvfayy36z2SybzaaQkMoGVQgAxccKWg9X0E3CHCtouUkYAAAAAMDX3HjjjZIkq6P/30Vs535odowDAG9EQOvhCt/ioGTqAQAAAACgpERFRbt1HAB4IgJaD2ez5SazBbc4YAUtAAAAAMC33HRTY7eOAwBPREDr4RxXcZhM9nz3c5MwAAAAAICvWrZskVvHAYAnIqD1cIVtcZCeXjL1AAAAAABQUr7++n9uHQcAnoiA1sMVFNAGBOSurOUmYQAAAAAAX3P06FG3jgMAT0RA6+EKCmjLlMl9zMgwKSenZGoCAAAAAKAkXNjuz2x2jTAufH6ptoAA4A0IaD1cQQFt2bLnvz59+urXAwAAAABAyTn/w7DN8QNyvs+5qhSA9yKg9XAFBbQWi2Sx5P6mkBuFAQAAAAB8S2FXxrKCFoD3IqD1cFZr7qP5MjPluFEYAS0AAAAAwJcEBJRz6zgA8EQEtB6uoBW00vmANj396tcDAAAAAEBJCQ0Ndes4APBEBLQernABLS0OAAAAAAC+p3LlwgWvhR0HAJ6IgNbDWa25oWthVtAS0AIAAAAAfAkBLYDSgIDWw9nP9TkvXEB79esBAAAAAKCkbN/+s1vHAYAnIqD1cI6bhNHiAAAAAABQ2pwu5Eqkwo4DAE9EQOvhruwmYQS0AAAAAADfERQU5NZxAOCJCGg93JUFtFe/HgAAAAAASkqDBg3cOg4APBEBrYejxQEAAAAAoLTasOF7t44DAE9EQOvhHCtozZeZqbJlcx8JaAEAAAAAviQrK9ut4wDAExHQejh77uJYmUz2S445v4K2JCoCAAAAAAAA4C4EtB6ucC0Och9ZQQsAAAAA8CVBQRXcOg4APBEBrYfjJmEAAAAAgNLq5MlUt44DAE9EQOvhbLbcZJabhAEAAAAASpv0Qq5EKuw4APBEBLQejhYHAAAAAIDSKjs7y63jAMATEdB6OFocAAAAAABKKz+/Mm4dBwCeiIDWw9lzuxdcNqAtW5YWBwAAAAAA31OuXDm3jgMAT0RA6+GupMVBZqZJ2dlXvyYAAAAAAEpCWtopt44DAE9EQOvhHC0OzJeZKUdAK9HmAAAAAADgO6yOVUtuGgcAnoiA1sMVpgetxSL5+9PmAAAAAAAAAPA2XhHQHjhwQA0aNMjzZ9GiRZKkHTt2KD4+Xk2bNlXbtm01a9Ysl9fbbDZNmzZNbdq0UWRkpHr27Kl9+/YZ8a1cscK0OJCkoCACWgAAAAAAAMDb+BldQGH8+uuvKlu2rL744guZLkgqK1SooNTUVPXo0UN33nmnXnzxRW3ZskUvvviiKlWqpM6dO0uSEhIStGDBAk2YMEHVq1fX66+/rl69emnlypXyv7A/gAcqzApak0myWnMHnD5dAkUBAAAAAAAAcAuvCGh/++031a5dW9WqVcuzb86cOfL399fYsWPl5+enunXrat++fUpMTFTnzp2VlZWl2bNna8iQIYqJiZEkTZkyRW3atNGqVat0zz33lPS3c0XsuQtjC1xBm9viwKT0dFbQAgAAAAB8Q9myZZWZmVmocQDgrbyixcGvv/6qevXq5btv06ZNioqKkp/f+aw5Ojpae/fuVUpKinbu3Kn09HRFR0c79wcHB6thw4bauHHjVa+9uBwrYwsKaMuUyX2kxQEAAAAAwFeYCvph+ArHAYAn8poVtFWrVlWXLl30xx9/6Lrr/r+9ew+Oqr7/P/7a3dwJuXAJi4CUr0AyIUAiBGkFQSzYEeUroF+HmiiSAQrUKNoAX0TAC6A1Aaspg2DAC7VkNHwtg9VfldF6JwQ1joZouchFEoIBsgRy3T2/P9ZsGwOSK2d383zMZDb5nLNn38kbGfLys+/TX/Pnz9fYsWNVWlqqwYMHNzq/Yaft8ePHVVpaKknq3bt3k3NKSkraVFdAQMfl2zab+9oNO2htNslqtXiCWsNoHNo2/M/Cqiprh9aFtmvobcMj/Ae99V/01n/RWwAAvFt1dXW7ngcA3sjrA9ra2lp99913Cg0N1aJFixQWFqYdO3Zo9uzZ2rJli6qrq5vMkW14a0NNTY2qqqok6YLnVFRUtLouq9Wi6OgurX5+c9ls7hYFBQUoNFQXDWhDQ92PLlewoqN5a4cviIgINbsEdBB667/orf+itwAAAADM4vUBbVBQkPbs2aOAgABPyJqQkKADBw4oJydHISEhqq2tbfSchvk0YWFhCgkJkeQOehs+bzgnNLT1v4y5XIYcjvOtfv6l2GxWRUSEqrraKcmm+vp6VVW5LhrQBgTYJNlUVlar06frOqwutF1Dbx2OKjmdLrPLQTuit/6L3voveutdIiJC2c0MAACATsfrA1rJHbT+1ODBg/Xhhx/KbrerrKys0bGGr3v16qX6+nrP2pVXXtnonLi4uDbVVV/f8b/IOZ0/zjiQIZfLuGhAGxjoPu/sWeOy1IW2czpd9MpP0Vv/RW/9F70FAAAAYBav36JQXFyspKQkFRQUNFr/6quvNHDgQCUnJ2vv3r1yOp2eY5988okGDBig7t27Ky4uTuHh4dq9e7fnuMPhUFFRkUaOHHnZvo/WaphBe6l55w0THLhJGAAAAAAAAOA7vD6gHTx4sAYNGqRHHnlEBQUFOnDggNasWaMvvvhCv/vd7zR9+nRVVlbqoYce0v79+7V9+3a9+OKLmjt3riT3iISUlBRlZmZq165dKi4u1sKFC2W32zVx4kSTv7tLa8idCWgBAAAAAAAA/+P1Iw6sVqs2bNigzMxM3X///XI4HIqPj9eWLVsUGxsrSXr++ee1atUqTZ06VT179tSiRYs0depUzzXS09NVX1+vZcuWqbq6WsnJycrJyWly4zBv5Prx3ZaXDmjdW20rKzu4IAAAAAAAAADtxusDWknq1q2bVq9efdHjw4YNU25u7kWP22w2ZWRkKCMjoyPK61DND2jdj+ygBQAAAAAAAHyH14846OyaO+IgONj9SEALAAAAAAAA+A4CWi/ncrkDV+slOtUw4uDcuY6uCAAAAAAAAEB7IaD1coY7d2XEAQAAAAAAAOCHCGi9XHNHHDQEtOygBQAAAAAAAHwHAa2Xa+5NwoKD3Vtt2UELAAAAAAAA+A4CWi/X3IC2YQdtTY1FdXUdWxMAAAAAAACA9kFA6+VaOuJAkiorO64eAAAAAAAAAO2HgNbLNXcHrc0mBQW5xxycOsWYAwAAAAAAAMAXENB6OcOduV4yoJWk8HD3ySUltBUAAAAAAADwBSR5Xq65Iw4kqWtX92NpKTtoAQAAAAAAAF9AQOvlGkYcWK3GJc/t2tV9DgEtAAAAAAAA4BsIaL2cy+UOW1sy4uDECdoKAAAAAAAA+AKSPC/XkhEH4eHuR3bQAgAAAAAAAL6BgNbLNYw4aN4MWkYcAAAAAAAAAL6EgNbLGT+Onm3JiIPSUtoKAAAAAAAA+AKSPC/XkhEH/7mD1rj0PcUAAAAAAAAAmIyA1ss1jDiwNqNTDTNoa2osOnOmw0oCAAAAAAAA0E4IaL1cQ0DbHAEBUrdu7icw5gAAAAAAAADwfqR4Xq4lIw4kqVcvbhQGAAAAAAAA+AoCWi/XMEu2OSMOJMludz/hxAkCWgAAAAAAAMDbEdB6uZbsoLVYpPJy94mMOAAAAAAAAAC8Hymel3O53IFrc0cchIe7d9CWlLCDFgAAAAAAAPB2BLReruEmYc0NaLt2ZQYtAAAAAAAA4CsIaL1cS28S1rWr+/HECVoLAAAAAAAAeDtSPC/HDloAAAAAAADAfxHQejnDnbfKajWadX7DDNoTJyyecBcAAAAAAACAdyKg9XItHXEQHi5JhpxOi374gV20AAAAAAAAgDcjoPVyLR1xYLVKXbq4Pz9xgoAWAAAAAAAA8GYEtF7OZmv82BwNc2hLSghoAQAAAAAAAG8WYHYB+HnLl9eqpMQ9usBo3hhazxza0lKrJGfHFQcAAAAAAACgTQhovdycOfWqr3fpT38KavZzunZ1P5aWsoMWAAAAAAAA8GaMOPBDDSMOmEELAAAAAAAAeDd20PqhxiMOAAAAAKDz+P77Y6qsrDS7DJjgm2+KzS4B7SA8PFx9+vQ1uwzgsiKg9UMNIw6OH2cHLQAAAIDO48yZM5oxY5pcLpfZpcAEaWkpZpeAdmCz2fS3v/0/RUVFmV0KcNkQ0Pqh7t3d/xj517+sqq2Vgpo/vhYAAAAAfFZUVJT++tft7KD1Iy0JXXNytnZgJbhcwsPDCWfR6RDQ+qGoKCkkxFB1tUXffGPV0KH832MAAAAAnQNvjfYvb7yxS5Mn39Cs8yIjIy9DRQDQ/hhS6ocsFqlXL/cc2sJCm8nVAAAAAADQOpGRkZcM3fv06Us4C8CnEdD6KbvdvWv2iy9oMQAAAADAd+Xmvn7RkLZPn77KzX398hYEAO2MEQd+qndv9w7aL79kBy0AAADwn0pLS1VRccbsMgC0wKOPPqHz58/ryScf07FjR9W3bz8tXvywwsLC9M03xWaXB6CZIiOjZLfbzS7D6xDQ+qmGHbRFRdwoDAAAAGhQWlqq3945TbU1tWaXAqANjh07qnvvnWN2GQBaKCg4SK/8ZTsh7U8Q0Pqp6Oh/3yisuNiqYcO4URgAAABQUXFGtTW1qhheIWe40+xyAADoNGyVNkUWRqqi4gwB7U8woNRPcaMwAAAAAAAAwPuxg9aP9e7t0uHDVhUWWpWaanY1AAAAaC8ul0vZ2dl69dVX5XA4NGLECK1YsUL9+/c3uzSfEVnIHd8BAIB3YAetH7PbuVEYAACAP1q/fr22bdumxx9/XLm5ubJYLJo9e7Zqa5mreimRkVEKDAo0uwwAADqlwKBARUZGmV2G12EHrR/r3ZsbhQEAAPib2tpabd68WRkZGRo3bpwkad26dRo7dqzefvttTZ482eQKvZvdbtdfX/k/VVScMbsUAK1w+PAhPfrow1q+/DH17z/A7HIAtFBkZBTzZy+AgNaPRUVJUVGGzpzhRmEAAAD+ori4WOfOndPo0aM9axEREYqPj9eePXsIaJvBbrfzy6Ef+/77Y6qsrDS7DACtFB4erj59+ppdBnBZEdD6MYtFGjrUqQ8+CFBhoY2AFgAAwA+UlpZKknr37t1oPSYmRiUlJa2+bkAA08/g+86cOa0ZM6bJ5eJ3H3/36KMPm10COojNZtMbb/xDUVHRZpcCXDYEtH4uKckd0H70kU2pqXVmlwMAAIA2qqqqkiQF/WR+VXBwsCoqKlp1TavVoujoLm2uDTBbdHQX/eMf/5DD4TC7FACtFBERoX792EGLzoWA1o9ZLJLDYZEkvflmgBwOKSLC5KIAAADQJiEhIZLcs2gbPpekmpoahYaGtuqaLpchh+N8u9QHmC08vJvCw7uZXQaANjh9+pzZJQBtFhERKputee9QIqD1c1dcYah7d5fKy63asSNQKSnsogUAAPBlDaMNysrKdOWVV3rWy8rKFBcX1+rr1tfzlnAAAAAzMGjKz1ks8sye3baNPB4AAMDXxcXFKTw8XLt37/asORwOFRUVaeTIkSZWBgAAgNYgoO0EEhKcslgM5ecH6OBBi9nlAAAAoA2CgoKUkpKizMxM7dq1S8XFxVq4cKHsdrsmTpxodnkAAABoIbZUdgJdu0r/9V8uHThgU25uoP73f2vNLgkAAABtkJ6ervr6ei1btkzV1dVKTk5WTk5OkxuHAQAAwPsR0HYSw4a5A9rnnw/SokW1stnMrggAAACtZbPZlJGRoYyMDLNLAQAAQBsx4qCTGDzYpeBgQ2fPWrRzJ7k8AAAAAAAA4A0IaDuJgABpxAinJGnx4mCdOMEsWgAAAAAAAMBsBLSdyJgxTvXq5dKpU1alp4fIMMyuCAAAAAAAAOjcCGg7kYAA6b//u14BAYbefTdAmzcHml0SAAAAAAAA0KkR0HYiFovUs6eh66+vlyStXBms/Hz+CAAAAAAAAABmIZ3rhEaOdGnQIKdqaiy6/fYwHTzIPFoAAAAAAADADAS0nZDFIt16a73sdpeqqiyaMSNM5eWEtAAAAAAAAMDlRkDbSQUFSf/zP3WKjDR06JBVt94aqsJC/jgAAAAAAAAAlxOJXCcWHi7dcUedunQx9M03Nv3mN2F68skg1dSYXRkAAAAAAADQOXSagNblcumZZ57R2LFjNXz4cM2aNUuHDx82uyxTNdw0bPbsWsXFOeV0WpSVFaxrrumizZsDVV1tdoUAAAAAAACAf+s0Ae369eu1bds2Pf7448rNzZXFYtHs2bNVW1trdmmmCwuTpk+v16231slud+n4cauWLAnR1Vd30bx5Idq6NVDffmuV02l2pQAAAAAAAIB/CTC7gMuhtrZWmzdvVkZGhsaNGydJWrduncaOHau3335bkydPNrlC7zBkiEuxsS4VFlr10UcB+uEHq/LyrMrLC5QkhYUZGjLEpWHDnBo61KmEBJeuuMJQt26GrJ0m6gcAAAAAAADaT6cIaIuLi3Xu3DmNHj3asxYREaH4+Hjt2bOHgPY/2GzSiBEuJSbW6sgRi44cserwYavKyy06f96iPXts2rPH9pPnGOrRw1DPnoZiYtyBbVSUochIQ9HR7seICCkw0B3k2mz//nB/bSggwP11YKAUEOD+2v25fvzc+I/PpdpaqbpaqquzKCzMUGioe2QDAAAAAAAA4Es6RUBbWloqSerdu3ej9ZiYGJWUlLTqmlarRd26dWlzbRfTEDZGRobKMKQHHjA/fXS5DNXXS07nvz8MwyKp4aNjNbxmw03MrFYpONi9VllpNApoOzqsbev1HQ5JCvvZaxpG214Dl5/FIp09K0lhLeqfv/7PBX/7M3z2rGQYYZc+ET7nQn8n49+sVvfM+sDAy/FafvoXog/o6H/bAgAAdDYt+bdtpwhoq6qqJElBQUGN1oODg1VRUdGqa1osFtlsHf9LhPXH2QHdunX4S/k4X/yFzhdrRvPQW/9Fb/0Xvf15/Hz83eX6ty0AAACa6hSTQ0NCQiSpyQ3BampqFBoaakZJAAAAAAAAANA5AtqG0QZlZWWN1svKymS3280oCQAAAAAAAAA6R0AbFxen8PBw7d6927PmcDhUVFSkkSNHmlgZAAAAAAAAgM6sU8ygDQoKUkpKijIzM9WtWzf16dNHTz31lOx2uyZOnGh2eQAAAAAAAAA6qU4R0EpSenq66uvrtWzZMlVXVys5OVk5OTlNbhwGAAAAAAAAAJeLxTAMw+wiAAAAAAAAAKAz6hQzaAEAAAAAAADAGxHQAgAAAAAAAIBJCGgBAAAAAAAAwCQEtAAAAAAAAABgEgJaAAAAAAAAADAJAS0AAAAAAAAAmISA1su4XC4988wzGjt2rIYPH65Zs2bp8OHDZpeF/7B+/XqlpqY2Wtu3b59SUlKUmJio8ePHKycnp9Hx5vS1Pa6Bljtz5oyWL1+u6667TldffbVmzJihgoICz3F667vKy8uVkZGh0aNHKykpSXPmzNH+/fs9x+mtfzh06JCSkpK0fft2zxq9BQAAAOBLCGi9zPr167Vt2zY9/vjjys3NlcVi0ezZs1VbW2t2aZD0wgsv6Jlnnmm0dvr0ad1zzz36xS9+oby8PN17773605/+pLy8PM85l+pre1wDrfPAAw+osLBQa9eu1WuvvaYhQ4YoLS1NBw4coLc+bt68eTp69Kg2bdqk1157TSEhIZo5c6aqqqrorZ+oq6vTH/7wB50/f96zRm8BAAAA+BwDXqOmpsZISkoyXnnlFc9aRUWFMWzYMGPnzp0mVobS0lIjLS3NSExMNH7zm98YKSkpnmMbNmwwxo4da9TV1XnWsrKyjBtvvNEwjOb1tT2ugZb77rvvjMGDBxt79+71rLlcLmPixInG008/TW992KlTp4yFCxca3377rWdt3759xuDBg43CwkJ66yeysrKM1NRUY/DgwUZeXp5hGPydDAAAAMD3sIPWixQXF+vcuXMaPXq0Zy0iIkLx8fHas2ePiZXh66+/VmRkpHbs2KHhw4c3OlZQUKDk5GQFBAR41kaPHq1Dhw6pvLy8WX1tj2ug5aKjo7Vx40YlJCR41iwWiwzDUEVFBb31YdHR0Vq7dq0GDRokSfrhhx+Uk5Mju92ugQMH0ls/sGfPHuXm5urJJ59stE5vAQAAAPgaAlovUlpaKknq3bt3o/WYmBiVlJSYURJ+NGHCBGVlZalfv35NjpWWlsputzdai4mJkSQdP368WX1tj2ug5SIiIjRu3DgFBQV51t58800dOXJEY8aMobd+4uGHH9a1116rt956S6tWrVJYWBi99XEOh0OLFi3SsmXLmvx86S0AAAAAX0NA60WqqqokqVFYJEnBwcGqqakxoyQ0Q3V19QV7Jkk1NTXN6mt7XANtt3fvXi1dulQ33HCDJkyYQG/9xN133628vDxNmTJFCxYs0Ndff01vfdzKlSuVmJioW265pckxegsAAADA1xDQepGQkBBJanKDkZqaGoWGhppREpohJCTkgj2TpLCwsGb1tT2ugbZ55513lJaWpmHDhmnt2rWS6K2/GDhwoBISEvTYY4+pb9++2rp1K731Ya+//roKCgq0cuXKCx6ntwAAAAB8DQGtF2l4q2RZWVmj9bKysiZvtYT3sNvtF+yZJPXq1atZfW2Pa6D1tm7dqnvvvVfXXXedNm3a5Alf6K3vKi8v186dO+V0Oj1rVqtVV111lednS299U15ensrLyzV+/HglJSUpKSlJkrRixQpNnjyZ3gIAAADwOQS0XiQuLk7h4eHavXu3Z83hcKioqEgjR440sTL8nOTkZO3du7dREPTJJ59owIAB6t69e7P62h7XQOu88soreuyxx3TnnXfq6aefbvSWZXrru8rKyvTggw8qPz/fs1ZXV6eioiJdddVV9NaHZWZm6u9//7tef/11z4ckpaena+PGjfQWAAAAgM8hoPUiQUFBSklJUWZmpnbt2qXi4mItXLhQdrtdEydONLs8XMT06dNVWVmphx56SPv379f27dv14osvau7cuZKa19f2uAZa7tChQ1q9erUmTpyouXPnqry8XCdPntTJkyd19uxZeuvD4uLiNGbMGD3yyCMqKCjQt99+q8WLF8vhcGjmzJn01of16tVL/fv3b/QhSd27d1efPn3oLQAAAACfYzEMwzC7CPyb0+nU2rVrtX37dlVXVys5OVnLly9X3759zS4NP1qyZIm+//57vfzyy561L7/8UqtWrVJRUZF69uypWbNmKSUlxXO8OX1tj2ugZTZs2KB169Zd8NjUqVP1xBNP0FsfdvbsWWVlZemdd97R2bNnNXLkSC1ZskSDBg2SxH+3/iQ2NlZr1qzRtGnTJNFbAAAAAL6FgBYAAAAAAAAATMKIAwAAAAAAAAAwCQEtAAAAAAAAAJiEgBYAAAAAAAAATEJACwAAAAAAAAAmIaAFAAAAAAAAAJMQ0AIAAAAAAACASQhoAQAAAAAAAMAkBLQA4AMMwzC7hMuis3yfAAAAAAA0IKAFgP+Qmpqq1NRUs8toZNeuXVq8eLHn6927dys2Nla7d+/ukNfbvXu3brzxRiUkJCgtLe2C56Smpio2NtbzERcXp6SkJE2bNk0vv/yynE5ni193//79mjFjRlvLBwAAAADApwSYXQAA4Oe98MILl/X1nnzySblcLm3cuFHdu3e/6Hnx8fFasWKFJMnpdKqiokL//Oc/tXr1au3du1fr1q2TxWJp9uu++eab+vzzz9tcPwAAAAAAvoSAFgDQyJkzZ5ScnKxf/epXP3teeHi4EhMTG61NmDBBAwYM0Jo1azRhwgRNmTKlAysFAAAAAMD3MeIAAFqhoKBAKSkpGj58uEaNGqXFixfr1KlTnuPbt29XfHy8CgsLdccdd2jo0KEaP368Nm3a1Og6ZWVlWrhwoUaNGqXk5GQtX75c69at04QJEyS5Rwnk5+crPz+/yViDgwcPKi0tTcOHD9e1116rzMxM1dfX/2zd3333ndLT03XttdcqMTFRqamp2rt3ryTp2LFjio2N1ffff6/XX3+91WMUUlNTFRMTo23btnnWqqurlZWVpUmTJikhIUFXX3217rnnHu3bt0+S9Oyzzyo7O1uSFBsbq2effVaSdOrUKT3yyCO6/vrrlZCQoFGjRmnBggU6duxYi+sCAAAAAMAbEdACQAvt2bNHM2fOVEhIiJ5++mktXbpU+fn5uuuuu1RdXe05z+Vy6f7779dNN92kjRs3asSIEcrMzNQHH3wgSaqtrdXdd9+tzz77TEuXLtWaNWtUXFyszZs3e66xYsUKxcfHKz4+Xrm5uRoyZIjn2Jo1azRixAht2LBBkyZN0qZNmxqFoj+1f/9+TZs2TUePHtWyZcuUmZkpi8Wiu+++W/n5+YqJiVFubq569uypcePGNXm95rLZbPrlL3+pL7/80hMYL1q0SK+99prmzJmjzZs3a8mSJfr222+1cOFCGYah22+/XbfddpskKTc3V7fffrsMw9DcuXP10Ucf6cEHH1ROTo7mz5+vjz/+WMuXL29xXQAAAAAAeCNGHABAC2VlZWnAgAF67rnnZLPZJEnDhw/X5MmTlZeXpzvvvFOSZBiG5s+fr9tvv12SNGLECL399tt67733NHbsWO3YsUMHDx5UXl6eEhISJEmjR4/Wr3/9a89rDRw4UOHh4ZLUZJzAXXfdpfnz53ue9+677+rTTz9VSkrKBevOzs5WYGCgXnrpJXXt2lWSNH78eN1888166qmn9OqrryoxMVFBQUHq1q1bk9driR49eqiurk5nzpxRRESEzp07p4cfflg33XSTJGnUqFE6d+6cnnjiCZ08eVJ2u112u73R93nixAmFhoZq8eLFGjlypCTpmmuu0bFjx342iAYAAAAAwJcQ0AJAC1RVVamwsFBpaWkyDMOzQ7Rfv3666qqr9NFHH3kCWklKSkryfN4QfJ4/f16S9Omnn6pfv36ecFZyz3W9/vrrmzVaoCG0lCSLxaI+ffrI4XBc9Pz8/Hxdf/31nnBWkgICAjR58mT9+c9/1rlz59SlS5dm/BSaz2KxKCgoSDk5OZLcIx0OHz6sgwcP6t1335Uk1dXVXfC5vXr10ksvvSRJOn78uA4fPqwDBw7os88+u+hzAAAAAADwNQS0ANACDodDLpdLmzZtajJPVpKCg4MbfR0SEtLoa6vVKsMwJEmnT59W9+7dm1yjR48ezaolNDT0ote+kIqKigteu0ePHjIMQ5WVle0W0J44cUIhISGKioqSJH3wwQdavXq1Dh48qC5duig2NtbzWj9X844dO7R27VqVlJQoKipKcXFxTX6mAAAAAAD4MgJaAGiBLl26yGKxaObMmZo8eXKT4z8NTX9Or169dPjw4Sbr5eXlbarxYiIjI/XDDz80WT958qQkKTo6ul1ex+l0Kj8/X1dffbVsNpuOHDmiBQsW6IYbbtBzzz2nK6+8UpL0l7/8xTOP90IKCgq0ePFipaSkKC0tzTMC4Y9//KPnxmYAAAAAAPg6bhIGAC0QHh6u+Ph4HTx4UEOHDvV8DBo0SNnZ2c0aTdBg1KhROnr0qPbt2+dZq6mp0fvvv9/oPKu1ff6qTk5O1rvvvquzZ8961pxOp9544w0NHTpUQUFB7fI627ZtU1lZmWbMmCFJ+uqrr1RTU6O5c+d6wllJnnC2YQftT7/Pzz//XC6XS+np6Z5w1ul06uOPP5bkvgkbAAAAAAC+jh20APATpaWleuGFF5qsDxw4UGPGjNEDDzygOXPm6MEHH9SUKVPkdDq1efNmFRYWat68ec1+nZtvvlkbN27UggULdN999ykiIkKbN29WeXm5rrjiCs95ERER+vzzz/XJJ58oPj6+1d/X73//e73//vu66667NGfOHAUFBWnr1q06evSonn/++RZfr7KyUl988YUkd1h6+vRpffjhh8rNzdWUKVM0adIkSdKQIUMUEBCgp556SrNmzVJtba22b9+u9957T5I8M3kjIiIkSTt37tTw4cM1bNgwSdKjjz6q6dOny+FwaOvWrSouLvY8r+EGagAAAAAA+CoCWgD4iSNHjmjNmjVN1qdOnaoxY8ZozJgxysnJUXZ2ttLT0xUYGKghQ4Zoy5YtSkxMbPbrBAQEKCcnR6tWrdLKlSsVEBCgKVOmKDo6WocOHfKcd+edd+qrr77S7NmztWbNGsXExLTq+xo0aJBeeeUVrV27VkuXLpXFYtGwYcP00ksvNbrhWHMVFRXpjjvukOTe/dq9e3cNGDBATzzxhG655RbPef3791dWVpays7M1b948RUZGKjExUS+//LJSU1NVUFCg2NhYTZo0SX/729+0ZMkS3XbbbVq5cqWWL1+uLVu26K233lKPHj10zTXXKDs7WwsWLNDevXs1bty4Vv0sAAAAAADwFhbj5+7OAgDoMP/617908OBBTZo0SRaLxbM+ffp09e7dW9nZ2SZWBwAAAAAALgd20AKASc6fP6/77rtPv/3tbzVx4kQ5nU7t3LlTX3/9tTIyMswuDwAAAAAAXAbsoAUAE7311lvKycnRgQMHZBiG4uPjNW/ePI0ZM8bs0gAAAAAAwGVAQAsAAAAAAAAAJrGaXQAAAAAAAAAAdFYEtAAAAAAAAABgEgJaAAAAAAAAADAJAS0AAAAAAAAAmISAFgAAAAAAAABMQkALAAAAAAAAACYhoAUAAAAAAAAAkxDQAgAAAAAAAIBJCGgBAAAAAAAAwCT/HwevL2KRezOoAAAAAElFTkSuQmCC" + }, + "metadata": {}, + "output_type": "display_data" + } + ], + "execution_count": 148 + }, + { + "metadata": {}, + "cell_type": "markdown", + "source": "### 굉장히 outlier가 큰 형태, 그걸 분리해서 보자", + "id": "b69554a5ad426e89" + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-04T16:51:56.136838Z", + "start_time": "2024-10-04T16:51:55.720065Z" + } + }, + "cell_type": "code", + "source": [ + "# 상한 IQR 계산\n", + "Q1 = df_wiki['text_len'].quantile(0.25)\n", + "Q3 = df_wiki['text_len'].quantile(0.75)\n", + "IQR = Q3 - Q1 # IQR = Q3 - Q1\n", + "\n", + "# 아웃라이어 제거: Q3 + 1.5 * IQR보다 큰 값만 제거 (상단 아웃라이어 제거)\n", + "df_wiki_filtered = df_wiki[df_wiki['text_len'] <= Q3 + 1.5 * IQR]\n", + "\n", + "# 서브플롯 설정: 1행 2열로 그래프 배치\n", + "plt.figure(figsize=(14, 6))\n", + "\n", + "# 첫 번째 서브플롯: 아웃라이어 제거 후 히스토그램\n", + "plt.subplot(1, 2, 1)\n", + "sns.histplot(df_wiki_filtered[\"text_len\"], kde=True, color='blue')\n", + "plt.xlabel(\"Length of Data\")\n", + "plt.ylabel(\"Frequency\")\n", + "plt.title(\"Filtered Wiki Text Data Length Distribution (Upper Outliers Removed)\")\n", + "\n", + "# 두 번째 서브플롯: 아웃라이어 제거 후 박스플롯\n", + "plt.subplot(1, 2, 2)\n", + "sns.boxplot(y=df_wiki_filtered[\"text_len\"], color='green')\n", + "plt.ylabel(\"Length of Data\")\n", + "plt.title(\"Filtered Wiki Text Data Length (Boxplot, Upper Outliers Removed)\")\n", + "\n", + "# 그래프 보여주기\n", + "plt.tight_layout()\n", + "plt.show()\n" + ], + "id": "43612e561230a343", + "outputs": [ + { + "data": { + "text/plain": [ + "
" + ], + "image/png": "iVBORw0KGgoAAAANSUhEUgAABWgAAAJICAYAAAD8eA38AAAAOXRFWHRTb2Z0d2FyZQBNYXRwbG90bGliIHZlcnNpb24zLjkuMiwgaHR0cHM6Ly9tYXRwbG90bGliLm9yZy8hTgPZAAAACXBIWXMAAA9hAAAPYQGoP6dpAADVuElEQVR4nOzdeZyN5f/H8fc5Z3ZjLGNNC5HdWIeRZTRCScnyLWVPokKUrShkD2GMQZZI9igSCW2UvbJFRVLKIMtomPWc8/tjfudwzAxj5ph7ltfz8ZjHmTnXvXzOPfc55zqfc92fy2S32+0CAAAAAAAAAGQ5s9EBAAAAAAAAAEBeRYIWAAAAAAAAAAxCghYAAAAAAAAADEKCFgAAAAAAAAAMQoIWAAAAAAAAAAxCghYAAAAAAAAADEKCFgAAAAAAAAAMQoIWAAAAAAAAAAxCghaZZrfbjQ4Bt2DU/yi3nxs55fFlhzizQwy4PfzPACB1vD5mf/R974zc/vjciWN1Z3BckZuRoM2jhg4dqgoVKqT5s3btWklS586d1blzZ+d6FSpU0IwZMyRJCQkJGj9+vD799FNDHsP1ro/rRl9//bUqVKigLVu2pGhr3bq1KlSooI8//jhFW9u2bfXUU09JuvlxSM3QoUMVFhaWatuuXbtueuwdP7t27brpY06PqKgo9erVS3///Xeay5w6dSrFvqtWraoHH3xQL774on788ccM7XvVqlWaOHFiRkN3WrNmjSpUqKBTp05lelvuktpxDQsL09ChQ297W2FhYS7HvlKlSqpTp46eeeYZ5/Pwerc6926U3v/D7Z7j6XX58mUNGTJEe/fuTXNfWWHBggUaOHCgpGvPwbSeY9nxnLuZK1euKDIyUk888YRq1KihunXrqkOHDlqxYoWSkpIytM1Zs2Zp/vz5zr9nzJihChUqOP824n/okNprluN1q2HDhurXr59OnjxpSGxGuPH9ZurUqRo1apSBEQHZE33fZPR96ftmhDv7vg6jR4/W1KlTJV17zNf/BAUF6dFHH9Xs2bNltVoz/Rgy4sb+T3qk5xzMyL5u9hzLjk6dOqURI0aoadOmqlatmho2bKjevXtr+/btGdpeej5TuOvzS0akdg47zuOHH35YY8eO1ZUrVwyJzQg3vj4888wz2rhxo4ER5QweRgcA4xQtWlQRERGptt17772SpBEjRqS5/tmzZ7Vw4UKNHz/+jsTnLsHBwfL09NS+ffv08MMPO+8/d+6cfvnlFxUsWFDbtm1TmzZtnG0xMTE6evSoevXqJenmxyE1L730krp06ZJqW5UqVbRixQrn34cPH9bbb7+tt956S1WqVHHeX65cudvaZ2q+//57ff3113rzzTdvueyLL76oJk2aSJLi4+MVFRWlRYsWqWPHjgoPD3c5dukxa9Ys1a1bNyNhZ3u3c1zTIzQ0VC+99JIkKSkpSRcvXtSGDRs0ePBgHT16VEOGDHEuu2LFCpUoUSLd207v/+F2z/H0OnLkiD755BO1bdv2ju8rLcePH9fs2bOzxQdqdzt9+rS6d++uixcvqnPnzqpdu7bi4+P1/fffa+zYsVq/fr0iIyOVP3/+29rutGnT1KdPnzTbs/p/mJrrX7MkKTY2VocPH9bs2bN16NAhff755/Ly8jIuQIP06tVLLVq0UPPmzVW/fn2jwwGyFfq+9H2vR983/dzd9925c6e++OILbdq0yeX+iIgIFS1aVHa7XbGxsfrhhx8UHh6uuLg49e/f3y37vtPcfaxyoh07dujll19W8eLF1aNHD5UrV04XLlzQ+vXr1aNHD3Xt2lVvvPHGbW0ztc8UN7rdz0l3guMcdoiOjta2bdv0wQcf6Pz583r33XcNjM44w4YN0wsvvKC6desqMDDQ6HCyLRK0eZiXl5dq1Khx02Xc0VEyWr58+RQUFJTi2/Dt27fLx8dHzz77rJYuXSqbzSazOXlQ+Q8//CCr1aoGDRpIuv3j4Ojkp8bf39/luMfHxzv3cav/x5107733ptj/o48+qmeffVbDhg1TSEiI/P39jQkulytcuHCKY9+sWTMFBgZqwYIFevjhh1W7dm1JumPnSFY+17P6dWXSpElq2bKlihcvnqX7vdPsdrv69eun2NhYffzxx7rrrrucbU2aNNGjjz6qLl266O2339akSZPcuu/s8N6Q2mtW/fr15e/vrxEjRmjHjh0KDQ01JjgD+fn5qUuXLpowYUKqo/CBvIy+L33f69H3Nc748ePVpUsX+fn5udxfqVIl3X333c6/H3zwQf31119avnx5jknQ5nVnzpxRv379VLNmTUVGRsrb29vZ9sgjjzi/5HrggQf0v//9z637NvL1xOHGc1hKHoxz4cIFbdiwQaNHj1a+fPkMis44VatWVZUqVTRr1iwNHz7c6HCyLUoc4KbSuoz11KlTatq0qSTp9ddfd7ncYu/everUqZOqV6+uunXrasiQIbpw4YKzfc2aNapcubJWrVqlhg0bqnHjxvrtt98kSVu2bFHbtm1VrVo1NWjQQGPGjNHVq1dd9r179249/fTTql69ulq0aKHvv//+lo+jfv36OnTokLNDKEnbtm1TcHCwmjRpokuXLunQoUMuj+H6zuStLuedPn26KlasqI8++kiSey5BiY+P1zvvvKPQ0FBVrVpVjz/+uDZs2OBs37p1a4rLOE6cOKEaNWpoyJAhWrNmjV5//XVJUtOmTTN0CZKXl5f69u2rS5cuuVyScPToUfXp00chISGqUqWKGjVqpDFjxiguLk5S8iUNf//9tz7++GOXS7T27NmjHj16KDg4WFWrVlVYWJhmzJghm82WoWN0vUuXLumtt97Sgw8+qGrVqumpp57Sjh07XJapUKGClixZomHDhqlu3bqqWbOm+vXrp3///ddlufnz56tp06YKCgpShw4d9OWXXzovvbvZcU1MTNQ777yjBg0aqEaNGnruuecydal1v3795OXlpeXLl7s8huv/54sXL9YjjzyiatWqqVGjRho5cqRiYmIkpf5/SOv5l9o5HhMTo4EDB6pmzZqqX7++xowZo9jYWGd7autcXz5g165dztE0Xbp0cS5743rx8fGaOXOm83E0b95c7733nst50blzZw0bNkzvvfeemjRpomrVqqlDhw7av3//TY/hr7/+qq+//lqPP/54uo55ahyXLO3fv19t2rRRUFBQiuej43LJzz77TL1791b16tUVGhqa6vm9atUqPfbYY6pataqaNGmiGTNmuJQiGDp0qLp27aoRI0aoTp06atOmTaqlCr755hsdOHBAAwcOdEnOOtSsWVNdu3bVunXr9Oeff0pK+/K5688rR3tERESal9rd+D+02Wx677331KxZM1WtWlUtWrTQ4sWLU6wzcOBA9evXT7Vq1dILL7wgSdqwYYOeeOIJBQUFKSQkRAMHDtTZs2dT3W96pDZaOL2vD8uWLdPQoUNVu3Zt1a1b1/m6NnHiRIWEhKhevXoaNmyYy3vJrc7f2bNnq0qVKi7vg5K0dOlSVa5cWefOnZMk/fPPP3r11VdVt25dVa9eXV27dtXPP//ssk50dLRef/111atXT8HBwZo0aVKqr5+PP/64fvnlF33zzTcZO4hAHkbft8ZNj4MDfV/6vlLG+r5ff/21fvnlF7Vq1Spdj7NAgQIymUwu9/3xxx/q16+fc7+dO3fWvn37nO3jx49XhQoVtHPnTud9a9euVYUKFbR69WpJyef40KFDNWfOHDVo0EC1atXSiy++qL/++uum8WzYsEFt27ZVzZo11aBBA7311luKjo6WJLecg+k1dOhQde7cWR999JEeeugh1axZU126dHHpO6SnDyvd+rknJZ/j48aNU9euXVWrVi299dZbqca1cOFCXblyRWPGjHFJzjp069ZNNWrU0KxZs5z1ZDP6meJGN74+pPc5EhERoXbt2ql27dqKjIyUzWbT9OnTFRYW5nzevvvuu0pMTEx1v+mR2pc9v/76q3r16qVatWqpVq1aevnll13OP8cx2LFjhzp37qygoCA1adJEq1at0tmzZ9WnTx/VrFlToaGhWrhwocu2z549q9dff12hoaEKCgpS+/bttXXrVmf7c889pyeffDJFTP3799djjz3m/PtW729S8utj9+7dVbNmTT300ENat25dqsfgiSee0EcffZRifVxDgjaPS0pKSvGTnsLbxYoVc14i9uKLLzp/37Nnj7p16yYfHx9NmzZNb7zxhnbv3q0uXbo4OzCSZLVaNXv2bI0ZM0b9+/dXuXLl9Omnn+rll1/W/fffr5kzZ6pPnz5at26dXnrpJWdMhw8f1nPPPSd/f39Nnz5dXbt21auvvnrLeOvXr6/ExEQdPHhQUnIy4bvvvlPDhg1VrVo1FShQQN9++61z+T179qhevXry8Lj1IPP58+dr1qxZevvtt9W+fftbLp8edrtdL7/8spYvX67u3btr1qxZqlmzpgYMGKBPPvlEUvKb/pNPPqk5c+bo+PHjslqtGjp0qAoXLqw333xTTZo00YsvvigpOdHiuIT+djVo0EBms1k//PCDpOQX+44dOyo2NlYTJkzQ3Llz9eijj2rx4sXONwbHpR2hoaFasWKFihUrpqNHj6pbt24qWLCgpk6dqlmzZqlWrVqKiIjQZ599lqnjFR8fr65du2rr1q0aMGCAIiIiVKJECT3//PMp3oSnTp0qm82md999V4MHD9bXX3+tcePGOdsjIiI0efJkPfroo4qMjFT16tU1YMAAZ/vNjuuGDRv022+/acKECXrrrbd08OBBl3VvV0BAgIKCglw6nNf77LPPNHHiRHXs2FHz58/Xyy+/rLVr12rMmDHO+G78P0ipP/9Ss3jxYsXExGjatGnq1auXVq1adVvfeFapUsXZeXvrrbdSvVzSbrerd+/emjdvntq3b6/Zs2frkUce0bRp01Isv2nTJm3dulXDhw/Xu+++q3///Vf9+vW7aV2yTz/9VEWLFlWtWrXSHXdaevXqpaZNmyoiIkJlypTRq6++6tLRkaSRI0fK399fM2bM0JNPPqnIyEi98847zvY5c+bozTffVP369TV79mx17NhRc+fOTdHJ3bt3r06ePKkZM2bo5ZdfTvW1aNu2bTKbzXrooYfSjNnRwfryyy/T/Tgdl6G2b9/e5ZLUmxk5cqTCw8P1xBNPOP+H48aN08yZM12W27hxozw9PTVz5kx16dJF+/bt08CBA9W8eXPNnTtXr7/+unbu3KnXXnvtlvu02Wwu710xMTHasWOHpk6dqlKlSqlOnTqSbu/1YfLkyfLy8lJERIRat26txYsX68knn9Tp06c1adIkdejQQR999JEz+Zye8/eJJ56Q1WrVF1984bKv9evXq379+ipatKguXLigDh066PDhw3rzzTc1ZcoU2Ww2dezYUcePH3c+3ueff15ff/21Bg4cqIkTJ+rHH39M8QFKkkqUKKGaNWum2UEG8jL6vvR9b4W+753t+65bt041atRQyZIlU7Rd/94eExOjb7/9VmvXrlXHjh2dyxw7dkxt27bVX3/9peHDh2vy5MkymUzq2rWrdu/eLUl69dVXVaZMGY0YMUIJCQk6c+aMxowZo+bNm6tdu3bObW3dulWrV6/WsGHD9Pbbb+vo0aPq0qVLii9JHCIjIzVgwABVr15d4eHhevnll7Vp0yZ17txZcXFxbjsH0+vIkSOaOnWq+vTpo0mTJunSpUvq3Lmzzpw547Lczfqw6XnuOSxZssSZBG3dunWqMW3fvl2VKlVK9f/r8Oijj+rvv//WkSNH0vU40/OZ4ka38xyZNWuWWrRooXfffVdNmzbV3LlztWTJEr388stasGCBnnnmGc2bN0+zZ8++5X6vP4cTExN14cIFffzxx/rkk0/UvHlz5+jZEydOqEOHDjp//rwmTJigsWPH6q+//tIzzzyj8+fPu2zz1VdfVVhYmGbPnq3SpUtrxIgR6tKli8qXL6/w8HBVqVJF48eP14EDByRJ//77r9q3b6/du3drwIABmjFjhkqVKqWXX37Z2Tds3bq1jhw5ot9//925nytXruirr75y/m/T8/525swZderUSdHR0Zo0aZJeeeUVTZ48OcU5KCW/hlutVm3evPmWxzGvosRBHvb333+71H1yeOWVV275ZuLl5aVKlSpJSr48qHLlypKkKVOmqEyZMpozZ44sFoskqXr16nrssce0evVqlzfX3r17O+s+2e12TZ48WY0aNdLkyZOdy5QuXVrdunXTN998oyZNmmjOnDkqXLiwZs2a5awtWLBgwVt2BGrUqCE/Pz/98MMPqlOnjg4dOqRLly6pYcOGMpvNql+/vrZv364+ffooLi5OBw8edH77eTPLly/XpEmTNGrUKOekCu7w/fffa9u2bZo6dapatmwpSWrUqJFiY2M1efJktWrVSh4eHho2bJh27NihkSNHqlGjRjp48KA++OAD5zd0jsvNUrvUIr08PDxUsGBB5yivX3/9VZUqVdL06dOd+3nwwQe1Y8cO7dmzR71791blypXl5eXlcun+0aNH9eCDD2rSpEnOy+kaNGigr7/+Wnv27MnUCMe1a9fq6NGjWrlypapXry5Jaty4sTp37qzJkyc7vymXpPLly7vUjjtw4IA+//xzSdLVq1c1d+5cdezY0TmhVMOGDRUbG+tMVBUuXDjN41q8eHFFRkbK09NTknTy5EnNnj1bMTExGb5ErkiRIi4jXK63a9culSpVSh07dpTZbFbdunXl5+enixcvSlKq/weH659/aSlTpowiIyNlNpsVGhoqk8mk8ePH66WXXlLZsmVvGbu/v78z+VuuXLlUE8Hffvutvv/+e02aNElPPPGEpOTzwsfHx/lB1LFeUlKS5s+f7zyWV65c0ZAhQ3TkyBFVrVo11Rh27typatWqpRh5kRGdOnVy1mVt1KiR2rRpo8jISOeIKin5mDtewxo3bqyrV6/qww8/1EsvvSSTyaRZs2bp6aefdia6GzZsqIIFC2r48OHq3r27HnjgAedjHTVqlO6777404zl16pQKFix403PLca7ezkQjjnOlRIkS6bpU7MSJE1q5cqVeffVV56jYhg0bymQyac6cOXr22WdVqFAhSZLZbNbo0aOdlzS+99578vb2Vs+ePZ2jLAoWLKiDBw/Kbrff9P82bNgwDRs2zOU+Pz8/NWjQQEOGDHF2gG/n9aFs2bJ6++23JSXXcPzoo4+UmJioyZMny8PDQ40aNdKXX37p/NCe3vM3ODhYn332mTp06CApebTsDz/84EzeL1q0SJcuXdKyZctUqlQpZ4wtW7bU9OnTFR4erm+//VYHDhzQnDlznM/dkJCQNEesVatWTevXr7/5Pw/IY+j70vdND/q+d7bvu3PnTpcRetdr1qxZivuqVaumrl27Ov+OiIiQp6enPvjgA+dVM02aNFGrVq00adIkrVq1St7e3po4caKeeeYZvffee9q/f798fHyc7/EOV69e1erVq52P7/7771ebNm308ccfuzx3peSrWGbNmqX//e9/LgnC8uXLq2PHjlqzZo2effZZt5yD6fXff/9p1qxZCg4OliTnhFQLFy50mcPiZn3Y9D73pOQvqoYOHeo8n1Nz6tQpNW7c+KZxO/q3f//9t/O19GbS85niRrfzHAkKCnL2YSXpnXfeUZUqVZzJ/Lp168rX1zddn+dSO4eLFCmiZ555Rv369XPeFxERIR8fHy1cuNC53fr16+vhhx/WvHnzXP5/7dq1U/fu3SUl93WffvppBQUFObdXtWpVbd26VT/88IOCgoL0/vvv68KFC9q4caPuueceScllFrp166Z33nlHrVq1UrNmzeTn56cNGzY4z43NmzcrPj7e+dqUnve3hQsXKikpSXPnznXWli1Tpkyq7w9+fn4qW7asduzYoaeffvqWxzIvYgRtHla0aFF99NFHKX4y+k14bGys9u/fr9DQUNntduc3R/fcc4/Kli2r7777zmX58uXLO3///fffFRUVpbCwMJcRDcHBwfL393euu2/fPjVq1Mhl4pfmzZs7XzDS4uHhoeDgYOeH6m3btumuu+5yJpkaNmyoAwcOKCYmRj/99JMSExPVsGHDm27zq6++0qhRo1S7dm23v8Ds2LFDJpNJoaGhLscjLCxM586dc14WFxAQoDFjxmj37t2aOnWqevbs6Rw15m6OREnDhg314YcfytvbWydOnNBXX32l2bNn68KFC0pISEhz/SeffFJz585VYmKifvvtN23ZskUzZsyQ1WrN1OUiUvLxKlq0qKpUqeI8VlarVQ899JAOHTrkvOxISlmbqESJEs7L9n/66SfFxcXpkUcecVkmvZdgBQUFOTuokpxviJcvX87Iw7qlkJAQ/fHHH2rbtq0iIyP1888/6/HHH3fpxKbl+udfWlq0aOHSAWvevLnsdrvL5WKZtXv3blksFmeH0MGR7Lp+Rudy5cq5dIwcNWWvL7two7/++itF5zi9ydobl7t+pIDJZFKzZs10+PBhl/074nZo0aKFEhMT9dNPP+nHH39UbGxsitc5R4Lt+tdIHx+fm9bzk5I/3N9qpFN6RkJl1s6dO2W321N9XPHx8S4jwO+++26XenPBwcGKi4vT448/rqlTp2rfvn1q2LCh+vTpc8v/U58+ffTRRx9p5cqVGjhwoLy8vNSyZUtNmzbN+dyTbu/1oWbNms7fPTw8VKhQIVWtWtXlOBYsWFD//fefpPSfv61bt9bevXudpRs+++wz+fr6OjvxO3bsUKVKlVS8eHFnjGazWY0bN3Zeyrx37155enq6fOjx8/NLs85uqVKldP78+Zs+P4C8hr4vfd/bQd/31m637xsbG6vz58+nmbicNWuW83m5ZMkSjRw5UmfPnlWHDh2cJbx2796thx56yKWkkYeHhx577DEdPHhQV65ckZScSOrRo4dmzpypbdu2acKECc4vjB1q1qzp0t+qXLmy7rnnHu3duzdFbD/99JMSEhJSJNbr1KmjUqVKufRZMyIjgwnuuusuZ3JWSk6g1qxZM8XVdzfrw6b3uSclf5F9s+SslL7+qeP1Kz1XL2TU7TxHbvxcVK9ePX3//fd69tln9f777+v48ePq1KlTqiUBbuQ4h5csWaL27dvL09NTffv21euvv+5Se3bnzp2qV6+efHx8nPH5+/urTp06KcrYXN8/LVKkiCQ5k86SnOf19f3TmjVruvSHpeT+6blz5/T777/Lz89PzZo1c7kS67PPPlPdunVVsmTJdL+/7du3TzVq1HCZ+Kt69eqpll+TkvuntzNwJK9hBG0e5uXlpWrVqrlte5cvX5bNZtPcuXM1d+7cFO031qC5/kl86dIlSdKoUaM0atSoFOs6PtRGR0ercOHCLm2OD9G38uCDDzpr3Wzbts2lE9qwYUNZrVbt3btXhw4d0t13333TkWtS8iVnDz30kL766it9+eWXma67db1Lly7JbreneVn22bNnnaM46tevr5IlS+r06dNujcEhLi5O0dHRzhkxHZdILVmyRFevXlXJkiUVFBSUao2hG7czevRorV27VklJSbr77rtVs2ZNeXh4ZPrN+dKlSzp37lyqo2Kk5FmLCxQoIEny9fV1aTObzc79O+rh3HiOOd4Ib+XGiQ4cHZjM1Bk7c+ZMmrORtmzZUjabTUuXLlVERISmT5+uUqVK6bXXXktzZIJDembPvPFxO9ZxZ8I5OjpahQoVStGRc8x+6uhoSKn/76SbH9+YmJgU6zn+TutDleP+G9e7cZKxwMBA2e12lxgdZSQcHOeS4/VRkss39Ne7vu5qYGDgLTvqpUqV0nfffae4uDj5+PikuoyjjlVanSR3cLx+p3XOXX+J043nVM2aNfXee+9p4cKFmj9/vmbPnq2iRYuqZ8+et/yioVSpUs73sOrVq6to0aIaMmSILBaLywiZ23l9SG1kxI3nwfXSe/4+8sgjGj16tDZu3KiuXbtq/fr1at68uXPbly5d0smTJ9OMMTY2VtHR0SpYsGCKD0bXzxR8Pcfr0X///XfTxwDkJfR96fumB33fO9f3dfQhb1zPoXz58i7J2zp16qh8+fJ69tlntWrVKnXv3l3R0dGpxlekSBHZ7XbFxMQ4E2FPPvmk3nvvPRUuXNgloeVwY79NSn6eptbXdST00tr39f3BjLi+f3r9FzIOCQkJKY5bWvEfPnzY5b6b9WFv57mXnvOiVKlS+vvvv2+6TFb1T9P7HLnxcT3//PPKly+fVq9erYkTJ2rChAkqX7683njjDdWvX/+m+73+HK5Tp47sdrtGjBghf39/ly8+Ll26pA0bNqRaqurG52NG+qepfQnieJyO8/vJJ590jjQuVqyYvv/+e2cfOr3vb2ntK63+qa+vb6afK7kZCVq4Tb58+WQymdStW7dUP6jf7EUkICBAkjR48GDVrVs3RbvjxbNgwYIpitrb7XaXb8DSUr9+fY0fP14///yzDhw44LxMQJJKliyp+++/Xz/88IMOHjzonMH2Zp5++mmNGjVKHTt21MiRI1W3bl23zfSaP39++fn56YMPPki1/foO9MyZM/Xvv/+qbNmyGj58uFavXp3qm3pG7dq1S1ar1fntrCOZMnLkSLVo0cL57fWtRp+MHTtWmzZt0rRp0/Tggw86Oxi3epNLj/z586t06dIulwheL72XFzk64hcuXND999/vvN+oQubR0dE6fPhwmjWepOQRDq1atdJ///2n7du3a+7cuRo0aJDq1KmTojN2u27snDou9bv+A+aN9V/TqtmVlgIFCujixYtKSkpySXI5Ppim5wPozVw/2tHB0WFIayKqqKgoeXl5OV93HC5evOhyTP/9919ZLBYVLFjQuS3HB24HRw2pwMBA50QtkydPVunSpVPsN70fhhzCwsK0dOlSbdmyJc2RLo5LGB0fYB1JX6vV6hy94BhpklGO1+9FixalOivtrTrfjRo1cl5Kt3PnTn3wwQcaN26catSokeqHqbQ8+eST+vzzz7VixQo1a9ZMjRo1kuS+14fUpPf89ff3V9OmTbVx40Y1bNhQR48edbl0LX/+/Kpbt64GDx6c6n68vLxUqFAhXbx40eV/J6U85xyio6NlMplUsGDBDD8+ADdH35e+783Q903J8b54O1/2O5KDf/zxh6Tk58aNzwnpWj/VsQ9HYuyee+7RxYsXNXHiRI0ePdplndTeQ//9999Ur2JyPCcd596N+75xtOLtcvQDz5w5k+q2oqKiUvQV04r/xoEYN+vD3s5zLz3CwsK0YMECnT59Os06tJs2bVLJkiVdyhtk9jPFjTLzHDGbzerYsaM6duyo8+fP65tvvtHs2bPVt29fff/997f1evPGG29o+/btGjVqlEJCQpz/w/z58+vBBx90eV12yOwVcOl9joSEhKh48eLauHGjihcvLg8PD7Vo0UJS+t/fChUqlOq+0uqfXr58OdOf73IzShwgw268tMrf31+VK1fW77//rmrVqjl/HnjgAUVERNz0so/7779fgYGBOnXqlMu6JUqU0JQpU5yzUdavX1/ffvutyyWb27ZtS9dlQhUqVFCRIkWcbz43do4aNmyon3/+Wfv377/lJV5ScpLHZDJp5MiRunDhgiZNmnTLddKrbt26unr1qux2u8vx+O233zRz5kznjO4HDx7U3Llz1bt3b02ZMkW///67y8yVt7oE5VaSkpI0a9YsFSlSxHkp7r59+1SuXDm1b9/e2UE9c+aMfv31V5dvy2/c9759+1SvXj09/PDDzg7qoUOHdOHChUzPZFu3bl2dPn1agYGBLsdrx44dmjdv3i0vA3SoWLGi8ufPn2Iyn02bNrn8ndnjml6zZ89WYmJimpcR9u/f31kzKH/+/Hr00Uf10ksvyWq1OhNEmYl127ZtLn9/9tlnMplMzg+S/v7+ioqKclnGcSmlw62Ofd26dWW1WlN8e+woYF+7du0Mxe5QqlQpnT592uW+EiVK6N5773UmL69ntVq1ZcsWBQcHp4j9+om27Ha7vvjiC9WuXdulk3bjZFybNm2Sr6+vqlevrurVq8vT01NnzpxxOU89PT01ZcqU277cp0GDBqpdu7YmTpyY6kiFgwcPat68eWrZsqUzIez4IH39Mbnxfybd3nnj+AB78eJFl8d16dIlTZs2Lc0OmiRNnDhR7du3l91ul6+vrx566CFn4vLG/1t6DB8+XN7e3hozZoxzJLS7Xh9Sczvnb+vWrbV//34tWbJExYoVU0hIiMt2Tpw4oTJlyrjEuG7dOq1atUoWi0X169dXUlKStmzZ4lwvISEhxSXUDo4Pcu5MWgB5HX1f+r70fTPHy8tLRYsWva33+J9++kmSnH2Z4OBgffXVVy5fwFutVn322WeqVq2a831v0aJF2rt3r8aOHasBAwZo5cqVLhPjSdKPP/7okow+fPiwTp06lWoSvXr16vLy8tKnn37qcv/evXv1zz//OEegZvRYBQcHy2Qypdo/PX36tA4cOODSd5CkP//8U8eOHXP+febMGf30008p4r9ZHza9z7306ty5s/z9/fX66687Bydcb+nSpdq1a5d69erlPFbu+Exxo8w8Rzp06OCcdDkwMFBt27ZVx44d9d9//zlLbaSXv7+/hg4dqsuXL7ski+vWratjx46pUqVKztiqVq2qhQsXZnoSreDgYP3444/OkcoO69atU9GiRZ1Jd7PZrFatWmnr1q36/PPP1bRpU+dnhfS+v4WEhOjHH390uWLu2LFjKfbtcPr0aed8C0iJEbTIMEcHZceOHSpbtqyqV6/unCTmtddec85cvWDBAu3fv985o2VqLBaLBgwYoLfeeksWi0UPPfSQLl++rMjISJ05c8Z5acLLL7+sLVu2qEePHnr++ed18eJFTZ061aX20c2EhITos88+U1BQkHPkgkPDhg21bNky2Wy2FG9+N1O+fHl17dpV8+fPV6tWrVzqAGVUaGiogoOD9dJLLzknZDpw4IBmzJihhg0bqnDhwkpISNDQoUNVpkwZvfDCC/Ly8lKXLl00f/58Pfzww6pevbrzMW7evFmNGze+6cROf/75p7MDlJiYqFOnTmn58uU6fPiwZs6c6fyWLCgoSJGRkXrvvfdUo0YNnTx5UnPmzFFCQoLLh4eAgAD9/PPP2r17t4KCghQUFKSNGzdq2bJlKlu2rI4ePapZs2bJZDKlq0bi6tWrU4xolKRu3bqpbdu2+vDDD9W9e3f17t1bJUuW1Pfff6+5c+eqU6dO6T4//P399fzzzys8PFy+vr6qW7eudu/erWXLlkm61uG6neOaHhcuXHAee6vVqvPnz2vTpk1av369evfuneblmCEhIRoxYoQmTpyoxo0b6/Lly4qIiFDp0qVVsWJFZ6zX/x9ux6FDhzRs2DC1atVKBw8eVHh4uNq3b+/sID/00EP68ssvNXbsWD388MPat29fitleHa8TX3/9tQoUKOCMy6Fx48aqV6+eRowYobNnz6py5cravXu35s6dqzZt2qRrEoCbadCggZYuXZpiwqmBAweqf//+6t27t9q1a6dChQrp7NmzWr58uf7++29NmDAhxbYmTZqkhIQElSlTRqtWrdLx48e1aNEil2U+//xzFSlSRKGhodq9e7eWLFmiAQMGyM/PT35+fnr++ec1ffp0xcTEqF69ejpz5oymT58uk8mU4tjcitls1pQpU/TCCy+obdu26tq1q2rWrCmbzabvv/9eS5YsUeXKlV0unQ0NDdX48eP15ptvqmfPnoqKilJERESKka8BAQH68ccftWfPnlvW9itfvryeeOIJvfnmm/r7779VtWpVnThxQlOnTtXdd9+d6mhhh/r16+v999/X0KFD9cQTTygxMVHz5s1TwYIFb+t12OHuu+9Wjx49FBkZqYULFzqPjTteH1JzO+ev47V7+fLl6tatm8sHuG7dumnt2rXq1q2bnnvuORUqVEgbNmzQypUrnZP21K9fXw0bNtTw4cN1/vx5lSpVSh988IEuXLiQaskSR91KAO5D3zcZfV/6vpnp+zZo0CDVL4cl6ciRI87ReHa7XcePH1d4eLiKFi2qNm3aSEquQf/tt9+qS5cuzvPgww8/1F9//aV58+ZJkrMf8r///U/16tVTcHCw1q1bp+HDh2v9+vXOxxMbG6uePXvqxRdf1JUrVzR16lSVL18+1SuTChYsqBdeeME5SVnTpk116tQpTZ8+XeXKlVPbtm3TPFZRUVGKiopyTiaXmrvuukudOnXS1KlTde7cOTVq1Eg+Pj46duyYFixYoFKlSqlTp04u69jtdr300kvq37+/LBaLIiIiFBAQoM6dO7ssd7M+bHqee7ejWLFimj59uvr166e2bduqS5cuuv/++xUdHa2NGzfqs88+U8eOHfXMM88413HHZ4obZeY5EhwcrAULFqhIkSKqWbOmzpw5o/fff19169a97eMhJZelW7p0qT755BM9/fTTqlmzpl566SV16NBBvXr10jPPPCNvb2+tWLFCW7ZsUXh4+G3v43rdu3fXunXr1L17d/Xp00eFChXSJ598op07d2rcuHEufdAnn3xS8+fPl8Vi0axZs1y2k573t65du+qjjz5Sjx491LdvX1mtVk2bNi3V4/vff//p2LFj6tGjR6YeX25GghYZ5u/vr+7du2vFihX6+uuv9d1336lhw4aaP3++IiIi1K9fP3l6eqpKlSp6//33bzkb+P/+9z/ly5dP8+bN04oVK+Tn56datWpp8uTJzss8SpcurQ8//FATJkzQgAEDFBgYqCFDhqSaTElN/fr1tX79+lRHCdStW1cmkynVDuyt9OnTRxs3btTw4cOdI6cyw2w267333tP06dM1Z84cnT9/XsWLF1e3bt308ssvS5KmTZum33//XcuWLXO+0ffr109ffPGFhgwZorVr16pevXp68MEHNWXKFO3YsUPvvfdemvucNWuW80XZ29tbxYsXV506dTRq1CiXN8BevXrp4sWL+uCDDzRz5kyVLFlSrVu3ds7YHh0drQIFCui5557TuHHj1KNHD2cCJjExUdOmTVNCQoLuvvtuvfjiizp27Ji+/PLLFJft3igyMjLV+7t16yY/Pz8tWbJEU6ZM0aRJk/Tff/85a7E+99xzt3Xse/XqJZvNphUrVmj+/PmqXr26Bg4cqPHjxztHP9zOcU2Pb775Rt98842k5EtaihQpovLly2v27Nl66KGH0lyvQ4cOSkxM1PLly7V06VL5+Piofv36GjRokPNN8cb/w+148cUX9fPPP6t3797Knz+/nn/+eeeIXSl5RtE///xTH3/8sVasWKG6detq+vTpLh2uBx54QK1atdKSJUu0bdu2FLPKO86b8PBwZ7Lp7rvv1oABA1K95Od2NW/eXDNnztTBgwddEtQtWrTQggULtHDhQo0YMUKXL19W4cKFFRwcrJUrV+qBBx5Isa2RI0dqzpw5+uuvv1S5cmUtWLAgRfLylVde0e7du7VixQqVLFlSb731lsvx6N+/v4oWLaqlS5dq3rx5KlCggOrXr69XX33VZbKL9CpZsqRWrFihZcuWaf369c4RAWXLltXQoUPVvn17l8ukypQpo4kTJ2rWrFl64YUXVLZsWY0ePTrFJX+9e/dWZGSkevbsmWptrBuNHz9ec+bM0fLlyxUVFaXAwEC1bNnS+YEhLY0bN9bkyZO1YMEC58RgtWvX1gcffJDhS/N79eqlTz75RLNmzVLr1q1VvHhxt70+3Oh2zl+LxaLHHntMixYtSjGZXPHixbV8+XJNmTJFI0eOVHx8vEqXLq2xY8e6XEIbERGhyZMnKzw8XPHx8WrZsqWeeuopbd261WV7Z86c0dGjR9W/f/9MPT4Aruj7XkPfl75vRrVo0UKffvqpzp49m6KG6vX9TEet5Xr16umVV15x9gseeOABLV26VO+++67eeOMN5zn8wQcfqE6dOrLZbHr99deVP39+Z+kgs9ms0aNHq23btho7dqwmTpwoKblGaEhIiIYNGyYp+fL8wYMHp5lE7du3r4oUKaIPP/xQq1atUsGCBfXII4+of//+zoR+asdq1apVioiI0NatW296af3w4cP1wAMPaPXq1fr4448VHx+vEiVK6OGHH1bv3r1TlBS566671L17d40bN06xsbHOutM39qFu1odNz3PvdoWEhOiTTz7RwoULneUOAgICVK1aNc2dOzfFF8ju+Exxo8w8R1555RV5eXlp9erVmjlzpvLnz6+wsDC99tprGToeUvL/tm3btho9erQ++ugjVaxYUUuWLNHUqVM1ePBg2e12lS9fXjNnzlTTpk0zvB8p+WqHZcuWacqUKRo7dqwSExNVsWJFRUZGpth2+fLlValSJZ05cyZFqZv0vL8VKlRIy5Yt09ixYzV06FDly5dPzz//fKqfH7Zt2yZPT081adIkU48vNzPZ7+TUeQCQgyQlJWn9+vWqV6+eS82kJUuWaMyYMdq1a9dtf4CB8Xr37q3ChQtr3LhxGVp/zZo1ev3112/aqT516pSaNm2q8ePHO0dQAEaJiIjQli1b9PHHH2doVmgAQN5gRN/XbrerdevWatGiRYYTgO7gGGW6ePHiLNlfx44dNW3atDQnT7pdQ4cO1e7du1OU17peevqwQFbp3LmzKlas6PxCBClRgxYA/p+Hh4fmzp2rl156SV988YX27NmjxYsXa+rUqXryySdJzuZQAwYM0KZNm/TPP/8YHQpwx8XExGjZsmV69dVXSc4CAG7KiL6vyWTSwIEDtWzZstuu55lTffPNN4qLi3NbchbIafbv369ffvlFL7zwgtGhZGskaAHgOrNnz1bp0qU1cuRIde/eXYsXL1a3bt309ttvGx0aMqhChQrq1atXmrO4ArnJnDlz1LRpUzVu3NjoUAAAOYARfd/GjRuradOmmjNnzh3bR3ZSrlw5zZ8/3+gwAMOMHz9eb731Fl9S3AIlDgAAAAAAAADAIIygBQAAAAAAAACDkKAFAAAAAAAAAIOQoAUAAAAAAAAAg5CgBQAAAAAAAACDeBgdQE5lt9tlsxk/v5rZbMoWceR0HEf34Di6D8fSPTiO7sFxdB+O5e0xm00ymUxGh5ErZZe+LAAAQG51O31ZErQZZLPZdeHCFUNj8PAwq1ChfLp8+aqSkmyGxpKTcRzdg+PoPhxL9+A4ugfH0X04lrevcOF8slhI0N4J2aEvCwAAkJvdTl+WEgcAAAAAAAAAYBAStAAAAAAAAABgEBK0AAAAAAAAAGAQErQAAAAAAAAAYBAStAAAAAAAAABgEBK0AAAAAAAAAGAQErQAAAAAAAAAYBAStAAAAAAAAABgEBK0AAAAAAAAAGAQErQAAAAAAAAAYBAStAAAAAAAAABgEBK0AAAAAAAAAGAQErQAAAAAAAAAYBAStAAAAAAAAABgEBK0AAAAAAAAAGAQErQAAAAAAAAAYBAStAAAAAAAIFs6ceKYQkND1LBhHYWGhujEiWNGhwQAbudhdAAAAAAAAAA3atQoWHa73fm31Zqkzp07yGQyadu2PQZGBgDuxQhaAAAAAACQrdyYnL2e3W5Xo0bBWRwRANw5JGgBAAAAAEC2ceLEsTSTsw52u51yBwByDRK0AAAAAAAg2+jcuYNblwOA7I4ELQAAAAAAAAAYhEnCYDAfxcWZ0m71sUuKy7pwAAAAAAAAgCxEghaGioszKTzcmmZ7v34W+fhkYUAAAAAAAABAFqLEAQAAAAAAAAAYhAQtAAAAAAAAABiEBC0AAAAAAAAAGIQELQAAAAAAAAAYhAQtAAAAAAAAABiEBC0AAAAAAAAAGIQELQAAAAAAAAAYhAQtAAAAAAAAABiEBC0AAAAAAAAAGIQELQAAAAAAAAAYhAQtAAAAAAAAABiEBC0AAAAAAAAAGIQELQAAAAAAAAAYhAQtAAAAAAAAABiEBC0AAAAAAAAAGIQELQAAAAAAAAAYhAQtAAAAAAAAABiEBC0AAAAAAAAAGIQELQAAAAAAAAAYxMPoAJDb+SguznSTdrMka1YFAwAAAAAAAGQrJGhxR8XFmRQennYCtk8fBnEDAAAAAAAg7yI7BgAAAAAAAAAGIUELAAAAAAAAAAYhQQsAAAAAAAAABqEGLbI1T0+z4uJ802z38bFLisu6gAAAAAAAAAA3IkGLbC0+XoqISHuSsX79LPLxycKAAAAAAAAAADeixAEAAAAAAAAAGIQELQAAAAAAAAAYhAQtAAAAAAAAABiEBC0AAAAAAAAAGIQELQAAAAAAAAAYhAQtAAAAAAAAABiEBC0AAADgBpGRkercuXOa7cOHD1dYWJjLfTabTeHh4WrUqJGqV6+u5557TidPnnRZ5siRI+rUqZNq1KihJk2aaP78+XckfgAAABiDBC0AAACQSQsXLlR4eHia7Vu2bNGqVatS3B8ZGanly5drzJgxWrFihUwmk3r27KmEhARJ0sWLF9W9e3eVLl1aq1evVt++fTV9+nStXr36jj0WAAAAZC3DE7SXLl3SW2+9pcaNG6tWrVp65plntHfvXmf766+/rgoVKrj8NG7c2NnOqAMAAAAY5cyZM3r++ec1ffp0lSlTJtVlzp49qzfffFN169Z1uT8hIUELFixQ3759FRoaqooVK2rq1Kk6c+aMNm/eLElauXKlvLy8NHLkSJUtW1bt2rVTt27dNHfu3Dv+2AAAAJA1DE/Qvvrqq9q/f7/effddffTRR6pSpYp69Oih48ePS5J++eUX9e7dW9u3b3f+fPLJJ871GXUAAAAAoxw+fFgFChTQunXrVL169RTtdrtdQ4cOVevWrVMkaI8ePaorV64oJCTEeV9AQIAqV66sPXv2SJL27t2r4OBgeXh4OJcJCQnRiRMndP78+Tv0qAAAAJCVDE3Qnjx5Ut99951GjBihOnXq6P7779ewYcNUvHhxrV+/XlarVceOHVO1atVUtGhR50/hwoUlMeoAAAAAxgoLC9OUKVN0zz33pNq+cOFCnTt3Tq+++mqKtqioKElSyZIlXe4vVqyYTp8+7VymRIkSKdol6Z9//sl0/AAAADCex60XuXMKFSqk9957T1WrVnXeZzKZZLfbFR0drT/++EPx8fEqW7ZsquvfatTBY489luaogzlz5uj8+fMKDAy8cw8QAAAAedbRo0cVERGhJUuWyMvLK0V7bGysJKVo8/b2VnR0tCQpLi4u1XZJio+Pz1R8Hh6GX0wHAJnGaxmA3MDQBG1AQIBCQ0Nd7tu4caP+/PNPNWzYUL/++qtMJpMWLVqkb7/9VmazWaGhoerfv7/y58+f7lEH5cuXT9EuJY86yEyC1ug3AovF7HKbHZlMktlsuukymWk3mTL/f8gJxzEn4Di6D8fSPTiO7sFxdB+OZd4SHx+vgQMH6sUXX1TFihVTXcbHx0dS8lVhjt8d6/r6+jqXcZTuur5dkvz8/DIcn9lsUqFC+TK8PgBkF7yWAcgNDE3Q3mjfvn1644031LRpU4WFhSk8PFxms1mlSpXS7NmzdfLkSU2cOFG//vqrFi1aZOiog+zUqQ0I8DU6hDQlJEi+NwnPZJJ8fVOOKElvu6enVKhQ2qfx5cvS/58mqfL1lQICkn/PzscxJ+E4ug/H0j04ju7BcXQfjmXesH//fv3222+KiIjQzJkzJUmJiYlKSkpSzZo1NWrUKJUuXVpS8iRi9957r3Pds2fPOpO6JUqU0NmzZ1227fi7ePHiGY7PZrPr8uWrGV4fALKLixevGB0CAKQqIMA33YMzsk2CdsuWLRo4cKCqV6+ud999V5LUt29fdevWTQH/n0ErX768ihYtqqeffloHDx40dNRBdujUWixmBQT46vLlWFmtNkNjSUtiordiY9OOzW73UGxsUobbExPNungx7UT7lSvemjEj7f337WuWlJjtj2NOkBPOx5yCY+keHEf34Di6D8fy9t1Opza7CQoK0hdffOFy3+LFi/XFF19o8eLFCgwMlJeXl/z9/bVr1y5ngvby5cv6+eef1alTJ0lScHCwli9fLqvVKovFIknasWOHypQpk+lSXUlJnIcAcj5eywDkBtkiQfvhhx9q7NixatasmSZPnuwc8WoymZzJWQdHuYKoqChnaQMjRh1I2eeNwGq1ZZtYbmS3JyezbyYz7Xb7zf8Pt9q/3S7nh+TsfBxzEo6j+3As3YPj6B4cR/fhWOYNPj4+uu+++1zuK1CggDw8PFzu79SpkyZPnqzChQurVKlSmjRpkkqUKKFmzZpJktq1a6d58+Zp2LBhev7553XgwAEtWrRIo0aNytLHAwAAgDvH8CEJS5cu1ejRo9WxY0dNmzbNpRzBa6+9ph49ergsf/DgQUlSuXLlVLFiReeoAwfHqIM6depISh51sG/fPlmtVucy7hp1AAAAAGRGv3791L59ew0fPlzPPPOMLBaL5s+f7+wTBwYGat68eTpx4oTatGmjiIgIDR48WG3atDE4cgAAALiLoSNoT5w4oXHjxqlZs2bq1auXzp8/72zz8fFRq1at9OKLL2rWrFl67LHHdOLECb399ttq1aqVypYtK4lRBwAAAMgeJkyYcNP2vn37qm/fvi73WSwWDRo0SIMGDUpzvaCgIK1YscItMQIAACD7MTRBu2nTJiUmJmrz5s3avHmzS1ubNm00YcIETZ8+XbNnz9bs2bOVP39+Pf744+rfv79zuX79+ikpKUnDhw9XXFycgoODUx11MHbsWLVp00ZFixZl1AEAAAAAAACAbMHQBG3v3r3Vu3fvmy7TokULtWjRIs12Rh0AAAAAAAAAyKkMr0ELAAAAAAAAAHkVCVoAAAAAAAAAMAgJWgAAAAAAAAAwCAlaAAAAAAAAADAICVoAAAAAAAAAMAgJWuRoNpuUkGB0FAAAAAAAAEDGkKBFjmS3S7/9ZtZDD1lUoYK/xo/30qVLRkcFAAAAAAAA3B4StMhxLl2SVqzw1Nq1njpxwqQrV0yaOtVbder4a8ECT6PDAwAAAAAAANKNBC1yFLtdWr/eU6dOmeXhYVe/fjbNnx+rSpWsunzZpKFDfbR+vYfRYQIAAAAAAADpQoIWOcrvv5sVFZWcnO3WLUEDB9r0+ONJ+uqrq3rhheRitP36+ej4cZPBkQIAAAAAAAC3RoIWOYbdLn33nUWSVLOmVQULXmszm6URI+IVEpKkmBiTnnvOV1evGhMnAAAAAAAAkF4kaJFjHDtm1tmzZnl62hUcbE3R7ukpzZ0bp6JFbTpyxKIRI7wNiBIAAAAAAABIPxK0yBHsdun775NHz9aqZZWfX+rLFS9u1+zZcZKkxYs99euvWRUhAAAAAAAAcPtI0CJHOH7crHPnzPLysqtOnZSjZ6/XqJFVLVsmymYzacIETnEAAAAAAABkX0x3jxzh2LHkRGvVqlb5+t56+eHD47Vpk4e2bDErMNCke+6x3+EIAQAAABjl779PKSYmxugwYIBffjlqdAhwE39/f5UqdbfRYQCGIEGLbM9ul06eTE7QliljS9c65crZ1alTohYt8tK333ro2WcTZTLdySgBAAAAGOHSpUt65pm2stnS91kBuUuPHp2MDgFuYrFYtHbtJhW8fkZwII8gQYts7+JFk/77zySLxa67707/SNiBAxO0apWnTp8267ffzCpfng4bAAAAkNsULFhQy5atYQRtLvL1119r8eJ5t1yuc+fn1aRJkzsfELKEv78/yVnkWSRoke398Ufy0Ne77rLL0zP96xUvblePHnbNmGHS7t0WPfCAjVG0AAAAQC7EZdG5S4UKFdOVoO3Vq3cWRAMAdx4zKCHbc5Q3KF065QhYT0+z4uJ80/zp3l2yWOyKijLr77/JzgIAAABATrB9+95MtQNATsIIWmRriYnSX38lJ2jvuy9lgjY+XoqIsKa5fp8+ZlWpYtOBAxbt3WvR3Xcn3bFYAQAAAADus337Xm3cuF5jx4503jds2Eg9+mgr44ICgDuAEbTI1g4ckBISTPLxsatYsfTXn71e7drJCdxjx8y6cIFRtAAAAACQUzz6aCvNn/+hJGn+/A9JzgLIlUjQIlvbti359t57bTJn8GwNDLSrbFmrJJP27bO4LTYAAAAAAAAgs0jQIlvbvj15xGtq9WdvR506yaNoDx826+rVTIcFAAAAAAAAuAUJWmRb8fHSjz8m/55a/dnbcffddhUvblNSkkmHDjGKFgAAAAAAANkDCVpkW2fOmGS1mhQQYFeBApnblskk1aiRPIr2wAGz7BkrZwsAAAAAAAC4FQlaZFv//pt8ehYrlrnRsw4VKtjk5WXXpUtm/fknk4UBAAAAAADAeCRokW2dO5ecRC1SxD3DXb28pMqVk5O9+/dT5gAAAAAAAADGI0GLbOvff92boJWk6tWTyxwcO2bWlStu2ywAAAAAAACQISRokS3Z7dcStEWLui9BW7SoXSVL2mSzMVkYAAAAAAAAjEeCFtlSdLSUmGiSl5ddBQu6d0YvxyjaAwcssrmnvC0AAAAAAACQISRokS05JggrW1ayuHmga4UKNnl72xUdbdKuXUwWBgAAAAAAAOOQoEW25ChvULGi+7ft6ZmcpJWkVatI0AIAAAAAAMA4JGiRLTkStOXLu7e8gUPVqsllDjZsMCkm5o7sAgAAAAAAALglErTIls6du3MjaCWpZEm7ChWy6epVk9at87gzOwEAAAAAAABugQQtsh2rVbp4MTlBW6HCndmHySRVqZJc5mDZMhK0AAAAAAAAMAYJWmQ7Fy6YZLOZ5O1tV8mSd24/lStbZTLZ9d13Fu3eLV254q24OF+XH8nnzgUAAAAAAACAPI+hg8h2HPVnixSxy3QH5/AKCJAaNpS2bZMGD5bq1bPJZnOteduvn0U+5GgBAAAAAABwhzCCFtnO9QnaO61du+R9HDgg2e/87gAAAAAAAAAXJGiR7TgmCCtSxHbH99W8ueTpadfFi1JU1B0crgsAAAAAAACkggQtsp1//00+LbNiBK2fn1SuXHIi+OefeToAAAAAAAAga5GRQraSlCRdvpw8kjUwMGtqDlSqlJygPXrULNudH7QLAAAAAAAAOJGgRbby33/JyVlPT7t8fbNmn2XKJO/ryhWT/vqLMgcAAAAAAADIOiRoka1ERyffBgTYZcqiXKnFIlWunPz7kSOWrNkpAAAAAAAAIBK0yGaio5OzsgUKZE15A4eqVZNvf/vNrKSkLN01AAAAAAAA8jAStMhWriVos3a/990n+fvbFR9v0okTPC0AAAAAAACQNchEIVtxTBCW1SNoTaZrk4UdOcLTAgAAAAAAAFmDTBSyFccI2oCArE3QStcStL//blZ8fJbvHgAAAAAAAHkQCVpkK0bVoJWk4sXtKlzYpqQkk44d46kBAAAAAACAO48sFLKNxETp6lXjErQmk1SxoqPMgSXL9w8AAAAAAIC8hwQtsg1H/VkvL7u8vY2JwVHm4ORJk65eNSYGAAAAAAAA5B0kaJFtXF/ewGQyJoZChewqXtwmu92kX37h6QEAAAAAAIA7iwwUso3o6ORbI8obXM8xivboUcocAAAAAAAA4M4iQYtsw1HiICDA2ARthQpWSXb9/bdZf/1laCgAAAAAAADI5UjQItu4VuLA2Djy55fuuSc5Sbx+vUG1FgAAAAAAAJAnkKBFtnF9DVqjVaxolSR9+ilPEQAAkD6RkZHq3Lmzy31ffvml2rVrp5o1ayosLEwTJ05UXFycs91msyk8PFyNGjVS9erV9dxzz+nkyZMu2zhy5Ig6deqkGjVqqEmTJpo/f36WPB4AAABkDbJPyDayS4kDSXrgAZvMZrsOHTLp2DFG0QIAgJtbuHChwsPDXe7bu3ev+vTpoxYtWuiTTz7RyJEjtXHjRo0aNcq5TGRkpJYvX64xY8ZoxYoVMplM6tmzpxISEiRJFy9eVPfu3VW6dGmtXr1affv21fTp07V69eosfXwAAAC4c0jQIltISJBiY7PPCFo/P+m++5InC/v4Y0+DowEAANnVmTNn9Pzzz2v69OkqU6aMS9vy5csVEhKiF154Qffdd58aN26sAQMGaN26dUpISFBCQoIWLFigvn37KjQ0VBUrVtTUqVN15swZbd68WZK0cuVKeXl5aeTIkSpbtqzatWunbt26ae7cuUY8XAAAANwBJGiRLTjKG/j42OXtbXAw/69ixeQE7SefeMhufM4YAABkQ4cPH1aBAgW0bt06Va9e3aXtueee0+DBg1Osk5SUpJiYGB09elRXrlxRSEiIsy0gIECVK1fWnj17JCWPwg0ODpaHh4dzmZCQEJ04cULnz5+/Q48KAAAAWcnj1osAd56jvEF2GD3rUK6cTd7edv32m0WHD5tVtarN6JAAAEA2ExYWprCwsFTbKleu7PJ3QkKC3n//fVWpUkWFCxfW3r17JUklS5Z0Wa5YsWI6ffq0JCkqKkrly5dP0S5J//zzjwIDAzMcu4cHYzUA5AwWi8l5y2sXgNyIBC2yhejo5NvsUH/WwdtbCguza+NGkz75xENVqyYYHRIAAMihkpKSNHjwYB07dkxLliyRJMXGxkqSvLy8XJb19vZW9P93juLi4lJtl6T4+PgMx2M2m1SoUL4Mrw8AWSkgwNd5y2sXgNyIBC2yBUeJg+yUoJWkxx+3a+NG6ZNPPDVsWIJMzBcGAABuU0xMjPr3769du3YpPDzcWQrBx8dHUvLIWsfvUnLi1dfX17mMY8Kw69slyc/PL8Mx2Wx2Xb58NcPrA0BWunw51nl78eIVg6MBgPQJCPCVxZK+Uf8kaJEtZMcSB5LUtKldfn52/fmnWT/8YFbt2pQ5AAAA6Xf27Fn17NlTp06d0ty5c13qzTpKG5w9e1b33nuvyzoVK1aUJJUoUUJnz55NsU1JKl68eKZiS0qiXwMgZ7Ba7c5bXrsA5EYUb0G28N9/yQna/PkNDuQGvr7SI48kSZI+/tjT4GgAAEBOEh0dra5du+rChQtaunSpS3JWkipWrCh/f3/t2rXLed/ly5f1888/q06dOpKk4OBg7du3T1ar1bnMjh07VKZMmUzVnwUAAED2QYIW2cKVK8kJWn//7DWCVpLatEmUJK1d66HrPhsBAADc1Pjx4/XXX39p0qRJKly4sM6dO+f8sVqt8vLyUqdOnTR58mRt3bpVR48e1YABA1SiRAk1a9ZMktSuXTvFxMRo2LBhOnbsmNasWaNFixapV69eBj86AAAAuAslDmA4u1268v9lhLJjgrZJE6sKFLDrzBmzdu60qEEDsrQAAODmbDabNmzYoMTERHXt2jVF+9atW3X33XerX79+SkpK0vDhwxUXF6fg4GDNnz/fOTFYYGCg5s2bp7Fjx6pNmzYqWrSoBg8erDZt2mT1QwIAAMAdQoIWhrt6VbLZTJLsysRcF3eMt7f02GOJWrrUSx9/7EGCFgAApGrChAnO381msw4cOHDLdSwWiwYNGqRBgwaluUxQUJBWrFjhlhgBAACQ/VDiAIZzlDfw85MsFoODSUObNsl1aNev91BiosHBAAAAAAAAINcgQQvDxcRk3/qzDg0aWFWkiE0XLpi1bVs2zSIDAAAAAAAgxyFBC8M56s/my5d9E7QeHtITTySPov34Y0+DowEAAAAAAEBuQYIWhrs2gtbgQG7hySeTE7QbNngoLs7gYAAAAAAAAJArkKCF4RwJ2uw4gtbT06y4OF/FxfkqKMhLJUva9d9/Jn3+uZ8kH6PDAwAAAAAAQA7nYXQAgKPEQXasQRsfL0VEWJ1/lyolnT7toSlTpEceMcmHHC0AAAAAAAAygRG0MNy1EbQGB5IOFSvaJEnHj5udiWUAAAAAAAAgo0jQwnBXrjhq0Ga/EbQ3Kl7croIFbUpKMmnLFpPR4QAAAAAAACCHMzxBe+nSJb311ltq3LixatWqpWeeeUZ79+51th85ckSdOnVSjRo11KRJE82fP99lfZvNpvDwcDVq1EjVq1fXc889p5MnT7osc6ttwDg227USB9mxBu2NTKZro2jXrSNBCwAAAAAAgMwxPEH76quvav/+/Xr33Xf10UcfqUqVKurRo4eOHz+uixcvqnv37ipdurRWr16tvn37avr06Vq9erVz/cjISC1fvlxjxozRihUrZDKZ1LNnTyUkJEhSurYB41y8KNlsOafEgXQtQfv11yZdumRsLAAAAAAAAMjZDJ0k7OTJk/ruu++0bNky1apVS5I0bNgwffvtt1q/fr18fHzk5eWlkSNHysPDQ2XLltXJkyc1d+5ctWvXTgkJCVqwYIEGDRqk0NBQSdLUqVPVqFEjbd68WY899phWrlx5023AWGfOJN/6+tplsRgbS3oVKWJXkSI2/fuvWRs2eOjZZ5OMDgkAAAAAAAA5lKEjaAsVKqT33ntPVatWdd5nMplkt9sVHR2tvXv3Kjg4WB4e1/LIISEhOnHihM6fP6+jR4/qypUrCgkJcbYHBASocuXK2rNnjyTdchsw1tmzybc5of7s9RyjaFev9jQ4EgAAAAAAAORkho6gDQgIcI58ddi4caP+/PNPNWzYUFOnTlX58uVd2osVKyZJ+ueffxQVFSVJKlmyZIplTp8+LUmKioq66TYCAwMzHL+Hh7EVIiwWs8ttdmQySWZz2rVaryVo017uZuu7s/129l+lik3bt0vbt1sUFWXR3XfnrATznZATzsecgmPpHhxH9+A4ug/HEgAAAEBqDE3Q3mjfvn1644031LRpU4WFhWn8+PHy8vJyWcbb21uSFB8fr9jYWElKdZno6GhJUlxc3E23kVFms0mFCmWPoqkBAb5Gh5CmhATJ9ybhORK0BQqY5evrlaLdZFKq97uz3ds7+YOyt3fK0bBpre/rKz34oPT99yZ9+qmf3ngjzV3kOdn5fMxpOJbuwXF0D46j+3AsAQAAAFwv2yRot2zZooEDB6p69ep69913JUk+Pj7Oyb4cHElVPz8/+fj4SJISEhKcvzuW8f3/rOCttpFRNptdly9fzfD67mCxmBUQ4KvLl2NltdoMjSUtiYneio1NO7YzZzwlmeTra1VsrDVFu93uodjYtGu8uqM9Pt4qb29Pxccnymazp2hPa/22bS36/nuLFi60qXfvWJluPlA318sJ52NOwbF0D46je3Ac3YdjefsCAnwZcQwAAIBcL1skaD/88EONHTtWzZo10+TJk50jXkuUKKGzjiGW/8/xd/HixZWUlOS8795773VZpmLFiunaRmYkJWWPD1dWqy3bxHIju10pkp7Xc/xr/PxsaS53s/Xd2W6z2VNdNq31H33UrjfftOu338zas0eqVSt7/g+yWnY+H3MajqV7cBzdg+PoPhxLAAAAANczfEjC0qVLNXr0aHXs2FHTpk1zKUcQHBysffv2yWq9NrJyx44dKlOmjAIDA1WxYkX5+/tr165dzvbLly/r559/Vp06ddK1DRjrzJnkW39/Y+PIiPz5pZYtk78kWLmSycIAAAAAAABw+wxN0J44cULjxo1Ts2bN1KtXL50/f17nzp3TuXPn9N9//6ldu3aKiYnRsGHDdOzYMa1Zs0aLFi1Sr169JCXXnu3UqZMmT56srVu36ujRoxowYIBKlCihZs2aSdIttwFjnTuXfOvvnzMn2XrqqURJ0scfeyoTJY0BAAAAAACQRxla4mDTpk1KTEzU5s2btXnzZpe2Nm3aaMKECZo3b57Gjh2rNm3aqGjRoho8eLDatGnjXK5fv35KSkrS8OHDFRcXp+DgYM2fP985EjcwMPCW24Ax7PZrJQ7y5cuZCdrGja0qUcKmqCizvvjCQ48/nna9WwAAAAAAAOBGhiZoe/furd69e990maCgIK1YsSLNdovFokGDBmnQoEEZ3gaMERsrJSYmz6yVL5/BwWSQxZI8ijY83FtLlniSoAUAAAAAAMBtMbwGLfKuK1eSk7O+vnZZLAYHkwkdOyaXOfjqK4v+/NNkcDQAAAAAAADISUjQwjAxMcm3ObX+rEOZMnY1apQku92kpUuZLAwAAAAAAADpR4IWhomJydnlDa7XuXPyKNqlSz2VRJUDAAAAAAAApBMJWhjGUeIgp4+glaRHH01SYGDyZGFbt+bgeg0AAAAAAADIUiRoYZirV5Nv/fxyfoLW21t66qnkobOLF3sZHA0AAAAAAAByChK0MMzVq8kjaP38DA7ETTp3TpAkbdli0alTTBYGAAAAAACAWyNBC8PExjoStDl/BK0klSuXPFmYzWbSggVMFgYAAAAAAIBbI0ELwzhKHPj65o4ErSS98ELyKNrFi70UE2NwMAAAAAAAAMj2SNDCMLmtxIEkNWtmVZkyNkVHm7RyJaNoAQAAAAAAcHMkaGEIu12KjU3+PbeUOJAks/naKNq5c71ksxkcEAAAAAAAALI1ErQwRHy8ZLMlj6D19TU4GDd7+ulEBQTYdfy4WVu3WowOBwAAAAAAANkYCVoYwlHeIH9+uzw8DA7Gzfz9pY4dEyVJs2d7GRwNAAAAAAAAsjMStDCEY4KwwEBj47hTnn8+QR4edm3b5qHdu3maAQAAAAAAIHVkjmAIxwja3Jqgveceu55+OnkU7eTJ3gZHAwAAAAAAgOyKBC0M4RhBW7iwsXFkhqenWXFxvmn+vPKKSR4edn39NaNoAQAAAAAAkLpcVv0TOUVsbPII2iJFDA4kE+LjpYgIa5rt/fpZ9PTTiVqyxEuTJ3tr5crYLIwOAAAAAAAAOQHD+mAIR4mDnDyCNj1eeSWBUbQAAAAAAABIExkjGOLaJGF2YwO5w0qXvlaLdswYb9lz98MFAAAAAADAbSJBC0Pk9knCrjdwYIJ8fe3audNDa9ZQVQQAAAAAAADXkKCFIWL/vxxrXkjQliplV//+CZKkUaO8FRNjcEAAAAAAAADINkjQwhB5pQatw4svJui++2yKijJr6lQvN23VR3Fxvmn+SD5u2g8AAAAAAADuFK63Rpaz26+NoC1SxNhYsoqPjzRmTJw6d/bT7Nle6tAhSQ88YMvUNuPiTAoPt6bZ3q+fRT7kaAEAAAAAALI1RtAiy8XGSnZ78gjaQoUMDiYLNW9u1cMPJykx0aSXXvJRQoLREQEAAAAAAMBoJGiR5WJjk5OzPj52eXoaHEwWMpmkyZPjVKiQXfv3WzR+vLfRIQEAAAAAAMBgJGiR5a5eTb7187MbG4gB7rrLrqlT4yRJM2d66auvLAZHBAAAAAAAACORoEWWc0wQ5utrcCAGadkySd26Jdc36NPHR6dOmQyOCAAAAAAAAEYhQYssl5dH0DqMGhWvSpWsOnfOrKee8tW//5KkBQAAAAAAyItI0CLLOWrQ+vkZHIiBfH2lpUtjVaqUTceOWfTss76KiTE6KgAAAAAAAGQ1ErTIctdKHOTdEbSSVKqUXStXxiow0KaffkpO0l64YHRUAAAAAAAAyEokaJHlKHFwzQMP2LRsWaz8/e3audNDjzyST7/8wtMSAAAAAAAgryAThCznGEGb20sceHqaFRfnm+aP5CNJqlHDpvXrr+ree2364w+zHn3UT5984iE7+WsAAAAAAIBcz8PoAJD35JURtPHxUkSENc32fv0s8knO0apyZZs2bbqqHj189P33HnrhBV8tX56k8ePjVKZM7j5OAAAAAAAAeRkjaJHlHJOE+foaHEg2Exho16pVsRo4MF5eXnZ9+aWHQkPz6c03vRUVZTI6PAAAAAAAANwBJGiRpWw2KTY2+ffcPoI2Izw9pcGDE/TNN1fUqFGS4uJMmjPHS3Xq5NOgQd46cYJELQAAAAAAQG5CghZZKjk5a5JkZwTtTZQta9dHH8Vq+fKrqls3SQkJJi1a5KX69fOpRw8f/fADT10AAAAAAIDcgCwPspRjgjBfX8nM2XdTJpMUFmbVp5/G6uOPr6pp0yTZbCZ9+qmnHnkkn556yqLjx81MJgYAQDYRGRmpzp07u9x35MgRderUSTVq1FCTJk00f/58l3abzabw8HA1atRI1atX13PPPaeTJ0/e1jYAAACQs5EiQ5ZylDfw9SWrmF4mk9SggVXLlsXq66+v6KmnEuXhYdfOnSZ9/LGnlizx1OnTlD4AAMBICxcuVHh4uMt9Fy9eVPfu3VW6dGmtXr1affv21fTp07V69WrnMpGRkVq+fLnGjBmjFStWyGQyqWfPnkpISEj3NgAAAJCzkaBFlmKCsMypXNmmiIg47d17Rb162eTpaVdUlFlLlnhp0yYPZwIcAADcvqtXr+rbb7+9rXXOnDmj559/XtOnT1eZMmVc2lauXCkvLy+NHDlSZcuWVbt27dStWzfNnTtXkpSQkKAFCxaob9++Cg0NVcWKFTV16lSdOXNGmzdvTtc2AAAAkPORoEWWYgSte9x1l13Dhtn0/PMJqlzZKkk6eNCixYu9FBXFaFoAANLy999/q0ePHgoKClKlSpVcfmrXrq1evXrd1vYOHz6sAgUKaN26dapevbpL2969exUcHCwPDw/nfSEhITpx4oTOnz+vo0eP6sqVKwoJCXG2BwQEqHLlytqzZ0+6tgEAAICcz+PWiwDuExfHCFp3ypdPatkySdWrW7Vxo6cuXTJp2TJPPfRQkjw8zIqLS/tA+/jYJcVlXbAAAGQD48eP148//qinnnpKP/zwg3x9fVWjRg199913+vXXXzVjxozb2l5YWJjCwsJSbYuKilL58uVd7itWrJgk6Z9//lFUVJQkqWTJkimWOX36dLq2ERgYeFvxAgAAIPshQYss5RhBm5wchLuUKmVXp04J+vxzDx07ZtGWLZ4aO9YuHx+rTGkMqO3XzyIfn6yNEwAAo+3Zs0f9+/dXly5dtGTJEm3ZskWDBg3Sq6++queee05bt25V06ZN3bKvuLg4eXl5udzn7e0tSYqPj1fs/3eMUlsmOjo6XdvIDA8PLqYDkDNYLCbnLa9dAHIjErTIUtSgvXN8fKTWrZO0a5dd27d7aOZMk4KDLWrcOO0kLQAAec2VK1dUqVIlSVLZsmWdI2YtFos6duyoCRMmuG1fPj4+zsm+HBxJVT8/P/n8/zelCQkJzt8dy/j+f2fpVtvIKLPZpEKF8mV4fQDISgEBvs5bXrsA5EYkaJGlqEF7Z5lMUkiIVV5edn35paf27PGQzSY1aUKSFgAAKbk8wLlz5yRJ9913n6Kjo3X27FkVK1ZMBQoUcGtd1xIlSujs2bMu9zn+Ll68uJKSkpz33XvvvS7LVKxYMV3byCibza7Ll69meH0AyEqXL8c6by9evGJwNACQPgEBvrJY0jfqnwQtshQ1aG+Hj/N4pc4syZpqS61aNoWF2TR8uFn79nkoIECqXTv1ZQEAyEtCQ0M1ffp0lShRQrVq1VKJEiW0YMEC9enTR6tXr85U0vNGwcHBWr58uaxWqywWiyRpx44dKlOmjAIDA5U/f375+/tr165dzgTt5cuX9fPPP6tTp07p2kZmJCXZMrU+AGQVq9XuvOW1C0BuRPEWZClq0KZfXJxJ4eHWNH9st+iXdOokhYYmj8z5+muLTpxgCC0AAP369VNAQIDCw8MlSQMGDNAHH3yg4OBgffrpp+revbvb9tWuXTvFxMRo2LBhOnbsmNasWaNFixapV69ekpJrz3bq1EmTJ0/W1q1bdfToUQ0YMEAlSpRQs2bN0rUNAAAA5HyMoEWWYgTtNZ6eZsXF3exApD1CNr3q1LHq/HmTDh2y6NNPPdWxY6ICA0mOAwDyrkKFCmnVqlXOMgFPPPGE7rrrLv30008KCgpS3bp13bavwMBAzZs3T2PHjlWbNm1UtGhRDR48WG3atHEu069fPyUlJWn48OGKi4tTcHCw5s+f75wYLD3bAAAAQM5GghZZxma7PkFLkjA+XoqISDsB26dP5ge4m0zSww8n6eJFk/7+26y1az3UqVOibpgMGgCAPCMiIkL/+9//XEoZ1KlTR3Xq1NGpU6f09ttv66233srQtlObYCwoKEgrVqxIcx2LxaJBgwZp0KBBaS5zq20AAAAgZ6PEAbJMXNy136+bqBh3mIeH1Lp1ovz97bpwwaxvvuF7GQBA3jVz5kydOXMm1bb9+/dr1apVWRwRAAAA8joyNcgysbHJo2e9ve0y89VAlvLzkx59NFGrVnlp/36LypShsD4AIO/o0KGD9u/fL0my2+16+umn01y2WrVqWRUWAAAAIIkELbKQYwQt9WeNcd99dtWunaR9+zy0aZOHzp616v8njAYAIFcbO3asNm7cKLvdrpkzZ6pdu3YqUaKEyzJms1kBAQFq3ry5QVECAAAgryJBiyzjGEHr40P9WaM0amTVn3+ade6cWcOGmbV4sdERAQBw55UtW1Z9+vSRJJlMphQ1aAEAAAAjcaE5skxsbPItE4QZx8NDatkySWazXZs2mbVhA9/RAADylj59+qh48eL6999/dfr0af3zzz/6559/dOrUKf32229atmyZ0SECAAAgjyE7gyzjGEFLiQNjFS1qV506Vu3e7aHXX/dWo0ZJyp/f6KgAAMgaR48e1auvvqoTJ06k2m4ymfTMM89kcVQAAADIyxhBiyxzrQYtI2iNVr++Vffea9fp02aNH+9tdDgAAGSZd955R5cvX9aQIUNUt25dNWzYUG+++aZCQ0NlMpn0wQcfGB0iAAAA8pgMJWhnzpyp06dPuzsW5HLXatAaHAjk6SmNG2eTJM2f76mffuK7GgBA3rB//3698sor6tatmx577DFdvXpVzz77rGbPnq2HH35YiynQDgAAgCyWoazMokWL1LRpU3Xv3l2ffvqp4uPj3R0XciFq0GYvjRvb1bZtoux2k15/3Ud2/i0AgDwgISFBZcqUkSTdf//9+uWXX5xtbdu21U8//WRQZAAAAMirMpSg3b59uyZPnixPT08NHTpUDRo00FtvvaUff/zR3fEhF4mLowZtduLpadbQoSb5+dm1b59Fy5f7KS7OV3FxvpIY5gwAyJ3uuusu/fXXX5Kk++67TzExMTp16pQkycvLS9HR0UaGBwAAgDwoQ5OEeXl5qWXLlmrZsqXOnj2rdevWaePGjVq1apVKly6ttm3bqm3btgoMDHR3vMjBrl5NvmUEbfYQHy+tXGlV7drStm0eGjbMrOPHE+TlJfXrZ6EUBQAgV2revLkmT54sX19fPfLII7r//vs1depUvfDCC1qwYIHuueceo0MEAABAHpPpwpPFihVTly5d1Lt3b9WpU0cnTpzQu+++q9DQUL355puKiYlxR5zIBRwjaEn8ZS+1a1tVoIBdMTEm7d5tMTocAADuqD59+qh27dpavXq1JOn111/Xli1b9OSTT2rnzp3q27evwRECAAAgr8nQCFqH3bt3a+3atdq0aZOuXr2qkJAQZ3L2m2++0dtvv62oqCjNnTvXXfEih7Lbpbi45N8ZQZu9eHhITZokae1aT+3ZY1G1alZ5epr/v9RB6nx87JLisi5IAADcxNvbW+Hh4UpMTJQkNWrUSOvXr9ehQ4dUpUoV3XvvvQZHCAAAgLwmQwnaqVOn6tNPP9Xp06dVsmRJdevWTW3bttVdd93lXKZly5b65Zdf9MEHH7gtWORcCQmSzUYN2uyqXDmb7rnHpr/+Muu77zwUHy9FRFjTXJ4SCACAnMxms+m///6TJBUqVEj33HMPpQ0AAABgmAwlaN9//309/PDDGj16tB588EGZTKZUl6tWrZr69++fmfiQS8TGJt96eNjlkalx27gTTCYpNDRJH37opZ9/NuvwYUY5AwByn/Xr12v58uXav3+/kpKSJEk+Pj6qVauWnnnmGT388MMGRwgAAIC8KEOpsm3btqlAgQI6d+6cMzkbHR2t06dPq2LFis7l6OTCITaW0bPZXYkSdlWsaNXRoxZNmCDVq2d0RAAAuIfNZtPAgQO1YcMGFStWTC1btlSRIkUkSWfOnNHu3bvVt29ftW7dWhMmTDA4WgAAAOQ1GUrQms1mde/eXadPn9bnn38uSdq/f79eeOEFhYWFacqUKfIlE4frXEvQMjIzO2vYMEm//mrWtm0mlShh0n338f8CAOR8S5cu1eeff66hQ4eqS5cuMptd58m12WxatmyZxo0bp0aNGumxxx4zKFIAAADkReZbL5LSpEmT9Ntvv+nVV1913hcSEqLIyEgdOnRI4eHhbgsQucO1CcKMjQM3V7CgVKNGcu3Zb77xkJ38LAAgF1izZo2efvppdevWLUVyVkoefNCxY0c99dRTWrlypQERAgAAIC/LUIL2yy+/1JAhQ9S8eXPnfV5eXgoLC9Orr76qjRs3ui1A5A6OEbQ+PmT8sruQEKv8/e06e9aso0cz9BIBAEC28scffyg0NPSWyzVq1Ei///57FkQEAAAAXJOh7MuVK1cUEBCQaltgYKAuXryYqaCQ+zgmCWMEbfbn5yf17p2cSN+2zUP/P4cKAAA5VmxsrAoUKHDL5QoVKqQLFy5kQUQAAADANRlK0FapUkWrV69OtW3NmjWqUKFCpoJC7sMI2pylRw/J39+uy5dN+ukni9HhAACQKXa7XRbLrd/PzGazbDZbFkQEAAAAXJOhScJefPFF9ezZU23btlWzZs0UGBioCxcuaOvWrTp8+LBmz57t7jiRwzlq0Pr5GRsH0sfXV3rwwSR98YWndu60qGpVq3x8jI4KAAAAAAAg98lQgrZBgwaaNWuWwsPDFR4eLrvdLpPJpEqVKikyMlKNGzd2d5zI4RhBm/NUrWrT3r02Xbhg1u7dFjVubDU6JAAAMmzkyJHy9/e/6TIxMTFZFA0AAABwTYYStJIUGhqq0NBQxcfH69KlS8qfP7/8GB6JNFyrQUuCNqcwm6XGja365BOzfvjBopo1rcqf3+ioAAC4fcHBwZKSSx3cTL58+VSnTp2sCAkAAABwynCCVpKio6MVGxsrm82mS5cu6dKlS862u+66K7OxIReJi3OMoDU4ENyWsmVtKlXKpr//Nuv77z3UogUzhgEAcp7FixcbHQIAAACQpgwlaP/44w8NHTpU+/fvT3OZI0eOZDgo5D6MoM2ZTCapceMkLVvmpUOHzKpd26QiRfgfAgAAAAAAuEuGErSjR4/WH3/8oT59+qhEiRIym83ujgu5SGKilJSUPILW19fgYHDbSpWyq1w5q44ds2j7douefJJRtAAAAAAAAO6SoQTt3r17NXbsWLVq1cqtwURGRmrHjh0ul6G9/vrrWrNmjctyxYsX17fffitJstlsioiI0KpVq3T58mXVrl1bI0aM0H333edc/siRIxo7dqwOHTqkggULqnPnzurRo4dbY0fa4uKSb00mu7y8jI0FGdOokVXHj5t17JhFf//NZGEAAAAAAADukqGhr/7+/ipQoIBbA1m4cKHCw8NT3P/LL7+od+/e2r59u/Pnk08+cbZHRkZq+fLlGjNmjFasWCGTyaSePXsqISFBknTx4kV1795dpUuX1urVq9W3b19Nnz5dq1evdmv8SNv19WdNJoODQYYEBtpVrZpNkvTttx66xRwrAAAAAAAASKcMJWhbt26tJUuW3HIm3PQ4c+aMnn/+eU2fPl1lypRxabNarTp27JiqVaumokWLOn8KFy4sSUpISNCCBQvUt29fhYaGqmLFipo6darOnDmjzZs3S5JWrlwpLy8vjRw5UmXLllW7du3UrVs3zZ07N9OxI30cI2ipP5uz1a+fJA8Pu/7+26zNm8m0AwByjp49e+q3336TJO3Zs0dXrlwxOCIAAADgmgyVOPD19dW+ffvUrFkzVatWTT4+Pi7tJpNJ48aNS9e2Dh8+rAIFCmjdunWaOXOm/v77b2fbH3/8ofj4eJUtWzbVdY8ePaorV64oJCTEeV9AQIAqV66sPXv26LHHHtPevXsVHBwsD49rDzUkJERz5szR+fPnFRgYeDsPHRkQG3ttBC1yrvz5pdq1rdq1y0MTJpjVsqXkkaFXEAAAstbOnTt1/vx5PfDAA+rSpYtWrFihoKAgo8MCAAAAJGUwQfvxxx8rf/78stls2r9/f4p2021cxx4WFqawsLBU23799VeZTCYtWrRI3377rcxms0JDQ9W/f3/lz59fUVFRkqSSJUu6rFesWDGdPn1akhQVFaXy5cunaJekf/75hwRtFnCMoPXxYQRtThccbNX+/RYdO2bSihWe6tgx0eiQAAC4pbvuuksjRoxQrVq1ZLfbFRkZqUKFCqW67O0MNAAAAADcIUMJ2i+//NLdcaTqt99+k9lsVqlSpTR79mydPHlSEydO1K+//qpFixYpNjZWkuR1w8xT3t7eio6OliTFxcWl2i5J8fHxmYrPwyNDFSLcxmIxu9xmRyaTFB+fnLD39ZXM5pTJ+9TuM6I9reVutn52if1OtKfW5ucn1a9v1Vdfeeidd7z0v/9Z5eeX3JYTzsecgmPpHhxH9+A4ug/H0jijR4/WxIkTtXv3bplMJh06dChF/9DhdgYaAAAAAO6QqQuUbTabfv31V509e1a1atVSUlKSChYs6KbQpL59+6pbt24KCAiQJJUvX15FixbV008/rYMHDzpLKyQkJLiUWYiPj5evr68kycfHxzlh2PXtkuTnyCxlgNlsUqFC+TK8vjsFBPgaHUKaEhKkpKTk3/39LfL1tbi0m0ySr2/qH5Cyqt3bO/mDsre3522tnx1iv1PtN2t78EHpt9+kU6fMWrw4n4YOdW3PzudjTsOxdA+Oo3twHN2HY5n16tat65wgtmLFioqMjKTEAQAAALKNDCdo165dqylTpujs2bMymUz66KOPNGPGDHl6emrKlClpjkq4HSaTyZmcdXCUK4iKinKWNjh79qzuvfde5zJnz55VxYoVJUklSpTQ2bNnXbbh+Lt48eIZjs1ms+vy5asZXt8dLBazAgJ8dflyrKxWm6GxpCUx0Vv//WeSZJGnZ5JiY13jtNs9FBublOb6WdEeH2+Vt7en4uMTZbPZU7SntX52iP1Otd9q3YEDLerf36Lx4+363/+uqnDhnHE+5hQcS/fgOLoHx9F9OJa3LyDA1+0jjrdu3eosdxUbG6uYmBgVLFhQnp4pv6gFAAAAskKGErQbNmzQkCFD9MQTT+ihhx7SgAEDJEnNmzfXqFGjFBkZqf79+2c6uNdee02XLl3S/PnznfcdPHhQklSuXDndc8898vf3165du5wJ2suXL+vnn39Wp06dJEnBwcFavny5rFarLJbk0Zs7duxQmTJlMl1/Nikpe3y4slpt2SaWG9nt0v9XopC3tz1FAlRSqvcZ0W6z3X582SX2O9F+s7bWre167z2rfv7ZoilTPDVq1LVyIdn5fMxpOJbuwXF0D46j+3AsjVWqVCnt3btXkyZN0sGDB2W3J7/fBQUFacCAAS6TzwIAAABZIUNDEmbPnq0OHTronXfeUfPmzZ33t23bVn369NFnn33mluBatWql7777TrNmzdKff/6pb775Rm+88YZatWqlsmXLysvLS506ddLkyZO1detWHT16VAMGDFCJEiXUrFkzSVK7du0UExOjYcOG6dixY1qzZo0WLVqkXr16uSVG3Fpc3LUatMgdLBbprbeSk7Lz53vqr7+o1wcAyBl++OEHdevWTZcvX9ZLL72kESNG6MUXX9SlS5f0/PPP68cffzQ6RAAAAOQxGRpBe+LECQ0ZMiTVturVq2vGjBmZCsrhoYce0vTp0zV79mzNnj1b+fPn1+OPP+4yOrdfv35KSkrS8OHDFRcXp+DgYM2fP99ZYiEwMFDz5s3T2LFj1aZNGxUtWlSDBw9WmzZt3BIjbi0uLvnWx+fmozmRszz0kFUNGyZp+3YPTZzordmzE269EgAABps2bZrq1Kmj+fPnO6+ukqQ+ffqoR48emjFjhhYsWGBghAAAAMhrMpSgDQwM1PHjx9WgQYMUbcePH89w6YAJEyakuK9FixZq0aJFmutYLBYNGjRIgwYNSnOZoKAgrVixIkMxIfMcI2ivm8cNuYDJJL35ZrxatPDQqlUeevHFJDVpYnRUAADc3MGDBzVlyhSX5Kwkmc1mderUKc1BCAAAAMCdkqESBy1btlR4eLg+//xzJSQkj5ozmUw6dOiQIiMj9cgjj7g1SORsjhq0jKDNfWrWtKlt20TZ7Sa9+aaX7PyLAQDZXL58+ZSUlPpEmImJic6atAAAAEBWyVCCtn///qpRo4b69++v2rVrS5I6d+6s//3vfypdurReeeUVtwaJnCsuTkpKYgRtbjZ8eLx8fOzavt2itWuNjgYAgJurVauWZs+erStXrrjcHxMTo/fee0916tQxKDIAAADkVRkqceDl5aV58+bpu+++044dOxQdHa38+fOrbt26Cg0NlcnEhEFIFh2dfGsy2eXtbWwsuDPuvtuu3r0TNG2atwYNkrZvl8wZ+uoHAIA777XXXlPbtm318MMPq0mTJipatKjOnTunr7/+WvHx8Ro3bpzRIQIAACCPyVCC1qFBgwap1qEFHC5dSr718UmuWYrcqV+/BC1d6qljx8yaN89DL7zAhGEAgOzpvvvu08qVKzVjxgx9++23io6OVoECBVSvXj316dNH5cqVMzpEAAAA5DEZStBGRETccpk+ffpkZNPIZa4laKnnlpv5+0tvvJGo/v29NWmSl9q3T1DhwkZHBQBA6sqWLatp06YZHQYAAAAg6Q4kaP39/VWsWDEStJAkXbpE/dm8omPHJC1Y4K0DB0yaPNlb48bFGx0SAAAAAABAtpehBO3Ro0dT3Hf16lXt27dPI0eO1JtvvpnpwJA7MII277BYpHfflR5+WHr/fU91756oBx6wGR0WAAAAAABAtua2qXz8/PzUqFEjvfzyy3rnnXfctVnkcI4Era+voWEgizRtKj3ySJKsVpNGjWJWOAAAAAAAgFtx+1zrJUuW1PHjx929WeRQ10ocMII2N/H0NCsuztfl58oVb505Iw0dKnl42PXFFx765huL0aECAAAAAABkaxkqcZAau92u06dPa+7cuSpVqpS7Nosc7lqJA0PDgJvFx0sREVaX+8xmk3x9pdhYmzp3Nuv9900aMcJbW7delYU8LQAAAAAAQKoylKCtWLGiTCZTqm12u50SB3C6eDH5lhG0eUv//jZ9/LFJP/9s0bJlnurUKdHokAAAkCTZbDYtW7ZMu3bt0uXLl2WzudZLN5lMWrRokUHRAQAAIC/KUIL25ZdfTjVB6+/vryZNmqh06dKZjQu5BDVo86ZChaTXXovXm2/6aPx4Lz35ZKL8/Y2OCgAAaerUqZo7d65KliypUqVKpejT2u18qQwAAICslaEEbd++fd0dB3Kp6Ghq0OZV3bsnasECL504YVZ4uJfeeCPB6JAAANDHH3+sjh076s033zQ6FAAAAEBSBhO0//zzz20tf9ddd2VkN8gFqEGbd3l5SSNGxKtbN1/NmuWlTp0Sde+9JOoBAMaKiYlR8+bNjQ4DAAAAcMpQgjYsLCzNGrSpOXLkSEZ2g1zgWoKWxFxe9OijSWrYMEnbt3to1ChvzZ8fZ3RIAIA8rnbt2vrpp59Ur149o0MBAAAAJGUwQTtt2jSNGDFCVapU0RNPPKHixYvr4sWL+vLLL7Vx40a9+OKLKlWqlLtjRQ6TkCBduZKcyKcGbd5kMkmjR8eraVOLPv3UU9u3J6phQ6vRYQEA8pg9e/Y4f2/WrJkmTJigq1evqlatWvLz80uxfHBwcFaGBwAAgDwuQwnaTz75RGFhYRo/frzL/S1btlRgYKB++OEH9enTxy0BIue6eNExytoub29DQ4GBqlSxqVu35Hq0w4Z5a+vWq/LI0CsPAAAZ07lzZ+fVX45JwObMmSNJLleF2e12mUwmt1/9lZiYqIiICK1du1bR0dGqVKmSBg4cqFq1aklKvtps7NixOnTokAoWLKjOnTurR48ezvVtNpsiIiK0atUqXb58WbVr19aIESN03333uTVOAAAAGCNDaZKdO3dq5syZqbY1btxYy5cvz1RQyB0uXXJMEJY8khJ5h6enWXFx14ZN9+8vrVlj15EjFs2f76devWySKHcAAMgaH3zwgaH7nzVrllavXq0JEybonnvu0dy5c9WzZ09t2LBBXl5e6t69ux5++GGNGjVKP/30k0aNGqWCBQuqXbt2kqTIyEgtX75c48ePV/HixTVp0iT17NlT69evl5eXl6GPDQAAAJmXoQRtoUKF9NNPP6lBgwYp2r777jsVL14804Eh53OMoKX+bN4THy9FRLiWMqhTx64tWzw1dqxZjz9uF3MHAgCySt26dZ2/79mzR5UrV1a+fPlSLHf58mVt27bN7fvfunWrWrVqpYYNG0qShg4dqlWrVumnn37SH3/8IS8vL40cOVIeHh4qW7asTp48qblz56pdu3ZKSEjQggULNGjQIIWGhkqSpk6dqkaNGmnz5s167LHH3B4vAAAAspY5Iyu1b99es2bN0uTJk/XDDz/ojz/+0N69e/X2229r4cKFeu6559wdJ3KgaxOEGRoGsomgIJuKFrUpLs6kyZMz9NIDAECmdenSRcePH0+17eeff9brr7/u9n0WLFhQX331lU6dOiWr1aoVK1bIy8tLlSpV0t69exUcHCyP6+r/hISE6MSJEzp//ryOHj2qK1euKCQkxNkeEBCgypUru9TWBQAAQM6VoRG0L730kv777z8tXLhQ8+fPl5Rcs8vX11evvvqqOnTo4NYgkTNdX+IAMJulsLAkrVjhpaVLTere3axq1WxGhwUAyAOGDBmi06dPS0rus44cOVL+/v4plvvjjz9UpEgRt+9/2LBhGjBggJo2bSqLxSKz2azp06fr3nvvVVRUlMqXL++yfLFixSRJ//zzj6KioiRJJUuWTLGM4zEBAAAgZ8tQgtZkMmno0KF66aWX9NNPPyk6OlqFChVSjRo1Uu3sIm9ylDjw9aXEAZLdc49dFSpY9csvFg0b5q21a2OpTwwAuONatGih999/3+U+x2RhDhaLRTVq1FDHjh3dvv/jx48rICBAM2fOVPHixbVq1SoNGTJEH374oeLi4lLUkfX+/9lV4+PjFRsbK0mpLhMdHZ2puDw8uKIFQM5gsZict7x2AciNMjWXur+/v/Mb/ho1aigpKcktQSF3oAYtUhMamqSTJ83audNDa9d66Mkned0AANxZYWFhCgsLkyR17txZI0eOVNmyZbNk33///bcGDRqkhQsXqk6dOpKkatWq6dixY5oxY4Z8fHyUkJDgsk58fLwkyc/PTz7/fylSQkKC83fHMr6+vsoos9mkQoVS1uEFgOwoIMDXectrF4DcKMMJ2rVr12rKlCk6d+6cTCaTVq1apRkzZsjT01NTpkxhRllcl6A1OBBkKwEB0ksv2fTuuxaNHOmtZs2SlMo8LQAA3BGLFy/O0v0dOHBAiYmJqlatmsv91atX17fffqu77rpLZ8+edWlz/F28eHHnAIizZ8/q3nvvdVmmYsWKGY7LZrPr8uWrGV4fALLS5cuxztuLF68YHA0ApE9AgK8slvSN+s9QgnbDhg0aMmSInnjiCT300EMaMGCAJKl58+YaNWqUIiMj1b9//4xsGrmIowZtJgZ3IJfq08eklSvtOnXKrGnT8um111xr0SaPuo4zJjgAQK4WFhYmUxr1dcxms/z8/HTfffepc+fOCg4OzvT+HLVjf/nlFwUFBTnv//XXX3XfffepRo0aWr58uaxWqywWiyRpx44dKlOmjAIDA5U/f375+/tr165dzgTt5cuX9fPPP6tTp06Zii0piVrwAHIGq9XuvOW1C0BulKHiLbNnz1aHDh30zjvvqHnz5s7727Ztqz59+uizzz5zW4DIuShxgLSYzVKtWskjgiIiTHr7bavCw6/9xMVRmBYAcGc8/vjjOnfunK5evaq6devqscceU0hIiBISEvTPP/+odOnS+ueff9S1a1ft2LEj0/sLCgpSnTp1NGTIEO3cuVN//PGHpk2bph07duiFF15Qu3btFBMTo2HDhunYsWNas2aNFi1apF69eklKrj3bqVMnTZ48WVu3btXRo0c1YMAAlShRQs2aNct0fAAAADBehkbQnjhxQkOGDEm1rXr16poxY0amgkLu4BhBS4kDpOaBB2y6916b/vzTrG++8VDr1tSiBQDceZcuXVLlypU1f/585buuxk58fLx69uypokWLavr06Ro6dKgiIyNVv379TO3PbDYrMjJS06ZN0+uvv67o6GiVL19eCxcuVI0aNSRJ8+bN09ixY9WmTRsVLVpUgwcPVps2bZzb6Nevn5KSkjR8+HDFxcUpODhY8+fPp6QYAABALpGhBG1gYKCOHz+uBg0apGg7fvy4AgMDMx0Ycr5rCVpG0CIlk0l66KEkffCBp377zaKTJ6267z7OFQDAnfX5559r/PjxLslZSfL29lb37t01dOhQDR8+XK1atdIrr7ziln0WKFBAI0aM0IgRI1JtDwoK0ooVK9Jc32KxaNCgQRo0aJBb4gEAAED2kqESBy1btlR4eLg+//xz56yzJpNJhw4dUmRkpB555BG3Bomc6cIFatDi5ooWtatGDask6csvPWS1GhwQACBPuHIl9Qlm/vvvP+ekXB4eHmnWqgUAAADcKUMjaPv3769ff/1V/fv3l9mcnOPt3Lmzrl69qjp16rhttAFyrsREKSaGEbS4tQYNrDp61KLz583av9+iWrXI0gIA7pwHH3xQ7777rsqVK6dKlSo57z969KimTZvmvEJs8+bNKlu2rFFhws2ioqIUHX3J6DAAZNDJkydcbgHkTAUKFFSJEiWMDiNbylCC1svLS/PmzdN3332nnTt36tKlS8qfP7/q1q2r0NBQRhvAWd5Akry9DQwE2Z6Pj9SwYZI2b/bUd99ZVLEiCVoAwJ3zxhtvqEuXLmrbtq3uueceFS5cWBcuXNBff/2l+++/X8OGDdMXX3yhpUuXavr06UaHCzeIiorSsx3bKiE+wehQAGTS22+/aXQIADLBy9tLS5esIUmbigwlaHv37q0uXbqoQYMGqdahBRwJ2oAAu8wZKqSBvKRaNZv277fp7Fmztm/3kMSoawDAnVG0aFGtXbtW69at065du3ThwgWVLVtWL730kh5//HFZLBbdf//9WrFihYKCgowOF24QHX1JCfEJiq4eLas/XwQDAGAES4xFBfYXUHT0JRK0qchQgnbPnj3q3r27u2NBLnLxYvJtwYKGhoEcwmyWwsKStHy5lw4cMOvAAavq1jU6KgBAbuXl5aX27durffv2qbaXK1cuiyNCVrD6W5VUIMnoMAAAAFLIUIK2QYMGWrVqlWrUqCFvrl9HKhwjaEnQIr3uvtuuihWT69G++aZFGzeK0dcAgDviu+++01dffaXY2FjZbDaXNpPJpHHjxhkUGQAAAPKiDCVovb29tXHjRm3evFl33323AgMDXdpNJpMWLVrklgCRM128mJygLVSIS9WRfk2aJOn4cbN+/NGkZcs81bFjotEhAQBymXnz5mny5Mny9vZW4cKFU8ydwFwKAAAAyGoZStBGRUWpZs2azr/tdtck3I1/I+9xJGgZQYvb4e8vNWhg1ddfe2j0aC89+miiChc2OioAQG6yZMkSPf744xo7dqy8vLyMDgcAAABIf4L2008/VaNGjVSwYEEtXrz4TsaEXIASB8iomjWtOn3aol9+MWvcOG9NnhxvdEgAgFzk/Pnzat++PclZAAAAZBvprvA4ePBg/fnnny73zZ49W//++6/bg0LOxwhaZJTFIo0ZkzzD8uLFnvrxRwrRAgDcp3Llyvrtt9+MDgMAAABwSnfm48ayBVarVdOnT9eZM2fcHhRyPscI2gIFKHeB21evntS+faLsdpOGDPGR1Wp0RACA3OKNN97QggULtGbNGh0/flz//PNPih8AAAAgK2WoBq0DtWaRlutH0F69amwsyJlGjIjXpk0e+ukniz780FNduzJhGAAg85555hnZbDa98cYbaU4IduTIkSyOCgAAAHlZphK0QFqur0HLQBRkRPHidg0dGq9hw3w0dqy3HnssSUWK8KUQACBzxowZY3QIAAAAgAsStLgjLlxITtAWKkRCDRnXvXuili711OHDFo0Z46Vp05gwDACQOW3atDE6BAAAAMBFpmffSevSMORt14+gBTLKw0OaODFOkrR0qZd27rQYHBEAIDdISEjQ0qVL1adPHz399NM6fvy4li1bpgMHDhgdGgAAAPKg2xpB+/LLL8vLy8vlvt69e8vT09PlPpPJpC1btmQ+OuRISUnS5cskaOEedeva1LlzghYv9tLAgd768suruuFlCACAdLtw4YK6du2q33//Xffff7+OHTumuLg4ffPNN5owYYIWLlyomjVrGh0mAAAA8pB0J2i5HAzpFR19bVR1gQIGBoJcY/jweG3c6KFff7Vo5kwvDRiQYHRIAIAc6p133tGVK1e0YcMGlSpVSlWrVpUkTZ8+XT169FB4eLjef/99g6MEAABAXpLuBO348ePvZBzIRS5dSr7Nn98uD6ocww0KFZJGj47Xiy/66t13vdS6daLuv5/6xgCA2/fVV1/pjTfe0H333Ser1eq839vbW88995yGDh1qYHQAAADIizJdgxa40cWLTBAG92vbNkmhoUmKjzdp8GAf2Tm9AAAZEB8fr4Jp1GCyWCxKTEzM2oAAAACQ55GghduRoEVmeXqaFRfn6/ITH++r0aMlb2+7vv3WQ6tXMzwbAHD7qlWrpqVLl6ba9umnnzpLHgAAAABZhQwH3M6RoC1YkAQtMiY+XoqIsKbaFhwsbd/uobfe8lbTpkkqVCiLgwMA5GivvPKKunXrptatWys0NFQmk0nr16/XjBkztH37ds2bN8/oEAEAAJDHMIIWbnfpEiNocecEB1v1wAN2/fuvWW+/7W10OACAHKZOnTp6//335evrq3nz5slut2vhwoU6d+6c5syZo5CQEKNDBAAAQB7DCFq4nesIWpOxwSDXsVik8eOtat/eQ0uWeOl//0vSgw+mPtoWAPB/7d13eJRl+vbx85mWmSSEToJIEwUMkIAQiQqCKBZQ9sXo2oJKkxWBtQEusgquiisoihELBCz8XFgXFhEXFdvakKaACIh0pSRISUjITKY87x+zGYwJENIm5fs5jhwhT5lcz81kkjnnnutGcZKSkjR//ny53W5lZWUpOjpaUVFR4S4LAAAAtRQzaFHumEGLinbhhdKgQfmSpPvvdyovL8wFAQCqJafTqdjY2FA4+9VXX+kvf/lLmKsCAABAbUNAi3JHD1pUNLvdovHjLYqNNbVjh0VPPhlVaEExyRnuEgEA1dC2bdu0ePHicJcBAACAWoYWByh3zKBFRfN4pNde8+vii039+992vfqqoZycgJo2Dd7nxoyxyklGCwAAAAAAqgFm0KLcFcygJaBFRWvTJqD27f0yTUMffGCTn1a0AAAAAACgmiGgRbk70eIgvHWgdujTxyeXy9Svv1q0cqU13OUAAAAAAACcEQJalDtaHKAyRUYGQ1pJ+uYbqw4eNMJcEQAAAAAAQMnRgxblyu+XsrKC/2aRMFSW9u0D2rLFr+3brfrgA5smTQqEuyQAQBVy++23l+i4AwcOVHAlAAAAQFHMoEW5ys6WTLOgxQEBLSqHYUhXXOGTw2HqwAGL0tOZRQsAOME0zRJ9xMbGqlu3buEuFwAAALUMM2hRrgr6z0ZHm3I4JLc7zAWh1qhTR+rd26cPP7Rr6lSL+vUzdO65vEgAAJDefPPNcJcAAAAAnBQzaFGuCgJa+s8iHDp1Cqhly4A8HkOjR7vk84W7IgAAAAAAgFMjoEW5KlggjPYGCAfDkK66yqs6dUytXWvViy86wl0SAAAAAADAKRHQolwVzKAloEW4xMQotEjY0087tGkTD3MAAAAAAKDqIrlAuSqYQUuLA4TTDTeYuuoqn7xeQ6NHO5WfH+6KAAAAAAAAikdAi3LFDFpUBYYhTZvmVv36pr7/3qrp02l1AAAAAAAAqiYCWpQrFglDVWC3W1S3rlN/+1uw1cFzzzm0apVLbrdLkjO8xQEAAAAAAPwGAS3K1eHDBLQIP49HmjHDr127fGrXzi+/39Add1j07LN+ud1GuMsDAAAAAAAIIaBFuSqYQdugAQEtqobLL/cpMtLUoUMWffmlNdzlAAAAAAAAFEJAi3JFiwNUNZGR0lVX+SRJa9ZY9dVXzKAFAAAAAABVBwEtyhUtDlAVtWkTUEKCX5Kh+++36OjRcFcEAAAAAAAQRECLckWLA1RVvXv7VL9+QPv3Gxo3zimTuygAAAAAAKgCCGhRbrxe6dixghm0YS4G+B2HQ+rXzyer1dTixXYtXGgLd0kAAAAAAAAEtCg/BbNnDcNUvXpMT0TV07SpqXvvDUiSxo936uef6UcLAAAAAADCi4AW5aYgoK1bV7Jaw1wMcBL33GOqWze/jh0zNGqUU35/uCsCAAAAAAC1WZUKaGfOnKlBgwYV2rZ582alpqaqc+fO6t27t9LT0wvtDwQCmjFjhnr27KnExEQNGTJEu3fvPqPbQPkoCGhZIAxVmc0mvfhinqKiTK1YYdOLLzrCXRIAAAAAAKjFqkxA+9prr2nGjBmFth05ckSDBw9Wq1attHDhQo0ePVrPP/+8Fi5cGDpm5syZmj9/vh5//HEtWLBAhmFo+PDhys/PL/FtoHwcPswCYageWrc29eSTbknSU0859N13VeahEAAAAAAA1DJhTyUyMjI0bNgwPf/882rdunWhff/85z/lcDg0adIktWnTRikpKbrzzjs1a9YsSVJ+fr7mzJmj0aNHq1evXmrfvr2mT5+ujIwMLV++vES3gfLDDFpUJzff7NN113nl8xm66y6XsrPDXREAAAAAAKiNwh7Q/vDDD6pbt66WLFmixMTEQvvWrFmjpKQk2WwnVltPTk7Wzp07dejQIW3ZskW5ublKTk4O7Y+JiVF8fLxWr15dottA+SmYQUtAi+rAMKRnn3WrefOAdu+26MEHnTK56wIAAAAAgEoW9oC2T58+euaZZ9S8efMi+w4cOKC4uLhC25o0aSJJ2rdvnw4cOCBJatq0aZFj9u/fX6LbQPk5ciT4mRYHqC7q1pVeeSVPVqupxYvteuste7hLAgAAAAAAtYzt9IeEj9vtlsNReAGfiIgISZLH41FeXp4kFXtMVlZWiW6jLGy28ObbVqul0OdwO3o0WEfDhifGxjAki8U45XlVZf/JjjvV+VWl9orYf6bn/n4cq+q1GUbhn93kZGniRK8mT3ZowoQIJScH1K5deF9kqGo/29UV41g+GMfyw1gCAAAAKE6VDmidTmdosa8CBaFqZGSknE6npGAv2oJ/FxzjcrlKdBulZbEYql8/qtTnl6eYGFe4S5Ak5eQEP599tkP16wdD8fx8yXWK8gxDcrkcYd0fERF8ohwRUXT25KnOrwq1V9T+spwbEWGv0tdmt0v16xd+6HvkEenrr6Xlyw3ddVekVq489f22slSVn+3qjnEsH4xj+WEsAQAAAPxWlQ5o4+LilJmZWWhbwdexsbHy+XyhbS1atCh0TPv27Ut0G6UVCJjKzj5e6vPLg9VqUUyMS9nZefL7A2GtRZIyMpySrIqIcOvIEb8kyeuNUF7eyWszTZvy8nxh3e/x+BURYZfH41UgYBbZf7Lzq0LtFbW/NOdaLEZoHE3TWmWvzeu16MiRorPnX3hBuvRSl77/3qJRo7yaNi2/mLMrR1X72a6uGMfywTiWH8byzMXEuJhxDAAAgBqvSge0SUlJmj9/vvx+v6xWqyRpxYoVat26tRo2bKg6deooOjpaK1euDAW02dnZ2rRpk1JTU0t0G2Xh81WNJ1d+f6BK1HL4cPBz3bon6jFNFQk9f6+q7A8EzGKPPdX5VaX2ithf2nN/O54VVVtZ9ttsFuXkRBTZHhkpPfusqdRUac4cuy6+2KcBA04eAleGqvKzXd0xjuWDcSw/jCUAAACA36rSAW1KSopmz56thx9+WMOGDdOGDRv0+uuva/LkyZKCvWdTU1M1bdo0NWjQQM2aNdPUqVMVFxenvn37lug2UH4OHw72/Kxfn0XCUHV5PFJamv+k+0eONDRzpkV//rNT559/XOedR4gCAAAAAAAqTpV+z1jDhg01e/Zs7dy5UwMHDlRaWprGjRungQMHho4ZM2aMbrjhBk2cOFG33HKLrFar0tPTQwuDleQ2UHamKR05EgxoGzQgoEX19eCDAV18sU+5uYYGD3aGeisDAFAWixcvVr9+/dSpUyf1799fy5YtC+3bvHmzUlNT1blzZ/Xu3Vvp6emFzg0EApoxY4Z69uypxMREDRkyRLt3767sSwAAAEAFqVIzaJ966qki2xISErRgwYKTnmO1WjV27FiNHTv2pMec7jZQdjk5ks/HDFpUfzab9Morbl1xRaS2brXqgQecevlltwwj3JUBAKqrd955RxMmTND48ePVu3dvLV26VPfff7/i4uLUqlUrDR48WFdccYUmT56sdevWafLkyapXr55SUlIkSTNnztT8+fM1ZcoUxcbGaurUqRo+fLiWLl0ampQAAACA6qtKz6BF9VHQ3sDpNBUZGeZigDKw2y2qW9epmTMDstlM/fvfdr30UqTcbpfcbpckZ7hLBABUI6Zp6vnnn9cdd9yhO+64Qy1bttQ999yjiy++WKtWrdI///lPORwOTZo0SW3atFFKSoruvPNOzZo1S5KUn5+vOXPmaPTo0erVq5fat2+v6dOnKyMjQ8uXLw/z1QEAAKA8ENCiXBS0N2D2LKo7j0eaMcOvFSv86tkz2Kv2sccsGj8+oBkz/HK7mUoLACi5HTt2aO/evbruuusKbU9PT9eIESO0Zs0aJSUlyWY78ca25ORk7dy5U4cOHdKWLVuUm5ur5OTk0P6YmBjFx8dr9erVlXYdAAAAqDhVqsUBqq+CgLZePQJa1BwXXODXvn2GfvzRqnfftWvQoPxwlwQAqGZ27dolSTp+/LiGDh2qTZs26eyzz9bdd9+tPn366MCBA2rbtm2hc5o0aSJJ2rdvnw4cOCBJatq0aZFj9u/fX6babLbaMVfDauXFVQAAqgqr1ag1f4OcCQJalAsWCENNZBjSVVf5dPCgocOHLXr3XbsefDAgJ10OAAAllPO/1SbHjx+vUaNG6cEHH9QHH3ygkSNHau7cuXK73UX6yEZEREiSPB6P8vLyJKnYY7Kyskpdl8ViqH79qFKfX53ExLjCXQIAAPifmBhXrfkb5EwQ0KJc0OIANZXDIf3hDz7Nm2fXL79Y9Ne/StOni0XDAAAlYrfbJUlDhw7VwIEDJUnnn3++Nm3apLlz58rpdCo/v/A7NDwejyQpMjJSzv+9Kpifnx/6d8ExLlfpg8dAwFR29vFSn1+dZGfnhbsEAADwP9nZeTpyJDfcZVSKmBiXrNaSzRYmoEW5KFgkjIAWNVHDhqauvdanf//bprfesig+3q677vKGuywAQDUQFxcnSUXaGJx77rn67LPP1KxZM2VmZhbaV/B1bGysfD5faFuLFi0KHdO+ffsy1ebzBcp0fnXh9/P3KQAAVYXfb9aav0HOBE0fUC5ocYCark2bgHr1Ci4a9sgjEfr4Y2uYKwIAVAfx8fGKiorS+vXrC23funWrWrRooaSkJK1du1Z+vz+0b8WKFWrdurUaNmyo9u3bKzo6WitXrgztz87O1qZNm9StW7dKuw4AAABUHAJalAtm0KI26NbNr5tvDigQMDR8uEubN/MQCgA4NafTqWHDhunFF1/U0qVLtWfPHr300kv66quvNHjwYKWkpCgnJ0cPP/ywtm3bpkWLFun111/XiBEjJAV7z6ampmratGn6+OOPtWXLFt13332Ki4tT3759w3x1AAAAKA+0OEC5YAYtagPDkB5/PKA9ewL6+mubBg1yadmy42rcmPs9AODkRo4cKZfLpenTpysjI0Nt2rTRCy+8oO7du0uSZs+erSeeeEIDBw5U48aNNW7cuFC/WkkaM2aMfD6fJk6cKLfbraSkJKWnpxdZOAwAAADVEwEtygWLhKG2cDikOXPydPXVUdq1y6LBg51auDBP/1twGwCAYg0ePFiDBw8udl9CQoIWLFhw0nOtVqvGjh2rsWPHVlR5AAAACCPen4tyQYsD1CYNGkj/9395iokxtWqVTaNHO/Wb1oEAAAAAAAAlRkCLckGLA9Q2550XUHp6nux2U4sX2/XQQxEyufsDAAAAAIAzRECLMvN6pWPHCmbQhrkYoILZ7Ra53S653S517+7Q9OkBGYap11936IknoiQ5w10iAAAAAACoRuhBizIrmD1rGKbq1WMKIWo2j0dKSyvcz+Dyyy366CO7ZsywqF49U6NGhak4AAAAAABQ7TCDFmVWENDWrStZrWEuBgiDzp0D6tHDJ0l67DGrFizgtS8AAAAAAFAyBLQos4KAlgXCUJt17+5X167BkPbee5364ANerQAAAAAAAKdHQIsyO3yYBcIAw5B69/brhhsC8vsNDRvm0kcfEdICAAAAAIBTI6BFmR06FAxoGzYkoEXtZhjS008H1K+fVx6PoTvvdOn99wlpAQAAAADAyRHQoswIaIETXC6LXnjBUP/+AeXnGxoyxKVFiyLldrvkdrskOcNdIgAAAAAAqEJYyQZlVhDQ0uIAkDwe6aWX/GrXzq8dO2zavNmqu++2qH9/n9q3D2jMGKucZLQAAFQ6aw7vagEAIFz4PXxqBLQosxMzaANhrgSoOiwW6ZprfDIMadMmq957z6ZAwBfusgAAqLXqrq8b7hIAAACKRUCLMisIaBs1YgYt8FsFIa3VKn3/vVX/+Y9N//hHQIMHh7syAABqn6zELPmj/eEuAwCAWsmaY+XF0lMgoEWZ0YMWODnDkK680ieLRVq/3qrx4606csSh++7Ll2GEuzoAAGoPf7Rfvrq8mwUAAFQ9LBKGMiOgBU7NMKQrrvCpe/fgk8KnnorQQw9FyM8kHgAAAAAAaj0CWpSJaRLQAiVhGFLPnn5NnuyXYZiaO9eh4cOdcrvDXRkAAAAAAAgnAlqUSW6u5HYT0AIlNXiwqVdfdcvhMLV0qV033+xSVla4qwIAAAAAAOFCQIsyKZg9GxFhKioqzMUA1YDdbtFVV9n1xhsBRUeb+vprm667Llo7drjkdrskOcNdIgAAAAAAqEQEtCiTw4dPzJ5lwSPg9DweacYMv9as8en6672KijK1ZYuhyy+3asKEQGhGOgAAAAAAqB0IaFEm9J8FSq9JE1O33pqvRo0Cys01NH++XR98QEALAAAAAEBtQkCLMvn1VwJaoCzq1pVuucWrVq0C8vkM3XWXRWlpNpn8SAEAAAAAUCsQ0KJMmEELlF1EhHT99V4lJvplmoYeeSRCd98teb3hrgwAAAAAAFQ0AlqUSUFA26gRAS1QFhaLdMUVPj3yiF+GYeqVV6SbbnIqOzvclQEAAAAAgIpEQIsyOXQoeBdiBi1QdoYhDRtmat48jyIjpc8+s6p//0jt2UNfWgAAAAAAaioCWpTJ4cPB4KhBAwJaoLxcc41fX3whNW0a0I8/WnX11ZFavZqHawAAAAAAaiKe8aNMWCQMqBgXXCB9+KFbHTr49euvFg0cGKkFC2zhLgsAAAAAAJQzAlqUCYuEARWnWTNT7757XNdc41V+vqHRo12aPDlCfn+4KwMAAAAAAOWFgBZlcmKRsECYKwFqBrvdotzcCGVkSLm5EbLZXHrpJUOjRwd/xl580aHbb3fp2LEwFwoAAAAAAMoF75dFqXk80rFjzKAFypPHI82cGZDLJeXlBRQIBH+2IiL86t/foo8/tmn5cpuuvjpac+b41bLliXOdTlOSOzyFAwAAAACAUiGgRakVLBBmtZqqWzfMxQC1wPnnB3TXXaZuvVX66SdDfftaNWCAVy1aBEPcMWOscjrDXCQAAAAAADgjtDhAqRW0N2jQwJSFexJQKRITpUGD8hUXF5Dbbehf/7Jr/Xp+AAEAAAAAqK54Vo9SY4EwIDyio6WbbvKqfXu/AgFDy5fbtXy5Tfn54a4MAAAAAACcKQJalBoBLRA+drvUv79PPXv6JJlav96qm2+2KiPDCHdpAAAAAADgDBDQotQIaIHwMgype3e/Bg70KSLC1Jo1hq64IlKrVvHQDgAAAABAdcGzeJQaAS1QNbRpE1Bqqldt25rKyLBo4MBIzZljl8mPJgAAAAAAVR4BLUrt118JaIGqon59U//5j6n+/QPyeg099JBTo0dH6ehRl9zu4IfkDHeZAAAAAADgd2zhLgDVFzNogarFZpPat/fq2DGrvvjCqn/+06JPPpGuu86nhg1NjRljlZOMFgAAAACAKoUZtCi1w4eDAW2jRgS0QFVhGNKFF/p1ww1eRUaa+vVXi958066NG3m4BwAAAACgKuIZO0qNGbRA1dWypak77shXixYB+XyG3n/frvvvtyg3N9yVAQAAAACA3yKgRakVBLQNGhDQAlVRVJR0ww1eXXKJT4Zh6l//sujKKyP1ww889AMAAAAAUFXwLB2l4vefaHHADFqg6rJYpIsu8uuPf/QqNtbUTz9ZdeWVkXr+eYd8vnBXBwAAAAAACGhRKkeOGDJNZtAC1UXz5qbef9+vq6/2yus19MQTEerfP1Jbt/JrAAAAAACAcOKZOUolM7Ng9mxAdnuYiwFQIg0bSq+/7lZaWp5iYkx9951Vl18eqbQ0u/z+cFcHAAAAAEDtRECLUikIaJs0YfYsUJ0YhvTHP/r0xRe5uvxynzweQ4895tR119GbFgAAAACAcODZOEqlIKBt3JiAFqgu7HaL3G6X3G6X6td3as4caepUv6KjTa1ZE5xNO2FChLKywl0pAAAAAAC1hy3cBaB6YgYtUP14PFJaWtFeBrfeKn32mU1bt1o1e7ZDixfbNHGiRzff7JOFl/EAAAAAAKhQPPVGqWRmBu86sbEEtEB1FxMjDRjg01tv+dW2rV+//mrRvfe61K9fpNau5dcEAAAAAAAViWfeKJUTM2gDYa4EQHnp0cPUp58e1+TJbkVHm/r2W6uuuSZKQ4c6tWOHEe7yAAAAAACokQhoUSoHD9LiAKiJ7Hbp7ru9WrEiVzff7JVhmHr3Xbt69IjS+PERoRdnAAAAAABA+SCgRanQgxao2WJjTc2Y4dannx7XFVf45PMZmjvXoe7dozR1qkM5OeGuEAAAAACAmoGAFqWSkRG86xDQAjVbfHxAb72Vp3//+7i6dPErN9fQ1KkRuvDCKM2ZY5fXG+4KAQAAAACo3ghoccY8HunoUXrQArXJJZf49f77Ac2c6VerVqZ+/dWihx5yqkePaC1cGKm8PJckZ7jLBAAAAACg2iGgxRkr6D9rt5uqVy+8tQCoPB6PoR07fBo4MF+XX+6Vy2Vq505Dd99tVffuFn3xhVVut+ukHwS4AAAAAAAUZQt3Aah+ftt/1mC9IKDGsNst/wtST8YiyS+rVerSJaAOHfK1erVVa9ZYdeCARSkp0jnnmOrZ06/GjYu2PxkzxionGS0AAAAAAIUQ0OKMsUAYUDN5PFJamv+k+0eNKvymC4cj2Pqgc2e/vv7apo0bLdqxw6qdOy1KSAioZ08fgSwAAAAAAKdBiwOcscxMFggDcEJUlNS3r0/Ll5tq29Yv0zS0fr1Vc+Y4tHmzRSYPFQAAAAAAnBQBLc7YiRm0LBAG4IRzzpEGDPDpppvy1aBBQMePG3rvPbsWLbIpJyfc1QFA+O3cuVNdunTRokWLQts2b96s1NRUde7cWb1791Z6enqhcwKBgGbMmKGePXsqMTFRQ4YM0e7duyu7dAAAAFQgAlqcsYKAtrgekwDQvLmpO+7wqkcPn6xWUzt3WjV3rkMLFxrMpgVQa3m9Xj344IM6fvx4aNuRI0c0ePBgtWrVSgsXLtTo0aP1/PPPa+HChaFjZs6cqfnz5+vxxx/XggULZBiGhg8frvz8/HBcBgAAACoAAS3OGD1oAZyO1SolJ/s1aJBXsbEBeTyG7rvPqpEjncymBVArvfDCC4qKiiq07Z///KccDocmTZqkNm3aKCUlRXfeeadmzZolScrPz9ecOXM0evRo9erVS+3bt9f06dOVkZGh5cuXh+MyAAAAUAFYJAxnrKAHbWwsAS2AU2vUyNRtt3m1apVVK1ZYtXChXevWWTVrVp46dqRNCoDaYfXq1VqwYIEWL16s3r17h7avWbNGSUlJstlO/EmenJysV155RYcOHdLevXuVm5ur5OTk0P6YmBjFx8dr9erV6t+/f2VeRrVnzbGGuwQAAGotfg+fGgEtzhg9aAGcCYslOJv2vvuk0aMt2r7domuuidTjj3t0++1eGUa4KwSAipOdna1x48Zp4sSJatq0aaF9Bw4cUNu2bQtta9KkiSRp3759OnDggCQVOa9Jkybav39/BVZds9StW0+OCIfqrq8b7lIAAKjVHBEO1a1bL9xlVEkEtDgjpkmLAwClk5QkffJJrsaMcenDD20aO9apL7+06tln3apTJ9zVAUDFmDRpkjp37qzrrruuyD632y2Hw1FoW0REhCTJ4/EoLy9Pkoo9Jisrq8y12Wy1o9vZ2WefpX8u+LeOHj0a7lIAlNKuXTs1adJETZr0uFq1ah3ucgCUUr169RQX1/T0B9ZCBLQ4I8eOSW43i4QBOHN2u0WRkS7NmiXNnu3XlCkWvfOOXRs32pSe7ld8vCG3++SPK06nKcldeQUDQBktXrxYa9as0bvvvlvsfqfTWWSxL4/HI0mKjIyU0+mUFOxFW/DvgmNcLleZarNYDNWvH3X6A2uI+vXPDXcJAMogJib4mJeQEK8OHTqEuRoAKH8EtDgjBbNn69QxFRkZ5mIAVCsej5SW5g99fdNNhpYssWv7dkNXXWXVK6+Y2rjRd9Lzx4yx6jf5BABUeQsXLtShQ4cK9Z2VpEcffVTp6ek666yzlJmZWWhfwdexsbHy+XyhbS1atCh0TPv27ctUWyBgKjv7eJluAwAqS3Z2XujzkSO5Ya4GAEomJsYlq7Vk71gioMUZKVggjPYGAMqqaVNTqan5WrLErr17LRoyROrZ06pu3fz0pQVQI0ybNk1ud+GZ/1deeaXGjBmjfv366b333tP8+fPl9/tltQYXzlixYoVat26thg0bqk6dOoqOjtbKlStDAW12drY2bdqk1NTUMtfn87GeAIDqwe83Q5957AJQE1WLxlN79+5Vu3btiny8/fbbkqTNmzcrNTVVnTt3Vu/evZWenl7o/EAgoBkzZqhnz55KTEzUkCFDtHv37nBcSrXHAmEAylNUlHTjjV516uRXIGDov/+1adkym7zecFcGAGUXGxurli1bFvqQpIYNG6pZs2ZKSUlRTk6OHn74YW3btk2LFi3S66+/rhEjRkgK9p5NTU3VtGnT9PHHH2vLli267777FBcXp759+4bz0gAAAFCOqsUM2h9//FERERH66KOPZPxmWlWdOnV05MgRDR48WFdccYUmT56sdevWafLkyapXr55SUlIkSTNnztT8+fM1ZcoUxcbGaurUqRo+fLiWLl1aZNEFnBoLhAEobzabdOWVPt14o6FHHzW0aZNVhw8b+sMfvCweBqBGa9iwoWbPnq0nnnhCAwcOVOPGjTVu3DgNHDgwdMyYMWPk8/k0ceJEud1uJSUlKT09nb9hAQAAapBqEdBu3bpVrVu3VpMmTYrse/311+VwODRp0iTZbDa1adNGu3fv1qxZs5SSkqL8/HzNmTNHY8eOVa9evSRJ06dPV8+ePbV8+XL179+/si+nWiOgBVARDEO6/XZp40avliyx68ABi+bNc+j//T+vmjbl8QZAzfHjjz8W+johIUELFiw46fFWq1Vjx47V2LFjK7o0AAAAhEm1aHHw448/6txzi195dc2aNUpKSpLNdiJrTk5O1s6dO3Xo0CFt2bJFubm5Sk5ODu2PiYlRfHy8Vq9eXeG11zT0oAVQkVq0CPalbdgwoNxcQ/Pn27V5c7X4VQUAAAAAQKlUi2e9W7du1aFDh3Trrbfq4osv1i233KIvvvhCknTgwAHFxcUVOr5gpu2+fft04MABSVLTpk2LHLN///5KqL5moQctgIpWr550661etWnjl99v6L337Pr8c6sCPOwAAAAAAGqgKt/iID8/X7t27ZLL5dK4ceMUGRmpJUuWaPjw4Zo7d67cbneRHlwRERGSJI/Ho7y8PEkq9pisrKwy1WazhTfftlothT5XhoKANi7OKNH1G4ZksZx6Ofaqsv9kx53q/KpSe0XsP9Nzfz+ONenawrW/Nt8nXS7p+uv9+uIL6ZtvrFq1yqZhwwJKT7eUuC9tOB4jayLGsfwwlgAAAACKU+UDWofDodWrV8tms4VC1o4dO2r79u1KT0+X0+lUfn5+oXM8Ho8kKTIyUk6nU1Iw6C34d8ExLper1HVZLIbq148q9fnlKSam9NdxpgomHbdr51T9+qc/Pj8/GLScjGFILtfJF7mojP0REcEnyhER9jM6vyrUXlH7y3JuRIS9xl5bZe3nPnnCVVdJTZtKS5ZIH31kUb9+UVqyRDrnnJPeTBGV+RhZkzGO5YexBAAAAPBbVT6glYJB6++1bdtWX375peLi4pSZmVloX8HXsbGx8vl8oW0tWrQodEz79u1LXVMgYCo7+3ipzy8PVqtFMTEuZWfnye+v+Pf+Hj8uHToUDKVjYnJ15Mjpz/F6I5SXd/LaTNOmvDxfWPd7PH5FRNjl8XgVCJhF9p/s/KpQe0XtL825FosRGkfTtNaoa6vs/dwnCzvvPOnWWw198IFNP/xgKCnJ1GuvudWjx6kf9yr7MbKmYhzLD2N55mJiXMw4BgAAQI1X5QPaLVu26JZbbtGsWbPUrVu30PaNGzfq3HPP1fnnn6/58+fL7/fLarVKklasWKHWrVurYcOGqlOnjqKjo7Vy5cpQQJudna1NmzYpNTW1TLX5fFXjyZXfH6iUWn7+OfjW48hIU1FRAflOnrOEmKaKBEy/V1X2BwJmscee6vyqUntF7C/tub8dz4qqraz7q3Jtv93PffKE2FhTS5f6ddddhtats+r6652aNMmj4cO9Mk7dNaHSHiNrOsax/DCWAAAAAH6ryk9JaNu2rc477zxNnjxZa9as0fbt2zVlyhStW7dOf/rTn5SSkqKcnBw9/PDD2rZtmxYtWqTXX39dI0aMkBRskZCamqpp06bp448/1pYtW3TfffcpLi5Offv2DfPVVS979wbvLs2aBU4biABAeYuLk95557iuv94rn8/QxIlO3XmnU0ePhrsyAAAAAABKr8rPoLVYLHr55Zc1bdo03XvvvcrOzlZ8fLzmzp2rdu3aSZJmz56tJ554QgMHDlTjxo01btw4DRw4MHQbY8aMkc/n08SJE+V2u5WUlKT09PQiC4fh1PbtC6ayZ5116hlwAFBRXC7ppZfcSkry69FHI7RsmV0bN1r16qt56tqVGYkAAAAAgOqnyge0ktSgQQM9+eSTJ92fkJCgBQsWnHS/1WrV2LFjNXbs2Ioor9b47QxaAAgXw5CGDvUqKcmvYcNc2rXLouuui9TEiR7dfffpWx4AAAAAAFCVVPkWB6g69u4Nph7NmjGDFkDls9stcrtdoY+2bSP03nsBXXttQD6foUmTnEpNdSkjg4QWAAAAAFB9VIsZtKgamEELIJw8HiktzV9ke7t2fl10kU2PPWbR8uU29ewZpSefdOumm3isAgAAAABUfcygRYnRgxZAVWQY0qBBpj788LgSE/06etTQyJEu3XJLhHbsCHd1AAAAAACcGgEtSuzEDFoCWgBVz/nnB/Sf/xzXX/7ikd1u6sMPberQQXr6abvc7nBXBwAAAABA8QhoUSLZ2VJOTsEMWt42DKBqstul++7L12efHdell/rldktPPeXQxRdH6Z//tCnAwxcAAAAAoIohoEWJFMyerV/fVFRUmIsBgNM477yA/v1vt/7xj+CLSr/8YtGoUS5dfnmk3nuPoBYAAAAAUHUQ0KJE9u5l9iyAqstut8jtdhX6OH48QpddJn32WUATJ/oVE2Pqhx+sGjzYpd69I/X22zZ5POGuHAAAAABQ29nCXQCqB/rPAqjKPB4pLc1faJvFYsjlkvLyAho1yqLU1By9+qpDs2Y5tGWLVffc49KjjwZ0661e3X67Vy1a8PgGAAAAAKh8zKBFiezbxwxaANVbgwbSQw/l69tvc/SXv3gUFxfQr79aNGNGhJKSonTrrS59+KFVfv/pbwsAAAAAgPJCQIsSYQYtgJqibt3gQmJr1+Zqzpw8XXqpT6Zp6KOPbEpNjVRCQrTGjYvSl1+6dPx4sF2C5Ax32QAAAACAGoqAFiXCDFoA1VlxPWr9fpeuuMKuefOk//43oK5dfXI6TR08aOi11yy6/nqbOnWyKiVFWr3akMnrUwAAAACACkAPWpRIwQzas88moQBQ/RTXo/a3Ro2y6LLL/Lr0Ur9277ZoyxaLfvrJomPHDK1ebVP//lLLllG67jqvrrvOp86dAzKMSrwAAAAAAECNRUCL0zJNZtACqB2sVumccwI655yAvF5p506LNm+2aM8ei3bvtigtLUJpaRE6++yArr3Wp+uu86pr14AsvB8FAAAAAFBKPKXEaf36qyGPx5BhmGralBm0AGoHu11q2zagP/zBp3Xr/Jo9O09/+INXkZGmfvnFopdfdqh//yh16RKlhx+O0IoVLDAGAAAAADhzzKDFaRXMnm3c2JTDEeZiACAMoqKkAQN8GjDAp7w86dNPbXr3XZs++MCm/fstmjXLoVmzHGrcODizNiXFq6Qk2iAAAAAAAE6PgBanVdB/tlkzZs8CqJ0KFhmTJMOQ+vQJfng8fn3xhaEPPjD0/vuGDh60aO5ch+bOdahVq4BuuMGrG27w6pxzePwEAAAAABSPgBanVTCDtlkz+s8CqJ1Ot8jYc8/ZlZvr19dfG3rnHUPLlhnatcuiadMiNG1ahLp1C+jmm/N1/fVeRUdXYuEAAAAAgCqPHrQ4LWbQAsCpeTzSyy/7tWGDT61bezVsWL769fOqVauADMPUmjUWPfigUx07RuuBByK0bp1FJg+pAAAAAAAxgxYlsGcPM2gB4Ew4HFJ8fEDx8QHl5kpNmtg1b56h7dsNvfmmQ2++6VDHjqZuuSWggQNNNWpkyO0uPrF1Ok1J7sq9AAAAAABApSGgxWnt2BGcQXvOOQS0AHCmoqKkwYOlnJx8/fKLoQ0brNq61aKNGw09/LBVkyebuvlmyWLxqlGjoiHtmDFWOZ1hKBwAAAAAUCkIaHFKpint3ElACwBlZRhS8+ammjf3qU8fadMmq9avt+jwYYveeEOSHGrePKAuXfw699yALDQhAgAAAIBagYAWp5SRYej4cUMWi6kWLWiYCADlweWSunb164IL/Nqzx1BWll3Ll0s//2zRzz9bFB1tKiHBr4SEky9MBgAAAACoGZifg1MqaG/QvLkphyPMxQBADWMYUsuWpl591dTw4flKTvYpMtJUTo6hr7+26dVXHbrnHou++cbKomIAAAAAUEMR0OKU6D8LAJUjJkbq0cOvu+7KV//+Xp11VkCBgKF337VowIBI9e4dqddesysnJ9yVAgAAAADKEwEtTmnHDkMSAS0AVBabTTr//IBuvdWr22/P1803B+Rymdq82apx45xKTIzWhAkR+uknfoUDAAAAQE3AszucUsEM2jZtCGgBoLI1aWLq6acD2rAhR3/7m1vnnBPQsWOGZs926JJLopSS4tLSpTb5fOGuFAAAAABQWgS0OKWdO2lxAADhVreuNGKEV19/nasFC47r6qu9slhMffGFTUOGuNS1a7SefjpSu3a55HYX/pCc4S4fAAAAAHAKtnAXgKorEDgR0LZuTUALAOFmsUiXXebXZZf59fPPhl5/3a558xzav9/QtGlWTZtmqkULU+ef71fbtgFFREhjxljlJKMFAAAAgCqLGbQ4qf37Dbndhmw2U82bs3w4AFQlzZubmjgxX99841e/fl41axaQZGjPHos++MCul15y6N13bfrwQ0Nud7irBQAAAACcDDNocVIF/WdbtjRl454CAFWS0ynFxwcUHx/Q0aPSli1Wbdpk0eHDFv34o1XDhklRUdHq08fUNdeYuuwyU1FRvz3flESCCwAAAADhQuyGkyoIaOk/CwDhY7db/tdL9mQskvySpHr1pORkv7p39ysz09CmTRbt22fV/v2G3n3X0LvvSjabqVatAmrTJqDWrQOaMIEWCAAAAAAQTgS0OCkCWgAIP49HSkvzn3T/qFFFuxUZhhQbayo21q+RIy3661+92rrVop9+suroUUPbtlm1bZtVkvTll6b69nWoTx+/unb1844JAAAAAKhkPA3DSe3caUhigTAAqM4sFqlpU1NNm/p16aV+HTxo6KefLNq506IDByzauNHQxo0Rmj5diokxlZzsV3KyTxdf7FdCQoDAFgAAAAAqGE+7cFLMoAWAmsUwpCZNTDVp4tcll/iVmyu1bWvT558H9OmnNh09aujDD2368MPgnweRkaa6d/fr0kuldu2s6tTJVGwsi0YCAAAAQHkioEWx/H5p1y4CWgCoyaKipJQUU7fd5pbPJ23caNGKFVatWGHVN98EA9tPP7Xp008lKdiotkkTUwkJpjp1MpWQIHXrFlBsLIuMAQAAAEBpEdCiWHv3GsrPN+RwmGrWjNlSAFDT2WxS584Bde4c0N13exUISJs3W/Tll079619W7d0b0KFDhjIzDX30kaGPPio406q4OKsSEgLq2DHYFqFTJ7/OPtuUYYTzigAAAACgeiCgRbEK2hu0ahWQ1RrmYgAAlc5ikTp0COjcc035fFJenk9ut6mDBw1lZFh04IChjAxDhw8bOnAg2M+2oDWCJNWrZ6pjR1OJiaYSEvLVqZNf55xjylJ0TTMAAAAAqNUIaFGsrVtpbwAAKMzhkJo1M9WsmT+0bfBgux5/3KuMDEOZmRZlZhr69VdDR48a+vJLQ19+KUkuSVJUlKkOHU7Msk1ICKhdOxYiAwAAAFC78ZQIxfr+++C02U6dCGgBACcXFVUQ2pqSgr8zfD7p11+D7RCaNrXp+++lTZuk3FxDq1bZtGrVifNdLlMdOwbUpYtfiYl+denCTFsAAAAAtQsBLYq1YUPwmXGnTv7THAkAqM7sdovcbtcpjjjzpNRmk+LiTMXFmRo1ylRamle9e0uHDwdD24yMYJuEo0cN5eQYWr3aqtWrT/TTqVPHVGKiX4mJJ4LbFi2K62nrlNt98ka3TqcpiQXMAAAAAFRtBLQowu0+0eKAGbQAULN5PFJa2slfjBs1qnymslosUqNGpho1MhUfL0l+jRpl1b59bn33nVXr11v13XdWbdxo0bFjhr780va/9ghBDRoElJgYUOfO/v8tZuZX/fqGZsw4ee1jxljldJZL+QAAAABQYQhoUcSWLRb5/YYaNgzorLPMcJcDAKihIiIsOvtsp84+W7ruOkky5fP59dNP0oYNhjZulNavl374waLDhy369FOLPv30xJ8uTZqYqlPH+N9s3YCaNTPlcITtcgAAAACgVAhoUcSGDcG3mXbsGCjm7aQAAJSP083efeopu7zegDwev7ZsCYa2GzYYWr/e0NatUmamocxMq7ZvDx5vGMG2Cs2bB3T22aZycsQMWgAAAABVHgEtivj+e/rPAgDCr7gAt3nz4IfXK116qV1paQEdOGBo3z6LsrIM7d9vaP9+i1atkt55x1SXLpHq3dun3r19uuCCgGz85QMAAACgiuFpCorYuDE4gzYhgf6zAICqyW6XunaVunY9EeBmZUm//GLRzz8HP7KyDK1ZY9WaNVZNmxahOnVM9ejhU+/efvXu7VPr1rTxAQAAABB+BLQoxOcL9vqTmEELAKhe6taV6tYNqEOH4AuM119v1Tff+PTZZ1Z98YVNR44YWrbMrmXL7JKkli0D6tUrGNj27OlT3brhrB4AAABAbUVAi0K2bbPI7TYUFWUyswgAUK21bm3R2WfbdMMNkt/v18aN0uefG/r8c4vWrpV277bojTcceuMNyWIxdcEFAfXu7VOvXn517eqnHQIAAACASsFTDxRS0H+2Qwe/LJYwFwMAQBmcbBGynj2l7t2lbt3s+uQT6YsvDG3f/tt2CPpfOwRTvXvn0w4BZXb06FE9++yz+uyzz5STk6N27drpgQceULdu3SRJmzdv1hNPPKGNGzeqXr16GjRokIYOHRo6PxAIKC0tTW+//bays7PVtWtXPfroo2rZsmW4LgkAAADliIAWhWzYQP9ZAEDN53BIl14qbdjg1cCBUnZ2cEbtrl0W7d5t0bFjhpYtM7RsmVOS1KJFQJde6lNSkl9duwZ07rkBXshEid1///06dOiQnn32WTVo0EBvvfWWhg4dqkWLFqlBgwYaPHiwrrjiCk2ePFnr1q3T5MmTVa9ePaWkpEiSZs6cqfnz52vKlCmKjY3V1KlTNXz4cC1dulQOhyPMVwcAAICyIqBFIRs30n8WAFD7xMRInToF1KlTQIGAlJlp6KyzrPryS1OrV1u1Z49F8+Y5NG9e8Pi6dU117WoqMdFU165S586mYmJO3J7TaUpyh+VaULXs3r1bX331lf7xj3/oggsukCQ9/PDD+vzzz7V06VI5nU45HA5NmjRJNptNbdq00e7duzVr1iylpKQoPz9fc+bM0dixY9WrVy9J0vTp09WzZ08tX75c/fv3D+flAQAAoBwQ0CLENKWNG4MzaDt2ZAYtAKB2slikuDhTo0aZevDBPOXkSF9/bdU33wRbIKxfb1VWlqFPPjH0yScFZ5lq2NBUbKypJk1MjRxp6IILVCi0Re1Uv359vfrqq+rYsWNom2EYMk1TWVlZ2rhxo5KSkmT7TdPj5ORkvfLKKzp06JD27t2r3NxcJScnh/bHxMQoPj5eq1evJqAFAACoAQhoEbJzp6GsLEMOh6l27QhoAQC1m91ukdvtks0WbIdw6aXB7V6vX5s3S99+a9E//mFq3z6LsrIMHTpk6NAhadMm6bPPJKmOWrUKKCHBr06dAurc2VSPHlJERBgvCpUuJiYmNPO1wLJly7Rnzx716NFD06dPV9u2bQvtb9KkiSRp3759OnDggCSpadOmRY7Zv39/mWqz2ejTAaB6sFqN0GceuwDURAS0CPn88+DdoWtXv2hnBgCo7U62yFiBUaMsys72SZJyc6UDByzKyDCUmWkoL8+ivXsN7doV7Gu7ZMmJ8xo3jtT55/vVoUNA8fF+xccH1LZtgOC2lli7dq0mTJigyy+/XH369NGUKVOK9JGN+N+dwePxKC8vT5KKPSYrK6vUdVgshurXjyr1+QBQmWJiXKHPPHYBqIkIaBHy3/8G2xv06kX/WQAAzkRUlNSmTUBt2gS/HjPGquPH8/T991Z9/71F339v1caNVm3bZtHBg4YOHrTp889PnG+zmTrvvIDi44MfHTpY1aaN1KSJZBhFvx89bqunjz76SA8++KASExP17LPPSpKcTqfy8/MLHefxeCRJkZGRcjqDC9Xl5+eH/l1wjMvlKnUtgYCp7OzjpT4fACpTdnZe6PORI7lhrgYASiYmxiWrtWSz/gloIUny+6UvvwzeHXr18oW5GgAAqje73aLISJe6d5e6dw9uM4yAvF6LfvjBp23bpB9+CGjTJot++CHY03bzZqs2b7Zq4cITt+NymWrc2FTjxoH/fQ72ur3/fqt+k9WhGpg3b56eeOIJ9e3bV9OmTQvNiI2Li1NmZmahYwu+jo2Nlc/nC21r0aJFoWPat29fppp8PlpaAage/H4z9JnHLgA1EQEtJEnr1wf758XEmEpM5BceAABlUVx7BIvFkMsl5eUFNGqURbfdFpwlaZrSvn2GNm2yaNMmq374waKNG23avl3KyzO0Z4+hPXtOvPJuGKbee0/q3Nmpiy/266KLfGrd2ix2pi2qhrfeekt/+9vfNGjQIE2YMEEWy4n/z6SkJM2fP19+v19Wa/DdTCtWrFDr1q3VsGFD1alTR9HR0Vq5cmUooM3OztamTZuUmpoalusBAABA+SKghSTpv/8N3hV69PDJxr0CAIAKVbAAWYGGDaWePYMfQaaeecarQ4cMHTxo6NdfDWVmBtsjuN2GfvpJ+uknu95+2y5JiosL6OKL/br4Yr8uv9ynZs3Myr8oFGvnzp168skn1bdvX40YMUKHDh0K7XM6nUpJSdHs2bP18MMPa9iwYdqwYYNef/11TZ48WVKw92xqaqqmTZumBg0aqFmzZpo6dari4uLUt2/fcF0WAAAAyhFRHCTRfxYAgMpUkgXI7HYpLs5UXFxB2OqXaQYXJOvRw65Vq6RvvjG0bl1wgbJFiyxatCgY2CYkmLr66nxdc41P8fGBUsyudcrtLv4k+t+emQ8++EBer1fLly/X8uXLC+0bOHCgnnrqKc2ePVtPPPGEBg4cqMaNG2vcuHEaOHBg6LgxY8bI5/Np4sSJcrvdSkpKUnp6epGFw4DabO/eX5STkxPuMlBBdu/eWegzaqbo6Gg1a3Z2uMsAwoKAFsrNlVavLgho6T8LAEBVZRhSdLTUo4e0bp1Xl14qXXSRtH+/oZ9/tmjPHov27jW0YYOhDRsi9PTTEWrRIqB+/Xz64x+96tixZG2M3G5DM2YUHyCPGUP/2zPxpz/9SX/6059OeUxCQoIWLFhw0v1Wq1Vjx47V2LFjy7s8oEY4evSobrnlegUCtGqr6R577K/hLgEVyGq16p13PlC9evXCXQpQ6QhooW++scrrNdS8eUCtW/OWSAAAqhO7XWrRwlSLFn5dcolfubnSeefZtWyZ9Pnnwf61L7/s0MsvO9Shg6mbbgrottsCqlOHWbAAaoZ69erpH/9YxAxaoJqLjo4mnEWtRUALffZZ8G7Qq5ePBUYAAKjmoqKk66+X9u3z6vzzpd27Ldq82aLt2y364QdDjzxi1dNPW3TTTRG66658XpwFUCPwtmgAQHVGQFvLmab02Wf0nwUAoCZyOKTzzgvovPMCysuTNm+2aN06qw4ftig93aG5c+0aMMDUPfcE1K7db8+0SOLvAgAAAKAyENDWchs2WPTjj1Y5HKYuvZT+swAA1FQul3TBBQF16RJQly52/fWvpnbutGrxYkOLF1vUrp1fPXr4VL9+cJEyAAAAAJWDgLaWe/PN4GrP114bfEIGAABqNsMILjKWkuJTRoZfK1datXVr8AXbn36yKCEhoNtuC3eVAAAAQO3B9IhaLDdXWrQoGNCmpnrDXA0AAKhssbGmBgzw6fbbvWrd2q9AwNC6dVb16WNowwaLTNrTAgAAABWOgLYWW7LEppwcQ61aBXTxxfSZAwCgtmrSxFRKik9//GO+GjUK6MgRQx9+aNdbb9mVkcEKogAAAEBFIqCtxebNc0gKzp61cE8AAKDWa9HC1KBBXk2cGJDDYWr/fovmzbPro49scrvDXR0AAABQM9GDtpbassWi1autslpN3XQT7Q0AAECQ1SoNGyb9+mu+PvvMpi1brFq3Ltif9vLLWVAUAAAAKG/Mm6yl5s4N9p698kqfYmNpMAcAAAqLjg4uIvrHP+arQYOAcnMNLVli14gRFuXkhLs6AAAAoOYgoK2FNm+26I03ggHtsGHMngUAACfXooWp22/3KjnZJ4vF1LJlFv373/ZwlwUAAADUGLQ4qGVMU3rooQj5/Yauvdarnj1ZHAwAAJyazSb16OFXu3YBxcZa1b8/L/ACAAAA5YWAtpb5179sWrHCpshIU4895gl3OQAAoBpp3NjUqFGmnM5wVwIAAADUHLQ4qEWys6VJkyIkSfffn6+zz6b3LAAAAAAAABBOBLS1RF6eNHiwSwcPWnTuuX796U/54S4JAAAAAAAAqPUIaGsBj0caMsSlL76wKSrKVFqaWw5HuKsCAAAAAAAAUGsC2kAgoBkzZqhnz55KTEzUkCFDtHv37nCXVeGys6Xhw536+GObXC5Tb72VpwsuCIS7LAAAAAAAAACqRQHtzJkzNX/+fD3++ONasGCBDMPQ8OHDlZ9fM9/qb5rSokU2XXxxlN5/366ICFNvvJGniy7yh7s0AAAAAAAAAP9TKwLa/Px8zZkzR6NHj1avXr3Uvn17TZ8+XRkZGVq+fHm4yytXBw8aSk+365prIvWnP7mUmWlRmzYBvf12nnr1IpwFAAAAAAAAqhJbuAuoDFu2bFFubq6Sk5ND22JiYhQfH6/Vq1erf//+YayuZAKB4EJfbrcht1tyu6UjRyzKzZV+/NGmjRst2rjRos2bLfL7DUlSRISp++7L1z335CsiIswXAAAAAAAAAKAIwzRNM9xFVLQPP/xQo0eP1vr16+V0OkPb//znP8vtduuVV14549s0TVOBQMUPXXa2oaNHJdM0SnyOw2EqKkqKijJltVZcbSVhmoaysk6+PyYm2Cc3nPuPHZMMw5Bpmvr9T8Opzq8KtVfU/tKcaxgnxrFOnZp1bZW9n/vkme+vzvfJ0+2vCrXl5BR/fyzr7VeFa+M+eeb769aVDKNy/ny0WAwZRsn/BkLJVdbfsgAAALXVmfwtWysC2nfeeUfjxo3T5s2bZbGc6Oowbtw4ZWZm6rXXXgtfcQAAAAAAAABqrVrRg7Zg1uzvFwTzeDxyuVzhKAkAAAAAAAAAakdA27RpU0lSZmZmoe2ZmZmKi4sLR0kAAAAAAAAAUDsC2vbt2ys6OlorV64MbcvOztamTZvUrVu3MFYGAAAAAAAAoDazhbuAyuBwOJSamqpp06apQYMGatasmaZOnaq4uDj17ds33OUBAAAAAAAAqKVqRUArSWPGjJHP59PEiRPldruVlJSk9PR0ORyOcJcGAAAAAAAAoJYyTNM0w10EAAAAAAAAANRGtaIHLQAAAAAAAABURQS0AAAAAAAAABAmBLQAAAAAAAAAECYEtAAAAAAAAAAQJgS0AAAAAAAAABAmBLQAAAAAAAAAECYEtFXQ0aNH9cgjj+jSSy/VBRdcoFtuuUVr1qwJ7d+8ebNSU1PVuXNn9e7dW+np6YXODwQCmjFjhnr27KnExEQNGTJEu3fvruzLqFJ27typLl26aNGiRaFtjGPJLV68WP369VOnTp3Uv39/LVu2LLSPcSw5r9er6dOnq3fv3urSpYtuvfVWffvtt6H9jOXpzZw5U4MGDSq0rTzG7XS3UdMUN46ffPKJUlJS1KVLF/Xp00d///vf5Xa7Q/sZx6KKG8ffmjhxovr06VNoG+MIAAAA4PcIaKug+++/X+vXr9ezzz6rf/3rX+rQoYOGDh2q7du368iRIxo8eLBatWqlhQsXavTo0Xr++ee1cOHC0PkzZ87U/Pnz9fjjj2vBggUyDEPDhw9Xfn5+GK8qfLxerx588EEdP348tI1xLLl33nlHEyZM0E033aSlS5eqX79+uv/++/Xdd98xjmfopZde0sKFC/X4449r8eLFOuecczR8+HBlZGQwliXw2muvacaMGYW2lce4leQ2apLixnHNmjUaNWqUrrrqKi1evFiTJk3SsmXLNHny5NAxjGNhxY3jb3300Ud6++23i2xnHAEAAAAUYaJK2bVrl9m2bVtz7dq1oW2BQMDs27ev+dxzz5kvv/yy2bNnT9Pr9Yb2P/PMM+ZVV11lmqZpejwes0uXLuZbb70V2p+VlWUmJCSYS5curbwLqUKeeeYZc9CgQWbbtm3NhQsXmqZpMo4lFAgEzMsuu8x86qmnCm0fMmSI+fLLLzOOZ2jAgAHmlClTQl8fO3bMbNu2rfn+++8zlqdw4MABc+jQoWbnzp3Nq6++2kxNTQ3tK49xO91t1BSnGscHHnjAHDx4cKHjFy9ebMbHx5sej4dx/I1TjWOBjIwMMzk52UxNTTUvu+yy0HbGEQAAAEBxmEFbxdSvX1+vvvqqOnbsGNpmGIZM01RWVpbWrFmjpKQk2Wy20P7k5GTt3LlThw4d0pYtW5Sbm6vk5OTQ/piYGMXHx2v16tWVei1VwerVq7VgwQL9/e9/L7SdcSyZHTt2aO/evbruuusKbU9PT9eIESMYxzNUr149ffrpp/rll1/k9/u1YMECORwOnX/++YzlKfzwww+qW7eulixZosTExEL7ymPcTncbNcWpxnHIkCEaN25ckXN8Pp9ycnIYx9841ThKkmmaeuihh/SHP/xBF154YaF9jCMAAACA4hDQVjExMTHq1auXHA5HaNuyZcu0Z88e9ejRQwcOHFBcXFyhc5o0aSJJ2rdvnw4cOCBJatq0aZFj9u/fX8HVVy3Z2dkaN26cJk6cWGQ8GMeS2bVrlyTp+PHjGjp0qC666CLdeOON+uSTTyQxjmfq4Ycfls1m0+WXX65OnTpp+vTpeu6559SiRQvG8hT69OmjZ555Rs2bNy+yrzzG7XS3UVOcahzj4+PVvn370Nf5+fmaO3euOnTooAYNGjCOv3GqcZSCrQ8OHjyo+++/v8g+xhEAAABAcQhoq7i1a9dqwoQJuvzyy9WnTx+53e5C4a0kRURESJI8Ho/y8vIkqdhjPB5P5RRdRUyaNEmdO3cuMvtTEuNYQjk5OZKk8ePH69prr9WcOXN0ySWXaOTIkVqxYgXjeIa2b9+umJgYvfjii1qwYIGuv/56jR8/Xlu2bGEsS6k8xu10t1Hb+Hw+jRs3Ttu2bdOjjz4qSYxjCW3ZskVpaWmaOnVqkbGQGEcAAAAAxbOd/hCEy0cffaQHH3xQiYmJevbZZyVJTqezyIJABU/YIiMj5XQ6JQVnPxX8u+AYl8tVSZWH3+LFi7VmzRq9++67xe5nHEvGbrdLkoYOHaqBAwdKks4//3xt2rRJc+fOZRzPwN69ezV27Fi99tpr6tatmySpU6dO2rZtm1544QXGspTKY9xOdxu1SU5Oju69916tXLlSM2bMCL2Fn3E8PY/HowcffFB33313odnIv8U4AgAAACgOM2irqHnz5mn06NG69NJLNWvWrNATubi4OGVmZhY6tuDr2NjY0Nsmizvm92+ZrMkWLlyoQ4cOqXfv3urSpYu6dOkiSXr00UfVv39/xrGECq61bdu2hbafe+65+uWXXxjHM7BhwwZ5vV516tSp0PbExETt2rWLsSyl8hi3091GbZGZmanbbrtN3333nWbNmqU+ffqE9jGOp7d+/Xr99NNPSktLC/3eeeWVV7Rv3z516dJFS5YsYRwBAAAAFIuAtgp666239Le//U233XabnnvuuUJvdUxKStLatWvl9/tD21asWKHWrVurYcOGat++vaKjo7Vy5crQ/uzsbG3atCk0a682mDZtmv7zn/9o8eLFoQ9JGjNmjF599VXGsYTi4+MVFRWl9evXF9q+detWtWjRgnE8AwXBzI8//lho+9atW9WyZUvGspTKY9xOdxu1QVZWlu644w4dPnxYb731VqFFrCQxjiWQkJCgDz/8UO+8807o987NN9+sJk2aaPHixerTpw/jCAAAAKBYBLRVzM6dO/Xkk0+qb9++GjFihA4dOqSDBw/q4MGDOnbsmFJSUpSTk6OHH35Y27Zt06JFi/T6669rxIgRkoJ97VJTUzVt2jR9/PHH2rJli+677z7FxcWpb9++Yb66yhMbG6uWLVsW+pCkhg0bqlmzZoxjCTmdTg0bNkwvvviili5dqj179uill17SV199pcGDBzOOZyAhIUHdunXT+PHj9c0332jXrl167rnntGLFCt11112MZSmVx7id7jZqgylTpujnn3/W1KlT1aBBg9DvnYMHD8rv9zOOJeB0Oov83qlbt65sNptatmyp6OhoxhEAAABAsehBW8V88MEH8nq9Wr58uZYvX15o38CBA/XUU09p9uzZeuKJJzRw4EA1btxY48aNC/UHlYKzRH0+nyZOnCi3262kpCSlp6cXu2BJbdWwYUPGsYRGjhwpl8ul6dOnKyMjQ23atNELL7yg7t27SxLjWEIWi0UzZ87Uc889p7/85S/KyspS27Zt9dprr6lz586SGMvSKI+f5ZLcRk0WCAT0n//8R16vV3fccUeR/R9//LHOPvtsxrGcMI4AAAAAfs8wTdMMdxEAAAAAAAAAUBvR4gAAAAAAAAAAwoSAFgAAAAAAAADChIAWAAAAAAAAAMKEgBYAAAAAAAAAwoSAFgAAAAAAAADChIAWAAAAAAAAAMKEgBYAAAAAAAAAwoSAFgCqEdM0w11Cpagt1wkAAAAAAAEtABRj0KBBGjRoULjLKOTjjz/W+PHjQ1+vXLlS7dq108qVKyvk+61cuVJXXXWVOnbsqKFDhxZ7zKBBg9SuXbvQR/v27dWlSxddf/31evPNN+X3+8/4+27btk233HJLWcsHAAAAAKBasIW7AABAybz22muV+v3+/ve/KxAI6NVXX1XDhg1Pelx8fLweffRRSZLf71dWVpb++9//6sknn9TatWs1ffp0GYZR4u+7bNkyfffdd2WuHwAAAACA6oCAFgBQrKNHjyopKUkXX3zxKY+Ljo5W586dC23r06ePWrdurSlTpqhPnz4aMGBABVYKAAAAAED1RYsDACiDNWvWKDU1VYmJibrwwgs1fvx4HT58OLR/0aJFio+P1/r163XTTTepU6dO6t27t2bNmlXodjIzM3XffffpwgsvVFJSkh555BFNnz5dffr0kRRsJbBq1SqtWrWqSFuDHTt2aOjQoUpMTNQll1yiadOmyefznbLuXbt2acyYMbrkkkvUuXNnDRo0SGvXrpUk/fLLL2rXrp327t2rxYsXl7qNwqBBg9SkSRPNnz8/tM3tduuZZ57RlVdeqY4dO+qCCy7Q4MGDtXnzZknSCy+8oLS0NElSu3bt9MILL0iSDh8+rMmTJ+uyyy5Tx44ddeGFF+qee+7RL7/8csZ1AQAAAABQlRDQAkAprV69WnfeeaecTqeee+45TZgwQatWrdLtt98ut9sdOi4QCOjee+9Vv3799Oqrr6pr166aNm2avvjiC0lSfn6+7rjjDn377beaMGGCpkyZoi1btmjOnDmh23j00UcVHx+v+Ph4LViwQB06dAjtmzJlirp27aqXX35ZV155pWbNmlUoFP29bdu26frrr9fPP/+siRMnatq0aTIMQ3fccYdWrVqlJk2aaMGCBWrcuLF69epV5PuVlNVq1UUXXaQNGzaEAuNx48bpX//6l+666y7NmTNHDz30kLZu3ar77rtPpmnqxhtv1A033CBJWrBggW688UaZpqkRI0boq6++0gMPPKD09HSNHDlSX3/9tR555JEzrgsAAAAAgKqEFgcAUErPPPOMWrdurVdeeUVWq1WSlJiYqP79+2vhwoW67bbbJEmmaWrkyJG68cYbJUldu3bV8uXL9dlnn6lnz55asmSJduzYoYULF6pjx46SpOTkZF1xxRWh73XuuecqOjpakoq0E7j99ts1cuTI0HmffvqpvvnmG6WmphZbd1pamux2u9544w3VqVNHktS7d29de+21mjp1qt5++2117txZDodDDRo0KPL9zkSjRo3k9Xp19OhRxcTEKDc3V3/961/Vr18/SdKFF16o3NxcPfXUUzp48KDi4uIUFxdX6DozMjLkcrk0fvx4devWTZLUvXt3/fLLL6cMogEAAAAAqA4IaAGgFPLy8rR+/XoNHTpUpmmGZog2b95cbdq00VdffRUKaCWpS5cuoX8XBJ/Hjx+XJH3zzTdq3rx5KJyVgn1dL7vsshK1FigILSXJMAw1a9ZM2dnZJz1+1apVuuyyy0LhrCTZbDb1799fL774onJzcxUVFVWCUSg5wzDkcDiUnp4uKdjSYffu3dqxY4c+/fRTSZLX6y323NjYWL3xxhuSpH379mn37t3avn27vv3225OeAwAAAABAdUFACwClkJ2drUAgoFmzZhXpJytJERERhb52Op2FvrZYLDJNU5J05MgRNWzYsMhtNGrUqES1uFyuk952cbKysoq97UaNGsk0TeXk5JRbQJuRkSGn06l69epJkr744gs9+eST2rFjh6KiotSuXbvQ9zpVzUuWLNGzzz6r/fv3q169emrfvn2RMQUAAAAAoDoioAWAUoiKipJhGLrzzjvVv3//Ivt/H5qeSmxsrHbv3l1k+6FDh8pU48nUrVtXv/76a5HtBw8elCTVr1+/XL6P3+/XqlWrdMEFF8hqtWrPnj265557dPnll+uVV15RixYtJEn/93//F+rHW5w1a9Zo/PjxSk1N1dChQ0MtEJ5++unQwmYAAAAAAFRXLBIGAKUQHR2t+Ph47dixQ506dQp9nHfeeUpLSytRa4ICF154oX7++Wdt3rw5tM3j8ejzzz8vdJzFUj4P2UlJSfr000917Nix0Da/36/33ntPnTp1ksPhKJfvM3/+fGVmZuqWW26RJG3cuFEej0cjRowIhbOSQuFswQza31/nd999p0AgoDFjxoTCWb/fr6+//lpScBE2AAAAAACqK2bQAsBJHDhwQK+99lqR7eeee6569Oih+++/X3fddZceeOABDRgwQH6/X3PmzNH69et19913l/j7XHvttXr11Vd1zz336M9//rNiYmI0Z84cHTp0SGeddVbouJiYGH333XdasWKF4uPjS31do0aN0ueff67bb79dd911lxwOh+bNm6eff/5Zs2fPPuPby8nJ0bp16yQFw9IjR47oyy+/1IIFCzRgwABdeeWVkqQOHTrIZrNp6tSpGjJkiPLz87Vo0SJ99tlnkhTqyRsTEyNJWrp0qRITE5WQkCBJeuyxx5SSkqLs7GzNmzdPW7ZsCZ1XsIAaAAAAAADVDQEtAJzEnj17NGXKlCLbBw4cqB49eqhHjx5KT09XWlqaxowZI7vdrg4dOmju3Lnq3Llzib+PzWZTenq6nnjiCU2aNEk2m00DBgxQ/fr1tXPnztBxt912mzZu3Kjhw4drypQpatKkSamu67zzztNbb72lZ599VhMmTJBhGEpISNAbb7xRaMGxktq0aZNuuukmScHZrw0bNlTr1q311FNP6brrrgsd17JlSz3zzDNKS0vT3Xffrbp166pz58568803NWjQIK1Zs0bt2rXTlVdeqXfeeUcPPfSQbrjhBk2aNEmPPPKI5s6dq/fff1+NGjVS9+7dlZaWpnvuuUdr165Vr169SjUWAAAAAACEm2GealUWAECF++mnn7Rjxw5deeWVMgwjtD0lJUVNmzZVWlpaGKsDAAAAAAAViRm0ABBmx48f15///Gfdeuut6tu3r/x+v5YuXaoffvhBY8eODXd5AAAAAACgAjGDFgCqgPfff1/p6enavn27TNNUfHy87r77bvXo0SPcpQEAAAAAgApEQAsAAAAAAAAAYWIJdwEAAAAAAAAAUFsR0AIAAAAAAABAmBDQAgAAAAAAAECYENACAAAAAAAAQJgQ0AIAAAAAAABAmBDQAgAAAAAAAECYENACAAAAAAAAQJgQ0AIAAAAAAABAmBDQAgAAAAAAAECY/H/dJG0SQmpd0AAAAABJRU5ErkJggg==" + }, + "metadata": {}, + "output_type": "display_data" + } + ], + "execution_count": 152 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-04T16:54:11.519999Z", + "start_time": "2024-10-04T16:54:11.498859Z" + } + }, + "cell_type": "code", + "source": [ + "# 아웃라이어만 추출 (Q3 + 1.5 * IQR 이상의 값)\n", + "outliers = df_wiki[(df_wiki['text_len'] > Q3 + 1.5 * IQR)]\n", + "\n", + "# 아웃라이어를 'text_len' 기준으로 내림차순 정렬\n", + "outliers_sorted = outliers.sort_values(by='text_len', ascending=False)\n", + "\n", + "# 아웃라이어의 일부 확인 (정렬된 상태)\n", + "display(outliers_sorted.head())\n" + ], + "id": "751fec71ad8fd52f", + "outputs": [ + { + "data": { + "text/plain": [ + " text corpus_source url \\\n", + "9102 어딘 실이니 례예 여재라\\n\\n○ 呂滎公名希哲, 字原明. 申國正獻公之長子. 正... 위키피디아 None \n", + "4548 어딘 실이니 례예 여재라\\n\\n○ 呂滎公名希哲, 字原明. 申國正獻公之長子. 正... 위키피디아 TODO \n", + "4547 아다온 말이니 례예 다재라\\n\\n○ 橫渠張先生曰, 敎小兒, 先要安詳恭敬. 今... 위키피디아 TODO \n", + "9101 아다온 말이니 례예 다재라\\n\\n○ 橫渠張先生曰, 敎小兒, 先要安詳恭敬. 今... 위키피디아 None \n", + "9756 1907년 이후 하와이에 건너가 살던 조선인 노동자들은 하와이 농장에서 사탕수수와 ... 위키피디아 None \n", + "\n", + " domain title author html document_id text_length text_len \n", + "9102 None 소학언해 None None 9102 46099 46099 \n", + "4548 None 소학언해 None None 4548 46099 46099 \n", + "4547 None 소학언해 None None 4547 41411 41411 \n", + "9101 None 소학언해 None None 9101 41411 41411 \n", + "9756 None 사진 신부 None None 9756 29016 29016 " + ], + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
textcorpus_sourceurldomaintitleauthorhtmldocument_idtext_lengthtext_len
9102어딘 실이니 례예 여재라\\n\\n○ 呂滎公名希哲, 字原明. 申國正獻公之長子. 正...위키피디아NoneNone소학언해NoneNone91024609946099
4548어딘 실이니 례예 여재라\\n\\n○ 呂滎公名希哲, 字原明. 申國正獻公之長子. 正...위키피디아TODONone소학언해NoneNone45484609946099
4547아다온 말이니 례예 다재라\\n\\n○ 橫渠張先生曰, 敎小兒, 先要安詳恭敬. 今...위키피디아TODONone소학언해NoneNone45474141141411
9101아다온 말이니 례예 다재라\\n\\n○ 橫渠張先生曰, 敎小兒, 先要安詳恭敬. 今...위키피디아NoneNone소학언해NoneNone91014141141411
97561907년 이후 하와이에 건너가 살던 조선인 노동자들은 하와이 농장에서 사탕수수와 ...위키피디아NoneNone사진 신부NoneNone97562901629016
\n", + "
" + ] + }, + "metadata": {}, + "output_type": "display_data" + } + ], + "execution_count": 160 + }, + { + "metadata": {}, + "cell_type": "markdown", + "source": "URL이 None과 Todo타입으로 나뉘며 보통 2개씩 존재하는듯", + "id": "8f23e9483350a36f" + }, + { + "cell_type": "markdown", + "id": "eff4d699-32a3-471b-8db9-5dec4887e29f", + "metadata": {}, + "source": "## 중복 & 결측치 확인" + }, + { + "cell_type": "code", + "id": "a633c731-37bd-4b0e-8a25-2d3acbc552e7", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-04T16:56:38.594893Z", + "start_time": "2024-10-04T16:56:38.571589Z" + } + }, + "source": [ + "df_wiki.info()" + ], + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "\n", + "Index: 60613 entries, 0 to 60612\n", + "Data columns (total 10 columns):\n", + " # Column Non-Null Count Dtype \n", + "--- ------ -------------- ----- \n", + " 0 text 60613 non-null object\n", + " 1 corpus_source 60613 non-null object\n", + " 2 url 4554 non-null object\n", + " 3 domain 0 non-null object\n", + " 4 title 60613 non-null object\n", + " 5 author 0 non-null object\n", + " 6 html 0 non-null object\n", + " 7 document_id 60613 non-null object\n", + " 8 text_length 60613 non-null int64 \n", + " 9 text_len 60613 non-null int64 \n", + "dtypes: int64(2), object(8)\n", + "memory usage: 7.1+ MB\n" + ] + } + ], + "execution_count": 161 + }, + { + "cell_type": "code", + "id": "ea0a4216-09cc-4c6b-830f-4d1a0653d569", + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-04T17:18:12.044558Z", + "start_time": "2024-10-04T17:18:11.830075Z" + } + }, + "source": [ + "df_wiki.nunique()" + ], + "outputs": [ + { + "data": { + "text/plain": [ + "text 56737\n", + "corpus_source 1\n", + "url 1\n", + "domain 0\n", + "title 31755\n", + "author 0\n", + "html 0\n", + "document_id 60613\n", + "text_length 2912\n", + "text_len 2912\n", + "dtype: int64" + ] + }, + "execution_count": 163, + "metadata": {}, + "output_type": "execute_result" + } + ], + "execution_count": 163 + }, + { + "cell_type": "code", + "execution_count": 158, + "id": "e0c716d2-99ec-47b0-bc0e-d60cbd41109c", + "metadata": {}, + "outputs": [ + { + "data": { + "text/plain": [ + "3876" + ] + }, + "execution_count": 158, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "sum(df_wiki[\"text\"].duplicated())" + ] + }, + { + "cell_type": "code", + "execution_count": 161, + "id": "d54f2069-d229-4033-9411-63be7b1d765e", + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
textcorpus_sourceurldomaintitleauthorhtmldocument_idtext_length
3859\"Robots.txt\"는 이 문서를 가리킵니다. 위키백과의 Robots.txt의 파...위키피디아TODONone로봇 배제 표준NoneNone3859429
8413\"Robots.txt\"는 이 문서를 가리킵니다. 위키백과의 Robots.txt의 파...위키피디아NoneNone로봇 배제 표준NoneNone8413429
6873\"들어오지 못하게, 나가지 못하게, 나가도 쓰지 못하게”라는 삼성SDS 고유의 보안...위키피디아NoneNone삼성SDSNoneNone6873728
2319\"들어오지 못하게, 나가지 못하게, 나가도 쓰지 못하게”라는 삼성SDS 고유의 보안...위키피디아TODONone삼성SDSNoneNone2319728
3744\"아미타불\"이라는 낱말은 무량광(無量光: 헤아릴 수 없는 광명을 가진 것)의 뜻인 ...위키피디아TODONone아미타불NoneNone3744414
..............................
6497힌디어(हिन्दी, Hindi)는 인도유럽어족의 인도이란어파에 속하는 언어로, 영...위키피디아NoneNone힌디어NoneNone6497314
7107힘이 물체의 운동 방향으로 작용하면, 물체의 운동량이 증가하고 힘이 일을 하므로 에...위키피디아NoneNone질량-에너지 등가NoneNone7107609
2553힘이 물체의 운동 방향으로 작용하면, 물체의 운동량이 증가하고 힘이 일을 하므로 에...위키피디아TODONone질량-에너지 등가NoneNone2553609
9096치 셰미니 례예 낫재라.\\n\\n○ 子思子曰, 天命之謂性, 率性之謂道, 修道...위키피디아NoneNone소학언해NoneNone90965516
4542치 셰미니 례예 낫재라.\\n\\n○ 子思子曰, 天命之謂性, 率性之謂道, 修道...위키피디아TODONone소학언해NoneNone45425516
\n", + "

7677 rows × 9 columns

\n", + "
" + ], + "text/plain": [ + " text corpus_source url \\\n", + "3859 \"Robots.txt\"는 이 문서를 가리킵니다. 위키백과의 Robots.txt의 파... 위키피디아 TODO \n", + "8413 \"Robots.txt\"는 이 문서를 가리킵니다. 위키백과의 Robots.txt의 파... 위키피디아 None \n", + "6873 \"들어오지 못하게, 나가지 못하게, 나가도 쓰지 못하게”라는 삼성SDS 고유의 보안... 위키피디아 None \n", + "2319 \"들어오지 못하게, 나가지 못하게, 나가도 쓰지 못하게”라는 삼성SDS 고유의 보안... 위키피디아 TODO \n", + "3744 \"아미타불\"이라는 낱말은 무량광(無量光: 헤아릴 수 없는 광명을 가진 것)의 뜻인 ... 위키피디아 TODO \n", + "... ... ... ... \n", + "6497 힌디어(हिन्दी, Hindi)는 인도유럽어족의 인도이란어파에 속하는 언어로, 영... 위키피디아 None \n", + "7107 힘이 물체의 운동 방향으로 작용하면, 물체의 운동량이 증가하고 힘이 일을 하므로 에... 위키피디아 None \n", + "2553 힘이 물체의 운동 방향으로 작용하면, 물체의 운동량이 증가하고 힘이 일을 하므로 에... 위키피디아 TODO \n", + "9096 치 셰미니 례예 낫재라.\\n\\n○ 子思子曰, 天命之謂性, 率性之謂道, 修道... 위키피디아 None \n", + "4542 치 셰미니 례예 낫재라.\\n\\n○ 子思子曰, 天命之謂性, 率性之謂道, 修道... 위키피디아 TODO \n", + "\n", + " domain title author html document_id text_length \n", + "3859 None 로봇 배제 표준 None None 3859 429 \n", + "8413 None 로봇 배제 표준 None None 8413 429 \n", + "6873 None 삼성SDS None None 6873 728 \n", + "2319 None 삼성SDS None None 2319 728 \n", + "3744 None 아미타불 None None 3744 414 \n", + "... ... ... ... ... ... ... \n", + "6497 None 힌디어 None None 6497 314 \n", + "7107 None 질량-에너지 등가 None None 7107 609 \n", + "2553 None 질량-에너지 등가 None None 2553 609 \n", + "9096 None 소학언해 None None 9096 5516 \n", + "4542 None 소학언해 None None 4542 5516 \n", + "\n", + "[7677 rows x 9 columns]" + ] + }, + "execution_count": 161, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "df_wiki[df_wiki[['text']].duplicated(keep=False)].sort_values('text')" + ] + }, + { + "cell_type": "code", + "execution_count": 288, + "id": "f09a3b03-7f14-41db-a7cd-5be790a99d68", + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
textcorpus_sourceurldomaintitleauthorhtmldocument_idtext_length
4984110대 닥터\\n \\n*TARDISODE 8\\n*\"The beast and his a...위키피디아NoneNoneThe Satan PitNoneNone49841319
6026319세기 말부터 러시아의 진보적 귀족과 러시아 농촌 내 농민에게서 자생적으로 발생한...위키피디아NoneNone노농동맹NoneNone60263765
563842000년부터 김정일은 독립채산제로 인한 자체 수익 사업을 권장하며 방위산업이든 일...위키피디아NoneNone89호집적회로공장NoneNone56384599
561092000년부터 김정일은 독립채산제로 인한 자체 수익 사업을 권장하며 방위산업이든 일...위키피디아NoneNone평양집적회로시험공장NoneNone56109599
490622018년 동계 올림픽 크로스컨트리 예선\\n올림픽 대회에 앞서 선수 선발전이 진행됐...위키피디아NoneNone2018년 동계 올림픽 크로스컨트리 여자 10km 프리NoneNone49062524
..............................
54994팀들은 승점 순으로 정렬된다.(승리시 3점, 무승부시 1점, 패배시 0점), 승점 ...위키피디아NoneNone2019-20년 UEFA 유로파리그 조별 리그NoneNone54994354
42937파일:Pierre Trudeau (1975).jpg|캐나다 캐나다<br />피에르 ...위키피디아NoneNone제4회 G7 정상회담NoneNone42937480
5870한단이 함락되고 공자 가가 대군으로 쫓겨들어온 후에 얼마 지나지 않아 진나라군은 역...위키피디아NoneNone진나라NoneNone58701602
1316한단이 함락되고 공자 가가 대군으로 쫓겨들어온 후에 얼마 지나지 않아 진나라군은 역...위키피디아TODONone진나라NoneNone13161602
56999한산도함은 국내 군함 중 최대 규모의 의무실과 병상을 갖췄다. 독도함의 1.8배의 ...위키피디아NoneNoneATH-81 한산도NoneNone56999368
\n", + "

96 rows × 9 columns

\n", + "
" + ], + "text/plain": [ + " text corpus_source url \\\n", + "49841 10대 닥터\\n \\n*TARDISODE 8\\n*\"The beast and his a... 위키피디아 None \n", + "60263 19세기 말부터 러시아의 진보적 귀족과 러시아 농촌 내 농민에게서 자생적으로 발생한... 위키피디아 None \n", + "56384 2000년부터 김정일은 독립채산제로 인한 자체 수익 사업을 권장하며 방위산업이든 일... 위키피디아 None \n", + "56109 2000년부터 김정일은 독립채산제로 인한 자체 수익 사업을 권장하며 방위산업이든 일... 위키피디아 None \n", + "49062 2018년 동계 올림픽 크로스컨트리 예선\\n올림픽 대회에 앞서 선수 선발전이 진행됐... 위키피디아 None \n", + "... ... ... ... \n", + "54994 팀들은 승점 순으로 정렬된다.(승리시 3점, 무승부시 1점, 패배시 0점), 승점 ... 위키피디아 None \n", + "42937 파일:Pierre Trudeau (1975).jpg|캐나다 캐나다
피에르 ... 위키피디아 None \n", + "5870 한단이 함락되고 공자 가가 대군으로 쫓겨들어온 후에 얼마 지나지 않아 진나라군은 역... 위키피디아 None \n", + "1316 한단이 함락되고 공자 가가 대군으로 쫓겨들어온 후에 얼마 지나지 않아 진나라군은 역... 위키피디아 TODO \n", + "56999 한산도함은 국내 군함 중 최대 규모의 의무실과 병상을 갖췄다. 독도함의 1.8배의 ... 위키피디아 None \n", + "\n", + " domain title author html document_id \\\n", + "49841 None The Satan Pit None None 49841 \n", + "60263 None 노농동맹 None None 60263 \n", + "56384 None 89호집적회로공장 None None 56384 \n", + "56109 None 평양집적회로시험공장 None None 56109 \n", + "49062 None 2018년 동계 올림픽 크로스컨트리 여자 10km 프리 None None 49062 \n", + "... ... ... ... ... ... \n", + "54994 None 2019-20년 UEFA 유로파리그 조별 리그 None None 54994 \n", + "42937 None 제4회 G7 정상회담 None None 42937 \n", + "5870 None 진나라 None None 5870 \n", + "1316 None 진나라 None None 1316 \n", + "56999 None ATH-81 한산도 None None 56999 \n", + "\n", + " text_length \n", + "49841 319 \n", + "60263 765 \n", + "56384 599 \n", + "56109 599 \n", + "49062 524 \n", + "... ... \n", + "54994 354 \n", + "42937 480 \n", + "5870 1602 \n", + "1316 1602 \n", + "56999 368 \n", + "\n", + "[96 rows x 9 columns]" + ] + }, + "execution_count": 288, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "df_wiki[df_wiki[['text','url']].duplicated(keep='first')].sort_values('text')" + ] + }, + { + "cell_type": "markdown", + "id": "c3725ff0-8e32-41d8-9c0a-1e923ce37eae", + "metadata": {}, + "source": [ + "- 7677/2= 3838.5는 3876과다름 -> 3개이상인 친구가 있음 -> 중복은 url이 다르거나(None vs TODO), title이 다름 + document_id도\n", + "- 문장의 길이가 같기에 더 파고들지 않음" + ] + }, + { + "metadata": {}, + "cell_type": "markdown", + "source": "## train과 validation의 context는 wikipedia의 subset인가?", + "id": "29f15bf36d4a2447" + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-04T17:27:08.044328Z", + "start_time": "2024-10-04T17:27:07.201966Z" + } + }, + "cell_type": "code", + "source": [ + "# Arrow 파일 경로 설정\n", + "train_file_path = os.path.join(parent_dir, 'data', 'train_dataset')\n", + "dataset = load_from_disk(train_file_path)\n", + "\n", + "train_dataset = dataset[\"train\"]\n", + "valid_dataset = dataset[\"validation\"]\n", + "\n", + "train_df=pd.DataFrame(train_dataset)\n", + "valid_df=pd.DataFrame(valid_dataset)\n", + "\n", + "display(train_df.info())\n", + "display(valid_df.info())\n", + "display(df_wiki.info())" + ], + "id": "d41bb1268eb8f093", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "\n", + "RangeIndex: 3952 entries, 0 to 3951\n", + "Data columns (total 7 columns):\n", + " # Column Non-Null Count Dtype \n", + "--- ------ -------------- ----- \n", + " 0 title 3952 non-null object\n", + " 1 context 3952 non-null object\n", + " 2 question 3952 non-null object\n", + " 3 id 3952 non-null object\n", + " 4 answers 3952 non-null object\n", + " 5 document_id 3952 non-null int64 \n", + " 6 __index_level_0__ 3952 non-null int64 \n", + "dtypes: int64(2), object(5)\n", + "memory usage: 216.2+ KB\n" + ] + }, + { + "data": { + "text/plain": [ + "None" + ] + }, + "metadata": {}, + "output_type": "display_data" + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "\n", + "RangeIndex: 240 entries, 0 to 239\n", + "Data columns (total 7 columns):\n", + " # Column Non-Null Count Dtype \n", + "--- ------ -------------- ----- \n", + " 0 title 240 non-null object\n", + " 1 context 240 non-null object\n", + " 2 question 240 non-null object\n", + " 3 id 240 non-null object\n", + " 4 answers 240 non-null object\n", + " 5 document_id 240 non-null int64 \n", + " 6 __index_level_0__ 240 non-null int64 \n", + "dtypes: int64(2), object(5)\n", + "memory usage: 13.2+ KB\n" + ] + }, + { + "data": { + "text/plain": [ + "None" + ] + }, + "metadata": {}, + "output_type": "display_data" + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "\n", + "Index: 60613 entries, 0 to 60612\n", + "Data columns (total 10 columns):\n", + " # Column Non-Null Count Dtype \n", + "--- ------ -------------- ----- \n", + " 0 text 60613 non-null object\n", + " 1 corpus_source 60613 non-null object\n", + " 2 url 4554 non-null object\n", + " 3 domain 0 non-null object\n", + " 4 title 60613 non-null object\n", + " 5 author 0 non-null object\n", + " 6 html 0 non-null object\n", + " 7 document_id 60613 non-null object\n", + " 8 text_length 60613 non-null int64 \n", + " 9 text_len 60613 non-null int64 \n", + "dtypes: int64(2), object(8)\n", + "memory usage: 7.1+ MB\n" + ] + }, + { + "data": { + "text/plain": [ + "None" + ] + }, + "metadata": {}, + "output_type": "display_data" + } + ], + "execution_count": 168 + }, + { + "metadata": {}, + "cell_type": "markdown", + "source": "### LEFT JOIN을 이용한 Subset인지 확인", + "id": "f9ecdc7ca46eae7f" + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-04T17:41:04.879710Z", + "start_time": "2024-10-04T17:41:04.799962Z" + } + }, + "cell_type": "code", + "source": [ + "import pandas as pd\n", + "\n", + "# train_df와 df_wiki의 title, context(text), document_id 쌍을 비교\n", + "train_merged = pd.merge(train_df[['title', 'context', 'document_id']], \n", + " df_wiki[['title', 'text', 'document_id']], \n", + " how='left', \n", + " left_on=['title', 'context', 'document_id'], \n", + " right_on=['title', 'text', 'document_id'])\n", + "\n", + "# train_df에서 일치하는 데이터가 있는지 확인\n", + "train_matches = train_merged[train_merged['text'].notnull()]\n", + "print(f\"Train Data: {len(train_matches)} matches found\")\n", + "\n", + "# 매칭되지 않은 데이터\n", + "train_unmatched = train_merged[train_merged['text'].isnull()]\n", + "print(f\"Train Data: {len(train_unmatched)} unmatched rows\")\n", + "\n", + "# valid_df와 df_wiki의 title, context(text), document_id 쌍을 비교\n", + "valid_merged = pd.merge(valid_df[['title', 'context', 'document_id']], \n", + " df_wiki[['title', 'text', 'document_id']], \n", + " how='left', \n", + " left_on=['title', 'context', 'document_id'], \n", + " right_on=['title', 'text', 'document_id'])\n", + "\n", + "# valid_df에서 일치하는 데이터가 있는지 확인\n", + "valid_matches = valid_merged[valid_merged['text'].notnull()]\n", + "print(f\"Valid Data: {len(valid_matches)} matches found\")\n", + "\n", + "# 매칭되지 않은 데이터\n", + "valid_unmatched = valid_merged[valid_merged['text'].isnull()]\n", + "print(f\"Valid Data: {len(valid_unmatched)} unmatched rows\")\n" + ], + "id": "a36709c403d07a6b", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Train Data: 3922 matches found\n", + "Train Data: 30 unmatched rows\n", + "Valid Data: 238 matches found\n", + "Valid Data: 2 unmatched rows\n" + ] + } + ], + "execution_count": 177 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-04T17:41:07.070236Z", + "start_time": "2024-10-04T17:41:07.055531Z" + } + }, + "cell_type": "code", + "source": [ + "display(train_unmatched)\n", + "display(valid_unmatched)" + ], + "id": "407881b478bfe368", + "outputs": [ + { + "data": { + "text/plain": [ + " title context \\\n", + "291 고레인저 수수께끼의 UFO들과 유럽에서 가면 라이더 V3과 싸우던 철면 군단, 사하라 사막에... \n", + "389 힐 힐은 전쟁중에 논쟁을 피하지 못했다. 병약한 체질이라서 여러 번 병치레를 했기에, ... \n", + "477 와그너 1929년 후순 대공황의 습격과 함께 와그너는 평범한 시민과 근로자에게 경제적 구호... \n", + "536 케네디 케네디는 1962년 11월 7일 테드 케네디는 연방 상원으로 선서되었다. 그는 그가... \n", + "578 레닌주의 19세기 말부터 러시아의 진보적 귀족과 러시아 농촌 내 농민에게서 자생적으로 발생한... \n", + "654 레닌주의 19세기 말부터 러시아의 진보적 귀족과 러시아 농촌 내 농민에게서 자생적으로 발생한... \n", + "715 조선련봉총회사 조선민주주의인민공화국은 1997년 개정 헌법에 근거한 1999년의 1차 개정을 거쳐... \n", + "806 하워드 마셜 그는 구두로는 안나 니콜 스미스에게 자신의 재산의 반을 주겠다고 약속했다 하나 유언... \n", + "902 톰킨스 톰킨스는 자신이 뉴욕주 헌법 회의로 대표로 만들어졌을 때 자신의 정치 경력을 시작하... \n", + "962 헨드릭스 항상 야망적이었던 헨드릭스는 정치에 뛰어들었다. 그는 1848년 인디애나주 연방 하... \n", + "1025 댈러스 1839년 귀국 후 댈러스는 제임스 뷰캐넌이 거부한 후 법무장관 직이 제공되었으나 ... \n", + "1449 힐 힐은 전쟁중에 논쟁을 피하지 못했다. 병약한 체질이라서 여러 번 병치레를 했기에, ... \n", + "1465 카쿠레인저 《초력전대 오레인저》과 《닌자전대 카쿠레인저》의 크로스 오버 작품. 슈퍼 전대 시리... \n", + "1538 제발트 제발트의 문학 작업은 실질적으로 1980년대 말부터 시작되었다. 독일 사람들은 19... \n", + "1651 평양집적회로시험공장 김정일과 김정은은 현재 반도체 장비를 자신의 예금에 맞게끔 들여오고 있으며 특히 리... \n", + "1712 이월 게티스버그 전역이 시작된 날 제2차 윈체스터 전투에서 이월은 북군 수비대 4,000... \n", + "1815 듀이 1938년 듀이는 인기있는 민주당 현직 주지사 허버트 리먼을 상대로 뉴욕 주지사를 ... \n", + "2097 시모어 루이지애나주 센터빌에서 태어났다. 그의 부모는 둘다 최근에 해방된 노예들로 사이먼 ... \n", + "2186 케네디 상원에서 자유주의적 사자로서 케네디의 역할은 뉴트 깅리치의 하원으로부터 미국이 오고... \n", + "2479 듀이 1938년 듀이는 인기있는 민주당 현직 주지사 허버트 리먼을 상대로 뉴욕 주지사를 ... \n", + "2570 조선련봉총회사 고난의 행군 이후 국가 과학원은 예산 체계로 운영이 되었음을 알수가 있었으나 200... \n", + "2606 브레킨리지 북부에서 배신자로 간주된 브레킨리지는 버지니아주로 여행을 떠나 아메리카 연합국으로 ... \n", + "2907 레닌주의 19세기 말부터 러시아의 진보적 귀족과 러시아 농촌 내 농민에게서 자생적으로 발생한... \n", + "3031 와그너 국내 산업 회복 법령이 비헌법적이란 것을 미국 대법원이 판결을 내린지 단 5주 후에... \n", + "3094 듀이 1930년대 동안 듀이는 뉴욕의 검찰관이었다. 1930년대 초반 자신이 뉴욕의 남부... \n", + "3202 헨드릭스 선거의 실망 후에 헨드릭스와 그의 부인은 유럽을 통하여 장기적 여행과 함께 자신들을... \n", + "3213 블레인 1861년과 1862년 동안 블레인은 메인주 연방 하원의 의장을 지냈다. 그러고나서... \n", + "3295 블레인 1876년 블레인은 대통령이 되는 데 희망하였고, 미국의 전당 대회 역사상 가장 유... \n", + "3583 고구려-당 전쟁 당 태종 이세민은 유격전에 능한 좌무위 대장군 우진달을 청구도행군대총관으로 삼고, ... \n", + "3593 가오레인저 《인풍전대 허리케인저》와 《백수전대 가오레인저》의 크로스 오버 작품인 슈퍼 전대 V... \n", + "\n", + " document_id text \n", + "291 45631 NaN \n", + "389 9473 NaN \n", + "477 59363 NaN \n", + "536 15376 NaN \n", + "578 60263 NaN \n", + "654 60263 NaN \n", + "715 58794 NaN \n", + "806 36640 NaN \n", + "902 29366 NaN \n", + "962 20114 NaN \n", + "1025 27402 NaN \n", + "1449 9473 NaN \n", + "1465 44494 NaN \n", + "1538 52162 NaN \n", + "1651 56383 NaN \n", + "1712 9478 NaN \n", + "1815 22802 NaN \n", + "2097 43091 NaN \n", + "2186 15381 NaN \n", + "2479 22802 NaN \n", + "2570 58792 NaN \n", + "2606 27297 NaN \n", + "2907 60263 NaN \n", + "3031 59364 NaN \n", + "3094 22801 NaN \n", + "3202 20117 NaN \n", + "3213 40738 NaN \n", + "3295 40739 NaN \n", + "3583 41161 NaN \n", + "3593 45630 NaN " + ], + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextdocument_idtext
291고레인저수수께끼의 UFO들과 유럽에서 가면 라이더 V3과 싸우던 철면 군단, 사하라 사막에...45631NaN
389힐힐은 전쟁중에 논쟁을 피하지 못했다. 병약한 체질이라서 여러 번 병치레를 했기에, ...9473NaN
477와그너1929년 후순 대공황의 습격과 함께 와그너는 평범한 시민과 근로자에게 경제적 구호...59363NaN
536케네디케네디는 1962년 11월 7일 테드 케네디는 연방 상원으로 선서되었다. 그는 그가...15376NaN
578레닌주의19세기 말부터 러시아의 진보적 귀족과 러시아 농촌 내 농민에게서 자생적으로 발생한...60263NaN
654레닌주의19세기 말부터 러시아의 진보적 귀족과 러시아 농촌 내 농민에게서 자생적으로 발생한...60263NaN
715조선련봉총회사조선민주주의인민공화국은 1997년 개정 헌법에 근거한 1999년의 1차 개정을 거쳐...58794NaN
806하워드 마셜그는 구두로는 안나 니콜 스미스에게 자신의 재산의 반을 주겠다고 약속했다 하나 유언...36640NaN
902톰킨스톰킨스는 자신이 뉴욕주 헌법 회의로 대표로 만들어졌을 때 자신의 정치 경력을 시작하...29366NaN
962헨드릭스항상 야망적이었던 헨드릭스는 정치에 뛰어들었다. 그는 1848년 인디애나주 연방 하...20114NaN
1025댈러스1839년 귀국 후 댈러스는 제임스 뷰캐넌이 거부한 후 법무장관 직이 제공되었으나 ...27402NaN
1449힐힐은 전쟁중에 논쟁을 피하지 못했다. 병약한 체질이라서 여러 번 병치레를 했기에, ...9473NaN
1465카쿠레인저《초력전대 오레인저》과 《닌자전대 카쿠레인저》의 크로스 오버 작품. 슈퍼 전대 시리...44494NaN
1538제발트제발트의 문학 작업은 실질적으로 1980년대 말부터 시작되었다. 독일 사람들은 19...52162NaN
1651평양집적회로시험공장김정일과 김정은은 현재 반도체 장비를 자신의 예금에 맞게끔 들여오고 있으며 특히 리...56383NaN
1712이월게티스버그 전역이 시작된 날 제2차 윈체스터 전투에서 이월은 북군 수비대 4,000...9478NaN
1815듀이1938년 듀이는 인기있는 민주당 현직 주지사 허버트 리먼을 상대로 뉴욕 주지사를 ...22802NaN
2097시모어루이지애나주 센터빌에서 태어났다. 그의 부모는 둘다 최근에 해방된 노예들로 사이먼 ...43091NaN
2186케네디상원에서 자유주의적 사자로서 케네디의 역할은 뉴트 깅리치의 하원으로부터 미국이 오고...15381NaN
2479듀이1938년 듀이는 인기있는 민주당 현직 주지사 허버트 리먼을 상대로 뉴욕 주지사를 ...22802NaN
2570조선련봉총회사고난의 행군 이후 국가 과학원은 예산 체계로 운영이 되었음을 알수가 있었으나 200...58792NaN
2606브레킨리지북부에서 배신자로 간주된 브레킨리지는 버지니아주로 여행을 떠나 아메리카 연합국으로 ...27297NaN
2907레닌주의19세기 말부터 러시아의 진보적 귀족과 러시아 농촌 내 농민에게서 자생적으로 발생한...60263NaN
3031와그너국내 산업 회복 법령이 비헌법적이란 것을 미국 대법원이 판결을 내린지 단 5주 후에...59364NaN
3094듀이1930년대 동안 듀이는 뉴욕의 검찰관이었다. 1930년대 초반 자신이 뉴욕의 남부...22801NaN
3202헨드릭스선거의 실망 후에 헨드릭스와 그의 부인은 유럽을 통하여 장기적 여행과 함께 자신들을...20117NaN
3213블레인1861년과 1862년 동안 블레인은 메인주 연방 하원의 의장을 지냈다. 그러고나서...40738NaN
3295블레인1876년 블레인은 대통령이 되는 데 희망하였고, 미국의 전당 대회 역사상 가장 유...40739NaN
3583고구려-당 전쟁당 태종 이세민은 유격전에 능한 좌무위 대장군 우진달을 청구도행군대총관으로 삼고, ...41161NaN
3593가오레인저《인풍전대 허리케인저》와 《백수전대 가오레인저》의 크로스 오버 작품인 슈퍼 전대 V...45630NaN
\n", + "
" + ] + }, + "metadata": {}, + "output_type": "display_data" + }, + { + "data": { + "text/plain": [ + " title context document_id text\n", + "87 와그너 제2차 세계 대전 후에 와그너는 노동, 사회 보장, 완전 고용 (취업 기회들이 풍부... 59365 NaN\n", + "105 댈러스 1839년 귀국 후 댈러스는 제임스 뷰캐넌이 거부한 후 법무장관 직이 제공되었으나 ... 27402 NaN" + ], + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextdocument_idtext
87와그너제2차 세계 대전 후에 와그너는 노동, 사회 보장, 완전 고용 (취업 기회들이 풍부...59365NaN
105댈러스1839년 귀국 후 댈러스는 제임스 뷰캐넌이 거부한 후 법무장관 직이 제공되었으나 ...27402NaN
\n", + "
" + ] + }, + "metadata": {}, + "output_type": "display_data" + } + ], + "execution_count": 178 + }, + { + "metadata": {}, + "cell_type": "markdown", + "source": "title-text-id까지 맞는지 비교해보면, 위와같이 안맞는 set이 있다.", + "id": "dae33e672bd5b135" + }, + { + "metadata": {}, + "cell_type": "markdown", + "source": "### title을 빼고 확인해보자", + "id": "4ee16c9be360786" + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-04T17:44:45.376533Z", + "start_time": "2024-10-04T17:44:45.301950Z" + } + }, + "cell_type": "code", + "source": [ + "import pandas as pd\n", + "\n", + "# train_df와 df_wiki의 title, context(text), document_id 쌍을 비교\n", + "train_merged = pd.merge(train_df[['context', 'document_id']], \n", + " df_wiki[['text', 'document_id']], \n", + " how='left', \n", + " left_on=['context', 'document_id'], \n", + " right_on=['text', 'document_id'])\n", + "\n", + "# train_df에서 일치하는 데이터가 있는지 확인\n", + "train_matches = train_merged[train_merged['text'].notnull()]\n", + "print(f\"Train Data: {len(train_matches)} matches found\")\n", + "\n", + "# 매칭되지 않은 데이터\n", + "train_unmatched = train_merged[train_merged['text'].isnull()]\n", + "print(f\"Train Data: {len(train_unmatched)} unmatched rows\")\n", + "\n", + "# valid_df와 df_wiki의 title, context(text), document_id 쌍을 비교\n", + "valid_merged = pd.merge(valid_df[['context', 'document_id']], \n", + " df_wiki[['text', 'document_id']], \n", + " how='left', \n", + " left_on=['context', 'document_id'], \n", + " right_on=['text', 'document_id'])\n", + "\n", + "# valid_df에서 일치하는 데이터가 있는지 확인\n", + "valid_matches = valid_merged[valid_merged['text'].notnull()]\n", + "print(f\"Valid Data: {len(valid_matches)} matches found\")\n", + "\n", + "# 매칭되지 않은 데이터\n", + "valid_unmatched = valid_merged[valid_merged['text'].isnull()]\n", + "print(f\"Valid Data: {len(valid_unmatched)} unmatched rows\")\n" + ], + "id": "5ca3402a7fe6fa07", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Train Data: 3952 matches found\n", + "Train Data: 0 unmatched rows\n", + "Valid Data: 240 matches found\n", + "Valid Data: 0 unmatched rows\n" + ] + } + ], + "execution_count": 179 + }, + { + "metadata": {}, + "cell_type": "markdown", + "source": "### title이 다른 경우가 간헐적으로 존재함. 결론적으로 text자체는 wiki set의 subset이 맞음.", + "id": "9487154e17d2fd45" + }, + { + "metadata": {}, + "cell_type": "markdown", + "source": "#### wiki에 Text와 text len만 남기면 중복이 다 사라지겠지->얼마나 남을까\n", + "id": "9ba3cd97c5cf130a" + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-04T17:52:49.693560Z", + "start_time": "2024-10-04T17:52:49.485670Z" + } + }, + "cell_type": "code", + "source": [ + "# 'text_len'과 'text' 열만으로 새로운 데이터프레임 생성\n", + "df_wiki_filtered = df_wiki[['text', 'text_len']].drop_duplicates()\n", + "\n", + "# 생성된 데이터프레임 확인\n", + "display(df_wiki_filtered.info())\n" + ], + "id": "2b96a4f6383293a9", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "\n", + "Index: 56737 entries, 0 to 60612\n", + "Data columns (total 2 columns):\n", + " # Column Non-Null Count Dtype \n", + "--- ------ -------------- ----- \n", + " 0 text 56737 non-null object\n", + " 1 text_len 56737 non-null int64 \n", + "dtypes: int64(1), object(1)\n", + "memory usage: 1.3+ MB\n" + ] + }, + { + "data": { + "text/plain": [ + "None" + ] + }, + "metadata": {}, + "output_type": "display_data" + } + ], + "execution_count": 183 + }, + { + "metadata": {}, + "cell_type": "markdown", + "source": "#### 중복만 제거했으니 당연히 train/validation set이 새롭게 중복제거한 df_wiki_filtered에 소속되어있겠지만 혹시나 확인", + "id": "32b06f557c2a6862" + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-04T17:54:43.157008Z", + "start_time": "2024-10-04T17:54:43.121348Z" + } + }, + "cell_type": "code", + "source": [ + "# train_df와 df_wiki의 title, context(text), document_id 쌍을 비교\n", + "train_merged = pd.merge(train_df[['context']], \n", + " df_wiki_filtered[['text']], \n", + " how='left', \n", + " left_on=['context'], \n", + " right_on=['text'])\n", + "\n", + "# train_df에서 일치하는 데이터가 있는지 확인\n", + "train_matches = train_merged[train_merged['text'].notnull()]\n", + "print(f\"Train Data: {len(train_matches)} matches found\")\n", + "\n", + "# 매칭되지 않은 데이터\n", + "train_unmatched = train_merged[train_merged['text'].isnull()]\n", + "print(f\"Train Data: {len(train_unmatched)} unmatched rows\")\n", + "\n", + "# valid_df와 df_wiki의 title, context(text), document_id 쌍을 비교\n", + "valid_merged = pd.merge(valid_df[['context']], \n", + " df_wiki_filtered[['text']], \n", + " how='left', \n", + " left_on=['context'], \n", + " right_on=['text'])\n", + "\n", + "# valid_df에서 일치하는 데이터가 있는지 확인\n", + "valid_matches = valid_merged[valid_merged['text'].notnull()]\n", + "print(f\"Valid Data: {len(valid_matches)} matches found\")\n", + "\n", + "# 매칭되지 않은 데이터\n", + "valid_unmatched = valid_merged[valid_merged['text'].isnull()]\n", + "print(f\"Valid Data: {len(valid_unmatched)} unmatched rows\")\n" + ], + "id": "3d5c9bb862e79085", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Train Data: 3952 matches found\n", + "Train Data: 0 unmatched rows\n", + "Valid Data: 240 matches found\n", + "Valid Data: 0 unmatched rows\n" + ] + } + ], + "execution_count": 187 + }, + { + "cell_type": "markdown", + "id": "79af75c2-8465-4e1b-a01e-6e2c5d068ae1", + "metadata": {}, + "source": [ + "---" + ] + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-04T18:07:14.504265Z", + "start_time": "2024-10-04T18:07:14.022726Z" + } + }, + "cell_type": "code", + "source": [ + "# 인덱스를 열로 추가\n", + "df_wiki_filtered_with_index = df_wiki_filtered\n", + "\n", + "# JSON 문자열 생성 (인덱스를 포함하여 저장)\n", + "json_str = df_wiki_filtered_with_index.to_json(orient='index', force_ascii=False)\n", + "\n", + "# 파일을 UTF-8로 저장\n", + "with open('df_wiki_filtered_with_index.json', 'w', encoding='utf-8') as f:\n", + " f.write(json_str)\n" + ], + "id": "87148a542053bebb", + "outputs": [ + { + "ename": "NameError", + "evalue": "name 'df_wiki_filtered' is not defined", + "output_type": "error", + "traceback": [ + "\u001B[1;31m---------------------------------------------------------------------------\u001B[0m", + "\u001B[1;31mNameError\u001B[0m Traceback (most recent call last)", + "Cell \u001B[1;32mIn[1], line 2\u001B[0m\n\u001B[0;32m 1\u001B[0m \u001B[38;5;66;03m# 인덱스를 열로 추가\u001B[39;00m\n\u001B[1;32m----> 2\u001B[0m df_wiki_filtered_with_index \u001B[38;5;241m=\u001B[39m \u001B[43mdf_wiki_filtered\u001B[49m\n\u001B[0;32m 4\u001B[0m \u001B[38;5;66;03m# JSON 문자열 생성 (인덱스를 포함하여 저장)\u001B[39;00m\n\u001B[0;32m 5\u001B[0m json_str \u001B[38;5;241m=\u001B[39m df_wiki_filtered_with_index\u001B[38;5;241m.\u001B[39mto_json(orient\u001B[38;5;241m=\u001B[39m\u001B[38;5;124m'\u001B[39m\u001B[38;5;124mindex\u001B[39m\u001B[38;5;124m'\u001B[39m, force_ascii\u001B[38;5;241m=\u001B[39m\u001B[38;5;28;01mFalse\u001B[39;00m)\n", + "\u001B[1;31mNameError\u001B[0m: name 'df_wiki_filtered' is not defined" + ] + } + ], + "execution_count": 1 + }, + { + "cell_type": "markdown", + "id": "a49d92a3-1097-4c11-8056-ce95f4a9a6f7", + "metadata": {}, + "source": [ + "# ETC\n", + "## 1 : __index_level_0__ <-????????????????" + ] + }, + { + "cell_type": "code", + "execution_count": 228, + "id": "8110da08-9ecd-4eee-9db5-900c9229e33e", + "metadata": {}, + "outputs": [ + { + "data": { + "text/plain": [ + "0 42\n", + "1 2873\n", + "2 230\n", + "3 992\n", + "4 548\n", + " ... \n", + "3947 3445\n", + "3948 450\n", + "3949 2252\n", + "3950 2595\n", + "3951 2354\n", + "Name: __index_level_0__, Length: 3952, dtype: int64" + ] + }, + "execution_count": 228, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "train_df['__index_level_0__']" + ] + }, + { + "cell_type": "code", + "execution_count": 229, + "id": "46942aa3-4f58-49fd-ba2d-f3765392afd9", + "metadata": {}, + "outputs": [ + { + "data": { + "text/plain": [ + "count 3952.000000\n", + "mean 1496.027328\n", + "std 1060.480948\n", + "min 0.000000\n", + "25% 587.000000\n", + "50% 1189.500000\n", + "75% 2416.250000\n", + "max 3593.000000\n", + "Name: __index_level_0__, dtype: float64" + ] + }, + "execution_count": 229, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "train_df['__index_level_0__'].describe()" + ] + }, + { + "cell_type": "code", + "execution_count": 231, + "id": "1e4ed399-57ff-4ec9-b5a8-aa23e6815bad", + "metadata": {}, + "outputs": [ + { + "data": { + "text/plain": [ + "3120" + ] + }, + "execution_count": 231, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "train_df['__index_level_0__'].nunique()" + ] + }, + { + "metadata": {}, + "cell_type": "markdown", + "source": "큰 의미없음", + "id": "6c6e4c9d9c379631" + } + ], + "metadata": { + "kernelspec": { + "display_name": "Python 3 (ipykernel)", + "language": "python", + "name": "python3" + }, + "language_info": { + "codemirror_mode": { + "name": "ipython", + "version": 3 + }, + "file_extension": ".py", + "mimetype": "text/x-python", + "name": "python", + "nbconvert_exporter": "python", + "pygments_lexer": "ipython3", + "version": "3.8.5" + } + }, + "nbformat": 4, + "nbformat_minor": 5 +} diff --git a/notebooks/add_question_augmentation_GPT.ipynb b/notebooks/add_question_augmentation_GPT.ipynb new file mode 100644 index 0000000..8301349 --- /dev/null +++ b/notebooks/add_question_augmentation_GPT.ipynb @@ -0,0 +1,1803 @@ +{ + "cells": [ + { + "cell_type": "code", + "id": "initial_id", + "metadata": { + "collapsed": true, + "ExecuteTime": { + "end_time": "2024-10-21T00:33:02.740846Z", + "start_time": "2024-10-21T00:32:54.033219Z" + } + }, + "source": [ + "import json\n", + "import random\n", + "import re\n", + "import pandas as pd\n", + "from datasets import Dataset, DatasetDict, load_from_disk\n", + "import os\n", + "current_dir = os.getcwd()\n", + "parent_dir = os.path.dirname(current_dir)\n", + "\n", + "# Arrow 파일 경로 설정\n", + "train_file_path = os.path.join(parent_dir, 'data', 'train_dataset')\n", + "test_file_path = os.path.join(parent_dir, 'data', 'test_dataset')\n", + "dataset = load_from_disk(train_file_path)\n", + "test_dataset=load_from_disk(test_file_path)\n", + "\n", + "wiki_path = os.path.join(parent_dir, 'data', \"wikipedia_documents.json\")\n", + "\n", + "with open(wiki_path, \"r\", encoding=\"utf-8\") as json_file:\n", + " json_data = json.load(json_file)\n", + "\n", + "\n", + "df_wiki=pd.read_json(wiki_path).transpose()" + ], + "outputs": [ + { + "name": "stderr", + "output_type": "stream", + "text": [ + "C:\\Users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages\\tqdm\\auto.py:21: TqdmWarning: IProgress not found. Please update jupyter and ipywidgets. See https://ipywidgets.readthedocs.io/en/stable/user_install.html\n", + " from .autonotebook import tqdm as notebook_tqdm\n" + ] + } + ], + "execution_count": 1 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-21T00:33:03.022230Z", + "start_time": "2024-10-21T00:33:02.823375Z" + } + }, + "cell_type": "code", + "source": [ + "train_dataset = dataset[\"train\"]\n", + "valid_dataset = dataset[\"validation\"]\n", + "test_dataset=test_dataset\n", + "\n", + "train_df=pd.DataFrame(train_dataset)\n", + "valid_df=pd.DataFrame(valid_dataset)\n", + "test_df=pd.DataFrame(test_dataset)\n", + "\n", + "print(f\"Train length : {len(train_df)}\")\n", + "print(f\"Valid length : {len(valid_df)}\")\n", + "print(f\"Test length : {len(test_df)}\")\n", + "print(f\"df_wiki length : {len(df_wiki)}\")" + ], + "id": "3a7c6414870a97eb", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Train length : 3952\n", + "Valid length : 240\n", + "Test length : 600\n", + "df_wiki length : 60613\n" + ] + } + ], + "execution_count": 2 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-21T00:33:06.527115Z", + "start_time": "2024-10-21T00:33:06.506870Z" + } + }, + "cell_type": "code", + "source": "", + "id": "9d979a153b07c138", + "outputs": [ + { + "data": { + "text/plain": [ + " title context \\\n", + "0 미국 상원 미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국... \n", + "1 인사조직관리 '근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19... \n", + "2 강희제 강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전... \n", + "3 금동삼존불감 불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든... \n", + "4 계사명 사리구 동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기... \n", + "\n", + " question id \\\n", + "0 대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은? mrc-1-000067 \n", + "1 현대적 인사조직관리의 시발점이 된 책은? mrc-0-004397 \n", + "2 강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가? mrc-1-000362 \n", + "3 11~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요? mrc-0-001510 \n", + "4 명문이 적힌 유물을 구성하는 그릇의 총 개수는? mrc-0-000823 \n", + "\n", + " answers document_id \\\n", + "0 {'answer_start': [235], 'text': ['하원']} 18293 \n", + "1 {'answer_start': [212], 'text': ['《경영의 실제》']} 51638 \n", + "2 {'answer_start': [510], 'text': ['백성']} 5028 \n", + "3 {'answer_start': [625], 'text': ['중국']} 34146 \n", + "4 {'answer_start': [30], 'text': ['4개']} 47334 \n", + "\n", + " __index_level_0__ \n", + "0 42 \n", + "1 2873 \n", + "2 230 \n", + "3 992 \n", + "4 548 " + ], + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionidanswersdocument_id__index_level_0__
0미국 상원미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국...대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은?mrc-1-000067{'answer_start': [235], 'text': ['하원']}1829342
1인사조직관리'근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19...현대적 인사조직관리의 시발점이 된 책은?mrc-0-004397{'answer_start': [212], 'text': ['《경영의 실제》']}516382873
2강희제강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전...강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가?mrc-1-000362{'answer_start': [510], 'text': ['백성']}5028230
3금동삼존불감불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든...11~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요?mrc-0-001510{'answer_start': [625], 'text': ['중국']}34146992
4계사명 사리구동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기...명문이 적힌 유물을 구성하는 그릇의 총 개수는?mrc-0-000823{'answer_start': [30], 'text': ['4개']}47334548
\n", + "
" + ] + }, + "execution_count": 3, + "metadata": {}, + "output_type": "execute_result" + } + ], + "execution_count": 3 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-15T06:05:40.957130Z", + "start_time": "2024-10-15T06:05:40.939496Z" + } + }, + "cell_type": "code", + "source": [ + "def generate_import_word(text):\n", + " try:\n", + " # 프롬프트 수정: 핵심 단어를 추출하도록 요청\n", + " prompt = (f\"Context: {text}\\n\"\n", + " f\"위 Context에서 핵심 질문의 정답으로 쓰일 수 있는 단어가 뭐가 있을까?\\n\"\n", + " f\"MRC Task이고, 질문은 사실기반 질문/이유 질문/비교질문 일 수 있어.\\n\"\n", + " f\"접두사나 접미사 붙이지 말고, 정답 단어나 키워드를 하나만 알려줘.\")\n", + " \n", + " completion = client.chat.completions.create(\n", + " model=\"gpt-4o\",\n", + " messages=[{\"role\": \"system\", \"content\": \"You are a helpful assistant.\"},\n", + " {\"role\": \"user\", \"content\": prompt}],\n", + " max_tokens=100, # 단어 추출을 위한 적당한 토큰 수\n", + " temperature=0.5,\n", + " )\n", + " \n", + " # 응답 처리 부분: 응답에서 핵심 단어 추출\n", + " response_text = completion.choices[0].message.content.strip()\n", + " keywords = response_text.split(\"\\n\") # 여러 단어가 반환되면 줄바꿈 기준으로 분리\n", + " \n", + " except Exception as e:\n", + " print(f\"Error: {e}\")\n", + " keywords = [] # 에러 발생 시 빈 리스트 반환\n", + " \n", + " return keywords" + ], + "id": "63fa15dbc8599f91", + "outputs": [], + "execution_count": 55 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-15T06:15:23.397667Z", + "start_time": "2024-10-15T06:15:23.389129Z" + } + }, + "cell_type": "code", + "source": [ + "def generate_question(text, keyword):\n", + " try:\n", + " # 프롬프트 수정: 키워드와 문맥에 맞는 질문을 생성하도록 요청\n", + " prompt = (f\"Context: {text}\\n\"\n", + " f\"위 Context에서 '{keyword}'를 정답으로 하는 질문을 만들어줘.\"\n", + " f\"MRC Task의 데이터로 사용되기 때문에, Extraction-based MRC모델이 context와 질문을 통해서 {keyword}를 유추할 수 있어야해\"\n", + " f\"예시는 아래와 같아.\"\n", + " f\"context : 《우리들의》는 한 러시아인 가족의 이야기다. 작품 속 화자는 자신의 가족 한 사람 한 사람에 대한 개성 넘치는 이야기들을 들려주고 있다. 《우리들의》에는 열세 명의 가족을 주인공으로 한, 열세 편의 이야기가 들어 있다.\"\n", + " f\"keyword : 러시아인\"\n", + " f\"일때 만들어진 질문은 《우리들의》에서 다루고 있는 가정은 어느 나라 사람들인가?\"\n", + " f\"질문만 만들어서 간결하게 출력해줘\")\n", + " \n", + " completion = client.chat.completions.create(\n", + " model=\"gpt-4o\",\n", + " messages=[{\"role\": \"system\", \"content\": \"You are a helpful assistant.\"},\n", + " {\"role\": \"user\", \"content\": prompt}],\n", + " max_tokens=100, # 적절한 질문을 위해 적당한 토큰 수\n", + " temperature=0.5,\n", + " )\n", + " \n", + " # 응답 처리 부분: 생성된 질문 추출\n", + " question = completion.choices[0].message.content.strip()\n", + " \n", + " except Exception as e:\n", + " print(f\"Error: {e}\")\n", + " question = None # 에러 발생 시 None 반환\n", + " \n", + " return question\n", + "\n" + ], + "id": "bf2463b78b9ae434", + "outputs": [], + "execution_count": 62 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-15T08:06:34.075782Z", + "start_time": "2024-10-15T07:25:14.124863Z" + } + }, + "cell_type": "code", + "source": [ + "import pandas as pd\n", + "import os\n", + "\n", + "# 파일 경로 설정\n", + "csv_file_path = \"mrc_keywords_questions_data.csv\"\n", + "\n", + "# 빈 리스트 생성: 저장할 데이터를 담기 위한 리스트\n", + "data = []\n", + "\n", + "# 테스트 실행 예시\n", + "df_wiki = df_wiki.copy()\n", + "\n", + "# 미리 인덱스를 셔플한 리스트를 생성\n", + "shuffled_indices = list(df_wiki.index)\n", + "random.shuffle(shuffled_indices)\n", + "iter = 1000\n", + "\n", + "# 기존 파일이 있으면 읽어오기\n", + "if os.path.exists(csv_file_path):\n", + " df_existing = pd.read_csv(csv_file_path)\n", + " print(\"Existing file loaded.\")\n", + "else:\n", + " df_existing = pd.DataFrame(columns=[\"title\", \"context\", \"document_id\", \"keyword\", \"start_pos\", \"question\"])\n", + " print(\"No existing file found, creating a new one.\")\n", + "\n", + "# 100개의 랜덤 텍스트에서 중요한 키워드 찾기 및 질문 생성\n", + "for i in range(iter):\n", + " picked = df_wiki.loc[shuffled_indices[i], ['text', 'title', 'document_id']]\n", + " \n", + " # text 내에서 중요한 키워드 찾기\n", + " keywords = generate_import_word(picked['text'])\n", + " \n", + " # 키워드와 text에 맞는 질문 생성\n", + " if keywords:\n", + " for keyword in keywords:\n", + " # 키워드 시작위치 계산\n", + " start_pos = picked['text'].find(keyword)\n", + " \n", + " # 키워드가 text에 존재하는지 확인\n", + " if start_pos != -1:\n", + " question = generate_question(picked['text'], keyword)\n", + " print(f\"Generated {i} question for '{keyword}(start pos_{start_pos})': {question}\")\n", + " \n", + " # 데이터 저장\n", + " data.append({\n", + " \"title\": picked['title'],\n", + " \"context\": picked['text'],\n", + " \"document_id\": picked['document_id'],\n", + " \"keyword\": keyword,\n", + " \"start_pos\": start_pos,\n", + " \"question\": question\n", + " })\n", + " else:\n", + " print(f\"Keyword '{keyword}' not found in text.\")\n", + " else:\n", + " print(\"No keywords found or error occurred.\")\n", + "\n", + "# 새로운 데이터를 데이터프레임으로 변환\n", + "df_new = pd.DataFrame(data)\n", + "\n", + "# 기존 데이터프레임과 합치기\n", + "df_result = pd.concat([df_existing, df_new], ignore_index=True)\n", + "\n", + "# 데이터프레임을 CSV 파일로 저장 (덮어쓰기)\n", + "df_result.to_csv(csv_file_path, index=False)\n", + "\n", + "# 데이터프레임 출력\n", + "print(df_result)\n" + ], + "id": "6d687d56fbfda883", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Existing file loaded.\n", + "Generated 0 question for '이평세(start pos_0)': UC 버클리 대학교에서 나노바이오포토닉스를 선도적으로 연구하고 있는 석좌교수는 누구인가?\n", + "Generated 1 question for 'B61(start pos_44)': 나토에 현재 배치된 핵무기의 종류는 무엇인가?\n", + "Generated 2 question for '웹사이트(start pos_0)': 인터넷 프로토콜 기반의 네트워크에서 도메인 이름이나 IP 주소를 통해 보이는 웹 페이지들의 의미 있는 묶음은 무엇인가?\n", + "Generated 3 question for '퀸(start pos_80)': 대한민국에서 2019년 4월 14일 기준 9,946,676명의 관객수를 기록하며 이례적인 흥행을 보인 밴드는 무엇인가?\n", + "Generated 4 question for '홀수번호(start pos_88)': 대한민국의 고속도로 노선 번호에서 남북방향은 어떤 번호가 부여되는가?\n", + "Generated 5 question for '지형(start pos_46)': 유닛의 방어가 결정되는 요소는 무엇인가?\n", + "Generated 6 question for '사회(start pos_101)': 사람은 본래 어디에서 나서 어디에서 자라고 어디에서 생존하는 존재인가?\n", + "Generated 7 question for '1034(start pos_434)': 2020년 1월 11일 기준으로 애니캐스트 어드레싱을 사용하여 루트 서버 인스턴스의 실제 수는 얼마인가?\n", + "Generated 8 question for '시의회(start pos_377)': 2012년 2월 8일, 포드 시장의 계획안을 뒤집은 기관은 무엇인가?\n", + "Generated 9 question for '앙리(start pos_18)': 프랑스 왕의 둘째 아들로 태어나 오를레앙 공작위를 받은 사람은 누구인가?\n", + "Generated 10 question for '렘브란트(start pos_246)': 17세기 네덜란드에서 시민의 주택을 장식하는 감상화로 종교화를 그린 대표적 화가는 누구인가?\n", + "Generated 11 question for '앙드레(start pos_0)': 프랑스 군대에 복무하며 잉글랜드에 맞섰던 인물은 누구인가?\n", + "Generated 12 question for '테르나스코(start pos_26)': 아라곤 지방의 전통 미식을 상징하는 요리는 무엇인가?\n", + "Generated 13 question for '비자나무(start pos_0)': 우리나라의 내장산 이남과 일본에서 자라는 나무는 무엇인가?\n", + "Generated 14 question for '공황 발작(start pos_52)': 어떤 증상들이 10분 이내에 최고조에 이를 때 진단할 수 있는 상태는 무엇인가?\n", + "Generated 15 question for '조이(start pos_0)': 배우 리아 톰프슨과 영화 감독 하워드 도이치의 딸로 태어난 사람은 누구인가?\n", + "Generated 16 question for '잭슨(start pos_61)': 1814년 호스슈 벤드 전투에서 크리크 족의 레드 스틱스 일파를 상대로 승리한 후 국민적 영웅이 된 인물은 누구인가?\n", + "Generated 17 question for 'Paul Simon(start pos_17)': 1965년에 발매된 스튜디오 솔로 음반의 제목은 무엇인가?\n", + "Generated 18 question for '만경대학생소년궁전(start pos_0)': 평양직할시 만경대구역 팔골동에 위치한 과외교육기관은 무엇인가?\n", + "Generated 19 question for '크르팔레크(start pos_0)': 그랜드 슬램 파리에서 승리하여 새 올림픽 순환으로 들어간 선수는 누구인가?\n", + "Generated 20 question for 'SQL/PSM(start pos_0)': SQL의 절차적 언어 확장을 정의하는 ISO 표준은 무엇인가?\n", + "Generated 21 question for '김씨(start pos_1019)': 위 Context에서 다양한 성씨 중 가장 많이 언급된 성씨는 무엇인가?\n", + "Generated 22 question for '이월화(start pos_340)': 한국 최초의 여성 영화 배우로 연쇄극을 영화에 포함시키는 경우 누구를 꼽을 수 있는가?\n", + "Generated 23 question for '히가시(start pos_0)': 나고야 시 16구 중에서 제일 면적이 작은 구는 어디인가?\n", + "Generated 24 question for '표도르(start pos_0)': 1976년 9월 28일에 태어난 사람은 누구인가?\n", + "Generated 25 question for '4007+4008편성(start pos_51)': 2014년 1월 27일에 벨기에에서 운반된 열차 편성은 무엇인가?\n", + "Generated 26 question for '알렉산드로 볼타(start pos_19)': 배터리를 개발하여 한 쌍의 전극을 위치시켜 오늘날의 건전지 원리를 개발한 19세기 후반의 이탈리아 물리학자는 누구인가?\n", + "Generated 27 question for '앨버트 루툴리(start pos_0)': 1960년 아프리카 민족 회의의 발전과 아파르트헤이트 반대 운동을 주도한 공로로 노벨 평화상을 수상한 사람은 누구인가?\n", + "Generated 28 question for '오심(start pos_595)': 스위스와 대한민국의 경기에서 알렉산더 프라이의 골이 논란이 된 이유는 무엇인가?\n", + "Generated 29 question for '마라톤(start pos_377)': 제2회 전조선육상경기대회에서 16 mi 거리로 진행된 종목은 무엇인가?\n", + "Generated 30 question for '제2만덕터널(start pos_0)': 부산광역시 동래구 온천동과 북구 만덕동을 잇는 터널의 이름은 무엇인가?\n", + "Generated 31 question for '이보담(start pos_196)': 봉원사 주지로 1912년에 조선총독부의 인가를 받은 인물은 누구인가?\n", + "Generated 32 question for '캐서린(start pos_6)': 헨리 7세의 장남 웨일스 공 아서와 결혼한 사람은 누구인가?\n", + "Generated 33 question for '크리스티나(start pos_12)': 이라크 전쟁 중 어린 이라크 소녀의 관점에서 전쟁을 나타낸 노래를 발표한 가수는 누구인가?\n", + "Generated 34 question for '오카모토(start pos_15)': 게임센터 CX에 출연하여 크리에이터 인터뷰를 한 본작의 제작자는 누구인가?\n", + "Generated 35 question for '백지위임장(start pos_285)': 위임 사항이나 수임인 중 일부가 기재되지 않고 후에 보충하는 방식의 위임장은 무엇이라고 하는가?\n", + "Generated 36 question for '셰인 맥맨(start pos_0)': WWE에서 RAW 경영권을 요구한 인물은 누구인가?\n", + "Generated 37 question for '아일랜드(start pos_19)': 그가 1980년에 돌아와서 더블린의 아트 앤 디자인 국립대학(NCAD) 학장을 역임한 나라는 어디인가?\n", + "Generated 38 question for '크레보(start pos_0)': '크레바 법령'이 체결된 장소는 어디인가?\n", + "Generated 39 question for 'ComicStudio(start pos_129)': 디지털 환경에서 만화 제작 공정을 재현할 수 있는 소프트웨어는 무엇인가?\n", + "Generated 40 question for '내동(start pos_14)': 백제시대 노사지현에 속했던 지역은 무엇인가?\n", + "Generated 41 question for '수라바야(start pos_62)': 주안다 국제공항은 어느 도시로부터 12km 떨어진 곳에 위치해 있습니까?\n", + "Generated 42 question for 'Windows(start pos_42)': 《태합입지전III》는 어떤 운영 체제를 위한 CD-ROM판이 1999년 3월 5일에 발매되었나요?\n", + "Generated 43 question for 'NITD008(start pos_23)': 아데노신의 유사체 중 뎅기 바이러스의 RNA 의존적 RNA 중합효소를 저해하는 물질은 무엇인가?\n", + "Generated 44 question for '박칼린(start pos_0)': 뮤지컬 《명성황후》의 음악감독으로 참여한 인물은 누구인가?\n", + "Generated 45 question for '사운드하운드(start pos_18)': 음원 정보 검색 기술을 국산차에 최초로 적용하기 위해 2011년부터 협업한 회사는 무엇인가?\n", + "Generated 46 question for '\"I Kissed a Girl\"(start pos_9)': 어떤 노래가 발표된 후 빌보드 핫 100에서 1위를 했나요?\n", + "Generated 47 question for '명석(start pos_164)': 혜주에게 운전 교습을 맡은 사람은 누구인가?\n", + "Generated 48 question for '브렛(start pos_0)': 시드니 항구를 내려다보는 풍경을 그리는 것을 좋아했던 화가는 누구인가?\n", + "Generated 49 question for '풍승(start pos_20)': 1386년 12월, 명나라 홍무제에게 20만 명의 대군을 받아 몽골의 잔존 세력을 정벌하러 간 장군은 누구인가?\n", + "Generated 50 question for '미치류(start pos_166)': 어떤 동물들이 중생대에 거의 대부분 수중생활을 하였는가?\n", + "Generated 51 question for '블랙보드(start pos_0)': 온라인 학습 환경과 강의 관리 시스템을 제공하는 소프트웨어의 명칭은 무엇인가?\n", + "Generated 52 question for '더듬이(start pos_14)': 곤충의 머리에는 한 쌍의 무엇이 있나요?\n", + "Generated 53 question for '왕상(start pos_20)': 하평 2년에 성도후에 봉해진 인물은 누구인가?\n", + "Generated 54 question for '주술적 사고(start pos_212)': 물리적인 현상이나 사회 문제의 원인을 비합리적인 방법으로 해결하려고 하는 사고방식을 무엇이라고 하는가?\n", + "Generated 55 question for 'CP/M-86(start pos_91)': 인텔 8086 및 인텔 8088 CPU를 위해 개발된 운영 체제는 무엇인가?\n", + "Generated 56 question for '응봉(start pos_81)': 임금이 사냥할 때 매를 놓아 꿩을 잡았던 장소는 어디인가?\n", + "Generated 57 question for '납치(start pos_107)': 리비아 현지에서 발생한 사건은 어떤 유형의 범죄로 규정되었는가?\n", + "Generated 58 question for '유로 주화(start pos_0)': 유로존에 속해 있는 국가의 독자적인 주화 디자인을 사용하는 것은 무엇인가?\n", + "Generated 59 question for '겨울잠(start pos_7)': 붉은귀거북은 기온이 내려가면 어떤 상태에 접어드나요?\n", + "Generated 60 question for '반고(start pos_185)': 아버지 반표로부터 독서와 학문을 배운 인물은 누구인가?\n", + "Generated 61 question for '커크(start pos_184)': 8월 28일 오후 9시 (UTC) 저기압이 제11호 열대저기압으로 지정된 후 6시간 후에 발달한 열대폭풍의 이름은 무엇인가?\n", + "Generated 62 question for '조신철(start pos_171)': 포도대에 자수하여 체포된 사람은 누구인가?\n", + "Generated 63 question for '적상산사고본(start pos_718)': 6.25전쟁 당시 북한으로 유출되어 보존되고 있다고 전해지며, 이번에 확인된 실록의 종류는 무엇인가?\n", + "Generated 64 question for '안우준(start pos_147)': 경성부 종로통 6정목 260번지에 위치한 저택의 주인은 누구인가?\n", + "Generated 65 question for '플라워 파워(start pos_22)': 1960년대 반전 시위의 주요 이미지가 된 운동은 무엇인가?\n", + "Generated 66 question for '육류(start pos_41)': 동물에서 직접적으로 얻는 고기를 무엇이라고 하나?\n", + "Generated 67 question for '고려대학교(start pos_1009)': 김성수가 인수하여 대학의 면모를 갖추게 된 학교는 어디인가?\n", + "Generated 68 question for '테뫼산성(start pos_0)': 세종특별자치시 부강면 부강리 퇴뫼마을 뒷산 정상부에 위치한 성은 무엇인가?\n", + "Generated 69 question for '지쿠호(start pos_18)': 후쿠오카 현의 중앙부에 위치하는 지방은 어디인가?\n", + "Generated 70 question for '진주(start pos_0)': 진주 용암사지 승탑은 어느 지역에 위치하고 있는가?\n", + "Generated 71 question for '굴착기(start pos_255)': 2014년 4월에 칼레도니아역에 도착한 것은 무엇인가?\n", + "Generated 72 question for '카시오페이아자리 감마(start pos_484)': 비이형 별로 최초로 판명된 천체는 무엇인가?\n", + "Generated 73 question for '유비트(start pos_0)': 일본의 비디오 게임 개발사인 코나미에서 발매한 음악 게임의 이름은 무엇인가?\n", + "Generated 74 question for '레벨(start pos_9)': 투닷츠에서 각 목표를 달성해야 하는 게임의 단위는 무엇인가?\n", + "Generated 75 question for '가고시마(start pos_31)': \"남 일본 신문\"의 본사는 어느 지역에 위치하고 있었나요?\n", + "Generated 76 question for '왕페이(start pos_22)': 1995년에 덩리쥔의 노래를 자신만의 스타일로 다시 부른 가수는 누구인가?\n", + "Generated 77 question for '잠수함(start pos_4)': 북한이 1960년대 후반에 소련으로부터 제공받은 것은 무엇인가?\n", + "Generated 78 question for '운흥사(start pos_11)': 통일신라 문무왕 16년에 의상대사가 처음 지은 사찰은 무엇인가?\n", + "Generated 79 question for '드레퓌스(start pos_0)': 1894년 독일에 군사 기밀서류를 팔았다는 혐의로 체포된 포병 대위는 누구인가?\n", + "Generated 80 question for '대법관(start pos_350)': 제1공화국 말기인 1959년 3월에 임명된 법원 직책은 무엇인가?\n", + "Generated 81 question for '하노이(start pos_331)': 2019년 2월에 열린 북미정상회담은 어느 도시에서 개최되었는가?\n", + "Generated 82 question for '엔테로톡신(start pos_0)': 장관에 작용하여 구토, 설사, 복통을 일으키는 물질은 무엇인가?\n", + "Generated 83 question for '이에마사(start pos_111)': 1599년 이시다 미쓰나리를 습격하는 사건에 참가했을 수도, 참가하지 않았을 수도 있는 인물은 누구인가?\n", + "Generated 84 question for '고드프루아(start pos_390)': 예루살렘 함락 후 성묘의 수호자라는 칭호를 받은 사람은 누구인가?\n", + "Generated 85 question for '세르빌리아(start pos_307)': 카이사르가 오랜 갈리아 전쟁을 끝내고 돌아왔을 때 엄청나게 값비싼 흑진주를 선물한 사람은 누구인가?\n", + "Generated 86 question for '쿠키(start pos_0)': 인터넷 사용자가 웹사이트를 방문할 때, 그 사이트가 사용자의 컴퓨터에 설치하는 작은 기록 정보 파일은 무엇인가?\n", + "Generated 87 question for '고려시대(start pos_168)': 용선대 석조여래좌상의 머리 형식은 어느 시대의 불상 형식을 따르고 있는가?\n", + "Generated 88 question for '위화(start pos_0)': 중국 제 3세대 문학을 대표하는 작가는 누구인가?\n", + "Generated 89 question for '마부르크(start pos_105)': 어느 대학교에서 하인츠 마우스 교수와 함께 비판이론을 공부했는가?\n", + "Generated 90 question for '영등포(start pos_46)': 북한군이 한강을 도하한 후 합류하여 석권하게 된 지역은 어디인가?\n", + "Generated 91 question for '토당동(start pos_33)': 행주동의 동사무소가 위치한 지역은 어디인가?\n", + "Generated 92 question for '텔레워크(start pos_164)': 일본에서는 코로나19 확산에 대응하여 각 기업이나 사업체에서 대안으로 제시한 근무 형태는 무엇인가?\n", + "Generated 93 question for '합작문예(start pos_80)': 와카의 상구와 하구를 몇 사람이 교대로 지어 나가는 문예 형식은 무엇인가?\n", + "Generated 94 question for '플레이오네(start pos_31)': 지구로부터 황소자리 방향으로 약 390 광년 떨어져 있는 쌍성은 무엇인가?\n", + "Generated 95 question for '이강원(start pos_40)': 제25회 사법시험에 합격해 제15기 사법연수원과 군 법무관을 마친 사람은 누구인가?\n", + "Generated 96 question for '크리스테르(start pos_158)': 2014년 1월 기준으로 에스페란토 학술회의 회장은 누구인가?\n", + "Generated 97 question for '알스함마르(start pos_11)': 솔나에서 크리스테르 알스함마르와 7위를 한 올림픽 평영 선수 브리트-마리 스메드 사이에서 태어난 수영 선수는 누구인가?\n", + "Generated 98 question for '디아스(start pos_72)': 쿠데타로 대통령이 된 후 예수회를 다시 불러들인 사람은 누구인가?\n", + "Generated 99 question for '모스크바(start pos_5)': '모스크바를 목표로'는 어떤 도시와 관련이 있는가?\n", + "Generated 100 question for '크리스틴(start pos_7)': 자기를 구해준 미남이며 건달인 기사 에르렌을 사모하여 몸을 맡기게 된 청순하고 아름다운 소녀는 누구인가?\n", + "Generated 101 question for '나카모리 아키나(start pos_75)': 〈후타리시즈카 -「천하전설살인사건」으로부터〉를 부른 일본의 여가수는 누구인가?\n", + "Generated 102 question for '마크47(start pos_452)': 미국 육군이 XM307 대신 채택한 무기는 무엇인가?\n", + "Generated 103 question for '프란츠 파농(start pos_169)': 제2차 세계 대전 중 프랑스군에 지원해 파시즘 세력과의 전투에 참여한 인물은 누구인가?\n", + "Generated 104 question for '인광석(start pos_0)': 인광석 전쟁(Fosforiidisõda)에서 개발하려고 했던 자원은 무엇인가?\n", + "Generated 105 question for '푸둥지구(start pos_207)': 상하이자유무역지대가 1단계에서 앞으로 확장될 전체 지역은 어디인가?\n", + "Generated 106 question for '반자동(start pos_93)': AVS-36 소총은 어떤 사격 모드로 전환할 수 있었나요?\n", + "Generated 107 question for '수성(start pos_22)': 매리너 10호가 근접 관측한 행성은 무엇인가?\n", + "Generated 108 question for '청산(start pos_345)': GKN KOREA는 2019년 11월 29일자로 한국내 직원에게 무엇을 공지했는가?\n", + "Generated 109 question for '수운교(start pos_14)': 동학계의 일파로서 수운천사를 교주로 삼고 있는 종교는 무엇인가?\n", + "Generated 110 question for '디스피아(start pos_9)': 온 세상의 꿈을 증오하고 질투하여 절망으로 바꾸는 마녀는 누구인가?\n", + "Generated 111 question for '토르(start pos_12)': 세계 최초로 개발된 대공 미사일 시스템은 무엇인가?\n", + "Generated 112 question for '목표(start pos_18)': 미션 계좌를 만들 때 설정해야 하는 것은 무엇인가?\n", + "Generated 113 question for '실념(start pos_0)': 정념(正念)의 반대 개념은 무엇인가?\n", + "Generated 114 question for '이스라엘(start pos_161)': 유대인들이 고대의 고향으로 돌아가고자 했던 마음이 담긴 나라는 어디인가?\n", + "Generated 115 question for '나가스네히코(start pos_45)': \"고사기\"에서 진무 동정 장면에 저항한 호족의 이름은 무엇인가?\n", + "Generated 116 question for '슈트레제만(start pos_39)': 바이마르 공화국 제헌의회 의원을 지내면서 새로운 독일헌법에 반대하고 베르사유 조약 개정에 자신의 정치인생을 바친 인물은 누구인가?\n", + "Generated 117 question for 'Fantasy Flight Games(start pos_107)': 2012년 11월에 두 번째 판본을 출시한 회사는 어디인가?\n", + "Generated 118 question for '초인(start pos_19)': 규남과 경찰서에서 총격전을 벌이게 된 인물은 누구인가?\n", + "Generated 119 question for 'KORD(start pos_39)': 1969년 2월 21일 발생한 로켓 엔진 정지의 원인은 무엇인가?\n", + "Generated 120 question for '스파크(start pos_11)': 제1차 세계 대전 동안 육군에 입대하기 위해 자신의 나이에 대해 거짓말을 한 사람은 누구인가?\n", + "Generated 121 question for '볼트(start pos_188)': 라판이 개발한 전술 시스템은 무엇으로 불리우는가?\n", + "Generated 122 question for '창더(start pos_244)': 호남성 제2행정독찰구는 1948년에 무엇으로 개명되었는가?\n", + "Generated 123 question for '겐오도(start pos_210)': 수도권 중앙 연락 자동차도의 약칭은 무엇인가요?\n", + "Generated 124 question for '유사장기(start pos_247)': 모델 동물보다 인간에 가까운 생리 활성을 나타내는 것은 무엇인가?\n", + "Generated 125 question for '라이베리아(start pos_177)': 어느 나라가 한국 전쟁에 참가하지 않았으나 대한민국에 물자를 지원했으며, 현재 나이지리아 대사가 대사를 겸임하고 있는가?\n", + "Generated 126 question for '키노(start pos_2)': 소설의 주인공으로서 여러 나라를 돌아다니며 패스에이더 4단의 실력을 가진 인물은 누구인가?\n", + "Generated 127 question for '발라크(start pos_0)': 동서독 통일 이후에 동독 출신으로 독일 축구 국가대표팀의 주장으로 선임된 선수는 누구인가?\n", + "Generated 128 question for '사수(start pos_190)': 아뢰야식과 상응하는 수(受)는 무엇인가?\n", + "Generated 129 question for '구토(start pos_73)': 어떤 상황에서 메스꺼운 느낌 없이도 발생할 수 있는 현상은 무엇인가?\n", + "Generated 130 question for '철기(start pos_4)': 철기 시대에는 주로 어떤 재료를 사용하여 도구나 무기를 만들었는가?\n", + "Generated 131 question for '히가시데(start pos_107)': 감독 추천으로 올스타전에 출전한 선수는 누구인가?\n", + "Generated 132 question for '배미향(start pos_0)': '저녁스케치' 라디오 프로그램을 제작하고 진행하는 사람은 누구인가?\n", + "Generated 133 question for '이구(start pos_98)': 황세손으로 불린 인물은 누구인가?\n", + "Generated 134 question for '나가사키(start pos_265)': 두 번째 원자폭탄 팻 맨이 투하된 도시는 어디인가?\n", + "Generated 135 question for '친일파(start pos_690)': 위 인물은 어떤 명단에 포함되었는가?\n", + "Generated 136 question for '피논의 정리(start pos_0)': 20세기에 많은 양의 부동점 정리와 부동점 이론의 발전에 기여한 정리는 무엇인가?\n", + "Generated 137 question for '러브파(start pos_0)': 지진학에서 수평으로 편광된 표면파로, 지진이 일어날 때 땅을 수평으로 흔들리게 만드는 표면 지진파는 무엇인가?\n", + "Generated 138 question for 'GTO(start pos_134)': 편성 양단의 동력차에서 출력이 높은 경우에 사용되는 제어 방식은 무엇인가?\n", + "Generated 139 question for '인천(start pos_64)': 유엔군과 대한민국 국군이 어느 지역에 진입하였는가?\n", + "Generated 140 question for '군자정(start pos_46)': 정여창 선생의 처가가 있는 마을에서 선생이 유영하던 곳은 어디인가?\n", + "Generated 141 question for '로베르트(start pos_32)': 기민련 노르트라인베스트팔렌 주당 대표로 주지사 후보로 선출된 사람은 누구인가?\n", + "Generated 142 question for '암흑 물질(start pos_215)': 머리털 바람개비 은하가 많이 포함하고 있는 물질은 무엇인가?\n", + "Generated 143 question for '몽크뭉크(start pos_21)': 1997년에 창간된 한국 최초의 재즈 월간지는 무엇인가?\n", + "Generated 144 question for 'SS-19 Mod-1(start pos_1)': 어떤 미사일이 1975년 12월 30일에 실전 배치되었으며, 500-750 kt MIRV 6발을 탑재하고 있습니까?\n", + "Generated 145 question for '호조 마키(start pos_0)': 2009년 4월 소속사의 변경으로 새 예명을 사용하게 된 일본 성인 비디오 여배우는 누구인가?\n", + "Generated 146 question for '스프링스틴(start pos_436)': 뉴저지주 롱브랜치에서 태어나 1960년대 중반에 동부 해안의 작은 나이트클럽에서 노래를 부르기 시작한 사람은 누구인가?\n", + "Generated 147 question for '마테오 리치(start pos_55)': 명나라에 파견된 예수회 소속 선교사 중 대표적인 인물은 누구인가?\n", + "Generated 148 question for '후광효과(start pos_83)': 평가 일치 추론에서 개인이 한 분야에서 뛰어난 특질을 지닐 경우, 다른 분야에서도 뛰어날 것이라고 생각하는 현상은 무엇인가?\n", + "Generated 149 question for '스타워즈(start pos_480)': 《파이널 판타지 II》는 어떤 영화의 영향을 크게 받았나요?\n", + "Generated 150 question for '아나운서(start pos_78)': 1994년 10월 KBS 공채22기로 어떤 직업을 시작했는가?\n", + "Generated 151 question for '진공 청소기(start pos_418)': 주생활에 관계되는 기계·기구 중 보급률이 높은 청소용 기계는 무엇인가?\n", + "Generated 152 question for '이사벨(start pos_127)': 프랑스 출신의 왕녀나 공녀가 아님에도 불구하고 카스티야의 왕비가 된 인물은 누구인가?\n", + "Generated 153 question for '인장력(start pos_175)': 행성 십자배열은 무엇의 근원으로 보이는가?\n", + "Generated 154 question for '하노이(start pos_171)': 프랑스령 인도차이나 군의 사령부는 어디에 위치하고 있는가?\n", + "Generated 155 question for '구안(start pos_52)': 제갈량의 명령을 어기고 식량 운송을 게을리하여 위나라에 투항한 인물은 누구인가?\n", + "Generated 156 question for '슈퍼주니어(start pos_24)': 《MAMACITA》는 어느 그룹의 7번째 정규 앨범인가?\n", + "Generated 157 question for 'Exquisite(start pos_8)': 워페인트의 데뷔 EP 제목은 무엇인가?\n", + "Generated 158 question for '케플러(start pos_258)': 갈릴레이가 무례하게 무시하고 업적에 관심을 기울이지 않은 동시대의 천문학자는 누구인가?\n", + "Generated 159 question for 'ZIM(start pos_87)': FIFA 랭킹이 2019년 7월 기준으로 112위인 나라는 어디인가?\n", + "Generated 160 question for 'Comores(start pos_117)': 어느 국가의 동일한 종교적 힘을 강조하고 있는 나라는?\n", + "Generated 161 question for '모곤티아쿰(start pos_317)': 로마의 전략적 병력들이 위치한 거점은 어디인가?\n", + "Generated 162 question for '트로이(start pos_19)': 송년회에서 소녀와 듀엣공연을 펼친 사람은 누구인가?\n", + "Generated 163 question for '슌텐(start pos_0)': 류큐 왕국의 초대 국왕으로 기록된 인물은 누구인가?\n", + "Generated 164 question for '바나흐(start pos_6)': 제1차 세계 대전 당시 왼손잡이이며 근시라는 이유로 군 징집을 면제받은 사람은 누구인가?\n", + "Generated 165 question for '펩타이드 절단(start pos_64)': 단백질의 1차 구조에서 가장 중요한 변형은 무엇인가?\n", + "Generated 166 question for '후버 댐(start pos_0)': 콜로라도 강을 다스릴 프로젝트의 일환으로 건설된 댐은 무엇인가?\n", + "Generated 167 question for '이시이 히로토시(start pos_0)': 이시이 히로토시의 부상으로 인해 월드 베이스볼 클래식 일본 국가대표팀에 2라운드부터 발탁된 선수는 누구인가?\n", + "Generated 168 question for '안드레이 마카레비치(start pos_0)': 모스크바에서 미생물학자로 근무하던 유대계 러시아인 어머니와 건축가로 근무하던 벨라루스계 러시아인 아버지 사이에서 태어난 사람은 누구인가?\n", + "Generated 169 question for '하산 부즈루그(start pos_133)': 1336년 7월, 알리 파드샤를 살해하고 타브리즈로 진격하여 아부 사이드의 미망인과 결혼한 인물은 누구인가?\n", + "Generated 170 question for '구산성(start pos_14)': 경상남도 진해시 자은동의 해발 116m의 산 정상에 위치한 산성의 이름은 무엇인가?\n", + "Generated 171 question for '장면(start pos_733)': 4.19 부상자들이 국회로 난입했을 때 특별 대응을 거부한 인물은 누구인가?\n", + "Generated 172 question for '시오바스(start pos_0)': 2012년 UEFA U-19 축구 선수권 대회에서 그리스 U-19 국가대표팀의 일원이었던 선수는 누구인가?\n", + "Generated 173 question for 'KHP(start pos_0)': KMH01의 사업명이 변경된 후의 이름은 무엇인가?\n", + "Generated 174 question for 'AKB48(start pos_414)': 〈Everyday, 카츄샤〉는 어느 그룹의 21번째 싱글인가?\n", + "Generated 175 question for '하파에우(start pos_18)': 스위스에 이주하여 FC 키아소에서 프로 데뷔전을 치룬 선수는 누구인가?\n", + "Generated 176 question for '세이부형(start pos_9)': 자사 노선용으로 탑재된 ATS 장치의 형식은 무엇인가?\n", + "Generated 177 question for '중성자-4(start pos_326)': 마르퀴에 실험팀의 실험 결과에서 중성자 4개가 결합된 입자가 무엇임을 암시하는가?\n", + "Generated 178 question for '크루 드래곤(start pos_73)': 컬럼비아호 이후 최초로 발사되는 미국 유인우주선은 무엇인가?\n", + "Generated 179 question for '내성(start pos_46)': 할미산성은 공유 벽을 기준으로 북쪽의 무엇과 남쪽의 외성으로 구분되는가?\n", + "Generated 180 question for '뉴타입(start pos_4)': 일본에서 발행되는 애니메이션 전문 잡지의 이름은 무엇인가?\n", + "Generated 181 question for '어택(start pos_115)': 신호가 트레숄드를 넘자마자 즉시 컴프레싱되어 정해진 트레숄드 레벨에 도달할 때까지의 시간을 무엇이라고 하는가?\n", + "Generated 182 question for '김세현(start pos_0)': 대전에서 유년시절을 보낸 작가는 누구인가?\n", + "Generated 183 question for '입법의회(start pos_0)': 1791년 10월 1일부터 1792년 9월 5일까지 프랑스 왕국의 입헌군주제 정권 하에서 활동한 회의는 무엇인가?\n", + "Generated 184 question for '하버드(start pos_14)': 과잠 문화의 시초가 된 대학은 어디인가?\n", + "Generated 185 question for '서울유통센터(start pos_0)': 소상공인과 중소기업의 판로개척을 위해 설립된 것은 무엇인가?\n", + "Generated 186 question for '카일(start pos_120)': 애플이 계획한 \"혁신적인 새 제품\"의 일부분이 되어 버린 인물은 누구인가?\n", + "Generated 187 question for '그리드 패리티(start pos_0)': 대체에너지의 단가가 일반 전력회사에서 전력을 구입하는 가격보다 작거나 동등한 수준의 비용으로 공급받을 수 있는 상황을 무엇이라고 하나요?\n", + "Generated 188 question for '김태준(start pos_134)': 경성제국대학을 졸업한 국문학자이자 독립운동가는 누구인가?\n", + "Generated 189 question for '플로리안(start pos_113)': 부다페스트 수비를 맡게 된 인물은 누구인가?\n", + "Generated 190 question for '야스쿠니(start pos_37)': 1997년부터 10년에 걸쳐 리잉 감독이 취재한 신사는 무엇인가?\n", + "Generated 191 question for '자립생활(start pos_0)': 장애인들이 본질적으로 시민이며 사회 참여의 동일한 권리와 선택권을 가지기 위해 추구하는 이념은 무엇인가?\n", + "Generated 192 question for '쌀(start pos_185)': 중서부 지역에서 대부분의 음식은 어떤 재료로 만들어지나요?\n", + "Generated 193 question for '이금민(start pos_0)': 2009년 AFC U-16 여자 축구 선수권 대회에서 대한민국의 우승에 기여한 선수는 누구인가?\n", + "Generated 194 question for '허아무개(start pos_80)': 1월 24일 사고지점에서 회색 계통 쉐보레 윈스톰을 운전한 용의자는 누구인가?\n", + "Generated 195 question for '지도자(start pos_1)': 긴테쓰 버펄로스 1군 작전 겸 배터리 코치는 어떤 직책인가?\n", + "Generated 196 question for '게오르크 라칭거(start pos_0)': 1994년에 성가대 지휘자에서 은퇴한 사람은 누구인가?\n", + "Generated 197 question for '타이먼(start pos_7)': 조건 없이 베풀며 아테네 시민들에게 존경받았으나 결국 파산한 인물은 누구인가?\n", + "Generated 198 question for '박웅(start pos_233)': 한국연극배우협회의 1대부터 3대까지 회장을 역임한 사람은 누구인가?\n", + "Generated 199 question for '스카롱(start pos_267)': <가짜 비르지르>의 작가는 누구인가?\n", + "Generated 200 question for '티베트족(start pos_0)': 주민 수가 가장 많은 민족은 무엇인가?\n", + "Generated 201 question for '무주리조트(start pos_16)': 부영그룹이 2011년 4월에 인수한 리조트의 원래 명칭은 무엇인가?\n", + "Generated 202 question for 'NPSHa(start pos_353)': 펌프의 설치 조건에 따라 결정되는 값으로, 공동화현상 발생 가능성을 점검하는 척도는 무엇인가?\n", + "Generated 203 question for '대목왕후(start pos_219)': 태조와 신정왕후의 딸로 태어나 광종과 혼인한 후 왕비가 된 인물은 누구인가?\n", + "Generated 204 question for '마쓰가사키(start pos_58)': 헤이안쿄 천도 직후부터 벼 농사가 열린 기록이 있는 지역은 어디인가?\n", + "Generated 205 question for 'Dendrolagus(start pos_12)': 황금망토나무타기캥거루는 어떤 속에 속하는 나무타기캥거루인가?\n", + "Generated 206 question for '미프 히스(start pos_202)': 안네의 일기 원고를 오토 프랑크에게 건네준 사람은 누구인가?\n", + "Generated 207 question for '신경절(start pos_11)': 중추신경계는 무엇으로 구성되어 있는가?\n", + "Generated 208 question for '몰(start pos_188)': LST-738 승무원들을 구조한 구축함의 이름은 무엇인가?\n", + "Keyword '키보드뷰어' not found in text.\n", + "Generated 210 question for 'Judas(start pos_544)': 1966년 5월 영국 맨체스터 콘서트에서 밥 딜런을 향해 한 관객이 외친 말은 무엇인가?\n", + "Generated 211 question for '가은중학교(start pos_0)': 경북에 위치한 중학교 중 가장 먼저 나오는 학교 이름은 무엇인가?\n", + "Generated 212 question for '스카이마크 스타디움(start pos_310)': 어느 경기장에서 4승을 기록했는가?\n", + "Generated 213 question for '하트라(start pos_0)': 시아파 정부군이 6월 10일에 반정부군을 공격한 마을의 이름은 무엇인가?\n", + "Generated 214 question for '노엘(start pos_0)': 곡의 작곡에 대해 \"이걸 내가 쓰다니, 믿을 수가 없어\"라고 말한 사람은 누구인가?\n", + "Generated 215 question for '강릉원주대학교(start pos_0)': 강릉대학이 1991년 종합대학교로 승격되면서 변경된 교명은 무엇인가?\n", + "Generated 216 question for '무사예프(start pos_308)': 아제르바이잔 축구 리그의 불안정한 상황을 안정시킬 수 있는 권한을 가진 AFFA 회장은 누구인가?\n", + "Generated 217 question for '차민규(start pos_0)': 2018년 동계 올림픽 스피드스케이팅 남자 500m에서 은메달을 차지한 대한민국의 선수는 누구인가?\n", + "Generated 218 question for '늑대(start pos_1)': 두 종류의 머리 둘 달린 생명체 중 하나는 갈색이고 다른 하나는 하얀색입니다. 이 생명체는 무엇인가요?\n", + "Generated 219 question for '표트르(start pos_32)': 조선소는 대북방 전쟁 동안 누구에 의해 설립되었는가?\n", + "Generated 220 question for '유성우(start pos_605)': 지구가 유성체 흐름을 휩쓸고 지나갈 때 발생하는 현상은 무엇인가?\n", + "Generated 221 question for '육손(start pos_130)': 여몽의 후임으로 형주 수비를 맡게 된 인물은 누구인가?\n", + "Generated 222 question for '서울(start pos_0)': 종로구 종로3길 17 디타워 D2 23층에 위치한 도시는 어디인가?\n", + "Generated 223 question for '전봉준(start pos_92)': 고부 민란을 시작으로 발발한 농민 운동에서 남접계 지도자 중 한 명은 누구인가?\n", + "Generated 224 question for '소녀시대(start pos_128)': 1월 16일과 1월 23일, 1월 30일의 디지털 음원 차트에서 1위를 한 가수는 누구인가?\n", + "Generated 225 question for '경주 남산(start pos_0)': 신라 천년의 역사 속에서 가장 신성시 되어왔던 곳은 어디인가?\n", + "Generated 226 question for '산청(start pos_18)': 어디에서 1908년에 태어났는가?\n", + "Generated 227 question for 'DCB(start pos_70)': IBM 메인프레임 운영 체제에서 프로그램의 데이터 세트에 대한 서술을 제공하는 제어 블록은 무엇인가?\n", + "Generated 228 question for '가나야마(start pos_29)': 가나야마 산 전산이 산성을 이루고 있는 산의 이름은 무엇인가?\n", + "Generated 229 question for '현시연(start pos_379)': 일본어판에서 9권으로 완결된 만화책의 제목은 무엇인가?\n", + "Generated 230 question for 'Dirty Work(start pos_264)': 올 타임 로우의 네 번째 정규 앨범 이름은 무엇인가?\n", + "Generated 231 question for 'Heading Out to the Highway(start pos_21)': 이 음반에서 발매된 싱글 중 라이브 쇼에서 주류를 이루고 있는 곡은 무엇인가?\n", + "Generated 232 question for '남양(start pos_0)': 경기도 화성시 남양읍 일대의 지명은 무엇인가?\n", + "Generated 233 question for '스피츠(start pos_27)': 2세 때 가족과 함께 하와이주 호놀룰루로 이주하여 와이키키 해변에서 수영을 한 사람은 누구인가?\n", + "Generated 234 question for '초콜릿(start pos_60)': 팽 오 쇼콜라의 반죽 중간에 들어가는 것은 무엇인가?\n", + "Generated 235 question for '완결(start pos_22)': '투 러브 트러블'의 일본어판은 몇 권으로 완결되었나요?\n", + "Generated 236 question for '1583년(start pos_376)': 책의 간행 연대는 언제인가?\n", + "Generated 237 question for '제2차(start pos_132)': 세미놀 전쟁 중 가장 오랫동안 계속된 전쟁은 몇 차 전쟁인가?\n", + "Generated 238 question for '츠빙글리(start pos_306)': 스위스의 종교 개혁가 중 용병제도에 반대하며 \"황소의 우화\"를 통해 비판한 인물은 누구인가?\n", + "Generated 239 question for '갈리(start pos_446)': 고철 산에서 머리와 가슴만 남은 채 발견되어 이드 다이스케에 의해 소생된 사이보그 소녀의 이름은 무엇인가?\n", + "Generated 240 question for '방탄소년단(start pos_298)': 2020년 9월부터 11월까지 가장 오랜 기간 동안 1위를 차지한 가수는 누구인가?\n", + "Generated 241 question for 'IEC 60601-1(start pos_6)': 의료용 전기 장비의 상용화를 위한 널리 인정된 벤치 마크는 무엇인가?\n", + "Generated 242 question for '하모니카(start pos_0)': 입술을 구멍 위에 놓고 공기를 불거나 빼면서 연주하는 프리 리드 관악기는 무엇인가?\n", + "Generated 243 question for '장온(start pos_48)': 손권이 공경들에게 현재 누구와 견줄 만한지 물은 인물은 누구인가?\n", + "Generated 244 question for '데이터베이스(start pos_14)': 소프트웨어 개발 공정에서 데이터베이스 설계는 무엇의 상세한 자료 모형을 만드는 과정인가?\n", + "Generated 245 question for '이목(start pos_608)': 조나라의 군대를 이끌고 진나라군을 대파한 인물은 누구인가?\n", + "Generated 246 question for 'OLAP(start pos_313)': 오늘날의 정보보고 시스템에서 데이터베이스에 저장된 데이터를 관리자에게 실시간으로 분석하여 제공하는 시스템은 무엇인가?\n", + "Generated 247 question for 'Šaǰara-ye terākema(start pos_81)': 1659년 또는 1660년에 쓰여진 튀르크멘 부족들의 계보에 대한 책은 무엇인가?\n", + "Generated 248 question for '채플린(start pos_0)': 라이스 옥슬리를 어쿠스틱 기타리스트로 밴드에 초대한 사람은 누구인가?\n", + "Generated 249 question for '유우키(start pos_1)': 용자부 부원 중 성이 '결성'인 사람은 누구인가?\n", + "Generated 250 question for '아말감(start pos_0)': 중국에서 서기 659년 당나라의 소공에 의해 처음 사용된 것으로 보고된 치과 수복 재료는 무엇인가?\n", + "Generated 251 question for '케임브리지(start pos_115)': 한국 전적 가운데 고려사 전질이 소장된 영국의 대학 도서관은 어디인가?\n", + "Generated 252 question for '식인(start pos_220)': 박스그로브맨의 정강뼈에서 발견된 다른 사람의 이빨자국은 하이델베르크인이 어떤 풍습을 지녔다는 증거인가?\n", + "Generated 253 question for '고종(start pos_71)': 헤이그 특사 사건에서 밀사를 파견하기로 계획한 사람들에게 신임장을 준 이는 누구인가?\n", + "Generated 254 question for '보그트(start pos_6)': 하이델베르크 대학교의 전임 교수로 1933년에 임명된 사람은 누구인가?\n", + "Generated 255 question for '화암사판(start pos_229)': 1443년에 조성된 판본으로, 병자사화 이후 성씨 일가의 이름이 산삭된 후 다시 인출된 판본은 무엇인가?\n", + "Generated 256 question for '특허(start pos_0)': 국가 또는 지방자치단체가 법령이나 조례를 통해 설립한 특수 법인 기업에서 사인에게 공익 사업 경영권을 설정해 주는 행위를 무엇이라고 부르는가?\n", + "Generated 257 question for '트라이엄프(start pos_0)': 슈피스호퍼와 브라운이 1902년에 파리의 에투알 개선문을 연상시키며 등록한 상표는 무엇인가?\n", + "Generated 258 question for '이등변 삼각형(start pos_7)': 두 변의 길이가 같은 삼각형을 무엇이라고 하는가?\n", + "Generated 259 question for '마커스 보그(start pos_0)': 미국 미네소타에서 스웨덴과 노르웨이계 가정에서 태어난 사람은 누구인가?\n", + "Generated 260 question for '조선연극협회(start pos_181)': 일제 강점기 말기에 여러 극단 및 연극 관련 단체를 가맹시켜 조직한 단체는 무엇인가?\n", + "Generated 261 question for '포르케타(start pos_0)': 이탈리아의 전통 요리로 비계가 없는 돼지 살코기를 조리한 음식은 무엇인가?\n", + "Generated 262 question for '오스터(start pos_0)': 오스터 음모사건에서 쿠데타 계획의 핵심 주동자는 누구인가?\n", + "Generated 263 question for '오가사와라(start pos_24)': 시나노 공략에 저항하며 다케다 하루노부와 싸운 성씨는 무엇인가?\n", + "Generated 264 question for '미야케(start pos_85)': 일본 야구계에서 최상급의 3루 수비 실력을 가진 선수는 누구인가?\n", + "Generated 265 question for '니더작센(start pos_261)': 독립된 하노버 주가 다른 여러 주들과 합쳐져서 형성된 주는 무엇인가?\n", + "Generated 266 question for '방귀온(start pos_188)': 효행이 있고 거상을 잘하여 전라도관찰사 조원기의 추천을 받은 나주 출신의 진사는 누구인가?\n", + "Generated 267 question for 'Nostalgia(start pos_576)': GARNET CROW의 마지막 싱글은 무엇인가?\n", + "Generated 268 question for '살뤼스트(start pos_6)': 스페인의 샤를 2세 휘하의 장관이자 음모를 꾸민 인물은 누구인가?\n", + "Generated 269 question for '다국적기업(start pos_316)': 세계 타이어 공업을 주도할 것으로 전망되는 기업들은 어떤 유형의 기업들인가?\n", + "Generated 270 question for 'macOS(start pos_0)': 2016년 6월 13일에 OS X의 새로운 이름은 무엇으로 변경되었는가?\n", + "Generated 271 question for '세군다(start pos_57)': 포르투갈에서 1990년도 전까지 프리메이라 디비장 다음 하위 리그는 무엇이라고 불렸는가?\n", + "Generated 272 question for '데르자빈(start pos_5)': 가난한 귀족 출신으로, 사병생활 끝에 장교가 되어 군대복무를 오래 하다가 나중에는 문관이 된 러시아의 시인은 누구인가?\n", + "Generated 273 question for '페드루 2세(start pos_0)': 브라질 제국의 제2대 황제는 누구인가?\n", + "Generated 274 question for '자이코(start pos_9)': 겨울의 어느날, 시게루테 모테오라는 소년을 만난 사람은 누구인가?\n", + "Generated 275 question for '김광제(start pos_63)': 대구광문사의 사장으로 대구민의소 설립에 참여한 인물은 누구인가?\n", + "Generated 276 question for '1983년(start pos_269)': E형 간염바이러스 입자가 처음 발견된 해는 언제인가?\n", + "Generated 277 question for '최용주(start pos_0)': 2010년 상반기 드래프트에서 KT 롤스터의 1차 지명으로 입단한 스타크래프트 프로게이머는 누구인가?\n", + "Generated 278 question for 'ISIL(start pos_245)': 2014년 6월 이라크 북부 공세를 펼친 무장단체는 무엇인가?\n", + "Generated 279 question for 'MLC(start pos_49)': 멀티플 레벨을 활용하여 한 셀 당 1 비트 이상의 정보를 저장하는 기술은 무엇인가?\n", + "Generated 280 question for '채의(start pos_178)': 소제가 한시(韓詩)에 밝은 자를 찾는 조서를 내렸을 때 부름을 받았으나 오랫동안 알현하지 못한 인물은 누구인가?\n", + "Generated 281 question for '질량(start pos_170)': 랄랑드 21185에 존재 가능한 행성의 무엇에 상한선을 설정하는가?\n", + "Generated 282 question for 'caro(start pos_136)': 에스페란토 단어 중 러시아어의 \"царь\"에서 유래한 단어는 무엇인가?\n", + "Generated 283 question for '나츠미(start pos_90)': 스포츠 만능이며 성적이 우수한 팔방미인은 누구인가?\n", + "Generated 284 question for '사도(start pos_0)': 인간에 비해 월등히 강한 생명력을 자랑하고, A.T Field를 펼쳐 방어막으로 이용하는 존재는 무엇인가?\n", + "Generated 285 question for '파르도(start pos_0)': 2011년 10월 29일 레알 마드리드와의 경기에서 막판에 마르켈 베르가라와 교체되어 들어가 1군 첫 경기를 치른 선수는 누구인가?\n", + "Generated 286 question for '리공온(start pos_310)': 전 레 왕조의 혼란을 틈타 황제로 즉위하여 리 왕조를 창건한 인물은 누구인가?\n", + "Generated 287 question for '크로스오버(start pos_55)': 윈도우 응용 소프트웨어를 macOS와 리눅스에서 구동하기 위해 코드위버스가 판매하는 사유 버전의 와인은 무엇인가?\n", + "Generated 288 question for '카린(start pos_20)': 1923년 1월 3일 헤르만 괴링과 결혼한 사람은 누구인가?\n", + "Generated 289 question for '오사카(start pos_0)': 2005년 제44회 일본 중의원 의원 총선거에서 민주당 비례대표로 정치에 입성한 사람은 누구인가?\n", + "Generated 290 question for '이극배(start pos_49)': 조선 세종 때부터 연산군에 이르기까지 7명의 왕을 섬기면서 도덕정치를 실천한 인물은 누구인가?\n", + "Generated 291 question for '외부 병합 정렬(start pos_0)': 대상 데이터가 너무 커서 메모리에 담을 수 없는 경우에 실용적인 정렬 방법은 무엇인가?\n", + "Generated 292 question for '페르소나 5(start pos_209)': ATLUS의 사내 스튜디오 P-스튜디오가 개발한 게임은 무엇인가?\n", + "Generated 293 question for '자코바이트(start pos_683)': 명예혁명 이후 제임스 2세와 그의 적자를 영국 왕으로 복위시키려는 사람들을 무엇이라고 부르는가?\n", + "Generated 294 question for '솔레놉신(start pos_0)': 열마디개미속의 독에서 발견되는 알칼로이드는 무엇인가?\n", + "Generated 295 question for '제1(I)군단(start pos_12)': 1965년 12월에 임시로 편성된 군단은 무엇인가?\n", + "Generated 296 question for '퍼플경제(start pos_0)': 문화적인 요소들에 바탕을 두고 모든 경제에 영향을 미치는 현상은 무엇인가?\n", + "Generated 297 question for '바케네코(start pos_73)': 일본의 민속 설화에서 13년 이상을 살거나, 몸무게가 1관이 넘거나, 꼬리가 매우 길어지면 초자연적인 힘을 얻게 되는 고양이를 무엇이라고 하는가?\n", + "Generated 298 question for '주파호(start pos_113)': 제나라 위왕의 국정을 제멋대로 휘둘러 나라를 어지럽힌 간신은 누구인가?\n", + "Generated 299 question for '항케(start pos_0)': 나치 당에서 요제프 괴벨스의 개인 비서로 일한 사람은 누구인가?\n", + "Generated 300 question for '장흥(start pos_0)': 수인산성이 위치한 전라남도의 지역은 어디인가?\n", + "Generated 301 question for '볼로냐(start pos_156)': 기욤 아빠스가 비스콘티 가문에게서 불법으로 빼앗긴 도시는 어디인가?\n", + "Generated 302 question for 'Vivendi(start pos_207)': Seagram을 합병한 회사의 이름은 무엇인가?\n", + "Generated 303 question for '행하(start pos_865)': 출가하여 법명으로 무엇을 칭했는가?\n", + "Generated 304 question for '에방겔리스(start pos_0)': 오늘날 근대 올림픽의 창시자로 알려진 인물은 누구인가?\n", + "Generated 305 question for '루터(start pos_4)': 독일 아이스레벤에서 태어나 법학 공부를 시작했으나 수도사가 된 사람은 누구인가?\n", + "Generated 306 question for '천지(start pos_95)': 백두산의 칼데라에 물이 차서 형성된 호수의 이름은 무엇인가?\n", + "Generated 307 question for '키오시아(start pos_20)': OCZ는 어느 나라의 굴지의 반도체 기업의 브랜드인가?\n", + "Generated 308 question for 'dioptra(start pos_433)': 높이를 정확하게 측정할 수 있게 된 계기는 무엇의 발견 덕분인가?\n", + "Generated 309 question for '타일(start pos_4)': 길거리 아스팔트에서 발견되는 유래를 알 수 없는 수수께끼의 블럭은 무엇이라고 불리나?\n", + "Generated 310 question for '멈퍼드(start pos_0)': 영국의 웨스트서식스주 워스에서 태어난 사람은 누구인가?\n", + "Generated 311 question for '타실로 3세(start pos_578)': 피핀이 바이에른 공작으로 임명한 외조카는 누구인가?\n", + "Generated 312 question for '유관순(start pos_254)': 서울에서 만세운동을 목격하고 귀향하여 병천 시장에서 만세운동을 전개하기로 한 사람은 누구인가?\n", + "Generated 313 question for '실종(start pos_77)': 앰버 경고는 어떤 상황에서 발령되는 시스템인가?\n", + "Generated 314 question for '우한시(start pos_60)': 신종 코로나바이러스가 처음 확인된 도시는 어디인가?\n", + "Generated 315 question for '헐린(start pos_320)': 8월 17일에 어떤 이름의 열대폭풍으로 재발생했는가?\n", + "Generated 316 question for '헥스(start pos_377)': 게임판의 가로와 세로의 육각형 수가 같은 경우에 대한 설명과 무승부가 나올 수 없는 게임의 이름은 무엇인가?\n", + "Generated 317 question for '류샤오보(start pos_115)': 주미국 중국 대사관의 도로명 주소를 무엇으로 변경하자는 제안이 있었는가?\n", + "Generated 318 question for '파라티푸스균(start pos_37)': 파라티푸스는 어떤 균의 감염에 의해 발생하는 질병인가?\n", + "Generated 319 question for '사회성(start pos_119)': K-CBCL의 사회능력 척도 중 친구나 또래와 어울리는 정도를 평가하는 영역은 무엇인가?\n", + "Generated 320 question for '백금(start pos_0)': 왕수에서 용해를 통해 정제되는 원소는 무엇인가?\n", + "Keyword '수집' not found in text.\n", + "Generated 322 question for '영어(start pos_87)': 윤치호가 일기를 쓰기 위해 사용한 주요 언어는 무엇인가?\n", + "Generated 323 question for '해시태그(start pos_0)': 트위터 등 소셜 네트워크 서비스에서 사용되는 메타데이터 태그는 무엇인가?\n", + "Generated 324 question for '고가역(start pos_15)': 이 역의 구조는 어떻게 되어 있는가?\n", + "Generated 325 question for '보세오(start pos_276)': 스페인어의 리오플라텐세 방언에서 2인칭 단수 대명사로 사용하는 것은 무엇인가?\n", + "Generated 326 question for '세무사(start pos_194)': 1961년 9월 법률 제712호로 제정된 법률에 따라 공인회계사의 업무에서 세무대리업무만 할 수 있게 된 직업은 무엇인가?\n", + "Generated 327 question for '규범성(start pos_60)': 윌리엄 라보프에 의하면 언어공동체는 무엇에 의해 정의되는가?\n", + "Generated 328 question for '제러미(start pos_0)': 영국 보수당 소속으로 2018년 이래 외무장관을 역임하고 있는 인물은 누구인가?\n", + "Generated 329 question for '프라부 디바(start pos_213)': '인도의 마이클 잭슨'이라는 별명으로 불리는 인물은 누구인가?\n", + "Generated 330 question for '부상(start pos_81)': 1988년 3년째 프로 선수는 어떤 이유로 다카노 히카루를 대신할 마무리 투수로 발탁되었나요?\n", + "Generated 331 question for '도당굿(start pos_0)': 중부지방에서 마을의 안녕과 태평을 기원하며 행해지는 전통적인 마을굿은 무엇인가?\n", + "Generated 332 question for '반파시즘(start pos_0)': 파시즘에 반대하는 신념 및 실천은 무엇인가?\n", + "Generated 333 question for '승려(start pos_134)': 길동무가 된 노인의 상투를 자르고 도망간 사람은 누구인가?\n", + "Generated 334 question for '브리튼섬(start pos_0)': 고대 그리스의 지리학자 피테아스가 기원전 4세기에 탐험한 섬은 어디인가?\n", + "Generated 335 question for '여운형(start pos_55)': 1946년 12월에 남조선과도입법의원 불참 선언과 정계은퇴를 선언한 인물은 누구인가?\n", + "Generated 336 question for '아이폰(start pos_4)': KT가 도입하여 삼성과의 불화를 일으킨 스마트폰은 무엇인가?\n", + "Generated 337 question for '자료구조(start pos_0)': 컴퓨터 과학에서 효율적인 접근 및 수정을 가능케 하는 데이터의 조직, 관리, 저장을 무엇이라고 하나요?\n", + "Generated 338 question for '광운대학교(start pos_0)': 일반대학원과 특수대학원 6대학원을 설립하여 총 7개 대학원 과정을 설치하고 있는 대학교는 어디인가?\n", + "Generated 339 question for '가시(start pos_0)': 스위스 성인 국가대표팀에 차출되지 못하자, 국제 경기에서 알바니아 국가대표로 활약할 것임을 선언한 선수는 누구인가?\n", + "Generated 340 question for '은공(start pos_51)': 기원전 506년에 선군 주 장공의 뒤를 이어 임금이 된 사람은 누구인가?\n", + "Generated 341 question for '큐벌리(start pos_25)': 실험이 이루어진 고등학교의 이름은 무엇인가?\n", + "Generated 342 question for '밀라노(start pos_18)': 그가 1499년 10월 6일에 루이 12세와 함께 입성한 도시는 어디인가?\n", + "Generated 343 question for 'SPARC(start pos_0)': 어떤 아키텍처가 1985년에 썬 마이크로시스템즈에 의해 개발되었나요?\n", + "Generated 344 question for '홍민기(start pos_0)': 2011년 10월 OGN 엔투스에 서포터로 입단한 선수는 누구인가?\n", + "Generated 345 question for '가톨릭(start pos_15)': 네덜란드에서 가장 큰 종교 단체는 무엇인가?\n", + "Generated 346 question for '명예훼손(start pos_128)': 허위사실이 타인의 평판을 저하하면 어떤 법적 책임이 부과되는가?\n", + "Generated 347 question for '헐라슬레(start pos_16)': 헝가리 사람들은 크리스마스에 어떤 생선 수프를 먹는가?\n", + "Generated 348 question for '카프라리(start pos_9)': 2012년 1월에 세리에 B 클럽 페스카라에 임대로 보내진 선수는 누구인가?\n", + "Generated 349 question for '쓰루가시(start pos_6)': 일본 후쿠이현에 있는 도시는 무엇인가?\n", + "Generated 350 question for '밀케(start pos_6)': 소련의 권력을 등에 업고 경찰 검열자로 독일에 돌아온 인물은 누구인가?\n", + "Generated 351 question for '검찰(start pos_49)': 문재인은 권력기관 개혁 대상 1순위로 무엇을 꼽았는가?\n", + "Generated 352 question for 'Ƶ ƶ(start pos_2166)': 1938년에 키르기스어 알파벳에 추가된 문자는 무엇인가?\n", + "Generated 353 question for '오십음순(start pos_0)': 일본어의 가나 문자를 정렬하는 규칙은 무엇인가?\n", + "Generated 354 question for '마르카리안(start pos_62)': 우루과이 축구의 개선과 관련된 생각을 지니고 있었지만, 우루과이에서 프로 감독을 맡은 경험이 없는 사람은 누구인가?\n", + "Generated 355 question for '통신 프로토콜(start pos_291)': 데이터 전송 개념으로 무엇이 있는가?\n", + "Generated 356 question for '아타우(start pos_7)': 8월 9일 일본 오사카 남쪽 해상에서 발생한 태풍의 이름은 무엇인가?\n", + "Generated 357 question for '김동률(start pos_0)': 1998년 크리스마스 때 첫 번째 콘서트를 연 가수는 누구인가?\n", + "Generated 358 question for '우이칠로포치틀리(start pos_0)': 아즈텍 신화에서 태양신이자 군신으로 숭배된 신은 누구인가?\n", + "Generated 359 question for '워페인트(start pos_0)': NME는 어떤 밴드의 스타일을 \"음울한 분위기에서 강한 록이 간헐적으로 솟아나오는 음악으로 광활하며 풍성한 하모니를 담은 사이키델릭 록 스타일의 곡들은 다양한 변박들로 이루어져 있어 프로그레시브 록 팬들까지도 충족시킬 만하다\"라고 표현했는가?\n", + "Keyword '이스케이프' not found in text.\n", + "Generated 361 question for '마르도니오스(start pos_197)': 기원전 492년 봄 그리스 원정을 지휘한 인물은 누구인가?\n", + "Generated 362 question for '게센누마(start pos_56)': 2011년 도호쿠 지방 태평양 앞바다 지진으로 인해 대화재가 발생한 도시는 어디인가?\n", + "Generated 363 question for '후츠파(start pos_0)': 이스라엘의 독특한 정신 문화로서, 권력자에게 자기 생각을 과감하게 표현하는 용기의 밑바탕이 되는 것은 무엇인가?\n", + "Generated 364 question for '프린스(start pos_19)': 《1999》 음반의 아티스트는 누구인가?\n", + "Generated 365 question for '쇤베르크(start pos_5)': 20세기 전반기의 가장 영향력 있는 작곡가 중 한 명으로, 조성음악의 해체에 기여한 중심인물은 누구인가?\n", + "Generated 366 question for '패트릭(start pos_56)': \"쓰레기 가방 살인 사건\"으로 알려진 연쇄 살인의 주요 용의자는 누구인가?\n", + "Generated 367 question for 'EV-DO(start pos_331)': 네트워크 엔지니어들과 1x 음성 망을 보유하지 않은 신규 사업자들이 선호한 기술은 무엇인가?\n", + "Generated 368 question for '서리(start pos_0)': 차가운 구름 없는 밤에 기온이 이슬점 아래로 떨어질 때 형성되는 것은 무엇인가?\n", + "Generated 369 question for '자(start pos_0)': 성년이 되는 관례 때 받는 이름은 무엇인가?\n", + "Generated 370 question for '망나니쌍살벌(start pos_0)': 몸길이가 최대 3cm에 달하며 쌍살벌속에서 가장 큰 신열대구벌은 무엇인가?\n", + "Generated 371 question for '보살상(start pos_22)': 1912년 일본으로 옮겨졌다가 1965년 한일협정에 따라 되돌려 받은 것은 무엇인가?\n", + "Generated 372 question for '경의·중앙선(start pos_0)': 어떤 노선이 총 연장 128.1 km로 가장 긴 노선인가?\n", + "Generated 373 question for '여운형(start pos_15)': 상하이에서 돌아와 윤보선과 이범석을 독립운동에 투신하도록 이끈 인물은 누구인가?\n", + "Generated 374 question for '김활란(start pos_184)': 조선여자기독교청년회연합회의 결성을 주도한 인물 중 한 명은 누구인가?\n", + "Generated 375 question for '해밀토니언(start pos_7)': 양자역학에서 계의 전체 에너지를 나타내는 관측가능량은 무엇인가?\n", + "Generated 376 question for '오구(start pos_0)': 먹줄을 긋기 위한 제도 용구의 이름은 무엇인가?\n", + "Generated 377 question for '노섬브리아(start pos_82)': 7세기 브리튼제도 내 게르만족들 가운데 종주권을 차지했던 왕국은 어디인가?\n", + "Generated 378 question for '큐비즘(start pos_0)': 조르즈 브라크의 풍경화에서 유래된 미술 사조는 무엇인가?\n", + "Generated 379 question for '회장(start pos_58)': 1969년 1월에 한국 지역사회학교 후원회에서 어떤 직책에 피선되었는가?\n", + "Generated 380 question for '단위생식(start pos_56)': 곤충들이 배우자를 구하는 힘든 시기를 겪지 않고 빠르게 번식할 수 있는 생식 방법은 무엇인가?\n", + "Generated 381 question for '교전단체(start pos_0)': 내전 상황에서 외국 정부에게 승인을 받아 교전권을 가진 단체는 무엇인가?\n", + "Generated 382 question for '홈런(start pos_41)': 4월 23일의 요미우리전(도쿄 돔)에서 도노 슌으로부터 5년 만에 기록한 것은 무엇인가?\n", + "Generated 383 question for '정주영(start pos_205)': 가난 때문에 중학교에 진학하지 못하고 아버지의 농사를 도운 사람은 누구인가?\n", + "Generated 384 question for '핀투(start pos_25)': FC 포르투의 유소년 팀에 4년 동안 있었고, 12살에 독일로 이주하여 TuS 할테른에서 축구를 계속한 사람은 누구인가?\n", + "Generated 385 question for '난반사(start pos_9)': 고체 표면의 거칠기와는 무관하게 빛이 여러 방향으로 산란되는 현상은 무엇인가?\n", + "Generated 386 question for '국가(start pos_204)': 어린이들이 군 통제구역에서 불발 수류탄으로 피해를 입었을 때 손해배상 책임이 있는 주체는 누구인가?\n", + "Generated 387 question for '진랍(start pos_37)': 메콩강 중류 지역에 6세기 중엽에 일어난 크메르인의 나라는 무엇인가?\n", + "Generated 388 question for '채운국(start pos_0)': '채운국 이야기'에서 태조 창현이 세운 나라는 무엇인가?\n", + "Generated 389 question for '알바니아인(start pos_6)': 알바니아와 코소보의 주민들은 어떤 민족에 속하는가?\n", + "Generated 390 question for '신정민(start pos_297)': 곰TV에서 방송 중인 스타2 레디액션에서 무작위왕 S2 토르의 심판, 팀플 롸잇나우, DoDo 유즈맵 & 거캐 키우기 코너를 진행하는 사람은 누구인가?\n", + "Generated 391 question for '아트딜러(start pos_0)': 미술관이나 갤러리와 상관없이 독립적으로 미술작품을 사고 파는 회사나 개인을 무엇이라고 하는가?\n", + "Generated 392 question for '제닝스(start pos_0)': 1894년부터 1898년까지 오리올스와 함께 5개 시즌에서 전례가 없는 202번이나 투구들에 의하여 안타된 선수는 누구인가?\n", + "Generated 393 question for '블레이즈델(start pos_100)': 김포 공군기지에서 아이들을 제주도로 대피시키기 위해 상부의 명령이라는 가짜 지시로 1000여 명의 아이들을 수송한 사람은 누구인가?\n", + "Generated 394 question for '이라크(start pos_178)': 일본 축구 국가대표팀이 최종 경기에서 동점골을 허용한 상대 팀은 어디인가?\n", + "Generated 395 question for '갈매기(start pos_202)': 태풍의 이름은 무엇인가?\n", + "Generated 396 question for '성암동패총(start pos_134)': 2000년 지표조사에서 확인된 유적은 무엇인가?\n", + "Generated 397 question for '달렉(start pos_1372)': 닥터와 통신 채널을 가동하고, 간섭하면 로즈를 죽이겠다고 위협한 존재는 무엇인가?\n", + "Generated 398 question for '신성(start pos_67)': 당나라군이 북쪽의 고구려 요동방어선 제1의 요지를 다시 공략하기 위해 방향을 돌린 곳은 어디인가?\n", + "Generated 399 question for '호노리오 4세(start pos_80)': 1285년 4월 2일 1차 투표에서 만장일치로 교황으로 선출된 사람은 누구인가?\n", + "Generated 400 question for 'OPEC(start pos_91)': 석유가격을 올리던 국제 조직은 무엇인가?\n", + "Generated 401 question for '박문기(start pos_40)': 2009년 1월 8일 로스트사가 MSL의 조지명식에서 입담을 드러내며 주목받은 선수는 누구인가?\n", + "Generated 402 question for '제1우크라이나 전선군(start pos_25)': 1943년 10월 20일, 보로네시 전선군의 이름이 무엇으로 변경되었는가?\n", + "Generated 403 question for '마리 크뢰위에르(start pos_385)': 코펜하겐에서 성장하고 독일 아우크스부르크에서 페데르 세베린 크뢰위에르와 결혼한 인물은 누구인가?\n", + "Generated 404 question for '쇄국(start pos_76)': 가륭제 사후 황제가 대외적으로 어떤 자세를 보였는가?\n", + "Generated 405 question for '호곤(start pos_133)': 마을의 운영을 담당하는 수장은 무엇이라고 불리나요?\n", + "Generated 406 question for '윤성원(start pos_16)': 2019년 1월 31일 민주사회를 위한 변호사 모임이 탄핵소추안을 발표한 법원장은 누구인가?\n", + "Generated 407 question for '갈등(start pos_6)': KBS와 YG의 관계에서 2NE1, 빅뱅, 세븐 등의 출연 문제로 나타난 문제는 무엇인가?\n", + "Generated 408 question for '진주만(start pos_43)': 미국과 일본 사이에서 이중첩보활동으로 폭로한 공습 사건은 무엇인가?\n", + "Generated 409 question for '아라스(start pos_0)': 어느 지역에서 제5보병사단의 여단이 전선을 고수했는가?\n", + "Generated 410 question for '차 (車)(start pos_2)': 연안 차씨의 성은 무엇인가?\n", + "Generated 411 question for '프린스 에드워드 고가교(start pos_0)': 1906년 시의회 회의에서 논의된 블루어가를 동쪽으로 연장하는 방안은 어떤 고가교의 역사와 관련이 있나요?\n", + "Generated 412 question for '황(start pos_39)': 이오의 표면을 덮고 있는 노란색 계열의 물질은 무엇인가?\n", + "Generated 413 question for '리철호(start pos_45)': 김정일과 김정은이 반도체 장비를 들여오고 있으며, 특히 어느 사업가의 기계 공장에 반도체 생산을 중점적으로 하고 있다고 제프리 루이스 박사가 밝혔는가?\n", + "Generated 414 question for '납북(start pos_400)': 이 인물은 한국전쟁 중에 어떤 사건을 겪었는가?\n", + "Generated 415 question for '백혈구(start pos_0)': 혈액에서 적혈구를 제외한 나머지 세포들을 무엇이라고 하나요?\n", + "Generated 416 question for '폴 두메르(start pos_334)': 1932년 5월 6일 파리에서 저격당해 사망한 인물은 누구인가?\n", + "Generated 417 question for '집행위원회(start pos_290)': 국제조형예술협회에서 지역별 코디네이터로 구성된 조직은 무엇인가?\n", + "Generated 418 question for '장준하(start pos_13)': 국토건설사업을 도와줄 것을 요청받고 이를 수락한 사람은 누구인가?\n", + "Generated 419 question for '슬로보단 밀로셰비치(start pos_356)': 1989년 유고슬라비아 대통령에 취임한 대세르비아주의자는 누구인가?\n", + "Generated 420 question for '오이!(start pos_0)': 1980년대 초반 영국에서 생겨난 펑크록의 종류는 무엇인가?\n", + "Generated 421 question for '프로이센(start pos_21)': 독일 연방에서 엘베 강 너머로 영토를 확장하고 19세기 후반 유럽의 강국으로 성장하여 독일의 통일을 주도한 국가는 어디인가?\n", + "Generated 422 question for '흥국사(start pos_0)': 조선후기 왕실과 밀접한 관련이 있었던 사찰은 무엇인가?\n", + "Generated 423 question for '동민(start pos_160)': 1993년부터 1994년까지 시즌 1의 주인공은 누구인가?\n", + "Generated 424 question for '엘 포르틴(start pos_73)': 벨레스 사르스필드가 바루알도 루로 비쟈 거리에 있는 경기장에 붙인 별칭은 무엇인가?\n", + "Generated 425 question for '하리리(start pos_0)': 사우디아라비아에서 기업인으로서 성공하고 레바논의 총리를 지낸 인물은 누구인가?\n", + "Generated 426 question for '클린턴(start pos_6)': 1974년 자신의 10대 시절 이래 정치 경력을 시작하기로 결정한 사람은 누구인가?\n", + "Generated 427 question for '볼보(start pos_0)': VN/VT/VHD 대형 트럭을 생산하는 회사는 어디인가?\n", + "Generated 428 question for '온리전(start pos_168)': 하나의 장르나 주제를 정해 그에 관련된 것들만 참가가 가능한 행사는 무엇인가?\n", + "Generated 429 question for '덱(start pos_663)': 지상부에서 사람이 밟을 수 있는 면적을 늘리기 위해 선택된 대안은 무엇인가?\n", + "Generated 430 question for '신인식(start pos_483)': 충청남도 서산군의 가톨릭 신자 가정에서 태어난 인물은 누구인가?\n", + "Generated 431 question for '칸노 요코(start pos_32)': 이 게임의 OST를 작곡 및 편곡한 사람은 누구인가?\n", + "Generated 432 question for '신앙(start pos_9)': '이해를 추구하는 무엇'이라는 말은 무엇을 설명하기 위한 것인가?\n", + "Generated 433 question for '1973년(start pos_57)': 석남사 삼층석탑이 현재의 위치로 옮겨진 해는 언제인가?\n", + "Generated 434 question for '인테르나치오날레(start pos_412)': 밀리토가 2009년 5월 20일에 이적한 클럽은 어디인가?\n", + "Generated 435 question for '리차드(start pos_0)': 역사신학 분야에서 왕성한 연구와 출판으로 공인된 미국의 세계적인 석학은 누구인가?\n", + "Generated 436 question for '채식주의자(start pos_42)': 특정한 동물성 음식이나 모든 동물성 음식을 피하는 사람들을 무엇이라고 부르나요?\n", + "Generated 437 question for '아일랜드(start pos_0)': 아일랜드 자유국 협정은 어느 나라와 아일랜드 공화국 대표들이 서명한 조약인가?\n", + "Generated 438 question for '노트르담(start pos_12)': 어디에서 법학 석사 학위를 받았는가?\n", + "Generated 439 question for '공유리더십(start pos_54)': 상호영향력이 발휘되면서 구성원의 역량이 향상되는 새로운 리더십은 무엇인가?\n", + "Generated 440 question for '교정자(start pos_217)': 작품을 입력한 후 교정을 예약하는 사람은 누구인가?\n", + "Generated 441 question for '김기백(start pos_1413)': 인터넷 민족신문을 창간하고 운영한 사람은 누구인가?\n", + "Generated 442 question for '보자(start pos_0)': 보자는 어떤 음료가 여름철에 대체 음료로 판매되었는가?\n", + "Generated 443 question for '탁자식(start pos_130)': 우리나라의 고인돌은 4개의 받침돌을 세워 돌방을 만들고 그 위에 거대하고 평평한 덮개돌을 올려놓은 형식은 무엇인가?\n", + "Generated 444 question for '이행(start pos_8)': 대제학을 지낸 사람은 누구인가?\n", + "Generated 445 question for '바르토시(start pos_0)': 노르웨이 펜싱 역사상 최대의 성과를 올림픽에서 달성한 선수는 누구인가?\n", + "Generated 446 question for '고려파(start pos_10)': 한국교회사에서 한상동 목사의 설교를 통해 시작된 교파는 무엇인가?\n", + "Generated 447 question for '나가사키(start pos_19)': 센고쿠 시대 오무라 씨의 영지였던 곳은 어디인가?\n", + "Generated 448 question for '개오리오름(start pos_229)': 제주특별자치도 제주시 봉개동과 용강동 경계에 있는 오름의 이름은 무엇인가?\n", + "Generated 449 question for '엘로힘(start pos_59)': 가나안의 주신 엘의 가족이나 주위의 신들을 뜻하는 단어는 무엇인가?\n", + "Generated 450 question for '우세르카프(start pos_0)': 이집트 제5왕조의 첫 파라오는 누구인가?\n", + "Generated 451 question for '전설(start pos_1)': 《전설의 고향》은 어떤 소재를 모티브로 제작된 드라마인가?\n", + "Generated 452 question for 'Q9(start pos_3)': 2019년형 LG Q 시리즈의 모델명은 무엇인가?\n", + "Generated 453 question for '거짓보고죄(start pos_125)': 대통령이 청와대 안보실 소속 행정관의 백브리핑 참석과 관련하여 어떤 법적 문제에 해당한다고 한국당이 주장하는가?\n", + "Generated 454 question for 'PERT 네트워크(start pos_463)': PERT의 특징 중 시간대와 서로 연결하는 차트는 무엇인가?\n", + "Generated 455 question for '시베리아(start pos_173)': 겨울의 고기압 중 중심 기압이 1,080hPa에 달하는 전형적인 예는 어디의 고기압인가?\n", + "Generated 456 question for '반송고등학교(start pos_0)': 경기도에 위치한 고등학교 중에서 이름이 '반송'으로 시작하는 학교는 어디인가요?\n", + "Generated 457 question for '컴피즈(start pos_0)': 리눅스 운영체제에서 GLX_EXT_texture_from_pixmap 가속을 통해 구현되는 것은 무엇인가?\n", + "Generated 458 question for 'DIVA(start pos_1)': 나카모리 아키나의 47번째 싱글로 2009년 9월 23일에 발매된 곡의 제목은 무엇인가?\n", + "Generated 459 question for '맞돕회(start pos_30)': 여수 청년들이 조직한 사회 운동 단체의 이름은 무엇인가?\n", + "Generated 460 question for '교황권(start pos_53)': 4세기 국교화 이후부터 수세기에 걸쳐 꾸준히 진행된 것은 무엇인가?\n", + "Generated 461 question for '플로이드(start pos_17)': 시카고에서 코닐리어스 클리퍼드 플로이드 1세와 올리비아 플로이드 사이에서 태어난 사람은 누구인가?\n", + "Generated 462 question for '다크틸(start pos_9)': 소행성 243 이다 주위를 공전하는 작은 위성의 이름은 무엇인가?\n", + "Generated 463 question for '햄버거(start pos_268)': 미국 각지에서 유행하게 된 요리는 무엇인가?\n", + "Generated 464 question for 'MP5(start pos_13)': 1980년 4월 30일 런던에서 발생한 이란 대사관 점거 사건에서 SAS가 사용한 무기는 무엇인가?\n", + "Generated 465 question for '도림사계곡(start pos_3)': 해발 735m의 동악산 남쪽 골짜기를 흘러내리는 물줄기로, 아홉 구비마다 펼쳐진 넓은 바위 위로 맑은 물줄기가 흐르는 계곡의 이름은 무엇인가?\n", + "Generated 466 question for '편견(start pos_45)': 타키투스의 게르만인에 대한 기술에서 어떤 요소가 섞여 있는 것으로 평가받는가?\n", + "Generated 467 question for '호리병(start pos_424)': 위 상황에서 흑 Δ가 몰려 죽는 모양을 무엇이라고 하나요?\n", + "Generated 468 question for '폴란드군(start pos_45)': 팔레즈 포위전에서 코드하르에서 연계한 군대는 어느 나라 군대인가?\n", + "Generated 469 question for 'NCBI(start pos_74)': 미국 메릴랜드주에 1988년에 설립된 기관은 무엇인가?\n", + "Generated 470 question for '스라소니(start pos_348)': 삼림과 그 주변의 관목림에 단독으로 세력권을 형성하여 사는 동물은 무엇인가?\n", + "Generated 471 question for '코르테스(start pos_21)': 1528년에 에스파냐 본국으로 돌아와 카롤루스 1세에게 탄원한 사람은 누구인가?\n", + "Generated 472 question for '난징대교(start pos_283)': 전체 구간을 징후 철로라고 부르게 된 계기가 된 다리의 이름은 무엇인가?\n", + "Generated 473 question for '프라하(start pos_136)': 라이너 마리아 릴케는 오스트리아-헝가리 제국의 보헤미아 왕국 어디에서 출생했는가?\n", + "Generated 474 question for '헨델(start pos_0)': 바로크적 협주양식에 기초를 두고 유려한 벨칸토의 성악적 멜로디와 결부하여 간결·명쾌하며 밝은 표현을 나타낸 작곡가는 누구인가?\n", + "Generated 475 question for '사형(start pos_0)': 중화인민공화국의 법정 최고형은 무엇인가?\n", + "Generated 476 question for '고인돌(start pos_24)': 지석묘는 청동기시대 사람들이 만든 무엇을 의미하는가?\n", + "Generated 477 question for '안정화(start pos_114)': 사격 지휘 장치 2 형 -21에서 조준선 (LOS)을 전자적으로 변경한 방식은 무엇인가?\n", + "Generated 478 question for '해바라기(start pos_0)': 꽃이 태양이 있는 방향으로 향하는 성질을 가진 식물은 무엇인가?\n", + "Generated 479 question for '오파레이(start pos_71)': 2007년 FIFA U-17 월드컵에서 놀라운 주력과 정밀한 크로스로 찬사를 받은 가나 U-17 국가대표팀 선수는 누구인가?\n", + "Generated 480 question for 'HPX(start pos_0)': 네트워크에서 거래 처리를 위한 암호 자산으로 사용되는 Native Currency는 무엇인가?\n", + "Generated 481 question for '아나킨(start pos_615)': 데스스타에서 루크의 가면을 벗겨달라고 부탁한 인물은 누구인가?\n", + "Generated 482 question for '탈당(start pos_171)': 20대 총선을 앞두고 이재오, 유승민 등 일부 의원들이 새누리당에서 한 행동은 무엇인가?\n", + "Generated 483 question for '루 마운틴(start pos_142)': 소설 《이와 손톱》에서 뉴욕 시에서 마술사로 일하고 있는 주인공은 누구인가?\n", + "Generated 484 question for '신카이(start pos_31)': 누가 '누군가의 시선은 별의 목소리와 초속 5센티미터'의 원작 및 감독을 맡았는가?\n", + "Generated 485 question for '최석민(start pos_25)': 누가 1916년 3월 20일에 남작 작위를 받았는가?\n", + "Generated 486 question for '정일우(start pos_0)': 40년 가까이 대한민국에서 활동한 예수회 신부이자 빈민운동가는 누구인가?\n", + "Generated 487 question for '황색포도상구균(start pos_80)': 북미와 남미에서 원내감염을 일으키는 가장 흔한 그람 양성균은 무엇인가?\n", + "Generated 488 question for '고갈(start pos_292)': 공유지의 자원이 남용될 경우 어떤 위험이 있는가?\n", + "Generated 489 question for '보어(start pos_327)': 1950년에 코펜하겐으로 돌아온 후, 벤 로이 모텔손과 공동 연구를 시작한 인물은 누구인가?\n", + "Generated 490 question for '에나쓰(start pos_97)': 에토에게 헛스윙을 하게 만든 공을 던진 투수는 누구인가?\n", + "Generated 491 question for '타데우스 로제비치(start pos_0)': 현 폴란드의 무감각한 자기만족을 신랄히 공격하는 젊은 작가는 누구인가?\n", + "Generated 492 question for '쓰치미카도(start pos_458)': 4세의 나이에 즉위하였으나 고토바 상황의 인세이가 이어진 천황은 누구인가?\n", + "Generated 493 question for '케이티롤(start pos_13)': 2016년 5월에 (주)썬텍으로 상호를 변경하기 전의 회사 이름은 무엇인가?\n", + "Generated 494 question for '이세민(start pos_345)': 유무주를 꺾고 왕세충의 정국을 다음 목표로 삼은 당군의 지도자는 누구인가?\n", + "Generated 495 question for '최제우(start pos_43)': 천도교의 창립자인 선사는 누구인가?\n", + "Generated 496 question for '다이렉트X(start pos_549)': NV1에 대한 시장의 관심이 빠르게 수그러든 이유는 무엇인가?\n", + "Generated 497 question for '오염(start pos_417)': 3차 성배전쟁에서 소환된 어벤저는 성배에 어떤 영향을 미쳤는가?\n", + "Generated 498 question for 'Cars(start pos_60)': 개리 뉴먼이 1979년 영국과 캐나다 차트 1위를 기록한 곡은 무엇인가?\n", + "Generated 499 question for '죽령(start pos_8)': 조선 시대에 충청도나 강원도, 한양으로 갈 때 이용되는 통로 중 하나는 무엇인가?\n", + "Generated 500 question for '아리사와 타카노리(start pos_22)': 세일러문 시리즈의 음악으로 JASRAC 상을 수상한 사람은 누구인가?\n", + "Generated 501 question for '스원(start pos_39)': 1827년 7월 4일 뉴욕주에서 노예제의 종말을 축하하기 위해 축제가 열린 호텔의 이름은 무엇인가?\n", + "Generated 502 question for '레싱(start pos_18)': 프랑스 고전작가의 모범을 배척하고 셰익스피어의 작품을 추천한 작가는 누구인가?\n", + "Generated 503 question for '아델리펭귄(start pos_0)': 남극 대륙과 주변 열도에 주로 서식하며, 번식기가 아닐 때에는 아르헨티나, 호주, 뉴질랜드 등지로 이동하는 동물은 무엇인가?\n", + "Generated 504 question for '조헌(start pos_29)': 임진왜란 때 의병장으로 활약했던 인물은 누구인가?\n", + "Generated 505 question for '고려링크(start pos_0)': 어떤 회사가 전문적으로 데이터 서비스를 제공하여 조선중앙통신사나 로동신문 등의 신문을 볼 수 있게 하는가?\n", + "Generated 506 question for '중앙정보부(start pos_0)': 1961년 5월 20일에 정보위와 시국정화단이 통폐합되어 발족된 기관은 무엇인가?\n", + "Generated 507 question for '스테인레스(start pos_0)': 차체는 어떤 재료로 만들어졌나요?\n", + "Generated 508 question for '경실련(start pos_243)': 2002년 7월에 '나쁜 프로그램'으로 선정한 단체는 무엇인가?\n", + "Generated 509 question for '두진낭랑(start pos_53)': 중국에서 천연두의 여신으로 숭배된 존재는 누구인가?\n", + "Generated 510 question for '특공대(start pos_16)': 해변가에서의 공격 이후 300명 가량의 인원만 남아 있었던 부대는 무엇인가?\n", + "Generated 511 question for '성골(start pos_4)': 성골 출신의 남자가 하나도 없게 된 시기는 언제인가?\n", + "Generated 512 question for 'MVP(start pos_768)': 클라이맥스 시리즈 파이널 스테이지에서 어떤 상을 수상했는가?\n", + "Generated 513 question for '인천(start pos_78)': 맥아더가 상륙 지역으로 주장한 곳은 어디인가?\n", + "Generated 514 question for '저층(start pos_121)': 대한민국에서는 보통 몇 층 이하의 건물을 무엇이라고 말하는가?\n", + "Generated 515 question for '아이렌소프트(start pos_0)': Kakao Melon, SK Oksusu, SK Vcase, KBS myK, GS Neotek Transcoder, CBS Rainbow, MBC Mini 등의 미디어 서비스를 파트너와 협업하여 출시한 회사는 무엇인가?\n", + "Generated 516 question for '계백(start pos_50)': 조선 시대에 비사액서원에서 제향된 인물은 누구인가?\n", + "Generated 517 question for '명왕성(start pos_165)': 행성의 지위를 유지한 천체는 무엇인가?\n", + "Generated 518 question for '변계량(start pos_0)': 조선 초기 세종의 스승으로, 태조, 태종, 세종 3대의 국가 서류 90%를 작성한 문신은 누구인가?\n", + "Generated 519 question for 'finally(start pos_142)': try-catch 문에서 정상 실행 경로가 종료된 후 항상 실행되는 선택적 섹션은 무엇인가?\n", + "Generated 520 question for '명예훼손(start pos_410)': 베일리스가 5월 12일에 제기한 소송은 어떤 종류의 소송인가?\n", + "Generated 521 question for 'Ami(start pos_0)': 대한민국의 여성 헤비메탈 드러머 겸 키보디스트, 음악 프로그래머로 활동하는 사람은 누구인가?\n", + "Generated 522 question for '인제 스피디움(start pos_336)': 어떤 서킷에서 국내외 자동차의 성능 테스트와 실성능 검증이 주로 이루어지나요?\n", + "Generated 523 question for '모스크바(start pos_16)': 비밀 지하철 메트로-2가 위치한 도시는 어디인가?\n", + "Generated 524 question for '카터(start pos_23)': 1977년 미국 대통령으로 중동의 평화 진행을 회복시키기 위해 노력한 인물은 누구인가?\n", + "Generated 525 question for '나진-하산 프로젝트(start pos_280)': 박근혜 대통령과 푸틴 러시아 대통령의 정상회담에서 우리 기업이 참여하기로 한 철로 개·보수와 항만 현대화 작업은 무엇인가?\n", + "Generated 526 question for '자율성(start pos_568)': 조선민주주의인민공화국 무역법의 개정으로 인해 북한 무역관리체제의 어떤 측면이 높아졌는가?\n", + "Keyword '동인サークル' not found in text.\n", + "Generated 528 question for '장면(start pos_0)': 1899년 9월 12일 경성부 종현본당에서 유아세례를 받은 인물은 누구인가?\n", + "Generated 529 question for '가칠봉(start pos_312)': 한국군이 결국 완전점령에 성공한 주요 고지는 어디인가?\n", + "Keyword 'Hanoi' not found in text.\n", + "Generated 531 question for '와이어로프(start pos_474)': 로블링이 주의 공무원들에게 제시한 새로운 타입의 로프는 무엇인가?\n", + "Generated 532 question for '호르무즈(start pos_65)': 조로아스터교 신 아후라 마즈다의 이름이 변형되어 불리게 된 지역은 어디인가?\n", + "Generated 533 question for 'Nothofagus(start pos_55)': 노토파구스속은 어떤 속에 속하는가?\n", + "Generated 534 question for '강희제(start pos_0)': 전시에도 세수입을 늘리지 않고 민생을 안정시킨 인물은 누구인가?\n", + "Generated 535 question for '토러스(start pos_16)': 2000년 시드니 올림픽에서 5개의 메달을 획득하고, 미국 수영 팀에서 가장 많은 메달을 딴 선수는 누구인가?\n", + "Generated 536 question for '융합단백질(start pos_266)': 바이러스가 숙주 세포의 세포막과 융합하는 데 중요한 역할을 하는 단백질은 무엇인가?\n", + "Generated 537 question for '노로돔궁(start pos_414)': 1945년, 조르제 티에리 다르장리외가 새 지휘소로 선택한 궁의 이름은 무엇인가?\n", + "Generated 538 question for '쓰촨어(start pos_71)': 쓰촨 사람의 방언을 무엇이라고 부르는가?\n", + "Generated 539 question for '프랑크푸르트암마인(start pos_150)': 주독 미국 해군 본부는 1945년 7월 3일에 스코틀랜드 로스네스에서 어느 도시로 옮겼는가?\n", + "Generated 540 question for '베이컨(start pos_225)': 1676년 정부에 대항하는 반역을 이끈 젊은 경작자는 누구인가?\n", + "Generated 541 question for '양태론(start pos_54)': 2세기 말과 3세기에 믿었던 교리를 묘사하기 위해 아돌프 폰 하르나크가 처음 사용한 용어는 무엇인가?\n", + "Generated 542 question for '이징(start pos_1)': ‘이징 필 산수화조도첩’의 그림을 그린 화가는 누구인가?\n", + "Generated 543 question for '세계(start pos_0)': 세계 가치 조사의 데이터는 무엇에 사용되었는가?\n", + "Generated 544 question for '클레이(start pos_77)': 오프닝의 타이틀 백 영상에 사용된 애니메이션 기술은 무엇인가?\n", + "Generated 545 question for '카를(start pos_0)': 1788년 기병대에 입대한 인물은 누구인가?\n", + "Generated 546 question for '고사책장도(start pos_95)': 그가 그린 작품 중 조선시대 중기의 절파풍을 반영한 그림은 무엇인가?\n", + "Generated 547 question for '심이택(start pos_211)': 1857년 정시문과에 급제하고 여러 관직을 거친 인물은 누구인가?\n", + "Generated 548 question for '시러큐스(start pos_190)': 뉴욕 주립 대학교 환경과학 및 임학 대학은 어느 도시에 위치해 있는가?\n", + "Generated 549 question for '레비(start pos_177)': 7월 7일 밤에 카리용에 도착한 지휘관은 누구인가?\n", + "Generated 550 question for '페트로파블롭스크(start pos_1225)': 마카로프가 여순항으로 뱃머리를 돌렸을 때 일본군이 전날 밤 부설해 놓은 기뢰에 부딪혀 침몰한 러시아 전함의 이름은 무엇인가?\n", + "Generated 551 question for '리눅스(start pos_70)': 기능적 유닉스에 해당하는 운영 체제 중 하나는 무엇인가?\n", + "Generated 552 question for '밴후저(start pos_38)': 성서의 본질과 기능을 하나님의 의사소통 행위라는 틀 속에서 파악하고, 시대적 필요에 맞게 성서의 권위를 재확인해주는 방식을 제시하는 학자는 누구인가?\n", + "Generated 553 question for '세종특별자치시(start pos_51)': 현재의 연기군 지명은 무엇인가?\n", + "Generated 554 question for '이하이(start pos_8)': 2019년 12월 31일 계약이 만료된 후 AOMG로 이적한 가수는 누구인가?\n", + "Keyword '호海亭' not found in text.\n", + "Generated 556 question for '조지 3세(start pos_101)': 메클렌부르크슈트렐리츠의 조피 샤를로테는 누구와 결혼했는가?\n", + "Generated 557 question for '초거대퀘이사군(start pos_0)': 우주에서 밀도가 높은 영역에서만 발견되는, 73개의 퀘이사를 포함하고 있는 것은 무엇인가?\n", + "Generated 558 question for '모라꼿(start pos_8)': 중국 동부에 위치한 저장성에 1,240 mm의 비를 뿌린 태풍의 이름은 무엇인가?\n", + "Generated 559 question for '메르시(start pos_39)': 게임 오버워치에서 스위스 의사 앙겔라 치글러의 호출용 신호는 무엇인가?\n", + "Generated 560 question for '스페인(start pos_41)': 2010년 UEFA U-17 여자 축구 선수권 대회에서 우승하고, 2010년 FIFA U-17 여자 월드컵에서 3위를 차지한 팀은 어느 나라 팀인가?\n", + "Generated 561 question for '빌리 조엘(start pos_23)': 《My Lives》는 어느 미국의 싱어송라이터의 데모, 아웃테이크, B 사이드 등을 모아 놓은 박스 세트인가?\n", + "Generated 562 question for '하느님과 자유(start pos_241)': 1854년 8월 12일에 채택되어 상을 받은 음악의 제목은 무엇인가?\n", + "Generated 563 question for '코마네치(start pos_6)': 1976년 몬트리올 하계 올림픽에서 여자 체조에서 사상 최초로 10점 만점을 기록한 선수는 누구인가?\n", + "Generated 564 question for '존슨(start pos_6)': 1991년 시즌에 메츠에서 가장 많은 홈런과 타점을 기록한 선수는 누구인가?\n", + "Generated 565 question for '해인사(start pos_451)': 16세기 초에 다시 찍어낸 불경은 어디에서 간행되었는가?\n", + "Generated 566 question for '절망희(start pos_151)': 팀 바실리스크의 첫 번째 비주얼 노블 프로젝트는 무엇인가?\n", + "Generated 567 question for '싼충(start pos_0)': 대만의 중심지였고 맹갑이나 대도의 대안에 위치한 지역은 어디인가?\n", + "Generated 568 question for '마에바라(start pos_87)': 어느 가문에 입양된 인물의 이야기인가?\n", + "Generated 569 question for '나즈린(start pos_37)': '동방성련선 ~ Undefined Fantastic Object'에서 1면 중보스 및 보스, 5면 중보스로 등장하는 쥐의 요괴는 누구인가?\n", + "Generated 570 question for '세르비아(start pos_0)': 세르비아 방위군의 훈련 캠프는 어느 사회주의 공화국에 위치해 있었나?\n", + "Generated 571 question for '이정철(start pos_0)': 대한민국의 스포츠해설가이자 배구감독으로 활동한 인물은 누구인가?\n", + "Generated 572 question for '원통사(start pos_14)': 어떤 사찰이 조선 숙종 24년에 탄언, 도영, 혜옥선사들에 의해 고쳐졌고, 1985년에 대웅전과 선초당 등이 복원되었는가?\n", + "Generated 573 question for '이스트앵글리아(start pos_34)': 역사적으로 스투어강이 남쪽에 이스트 색슨족들과 분리하고 있는 왕국은 어디인가?\n", + "Generated 574 question for '대기행렬이론(start pos_0)': 대기행렬을 수학적으로 분석하는 이론은 무엇인가?\n", + "Generated 575 question for '문공인(start pos_32)': 우산기상시(右散騎常侍)를 지낸 문익(文翼)의 장남은 누구인가?\n", + "Generated 576 question for '브루스리데이(start pos_402)': 한국이소룡기념사업회에서 가장 중요하게 생각하는 기념일은 무엇인가?\n", + "Generated 577 question for '플레이오네(start pos_139)': UBV 측광계의 실시역(V) 밝기가 4.8에서 5.5까지 요동치는 카시오페이아자리 감마형 변광성은 무엇인가?\n", + "Generated 578 question for '도쿄(start pos_98)': 하행 열차가 매시 00분에 출발하는 역은 어디인가?\n", + "Generated 579 question for '델라스(start pos_13)': 2010년 6월 5일, AEK와 1년 계약을 맺고 자신이 지지하는 팀에서 은퇴할 의도가 있는 사람은 누구인가?\n", + "Generated 580 question for '마산회원구(start pos_280)': 2010년 창원시와 통합한 후 새로 설치된 구의 이름은 무엇인가?\n", + "Generated 581 question for 'SOV(start pos_21)': 힌디어와 우르두어의 일반적인 어순은 무엇인가?\n", + "Generated 582 question for '홍세화(start pos_318)': 2012년 제19대 국회의원 총선거에 진보신당 비례대표 후보 2번으로 출마한 인물은 누구인가?\n", + "Generated 583 question for '면역(start pos_3)': 다세포 생물이 해로운 미생물이 침입하는 것을 막아내는 능력은 무엇인가?\n", + "Generated 584 question for '보은사(start pos_0)': 보은군지에 따르면 1902년 朴鏡荷 스님이 창건한 사찰은 어디인가?\n", + "Generated 585 question for '청자(start pos_0)': 고려청자 의자는 어떤 재질로 만들어졌나요?\n", + "Generated 586 question for '기난(start pos_0)': 남십자성을 상징물로 사용하는 여러 국기나 단체 깃발에 등장하는 별의 이름은 무엇인가?\n", + "Generated 587 question for 'Jack(start pos_194)': 'The Wild Colonial Boy' 노래에서 성이 Duggan인 'wild colonial boy'의 이름은 무엇인가?\n", + "Generated 588 question for '고우(start pos_1)': 하루와 소꿉친구이며 6살 때부터 뮤를 포함한 모든 포켓몬을 잡는 것이 꿈인 인물은 누구인가?\n", + "Generated 589 question for '결함(start pos_116)': 제조물책임법의 성립요건 중 하나로 규정된 것은 무엇인가?\n", + "Generated 590 question for '김선묵(start pos_254)': 2005년 하반기 드래프트에서 SouL(STX SouL)의 1차 지명으로 입단한 사람은 누구인가?\n", + "Generated 591 question for '베토벤(start pos_34)': \"아테네의 폐허\"라는 부수 음악을 작곡한 사람은 누구인가?\n", + "Generated 592 question for '이건(start pos_5)': 뉴조지아섬에서 대규모 조림을 시작한 기업은 무엇인가?\n", + "Generated 593 question for '판결(start pos_189)': 재판에서 소송사건의 종료를 목표로 하여 행하는 재판의 형식은 무엇인가?\n", + "Generated 594 question for '기계공학(start pos_387)': 응용역학은 어떤 분야의 공학에서 주로 사용되는가?\n", + "Generated 595 question for '환경부장관(start pos_0)': 1999년부터 2003년까지 '헌정 최장수 여성 장관'과 '국민의 정부 최장수 장관'의 기록을 세운 직책은 무엇인가?\n", + "Generated 596 question for '다윈(start pos_0)': 미국 공군과 해병대가 주로 사용하는 오스트레일리아의 공군기지는 어디인가?\n", + "Generated 597 question for '쇼운(start pos_323)': '덴쇼 6년(1578년)에 오토모 가문이 시마즈 가문에게 대패한 전투는 무엇인가?'\n", + "Generated 598 question for '아메리카(start pos_313)': 그가 2007년 코파 리베르타도레스 출전을 목적으로 이적한 팀은 어디인가?\n", + "Generated 599 question for '캡시드(start pos_0)': 바이러스의 유전물질은 어디에 저장되는가?\n", + "Generated 600 question for '물아핀(start pos_612)': 바빌로니아의 점성술 문헌에서 각각 30일씩을 지니는 12개의 '이상적인' 월로 구성된 '이상적인' 년을 사용한 자료는 무엇인가?\n", + "Generated 601 question for '프리드리히 나우만(start pos_22)': 이 정당의 첫 대표로서 개신교 교구 신부였던 인물은 누구인가?\n", + "Generated 602 question for '마르더(start pos_229)': 독일 국방군이 바르바로사 작전 초반부터 필요성을 인식하고, 구형 2호 전차나 노획된 로렌과 같은 차량의 차대를 이용하여 나타난 대전차무기는 무엇인가?\n", + "Generated 603 question for '오쿠보(start pos_0)': 1590년부터 1594년까지 재위한 다다요가 속한 가문은 무엇인가?\n", + "Generated 604 question for '상여(start pos_490)': 김용현의 시신을 장지까지 운반하기 위해 제작된 기구는 무엇인가?\n", + "Generated 605 question for '오이카와 나오(start pos_100)': 2002년 최우수여배우상을 수상한 사람은 누구인가?\n", + "Generated 606 question for '중앙정보연구위원회(start pos_0)': 대한민국의 정보 기관으로 1960년 11월 11일에 조직된 기관은 무엇인가?\n", + "Generated 607 question for '묘법연화경(start pos_0)': 우리나라 천태종의 근본경전으로 부처가 되는 길이 누구에게나 열려 있음을 기본사상으로 하는 불교경전은 무엇인가?\n", + "Keyword '볼록성' not found in text.\n", + "Generated 609 question for '리샤르(start pos_153)': 오툉 공작으로 알려진 사람은 누구인가?\n", + "Generated 610 question for '개홍역(start pos_0)': 개의 주요 질병 중 하나로, 많은 종에서 감염될 수 있는 바이러스 질환은 무엇인가?\n", + "Generated 611 question for '스루홀(start pos_0)': 인쇄 회로 기판(PCB)의 구멍에 삽입하여 반대쪽 패드를 납땜하는 방식의 부품핀이 포함된 전자 부품을 사용한 실장 방법은 무엇인가?\n", + "Generated 612 question for '이간(start pos_248)': 그의 재혼한 부인에게서 얻은 아들의 이름은 무엇인가?\n", + "Generated 613 question for 'BMC(start pos_105)': 자유이용 저널을 출판하는 상업 출판사의 예로 언급된 회사는 무엇인가?\n", + "Generated 614 question for '아말테아(start pos_0)': 목성의 위성 중 목성에서 세 번째로 가까운 궤도를 도는 것은 무엇인가?\n", + "Generated 615 question for '이회(start pos_15)': 문후가 등용하여 새로운 경제정책을 실시하고 토지제도와 농업기술의 개혁을 단행한 인물은 누구인가?\n", + "Generated 616 question for '프리드리히(start pos_169)': 2018년 동계 올림픽 봅슬레이 남자 4인승 종목에서 금메달을 획득한 팀의 이름은 무엇인가?\n", + "Generated 617 question for '차량(start pos_64)': 고속도로에서 통행이 제한되는 것은 무엇인가?\n", + "Generated 618 question for 'Type 346B(start pos_15)': 새로운 구축함의 함교에 설치된 AESA 레이더의 모델명은 무엇인가?\n", + "Generated 619 question for '노수(start pos_21)': 안동노씨의 도시조는 누구인가?\n", + "Generated 620 question for '적천사(start pos_175)': 청도에 있는 800년 된 은행나무가 위치한 사찰의 이름은 무엇인가?\n", + "Generated 621 question for '파기(start pos_440)': 구글이 2016년에 아라 프로젝트에 대해 매체를 통해 전한 소식은 무엇인가?\n", + "Generated 622 question for '예방접종(start pos_328)': 유아 전염병의 대부분을 방지하기 위해 1년에서 3년 간격으로 잊지 말고 해야 하는 것은 무엇인가?\n", + "Generated 623 question for '성수 예절(start pos_0)': 기독교에서 전례 중에 물을 뿌리는 예절을 무엇이라고 하나요?\n", + "Generated 624 question for '청둥호박(start pos_23)': 어떤 호박이 치즈 호박이라고 불리나요?\n", + "Generated 625 question for '네즈미예 호자(start pos_539)': V.I. 레닌 고급당학교의 마지막 총장은 누구였는가?\n", + "Generated 626 question for '103계 1500번대(start pos_3)': 가라쓰 철도 사업부 가라쓰 운수 센터에 배치된 전차량과 함께 사용하는 차량은 무엇인가?\n", + "Generated 627 question for '베토벤(start pos_71)': 1821년 초에 류머티즘과 황달에 시달리면서도 슐레진저에게 피아노 소나타와 미사곡 작업을 계속한 사람은 누구인가?\n", + "Generated 628 question for 'TCP(start pos_0)': 데이터의 전달을 보증하고 보낸 순서대로 받게 해주는 프로토콜은 무엇인가?\n", + "Generated 629 question for '전주중학교(start pos_348)': 전라북도 전주시의 중학교 중에서 '전주'라는 이름을 가진 학교는 무엇인가?\n", + "Generated 630 question for '051형(start pos_173)': 어떤 유형의 유도탄 구축함이 1960년대 중국에서 설계 및 발전되었나요?\n", + "Generated 631 question for '독립(start pos_59)': 1919년 3월 1일 홍기황이 읽은 선언서의 주요 내용은 무엇인가?\n", + "Generated 632 question for '홍주(start pos_77)': 고려시대에 운주에서 개칭된 지명은 무엇인가?\n", + "Generated 633 question for '골드윈(start pos_10)': 새뮤얼 골드윈은 1918년에 자신의 성을 무엇으로 법적으로 변경하였는가?\n", + "Generated 634 question for '정창윤(start pos_72)': 영명사와 법흥사의 통합 주지로 1937년에 조선총독부의 인가를 받은 사람은 누구인가?\n", + "Generated 635 question for '들기름(start pos_0)': 지방산이 풍부하고 오메가-3 지방산 비율이 54-64%로 높은 식물성 기름은 무엇인가?\n", + "Generated 636 question for '폴룩스(start pos_30)': 쌍둥이자리에서 α별인 카스토르보다 밝은 β별은 무엇인가?\n", + "Generated 637 question for '요동성(start pos_148)': 기원전 3세기 연이 점령하면서 설치된 군의 이름은 무엇인가?\n", + "Generated 638 question for '워크아웃(start pos_38)': 기업가치 회생작업을 가리키는 말로 회생시킬 가치가 있는 기업을 살려내는 금융권 주도의 기업회생작업은 무엇인가?\n", + "Generated 639 question for '을드름(start pos_33)': J-600T 미사일의 이름을 청와대 트위터에서 어떻게 발음한다고 해명했는가?\n", + "Generated 640 question for '탄력성(start pos_6)': 경제학에서 한 변수가 다른 변수에 의해 변동되는 정도를 뜻하는 용어는 무엇인가?\n", + "Generated 641 question for '백송(start pos_13)': 조선민주주의인민공화국은 어떤 무역회사를 통해 국가과학원 전용 무역회사를 운영하고 있나요?\n", + "Generated 642 question for '런던(start pos_33)': 뮤직비디오에서 블러 멤버들이 거니는 야경은 어느 도시의 풍경인가?\n", + "Generated 643 question for '스마트파워(start pos_508)': 미국 외교 정책에서 하드 파워와 소프트 파워의 결합을 통해 성공을 이루기 위한 전략은 무엇인가?\n", + "Generated 644 question for '히라가나(start pos_0)': 일본어에서 사용하는 두 가지 가나 중 하나로, 동사의 활용 어미, 조사, 조동사에 쓰이는 것은 무엇인가?\n", + "Generated 645 question for '조선은행(start pos_23)': 1944년 3월 2일, 어떤 은행의 전신인 조선은행에 입행하였는가?\n", + "Generated 646 question for '교장(start pos_668)': 패트릭 유가 홍콩을 탈출하는 과정에서 도움을 준 일본 학교의 인물은 누구인가?\n", + "Generated 647 question for '구조공학(start pos_0)': 구조물이 자체 하중과 가해지는 하중을 지지하고 견디는 것에 대한 이해를 위해 어떤 공학 분야가 응용역학, 재료과학, 응용수학에 대한 지식을 필요로 하는가?\n", + "Generated 648 question for '정전(start pos_105)': 도호쿠 지방에서 약 440만 가구와 관동 지방의 405만 가구에 발생한 문제는 무엇인가?\n", + "Generated 649 question for '세스릭스발성(SLS)(start pos_33)': 세스 릭스(Seth Riggs)가 창시한 발성 테크닉의 이름은 무엇인가?\n", + "Generated 650 question for '플라멩구(start pos_13)': 리우데자네이루를 연고로 하는 브라질의 축구단 중 가장 인기 있는 구단은 무엇인가?\n", + "Generated 651 question for 'SLS AMG(start pos_1077)': 2010년에 유럽에서 판매를 시작한, SLR 맥라렌의 후속 차종이자 300SL을 현대화시킨 차종은 무엇인가?\n", + "Generated 652 question for '의열단(start pos_149)': 3·1 운동에 대해 반성하면서 실질적인 무장투쟁을 통해 일제에 대항하기 위해 조직한 단체는 무엇인가?\n", + "Generated 653 question for '폴란드(start pos_14)': 1939년 3월에 히틀러가 어느 나라에게 동프로이센과 독일 본국을 잇는 단치히 회랑과 단치히를 내놓으라고 협박하였는가?\n", + "Generated 654 question for '마이다스테크(start pos_17)': 국내 소재 자회사 중 하나로, (주) 마이다스인과 (주) 마이다스엔지니어링과 함께 나열된 회사는 무엇인가?\n", + "Generated 655 question for '부산(start pos_80)': 조선인민군이 낙동강 방어선에서 전투를 치른 교두보 전투는 어디에서 벌어졌는가?\n", + "Generated 656 question for '사도세자(start pos_695)': 1760년 이후 알 수 없는 행동을 하게 된 인물은 누구인가?\n", + "Generated 657 question for '바투(start pos_0)': 바둑을 기초로 하여 고도의 심리전 요소와 연막작전 등이 포함된 온라인 보드전략 게임은 무엇인가?\n", + "Generated 658 question for '우트르몽(start pos_7)': 1875년에 마을이 되었던 지역의 이름은 무엇인가?\n", + "Generated 659 question for '재정정보공개제도(start pos_586)': 2018년 6월 UN 공공행정상을 수상한 충청남도의 제도는 무엇인가?\n", + "Generated 660 question for '서경(start pos_0)': 고려시대에 평양성은 어떤 이름으로 불렸는가?\n", + "Generated 661 question for '임옥상(start pos_0)': 대한민국의 민중 화백으로, 1950년 2월 3일 충청남도 부여군에서 태어난 사람은 누구인가?\n", + "Keyword '종차별' not found in text.\n", + "Generated 663 question for '콘스탄틴(start pos_0)': 러시아 제국 시절 에스토니아에서 태어난 인물은 누구인가?\n", + "Generated 664 question for '이즈모(start pos_126)': 《고사기》에서 이나자미가 묻힌 땅으로 비정하는 곳은 어디인가?\n", + "Generated 665 question for '지충호(start pos_106)': 박근혜 대표를 공격한 사람은 누구인가?\n", + "Generated 666 question for '캐번디시(start pos_140)': 아름다운 해적단의 선장으로, '하쿠바'라는 또 하나의 인격을 가진 인물은 누구인가?\n", + "Keyword '교육' not found in text.\n", + "Generated 668 question for '담합(start pos_143)': 베스트도이체 알게마이네 차이퉁과 다른 출판사들이 발행지역을 어떻게 나누어 가졌다는 논란이 있었는가?\n", + "Generated 669 question for '바이츠제커(start pos_117)': 독일의 6대 대통령으로 선출된 인물은 누구인가?\n", + "Generated 670 question for '부상(start pos_4)': 다부치가 현역 시절에 매년 겪었던 큰 문제는 무엇인가?\n", + "Generated 671 question for '던스터블(start pos_0)': 런던에서 북쪽으로 30 마일 정도 떨어져 있으며 중세시기 교통의 요지였던 곳은 어디인가?\n", + "Generated 672 question for '우르바노 3세(start pos_0)': 신성 로마 제국의 프리드리히 1세와 격렬한 투쟁을 이어나간 교황은 누구인가?\n", + "Generated 673 question for '마샬(start pos_13)': 2012년 NBA 드래프트에서 전체 13순위로 지명된 선수는 누구인가?\n", + "Generated 674 question for '오만함(start pos_539)': 무엇을 만(慢)이라고 하는가?\n", + "Generated 675 question for '크루프(start pos_0)': 철강 기반 산업을 본격적으로 시작한 기업은 무엇인가?\n", + "Generated 676 question for '공유(start pos_0)': 나주 공방전에서 김방경을 돕지 않은 책임을 물어 관직을 삭탈당한 인물은 누구인가?\n", + "Generated 677 question for '동막마을(start pos_120)': 유물산포지 1에서 유물이 중점적으로 산포하고 있는 마을은 어디인가?\n", + "Generated 678 question for '수원(start pos_6)': 어디에서 1949년에 태어났는가?\n", + "Generated 679 question for '로즈메리(start pos_34)': 영화에서 미아 패로가 연기한 캐릭터의 이름은 무엇인가?\n", + "Generated 680 question for '에스페란토(start pos_32)': 로망스어군에서 온 어휘가 약 84%를 차지하는 인공어는 무엇인가?\n", + "Generated 681 question for '가디언(start pos_1)': 《가디언 테일즈》에서 왕국을 구하기 위해 모험을 떠나는 이들은 누구인가?\n", + "Generated 682 question for '붉은색(start pos_183)': 팬톤이 디자인한 의자 중 50% 이상을 차지하는 색상은 무엇인가?\n", + "Generated 683 question for '에밀리(start pos_0)': 1946년 존 롤리 모트와 함께 노벨 평화상을 수상한 인물은 누구인가?\n", + "Generated 684 question for '러셀(start pos_6)': 메가스터디교육이 2015년에 론칭한 개인 맞춤형 학습공간의 이름은 무엇인가?\n", + "Generated 685 question for '폐쇄(start pos_237)': 양현석의 Von Dutch 매장은 소송을 계기로 어떻게 되었는가?\n", + "Generated 686 question for '환호(start pos_54)': 마을 둘레에 파 놓은 방어용 못을 무엇이라고 하는가?\n", + "Generated 687 question for '치토세(start pos_181)': 제1기 해군 확장 계획에 따라 미국 유니언 아이언 웍스 사의 샌프란시스코 조선소에서 건조된 함선은 무엇인가?\n", + "Generated 688 question for '미르자하니(start pos_0)': 세계 수학자 대회에서 여성 최초로 필즈메달을 수상한 사람은 누구인가?\n", + "Generated 689 question for '컴패스(start pos_447)': 2006년 1월 북미 국제 오토쇼에서 발표된 SUV의 이름은 무엇인가?\n", + "Generated 690 question for '단방(start pos_43)': 탁특극씨로 1861년 직례의 만주 귀족 가정에서 태어난 사람은 누구인가?\n", + "Generated 691 question for '흐루숍카(start pos_37)': 1-464 유형은 어떤 건물 모델에 속하는가?\n", + "Generated 692 question for '통풍(start pos_138)': 해당 증상들이 나타나는 질환은 무엇인가?\n", + "Generated 693 question for '폭파(start pos_27)': 공격팀이 제한 시간 내에 두 개의 폭파 지점 중 하나에서 폭탄을 설치하여 폭파시키면 이기는 모드는 무엇인가?\n", + "Generated 694 question for '야쿱 벡(start pos_137)': 1868년에 영국이 특사를 파견해 승인한 정권의 지도자는 누구인가?\n", + "Generated 695 question for '가와사키병(start pos_0)': 체내 혈관에 염증이 생기는 질병은 무엇인가?\n", + "Generated 696 question for 'ETR 450(start pos_22)': 1988년 5월 처음으로 운행한 차량은 무엇인가?\n", + "Generated 697 question for 'DVD(start pos_31)': 쿠라키 마이의 첫 싱글 발매 형식은 무엇인가?\n", + "Generated 698 question for '홍패(start pos_118)': 양이시가 고려 공민왕 4년(1355) 과거에 합격했음을 알리는 합격증서의 이름은 무엇인가?\n", + "Generated 699 question for '기부(start pos_71)': 미래에셋 임직원은 다양한 방식으로 무엇에 참여하고 있는가?\n", + "Generated 700 question for '언틸 더 데이(start pos_25)': 북조선 영화감독 출신 탈북자가 연출한 뮤지컬의 제목은 무엇인가?\n", + "Generated 701 question for '중공군(start pos_20)': 1950년 10월 8일, 마오쩌둥이 한국을 침공할 것을 명령한 군대는 무엇인가?\n", + "Generated 702 question for '등각(start pos_14)': 보살 수행계위에서 구경각 직전의 단계는 무엇인가?\n", + "Generated 703 question for '12월 3일(start pos_105)': 세계 장애인의 날은 매년 몇 월 며칠에 기념되나요?\n", + "Generated 704 question for '전주시(start pos_19)': 이 도서관의 위치한 도시는 어디인가?\n", + "Keyword 'Il-96-300' not found in text.\n", + "Generated 706 question for '여성(start pos_9)': 오스트레일리아에서 1893년에 투표권을 부여받은 사람들은 누구인가?\n", + "Generated 707 question for '콘데 데 카살(start pos_290)': 1979년 10월 10일 10호선의 파시피코-콰트로 카미노스 구간 개통과 함께 문을 연 역은 무엇인가?\n", + "Generated 708 question for '연속설(start pos_68)': 언어의 발생이 점진적으로 오랜 기간에 걸쳐 이루어졌다고 주장하는 가설은 무엇인가?\n", + "Generated 709 question for '초등학교(start pos_4)': 위 목록에 나열된 기관들은 어떤 종류의 교육 기관인가요?\n", + "Generated 710 question for '하인리히 4세(start pos_6)': 1081년에 로마에 도착하여 복수를 준비한 인물은 누구인가?\n", + "Generated 711 question for 'မြေ(start pos_45)': 'တို့ပြည်၊ တို့'라는 구절에서 'တို့'가 지칭하는 것은 무엇인가?\n", + "Generated 712 question for '무스펠(start pos_0)': 게르만족의 공통적인 말세 표상은 무엇인가?\n", + "Generated 713 question for '저고리(start pos_0)': 여자 한복에서 치마와 함께 의복의 기본구조를 이루고 있는 것은 무엇인가?\n", + "Generated 714 question for '산(start pos_2)': 시큼한 맛이 나는 음식에는 무엇이 들어 있나요?\n", + "Generated 715 question for '니혼 팔콤(start pos_61)': 《이스 IV: 마스크 오브 더 선》의 원안을 제공한 회사는 어디인가?\n", + "Generated 716 question for '부시종장(start pos_36)': 국왕이 의회 개회식 동안 안전한 귀궁 보장을 위해 가두는 사람은 누구인가?\n", + "Generated 717 question for '벨페고르(start pos_300)': '페올의 사건'과 관련된 악마는 누구인가?\n", + "Generated 718 question for '조선민주주의인민공화국(start pos_125)': 6자 회담에서 핵 문제 해결을 위해 협상에 참여한 나라는 어디인가?\n", + "Generated 719 question for '알헤시라스(start pos_14)': 로마 제국 시대에 포르투스 알부스, 카에타리아, 율리아 트라두크타라는 도시가 있었던 지역은 어디인가?\n", + "Generated 720 question for '선산군(start pos_11)': 금동관음보살입상이 출토된 지역은 어디인가?\n", + "Generated 721 question for '바르네체아(start pos_9)': 2016년 인민행동당(AP) 대통령 후보로 출마했으나 4위로 낙선한 정치인은 누구인가?\n", + "Generated 722 question for '후커(start pos_10)': 남북전쟁 종전 후 건강을 잃고 신체 일부가 마비된 사람은 누구인가?\n", + "Generated 723 question for '빈스(start pos_380)': 테일러가 무대 이름으로 사용하기로 한 이름은 무엇인가?\n", + "Generated 724 question for '독립채산제(start pos_13)': 김정일이 2000년부터 권장한 자체 수익 사업 방식은 무엇인가?\n", + "Generated 725 question for '비사우(start pos_51)': 1687년에 포르투갈에 의해 설립된 요새화된 항구와 무역 중심의 도시는 어디인가?\n", + "Generated 726 question for '수류탄(start pos_76)': 1965년 10월 4일, 파병준비훈련 중 부하가 떨어뜨린 것은 무엇인가?\n", + "Generated 727 question for 'NNTP(start pos_0)': 네트워크 뉴스 전송 프로토콜의 약자는 무엇인가?\n", + "Generated 728 question for '미노프스키(start pos_182)': 연방의 설계사상이 산포하였다고 언급된 입자는 무엇인가?\n", + "Generated 729 question for '곤여전도(start pos_122)': 서울대학교 규장각에 보존되어 있는 목판본의 지도는 무엇을 바탕으로 제작되었나요?\n", + "Generated 730 question for '질투(start pos_28)': 기타 부인의 남편이 아내를 못살게 군 이유는 무엇인가?\n", + "Generated 731 question for '탑짬(start pos_75)': 닌투언성의 주요 철도역은 어디에 위치해 있는가?\n", + "Generated 732 question for '매머드(start pos_0)': 현대 아시아 코끼리와 크기가 유사한 동물은 무엇인가?\n", + "Generated 733 question for '매캘러스터(start pos_0)': 미네소타주 세인트폴에 위치한 4년제 사립 리버럴 아츠 칼리지는 무엇인가?\n", + "Generated 734 question for '에페소스(start pos_25)': 서부 소아시아의 에게 해 연안에 위치한 고대 그리스의 식민도시는 어디인가?\n", + "Generated 735 question for '유수일(start pos_286)': 1945년 3월 23일 충청남도 논산에서 태어난 사람은 누구인가?\n", + "Generated 736 question for '논쟁(start pos_22)': 루브르 피라미드의 건설 과정에서 무엇이 큰 대상이 되었는가?\n", + "Generated 737 question for '후지와라노 요시후사(start pos_36)': 이 책의 편찬을 시작한 사람 중 한 명은 누구인가?\n", + "Generated 738 question for '올콧(start pos_492)': 루이자 메이 올콧은 저명한 초월주의자인 아모스 브런슨 올콧과 애비 메이의 딸로, 어느 가족의 일원인가?\n", + "Generated 739 question for '개고기(start pos_37)': 사람들이 식용으로 사용하는 특정 동물의 고기는 무엇인가?\n", + "Generated 740 question for '도쿠소케(start pos_7)': 위 Context에서 '도쿠소케'를 정답으로 하는 질문을 만들어 드리겠습니다.\n", + "\n", + "질문: 범례에서 숫자는 무엇을 나타내나요?\n", + "Generated 741 question for '여호와(start pos_17)': 테트라그라마톤의 발음 중 일부 사람들은 어떤 형태를 더 선호하는가?\n", + "Generated 742 question for '로터리(start pos_33)': 역 서쪽 출입구에 공원 \"로즈 레이디 우메노키\"와 함께 병설된 것은 무엇인가?\n", + "Generated 743 question for '녹색성장(start pos_387)': 이명박 대통령이 제시한 새로운 성장 패러다임은 무엇인가?\n", + "Generated 744 question for '스기시타(start pos_247)': 1964년 한신 타이거스의 코치로 시작하여 여러 팀의 코치와 감독을 역임한 사람은 누구인가?\n", + "Generated 745 question for '폴 올라니(start pos_37)': 성 비오 10세회 프랑스 관구장으로 1976년부터 1994년까지 재임했던 인물은 누구인가?\n", + "Generated 746 question for 'PCP(start pos_0)': 3-CNF-SAT 문제를 푸는 알고리즘과 관련된 개념은 무엇인가?\n", + "Generated 747 question for '엽교미(start pos_0)': 흉노 서쪽 변경의 작은 나라의 군주로, 흉노의 지원을 받아 월지를 공격한 인물은 누구인가?\n", + "Generated 748 question for '고령향교(start pos_0)': 대성전과 명륜당, 빈홍재, 창고 등이 배치된 곳은 어디인가?\n", + "Generated 749 question for '분청사기(start pos_13)': 조선시대 전기에 제작된 편병은 어떤 종류의 도자기인가?\n", + "Generated 750 question for '첼시(start pos_182)': 아드리안 무투가 코카인 복용 사실이 알려져 방출당한 축구 클럽은 어디인가?\n", + "Generated 751 question for '아스팍(start pos_121)': 아시아 태평양 각료이사회 또는 아시아 태평양 각료회의를 머리글자로 부르는 명칭은 무엇인가?\n", + "Generated 752 question for '베리텍(start pos_8)': \"테크\"라는 별명으로 알려진 전 미국 프로 야구 포수는 누구인가?\n", + "Generated 753 question for '비키니(start pos_139)': 제5 후쿠류마루가 노출된 미국의 수소 폭탄 실험은 어느 환초에서 행해졌는가?\n", + "Generated 754 question for 'S0-102(start pos_860)': 지구에서 볼 때 시계방향으로 전파원 A*를 11.5년에 한 바퀴 도는 항성의 이름은 무엇인가?\n", + "Generated 755 question for '정약종(start pos_228)': 《천주실의》를 바탕으로 자신의 경험과 사상을 첨가하여 대중적으로 쓴 사람은 누구인가?\n", + "Generated 756 question for '패디(start pos_5)': 더 클랜시 브라더스 멤버들 가운데 가장 나이가 많으며, 그룹 결성부터 해체까지 단 한 번도 탈퇴하지 않은 멤버는 누구인가?\n", + "Generated 757 question for '스마트 엔트리&스타트 시스템(start pos_125)': 토요타 알리온 2세대의 모든 트림에 기본적으로 적용된 시스템은 무엇인가?\n", + "Generated 758 question for '키리코(start pos_40)': 형이상화파를 주창하고 추진한 이탈리아 사람은 누구인가?\n", + "Generated 759 question for '개찰구(start pos_78)': 상하행선에서 서로 오갈 수 없는 것은 무엇 때문인가?\n", + "Generated 760 question for '계백(start pos_7)': 백제의 황산벌 전투에서 나·당연합군과 싸우다 전사한 장군은 누구인가?\n", + "Generated 761 question for '나치 독일(start pos_348)': 제3제국은 어떤 국가를 의미하는가?\n", + "Generated 762 question for '핸콕(start pos_18)': 1876년 민주당 전당 대회에서 어떤 투표들을 받았으나 뉴욕주 지사 새뮤얼 J. 틸던에게 밀려 심각한 경쟁자가 아니었던 인물은 누구인가?\n", + "Generated 763 question for '박문수(start pos_30)': 조선 후기의 문신이며 암행어사로 유명했던 인물은 누구인가?\n", + "Generated 764 question for '아스피린(start pos_0)': 혈중 농도를 낮추어 심혈관질환이나 심장마비 예방약으로 장기간 사용되는 약물은 무엇인가?\n", + "Generated 765 question for '도쿠소케(start pos_9)': 가마쿠라 시대에 전속 피관인 미우치비토와 가정 기관, 소령을 보유하고 막부의 요직 과반을 점한 호조 일문의 최상위에 위치한 것은 무엇인가?\n", + "Generated 766 question for '아벤티노(start pos_11)': 로마 초기에는 시의 경계 내에 위치해 있지 않았던 언덕은 어디인가?\n", + "Generated 767 question for '배자(start pos_0)': 답호라고도 불리는 전통 의복의 이름은 무엇인가?\n", + "Generated 768 question for '차드(start pos_0)': 2016년 세계기아지수에서 44.3점을 기록하여 기아문제가 심각한 상태인 나라는 어디인가?\n", + "Generated 769 question for '누이쭈아(start pos_0)': 베트남의 자연 보전 우선순위 지역 중 하나로, 동남아시아에 남아 있는 몇 안 되는 해안과 해양 서식지를 포함하는 국립공원의 이름은 무엇인가?\n", + "Generated 770 question for '조립제법(start pos_0)': 다항식의 긴 나눗셈을 보다 효율적이고 간단하게 수행하는 방법은 무엇인가?\n", + "Generated 771 question for '뉴크로부존(start pos_10)': 로하기 대륙의 동부해안을 따라 형성된 강 유역 일대에 영유권을 주장하는 도시는 어디인가?\n", + "Generated 772 question for '무면허(start pos_447)': 노태우 침술 의료사고 사건에서 침 시술이 불법으로 의심되는 이유는 무엇인가?\n", + "Generated 773 question for '네이트(start pos_0)': 어느 회사가 엠파스를 합병하여 현재의 지식검색 서비스를 운영하게 되었는가?\n", + "Generated 774 question for '학력(start pos_491)': 대한민국의 기업들이 요구하는 개인의 가치수준을 증명하는 잣대는 무엇인가?\n", + "Generated 775 question for '광고(start pos_39)': 『마아큐리아우스 포리티쿠스』에서 널리 사용된 용어는 무엇인가?\n", + "Generated 776 question for '금당(start pos_0)': 사찰의 서원에 위치해 있으며, 세계에서 가장 오래된 목조 건물들 중 하나인 것은 무엇인가?\n", + "Generated 777 question for '가이아(start pos_0)': TV 애니메이션 《기동전사 건담 SEED DESTINY》에서 대지모신의 이름에서 유래한 모빌 슈트의 이름은 무엇인가?\n", + "Generated 778 question for '남혈사지(start pos_0)': 공주시 금학동 남산에 위치한 절터의 이름은 무엇인가?\n", + "Generated 779 question for '헤이그(start pos_14)': 상설중재재판소(PCA)가 위치한 도시는 어디인가?\n", + "Generated 780 question for '번개(start pos_2)': 어려운 상황 속에서도 시원하고 논리적인 사고로 추리하는 천재적인 지성을 가진 캐릭터는 누구인가?\n", + "Generated 781 question for '디지털(start pos_138)': 팬 아트의 범위와 접근성을 대폭 확대한 것은 무엇인가?\n", + "Generated 782 question for '합병증(start pos_106)': 성기에 지방을 주입하는 시술이나 수술에서 발생할 수 있는 문제는 무엇인가?\n", + "Generated 783 question for '팰컨 9(start pos_0)': 스페이스X가 개발한 재사용 가능한 우주발사체의 이름은 무엇인가?\n", + "Generated 784 question for '예천군(start pos_78)': 1896년 8월 4일 경상북도로 개편된 군은 어디인가?\n", + "Generated 785 question for '투란(start pos_303)': 프랑스와 스페인 공동 원정대가 1858년 9월에 상륙한 장소는 어디인가?\n", + "Generated 786 question for '은퇴(start pos_472)': 1996년에 16년 간의 현역 생활을 마친 사건은 무엇인가?\n", + "Generated 787 question for '하남시(start pos_54)': 5호선 연장을 지속적으로 요구한 지역은 어디인가?\n", + "Generated 788 question for '탈북자(start pos_0)': 국제법상 위임난민(Mandate Refugees)의 지위를 가진 사람들은 누구인가?\n", + "Generated 789 question for 'KIA(start pos_95)': 강철민이 처음 프로 야구에 입단한 팀은 어디인가?\n", + "Generated 790 question for '판톨레오네(start pos_11)': 그의 메마른 아들은 누구인가?\n", + "Generated 791 question for '김탄월(start pos_124)': 1915년 금강산의 대본산인 유점사 법무를 지낸 인물은 누구인가?\n", + "Generated 792 question for '에이다 러브레이스(start pos_170)': 역사상 최초의 프로그래머로 여겨지는 사람은 누구인가?\n", + "Generated 793 question for '전력(start pos_14)': 전기식의 납땜인두의 소비는 무엇에 의해 결정되나요?\n", + "Generated 794 question for '참정권(start pos_31)': 그가 조선인의 어떤 권리의 허용을 주장했는가?\n", + "Generated 795 question for '그랜드 파이널(start pos_293)': 최종 챔피언을 가리기 위한 결승전의 명칭은 무엇인가?\n", + "Generated 796 question for '코어(start pos_3)': 인텔 코어 마이크로아키텍처는 어떤 아키텍처 기반의 프로세서인가?\n", + "Generated 797 question for '루이스(start pos_9)': 캘리포니아 대학교 로스앤젤레스와 Princeton에서 교육을 진행한 미국 철학자는 누구인가?\n", + "Generated 798 question for '알릭스(start pos_26)': 치명상을 입은 후 기적적으로 살아난 사람은 누구인가?\n", + "Generated 799 question for '해윤(start pos_216)': PRODUCE 48에서 FNC엔터테인먼트 소속으로 파이널에 진출한 최초의 출연자는 누구인가?\n", + "Generated 800 question for '경찰(start pos_10)': 12년 동안 재직한 직업은 무엇인가?\n", + "Generated 801 question for '니구라(start pos_13)': 현재 유일하게 운영되고 있는 간이 휴게소의 이름은 무엇인가?\n", + "Generated 802 question for '황산 바륨(start pos_225)': 바륨 화합물 중 X선의 조영제로 사용되며 물에 잘 녹지 않는 것은 무엇인가?\n", + "Generated 803 question for '무라시게 안나(start pos_67)': 러시아어에 능통하고, HKT48 극장에서의 자기소개를 러시아어로 시작하는 사람은 누구인가?\n", + "Generated 804 question for '대한통의부(start pos_333)': 1922년 8월 남만한족통일회가 개최된 결과 조직된 단체는 무엇인가?\n", + "Generated 805 question for '타마(start pos_2)': 지훈이의 집에서 기르는 귀여운 얼룩 고양이는 누구인가?\n", + "Generated 806 question for '네로(start pos_551)': 로마 제국의 제5대 황제는 누구인가?\n", + "Generated 807 question for '재정문제(start pos_434)': 서울 양천 FC가 K3리그 2010 참가에 실패한 이유는 무엇인가?\n", + "Generated 808 question for '부산서원(start pos_0)': 조선 인조․효종 대에 정계와 학계에서 활약한 신독재 김집 선생과 백강 이경여 선생의 위패를 모신 서원의 이름은 무엇인가?\n", + "Generated 809 question for '양키스(start pos_202)': '브롱크스 폭격기'라는 별명으로 불리는 팀은 무엇인가?\n", + "Generated 810 question for '가산점제도(start pos_58)': 청구인들이 불합격한 이유와 관련된 제도는 무엇인가?\n", + "Generated 811 question for '유언비어(start pos_4)': 전 내각에서 폐기되었던 사법성의 \"과격사회운동단속법안\" 대신 9월 7일 발령된 긴급칙령 발령의 계기가 된 것은 무엇인가?\n", + "Generated 812 question for '우본랏차타니(start pos_206)': 1786년에 라오스 왕자 타오 캄퐁이 세운 지역의 이름은 무엇인가?\n", + "Generated 813 question for '시인(start pos_22)': 조선후기의 왕족으로 본관이 전주이며, 휘가 무엇인가?\n", + "Generated 814 question for '와카바야시 준지(start pos_19)': 후쿠오카 전파고등학교에서 에이스로 활약한 선수는 누구인가?\n", + "Generated 815 question for '이반 4세(start pos_0)': 성 바실리 대성당이 지어진 당시 러시아의 군주는 누구였는가?\n", + "Generated 816 question for '고려시대(start pos_214)': 이 석탑은 어느 시대에 제작된 것으로 추정되는가?\n", + "Generated 817 question for '징집(start pos_56)': 1938년 사이페르트에게 큰 인상을 남긴 사건은 무엇인가?\n", + "Generated 818 question for '하영민(start pos_1010)': 2006년에 이복 여동생을 목졸라 살해한 범인은 누구인가?\n", + "Generated 819 question for '절규(start pos_299)': 에드바르 뭉크의 작품 중 삶과 죽음에 대한 극적이고 내면적인 그림의 대표작은 무엇인가?\n", + "Generated 820 question for '써머 타임(start pos_204)': 유럽 연합 법률에 의해 모든 유럽 연합 국가들이 강제적으로 적용해야 했던 시간 제도는 무엇인가?\n", + "Generated 821 question for '전주화약(start pos_0)': 조선중앙정부가 동학농민군의 요구조건을 들어주겠다고 맺은 조약은 무엇인가?\n", + "Generated 822 question for '백태청자(start pos_499)': 조선시대 만들어진 청자 항아리에 사용된 청자의 종류는 무엇인가?\n", + "Generated 823 question for '편파판정(start pos_417)': 1990년 FIFA 월드컵에서 대한민국과 우루과이 경기에서 툴리오 라네세 주심이 보인 행동은 무엇이라고 불리우는가?\n", + "Generated 824 question for '티벳(start pos_390)': 세계에서 가장 높은 고원으로, 남서에서 북동으로 경사진 고원의 이름은 무엇인가?\n", + "Generated 825 question for '소웨토(start pos_13)': 《아프리칸스어 강제》에 반대하는 항의 집회와 데모가 전개된 장소는 어디인가?\n", + "Generated 826 question for '요시찰인(start pos_226)': 이갑성이 일본 측에서 어떤 인물로 밝혀졌는가?\n", + "Generated 827 question for '쓰다(start pos_273)': 남만주철도 도쿄지사 촉탁으로 만선지리역사조사실 연구원이 된 인물은 누구인가?\n", + "Generated 828 question for '도후쿠지(start pos_58)': 교토 역 ~ 이나리 역 간에 1957년에 신설 개업한 역은 무엇인가?\n", + "Generated 829 question for '힐맨(start pos_16)': 누가 그녀를 전도부인으로 임명했는가?\n", + "Generated 830 question for '방음벽(start pos_253)': TRTS는 2006년까지 무엇을 설치 완료했는가?\n", + "Generated 831 question for '부교(start pos_276)': 헤이안 시대에 공사나 궁중 행사를 주관하는 임시직으로 만들어진 것은 무엇인가?\n", + "Generated 832 question for '차홍녀(start pos_293)': 동양극장의 간판 스타로 떠오른 배우는 누구인가?\n", + "Generated 833 question for '앙굴리말라(start pos_10)': 석가모니 부처가 폭력을 멈추게 하고 개심시킨 인물은 누구인가?\n", + "Generated 834 question for 'NEIS(start pos_50)': 대한민국의 초·중등 교육과 관련하여 전 교육행정업무를 전자적으로 연계 처리할 수 있도록 구축된 정보시스템은 무엇인가?\n", + "Generated 835 question for '김대환(start pos_0)': '타악의 명인'이라고 불린 인물은 누구인가?\n", + "Generated 836 question for '드래곤플라이(start pos_5)': 세계 최초의 온라인 FPS 카르마 온라인을 출시한 회사는 어디인가?\n", + "Generated 837 question for 'OSI(start pos_328)': 1983년에 개방형 시스템 상호 연결을 위한 기초 참조 모델이라는 이름의 표준을 만들기 위해 병합된 것은 무엇인가?\n", + "Generated 838 question for '세이지(start pos_2)': 현재 마왕의 부인은 누구인가?\n", + "Generated 839 question for '뉴에코타(start pos_16)': 셔머혼이 이주찬성파와 위원회를 구성한 장소는 어디인가?\n", + "Generated 840 question for '모방(start pos_53)': 《에보니》의 게임플레이는 무엇을 비난받고 있는가?\n", + "Generated 841 question for '트리피오필룸(start pos_349)': 식충 식물로 가장 많이 알려진 디옹코필룸과의 종은 무엇인가?\n", + "Generated 842 question for '분노(start pos_72)': 간헐적 폭발성 장애에서 스스로 이성적으로 조절하지 못하는 감정은 무엇인가?\n", + "Generated 843 question for '유로스타 e320(start pos_40)': 영국 철도 374의 또 다른 이름은 무엇인가?\n", + "Generated 844 question for '이사벨(start pos_6)': 카스티야 왕위 계승 전쟁에서 승리하고 카스티야의 왕위에 오른 인물은 누구인가?\n", + "Generated 845 question for '차고(start pos_264)': 상행 통과선의 바깥쪽에는 무엇이 있나요?\n", + "Generated 846 question for '니시테쓰(start pos_42)': 어디에서 니시테쓰 라이온스에 입단했는가?\n", + "Generated 847 question for '강씨(start pos_15)': 법물야면 갈전리의 어떤 성씨 가문이 동성동본 결혼을 했는가?\n", + "Generated 848 question for '서황(start pos_30)': 조비가 조조를 이어 위왕에 오른 후 우장군에 앉힌 인물은 누구인가?\n", + "Generated 849 question for '돔(start pos_17)': 국회의사당건립위원회에서 옥상에 설치하기로 결정한 구조물은 무엇인가?\n", + "Generated 850 question for '팔진(start pos_145)': 중국의 전국 시대 《손빈병법》에서 가장 유명한 진법은 무엇인가?\n", + "Generated 851 question for '로소보로넥스포르트(start pos_0)': 러시아에서 유일하게 방산 제품 및 기술의 수출입을 담당하는 국영 중계 회사는 무엇인가?\n", + "Generated 852 question for '점성술(start pos_24)': 서양의 교회 지도자들이 역사 동안 연구와 예언 그리고 학습에 다른 정도의 신뢰성을 부여해온 분야는 무엇인가?\n", + "Generated 853 question for '로아사상충증(start pos_0)': 인간에게 사슴파리의 물림을 통해 감염되는 질병은 무엇인가?\n", + "Generated 854 question for 'Safa(start pos_80)': 22번째 생일을 축하하기 위해 발매된 앨범의 이름은 무엇인가?\n", + "Generated 855 question for 'PTV(start pos_128)': 멜버른의 대중교통 시스템을 통틀어 부르는 이름은 무엇인가?\n", + "Generated 856 question for '호랑가시나무(start pos_103)': 오득린 장군이 마을에 정착하면서 심은 나무는 무엇인가?\n", + "Generated 857 question for '파나피(start pos_73)': 2010년에 중국 본토를 강타한 가장 큰 세력의 태풍은 무엇인가?\n", + "Generated 858 question for '가드(start pos_25)': 미식축구와 캐나다식 축구에서 오펜시브 라인에 있어 센터와 오펜시브 태클 사이에 위치하는 선수는 무엇인가?\n", + "Generated 859 question for '끌어당김(start pos_74)': '비밀'이라는 책에서 현대인이 성공을 위해 활용하는 법칙은 무엇인가?\n", + "Generated 860 question for '노무라 에이조(start pos_107)': 히로시마에서 그라운드 제로에서 170미터 떨어진 강화 콘크리트 건물 지하에 대피해 살아남은 생존자는 누구인가?\n", + "Generated 861 question for '히고 마사카즈(start pos_10)': 문토(ムント)의 성우는 누구인가?\n", + "Generated 862 question for '대둔산(start pos_0)': 충청남도 논산시, 금산군과 전라북도 완주군에 걸쳐 있는 산은 무엇인가?\n", + "Generated 863 question for '데카르트(start pos_113)': 세계나 사상을 두 개의 상호 독립하는 근본 원리로 설명하는 철학적 입장을 주장한 대표적인 철학자는 누구인가?\n", + "Generated 864 question for '서울시민회관(start pos_79)': 《10대 가수 청백전》이 1966년 12월 2일에 생방송된 장소는 어디인가?\n", + "Generated 865 question for '몽칼름(start pos_15)': 8월 9일, 바토에서 온타리오 호로 접근한 병사는 누구인가?\n", + "Generated 866 question for '매출(start pos_63)': 2012년부터 2017년까지의 누적 매출은 얼마인가?\n", + "Keyword 'Kolmogorov' not found in text.\n", + "Generated 868 question for '이성계(start pos_308)': 왜구 토벌을 위해 양광·전라·경상 삼도 도순찰사로 임명된 인물은 누구인가?\n", + "Generated 869 question for '웨인(start pos_0)': 펜실베이니아, 오하이오, 미시간, 인디애나 등 여러 지역의 자치 지역과 시설에 이름이 붙여진 인물은 누구인가?\n", + "Generated 870 question for '아리스토텔레스(start pos_711)': 중세 철학의 초기 연구가 보존되고 발전된 시기는 누구의 연구를 중심으로 이루어졌는가?\n", + "Generated 871 question for '황화(start pos_295)': 중국 공산당에 입당하여 미국인 저널리스트 에드거 스노우와 공산당 지도자들 사이에서 통역으로 활약한 사람은 누구인가?\n", + "Generated 872 question for '윌셔 그랜드 센터(start pos_98)': 로스앤젤레스에서 2016년에 가장 높은 마천루가 된 건물은 무엇인가?\n", + "Generated 873 question for '구매(start pos_0)': 구매부문의 업무를 능률적으로 운영하기 위해 조직을 기능별로 구분할 때, 어떤 부문에 대해 설명하고 있는가?\n", + "Generated 874 question for 'ALife(start pos_23)': X-ray 엔진이 사용하는 인공지능 엔진의 이름은 무엇인가?\n", + "Generated 875 question for '하판(start pos_31)': '그램 14' 출시 당시 지나치게 얇게 만들어져 간혹 뒤틀림 증상이 나타난 부분은 어디인가?\n", + "Generated 876 question for '와이기그(start pos_0)': 비허가된 60 GHz 이상의 주파수 대역으로 동작하는 멀티 기가비트 속도의 무선 통신 기술을 제고하는 단체이자 802.11ad를 대표하는 이름은 무엇인가?\n", + "Generated 877 question for '프랭크 스탠턴(start pos_22)': 1971년 CBS의 사장으로 재직하며 정부와 갈등을 겪은 인물은 누구인가?\n", + "Generated 878 question for '애랑(start pos_581)': 《배비장전》에서 제주도의 슬기로운 여성을 상징하는 인물은 누구인가?\n", + "Generated 879 question for '종심방어(start pos_180)': 로마 후기 군대가 3세기와 4세기에 사용한 방어 전략 이론은 무엇인가?\n", + "Generated 880 question for '김제하(start pos_494)': 3·1 운동 당시 정주 지역 출신 인물들의 독립 운동을 방해하고 시국강연회에 참여한 인물은 누구인가?\n", + "Generated 881 question for '미카엘(start pos_373)': 독일군의 춘계 공세 중 주공으로 계획된 작전의 암호명은 무엇인가?\n", + "Generated 882 question for '아베노마스크(start pos_534)': 일본 정부가 코로나19 범유행 동안 가정에 배포한 마스크는 무엇이라고 불리게 되었는가?\n", + "Generated 883 question for '속물 효과(start pos_0)': 특정 제품에 대한 소비가 증가할 때 그 제품의 수요가 줄어드는 현상은 무엇인가?\n", + "Generated 884 question for '신시내티(start pos_51)': 어느 팀과 롱이 2006년 3월 27일 마이너 리그 계약을 맺었는가?\n", + "Generated 885 question for '전쟁(start pos_321)': 동부 전선에서 벌어진 주요 사건들은 어떤 종류의 갈등과 관련이 있는가?\n", + "Generated 886 question for '한국스노보드연맹(start pos_5)': 2014년 10월 24일에 설립된 스노보드 관련 사단법인은 무엇인가?\n", + "Generated 887 question for '득리사(start pos_119)': 제2군이 러시아 군 진지를 공격하기로 한 장소는 어디인가?\n", + "Generated 888 question for '빈지노(start pos_143)': 'KB RAPBEAT FESTIVAL 2019'에서 무대에서 내려가기 싫어했던 아티스트는 누구인가?\n", + "Generated 889 question for '롤스(start pos_2)': 《정의론》과 《공정으로서의 정의》를 쓴 철학자는 누구인가?\n", + "Generated 890 question for '멜버른(start pos_118)': 오스트레일리아 오픈이 개최되는 도시는 어디인가?\n", + "Generated 891 question for '브리스틀(start pos_48)': 브리스톨 대학이라는 명칭이 사용된 도시는 어디인가?\n", + "Generated 892 question for '노영민(start pos_481)': 문재인 정부 출범 당시 중국 대사로 내정된 사람은 누구인가?\n", + "Generated 893 question for '강진(start pos_0)': 월남사지 삼층석탑이 위치한 곳은 어디인가?\n", + "Generated 894 question for '리세광(start pos_112)': 2006년 아시안 게임 도마 종목에서 금메달을 획득한 북한 선수는 누구인가?\n", + "Generated 895 question for '건물(start pos_54)': 중화인민공화국의 마천루 목록에 포함된 주요 구조물은 무엇인가?\n", + "Generated 896 question for '크누트(start pos_0)': 베를린 동물원에서 태어난 새끼곰의 이름은 무엇인가?\n", + "Generated 897 question for '아이작(start pos_98)': 8월 21일 대서양 중부에서 발생한 제9호 열대저기압은 무엇으로 발달하였는가?\n", + "Generated 898 question for '닌텐도(start pos_495)': 네오지오 포켓이 휴대용 콘솔 시장에서 경쟁하려고 했던 주요 경쟁사는 어디인가?\n", + "Generated 899 question for '슈바르츠바르트(start pos_0)': 우크라이나 민족주의 망명정부 지도자 시몬 페틀류라를 암살한 사람은 누구인가?\n", + "Generated 900 question for '아루바(start pos_29)': 1636년 네덜란드가 스페인과의 전쟁 도중 점령한 카리브해의 섬은 어디인가?\n", + "Generated 901 question for '이르민(start pos_7)': 캔의 뿌리가 시작된 1966년 뉴욕 여행을 한 사람은 누구인가?\n", + "Generated 902 question for '모하마드 레자(start pos_146)': 레자 샤는 1919년에 아들이 태어나면서 자신의 행운이 시작되었다고 믿고 \"행운의 새\"라는 뜻의 \"코스가담\"이라고 부른 아들은 누구인가?\n", + "Generated 903 question for '휴매나(start pos_0)': 1961년에 설립되어 켄터키주 루이빌에 본사를 두고 있는 미국의 의료 보험 회사는 무엇인가?\n", + "Generated 904 question for '도스토옙스키(start pos_240)': 1929년 첫 저작 《도스토옙스키 창작의 제 문제》의 발간 후 시베리아 유형에 처해진 작가가 다룬 주제는 무엇인가?\n", + "Generated 905 question for '시코쿠(start pos_0)': 일본의 4개 섬 중 유일하게 정령지정도시가 없는 섬은 어디인가?\n", + "Generated 906 question for '아지즈(start pos_0)': 여성 차별적인 발언으로 물의를 빚은 인물은 누구인가?\n", + "Generated 907 question for 'Puppy(start pos_49)': 'Puppy Love'라는 미니게임 스테이지에서 주인공의 조수로 등장하는 캐릭터는 누구인가?\n", + "Generated 908 question for '손흥민(start pos_104)': 후반전 시작 5분 만에 한국이 좋은 기회를 잡을 때 전방을 향해 날아간 기성용의 긴 패스를 받은 선수는 누구인가?\n", + "Generated 909 question for '기어(start pos_301)': 시트로엥이 폴란드에서 주목한 제면소의 작동 부품은 무엇이었는가?\n", + "Generated 910 question for '기관(start pos_0)': 가슴과 배의 표면에서 숨구멍을 통해 외부와 통하는 구조는 무엇인가?\n", + "Generated 911 question for '장순룡(start pos_15)': 덕수장씨의 시조로 고려에 귀화한 위구르계 사람은 누구인가?\n", + "Generated 912 question for '비로자나불(start pos_89)': 불상이 진리의 세계를 두루 통솔한다는 의미를 지닌 것은 무엇인가?\n", + "Generated 913 question for '엄마(start pos_40)': 짱구의 앞쪽에서 나타나 엉덩이 찍기를 하는 캐릭터는 누구인가?\n", + "Generated 914 question for '존 캠벨(start pos_0)': 라우든 경(Lord Loudoun)의 지위를 상속받아 1731년에 귀족이 된 사람은 누구인가?\n", + "Generated 915 question for '지미 헨드릭스(start pos_36)': 혁신적인 작곡과 기타 연주로 사이키델릭과 하드 록 음악에 새로운 방향을 제시한 아티스트는 누구인가?\n", + "Generated 916 question for '삵(start pos_496)': 2018 타이중 세계 꽃박람회 개최 예정지에서 발견된 1급 보호종 동물은 무엇인가?\n", + "Generated 917 question for '인프라(start pos_543)': 천연가스 차량 도입에 있어 가장 큰 문제점으로 대두되는 것은 무엇인가?\n", + "Generated 918 question for '노랑발안테키누스(start pos_0)': 눈 주위에 둥글게 난 흰털과 검은색 꼬리 끝단을 가진 동물은 무엇인가?\n", + "Generated 919 question for '다자이후(start pos_59)': 열차가 주로 왕복 운행하는 역은 어디인가?\n", + "Generated 920 question for '질량(start pos_0)': MFC에서 흐름을 측정하고 제어하는 데 사용되는 것은 무엇인가?\n", + "Generated 921 question for '샤를로테 크리스티네(start pos_158)': 러시아 제국의 알렉세이 페트로비치 황태자와 결혼한 인물은 누구인가?\n", + "Generated 922 question for '전파 천문학(start pos_26)': 제2차 세계 대전 후 급격한 발전을 본 분야는 무엇인가?\n", + "Generated 923 question for '신고킨와카슈(start pos_508)': 고대 와카 전통의 극치임과 동시에 중세적인 성격을 뚜렷이 담고 있는 작품은 무엇인가?\n", + "Generated 924 question for '베를린(start pos_0)': 소련군이 서방연합군보다 먼저 점령하려고 했던 도시는 어디인가?\n", + "Generated 925 question for '아오테아로아(start pos_0)': '길고 하얀 구름의 땅'이라는 의미로 번역되는 뉴질랜드의 마오리어 이름은 무엇인가?\n", + "Generated 926 question for '항원(start pos_94)': 사람의 ABO식 혈액형에서 적혈구의 표면에 있는 특정 당지질에 결합된 올리고당은 무엇으로 작용하는가?\n", + "Generated 927 question for '통일신라시대(start pos_474)': 산청 단속사지 당간지주의 양식은 어느 시대의 양식을 따르고 있는가?\n", + "Generated 928 question for '친일파(start pos_1154)': 위 인물은 어떤 명단에 포함되었는가?\n", + "Generated 929 question for '알다브라날여우박쥐(start pos_0)': 세이셸 알다브라 환초의 토착종으로, IUCN에 의해 \"취약종\"으로 분류된 박쥐의 이름은 무엇인가?\n", + "Generated 930 question for '윤치호(start pos_16)': 1881년 16세 때 신사유람단 조사였던 어윤중의 수행원으로 일본에 건너가 조선의 첫 공식적 동경 유학생이 된 사람은 누구인가?\n", + "Generated 931 question for '아우구스투스(start pos_23)': 내전에서 승리한 후 거의 절대적인 권력을 잡았지만 공화정을 가장한 로마 제국의 통치자는 누구인가?\n", + "Generated 932 question for '헤일리(start pos_0)': NHL의 토론토 메이플리프스의 선수 개발 지도사로 일하고 있는 사람은 누구인가?\n", + "Generated 933 question for 'HIV(start pos_793)': 인간에 감염되는 대표적인 레트로바이러스는 무엇인가?\n", + "Generated 934 question for 'MPack(start pos_135)': 2006년에 개발된 초기의 취약점 공격 도구는 무엇인가?\n", + "Generated 935 question for '안태근(start pos_182)': 한국이소룡기념사업회를 출범시킨 사람은 누구인가?\n", + "Generated 936 question for '케니(start pos_0)': 사우스 파크에서 처음 에피소드부터 5시즌까지 매화 계속하여 사망했다가 다음 회에 다시 살아나는 캐릭터는 누구인가?\n", + "Generated 937 question for '디모인(start pos_268)': 아이오와 주에서 가장 큰 도시는 어디인가?\n", + "Generated 938 question for '에드먼드(start pos_0)': 조지 워싱턴 장군의 부관으로 대륙군에 참가한 사람은 누구인가?\n", + "Generated 939 question for '메릿(start pos_72)': 조지아주 메리에타로 이주하여 조지프 휠러 고등학교에서 수학한 인물은 누구인가?\n", + "Generated 940 question for '민노씨(start pos_0)': 슬로우뉴스의 발기인이자 편집장은 누구인가?\n", + "Generated 941 question for '판문각(start pos_92)': 1971년 적십자회담을 계기로 연락사무소와 직통 전화가 설치된 역사적인 곳은 어디인가?\n", + "Generated 942 question for '토르톨라(start pos_0)': 영국령 버진아일랜드의 중심 섬은 어디인가?\n", + "Generated 943 question for '아제르바이잔(start pos_0)': 어느 나라의 문학과 문화를 대표하여 세계 각국에서 열린 국제회의에 참여한 저자는 어디 출신인가?\n", + "Generated 944 question for 'Sinclair(start pos_20)': ZX81 컴퓨터를 제작한 회사는 어디인가?\n", + "Generated 945 question for '진성(start pos_9)': '眞性甚深極微妙'에서 '眞性'은 무엇을 의미하는가?\n", + "Generated 946 question for '기쿠치 아키코(start pos_0)': 일본의 가수로서 1939년 〈시집간다면〉으로 데뷔한 인물은 누구인가?\n", + "Generated 947 question for '검찰(start pos_55)': 공소권 유지를 위한 검사를 어디에서 지정하도록 했는가?\n", + "Generated 948 question for '천식(start pos_29)': 아데노신의 전통적인 절대적 금기증으로 간주되었던 질환은 무엇인가?\n", + "Generated 949 question for '가난(start pos_199)': 케니가 자주 죽는 이유는 무엇인가?\n", + "Generated 950 question for '평(start pos_4)': 아파트나 주택 및 대지의 넓이를 나타낼 때 사용되었던 단위는 무엇인가?\n", + "Generated 951 question for '쪽매(start pos_0)': 평균 9cm까지 자라는 성체를 가진 생물은 무엇인가?\n", + "Generated 952 question for '김중만(start pos_1)': 조선 중기의 무신으로 이인좌의 난을 평정한 인물은 누구인가?\n", + "Generated 953 question for '하인리히(start pos_0)': 미술사가로서 현대의 유행이나 풍조에 유관한 작풍론을 확립한 사람은 누구인가?\n", + "Generated 954 question for '피에(start pos_17)': 2014년 도미나카 공화국 올림픽 협회에서 올해의 태권도 선수 상을 수상한 사람은 누구인가?\n", + "Generated 955 question for '당산석(start pos_134)': 발산 마을에서 제사의 주체로 삼고 있는 것은 무엇인가?\n", + "Generated 956 question for '타모리(start pos_20)': 특별편 시리즈 초기의 어반스토리에서 스토리텔러로 출연한 인물은 누구인가?\n", + "Generated 957 question for '튜링 완전성(start pos_278)': 특수 분야 언어의 한 가지 특징은 무엇이 보장되지 않는다는 것인가?\n", + "Generated 958 question for '헨리 7세(start pos_29)': 영국의 절대주의 성립과 관련된 국왕은 누구인가?\n", + "Generated 959 question for '바가텔(start pos_0)': 클래식 음악에서 피아노를 위한 성격 소품 중 하나로, ‘가벼운 작품’이라는 뜻을 지니고 있는 것은 무엇인가?\n", + "Generated 960 question for '아르빌(start pos_19)': 이라크 북동부의 아르빌 주에 위치한 정부가 있는 지역은 어디인가?\n", + "Generated 961 question for '페이탈리티(start pos_478)': 《모탈 컴뱃》에서 게임의 인기를 끌게 한 요소는 무엇인가?\n", + "Generated 962 question for '존 디(start pos_0)': 당시 과학과 마법의 경계를 넘나들며 마법과 연금술에 심취해 있었던 사람은 누구인가?\n", + "Generated 963 question for '촉(start pos_1)': 3촉(三觸)에서 세 가지로 나뉘는 마음작용은 무엇인가?\n", + "Generated 964 question for '응오꾸옌(start pos_68)': 939년 박당강에서 남한을 물리친 베트남의 지도자는 누구인가?\n", + "Generated 965 question for 'COVID-19(start pos_218)': 2019년 12월 31일 처음 WHO의 주목을 받은 신종 코로나바이러스는 무엇인가?\n", + "Generated 966 question for '티베로(start pos_0)': 오라클 데이터베이스의 대안으로 간주되는 한국산 DBMS는 무엇인가?\n", + "Generated 967 question for '아상가(start pos_0)': 인도 대승불교의 사상가로, 부루사부라성의 브라만 집안에서 태어난 사람은 누구인가?\n", + "Generated 968 question for '덴노즈아이루(start pos_0)': 도쿄도 시나가와구 히가시시나가와 임해부에 있는 재개발 지역은 어디인가?\n", + "Generated 969 question for '히어리(start pos_0)': 한국에서만 자라는 특산종으로, 지리산과 조계산, 백운산 등에서 주로 발견되는 식물은 무엇인가?\n", + "Generated 970 question for '제롬(start pos_68)': 그가 2004년 9월 25일 월드GP 개막전에서 승리한 상대는 누구인가?\n", + "Generated 971 question for '며느리밑씻개(start pos_64)': 며느리배꼽과 잎자루가 붙는 방식이 다른 식물은 무엇인가?\n", + "Generated 972 question for '가타쿠라(start pos_6)': 육군 사관학교에 입교하고 2.26사건 당시 총격을 당한 인물은 누구인가?\n", + "Generated 973 question for '스텝(start pos_0)': 나무가 없는 평야로, 강과 호수와 멀리 떨어져 있는 지형을 무엇이라고 하나?\n", + "Generated 974 question for 'ISIS(start pos_0)': 미국 공군이 개발 중인 비행선의 이름은 무엇인가?\n", + "Generated 975 question for '베를린(start pos_153)': 프리드리히 빌헬름 크리스티안 카를 페르디난트 폰 훔볼트가 공동설립한 대학교는 어느 도시에 위치해 있는가?\n", + "Generated 976 question for '카이로스(start pos_0)': 그리스 신화에서 '기회'를 신격화한 남성신은 누구인가?\n", + "Generated 977 question for '월간 강강 JOKER(start pos_225)': 2009년 2월 13일에 공식 사이트가 개설된 후, 어느 잡지가 「강강 파워드」와 「월간 강강 WING」의 후계 잡지로 발표되었는가?\n", + "Generated 978 question for '닛타(start pos_0)': 1973년에 에이스로서 추계 시코쿠 대회 현 예선 준결승에 올랐지만 이마바리니시 고등학교에게 패하여 탈락한 고등학교는 어디인가?\n", + "Generated 979 question for '탐구생활(start pos_147)': '무리없는 전개와 잔잔한 유머, 그리고 독특한 어휘를 사용한 말장난이 특징으로 정착된 시리즈의 이름은 무엇인가?'\n", + "Generated 980 question for 'Spinnin' Records(start pos_27)': 마스터링에 참여하는 레이블 중 2017년 12월 25일부터 시작된 레이블은 무엇인가?\n", + "Generated 981 question for '서약파(start pos_303)': 스코틀랜드 전역에서 자신들의 예배 방식과 신앙을 지키겠다고 서약한 사람들은 누구인가?\n", + "Generated 982 question for '노리쓰네(start pos_0)': 1183년 5월에 구리카라 고개와 시노하라 싸움에서 미나모토노 요시나카에게 패한 후, 헤이케의 교토 방비를 굳게 하는 장면에서 우지 강의 다리를 경호한 인물은 누구인가?\n", + "Generated 983 question for '역류 방지(start pos_22)': 배관 시스템에서 어떤 기능이 필요한가?\n", + "Generated 984 question for '포르투갈군(start pos_0)': 전선의 한 부분을 전적으로 책임질 수 있는 작전 수행 능력을 배양하기 위해 단계적으로 임무 수준을 높여가며 투입된 군대는 누구인가?\n", + "Generated 985 question for '존중(start pos_61)': 방글라데시 사회에서 변하지 않은 중요한 가치 중 하나로, 연장자에게 항상 대우받는 것은 무엇인가?\n", + "Generated 986 question for '바프허스(start pos_0)': 오스만 베이국이 초창기에 큰 승리를 거둔 전투의 이름은 무엇인가?\n", + "Generated 987 question for '이회광(start pos_6)': 1908년에 종단 창설을 주도한 인물은 누구인가?\n", + "Generated 988 question for '겹눈(start pos_4)': 많은 낱눈(facet)으로 되어 있으며 벌집을 닮은 눈의 종류는 무엇인가?\n", + "Generated 989 question for '루스벨트(start pos_266)': 1940년 미국 대통령 선거에서 윌키를 꺾고 승리한 대통령은 누구인가?\n", + "Generated 990 question for '정류장(start pos_6)': 버스가 승객을 태우거나 내리기 위해 멈추는 장소는 무엇인가?\n", + "Generated 991 question for '우울감(start pos_50)': 주요 우울 장애의 증상 중 하나로, 지속적으로 나타나는 기분 상태는 무엇인가?\n", + "Generated 992 question for '빈지노(start pos_21)': 2011년 일리네어 레코즈에 입단한 사람은 누구인가?\n", + "Generated 993 question for '조선 후기(start pos_939)': 선림사 목조석가여래좌상의 조형감이 반영된 시기는 언제인가?\n", + "Generated 994 question for '군주제(start pos_9)': 역사를 통해 쿠데타나 전쟁, 시민혁명 등을 통해 폐지되어 온 제도는 무엇인가?\n", + "Generated 995 question for '평창(start pos_1349)': 2018년 어느 동계 올림픽을 목표로 대한민국이 아이스하키 본선 진출을 노리고 있는가?\n", + "Generated 996 question for 'DF-41(start pos_149)': 중국이 2017년 1월에 동북지방에 배치했다고 보도한 사정거리 14,000 km의 핵탄두 장착 ICBM은 무엇인가?\n", + "Generated 997 question for '권중현(start pos_16)': 한일 병합 조약 체결 후 한국병합기념장을 수여받은 정치인은 누구인가?\n", + "Generated 998 question for '에릭(start pos_348)': 폴리스 아카데미에서 치안감으로 경찰학교의 교장을 맡고 있는 사람의 이름은 무엇인가?\n", + "Generated 999 question for '중재(start pos_0)': 당사자 간의 합의에 의해 사법상의 권리 기타 법률관계에 관한 분쟁을 법원의 소송 절차에 의하지 않고 해결하는 제도는 무엇인가?\n", + " title context \\\n", + "0 신팔균 1910년 한일 병합 조약이 체결되자 만주로 망명했고, 연해주 등 여러 곳을 살펴보... \n", + "1 간토대진재 ;르포트타주\\n* 大曲駒村『東京灰燼記』（東北印刷株式会社出版部、1923年） NDLJP... \n", + "2 소프트웨어 블롯 소프트웨어 블롯(software bloat)은 일련의 컴퓨터 프로그램이 눈에 띄게 ... \n", + "3 만네르헤임 선 러시아의 10월 혁명 후, 핀란드인들은 1917년에 독립을 선언했다. 비록 소비에트... \n", + "4 오크우드역 (토론토) 요크 타운십에는 20세기 초반부터 이민자들이 건너오면서 대중교통의 확장이 필요했다.... \n", + "... ... ... \n", + "1967 대한민국 아이스하키 국가대표팀 한국에 아이스하키가 도입된 것은 1920년대로 알려져 있으나, 세계 아이스하키 선수... \n", + "1968 DF-5 2017년 1월 20일, 도널드 트럼프 미국 대통령 취임식 날, 중국이 지하 사일로... \n", + "1969 권태환 을사오적 중 한 명인 정치인 권중현의 양자이다. 1902년부터 대한제국의 관리로 근... \n", + "1970 폴리스 아카데미 《폴리스 아카데미》(Police Academy)는 1984년부터 2014년까지 미국... \n", + "1971 중재 중재(仲裁, arbitration)라 함은 당사자 간의 합의(중재합의)에 의하여 사... \n", + "\n", + " document_id keyword start_pos \\\n", + "0 9801 신팔균 301 \n", + "1 58585 関東大震災 349 \n", + "2 52655 블롯웨어 330 \n", + "3 41640 만네르헤임 312 \n", + "4 57864 에글린턴 264 \n", + "... ... ... ... \n", + "1967 24567 평창 1349 \n", + "1968 51208 DF-41 149 \n", + "1969 12849 권중현 16 \n", + "1970 38585 에릭 348 \n", + "1971 1809 중재 0 \n", + "\n", + " question \n", + "0 1910년 한일 병합 조약이 체결된 후 만주로 망명하여 서간도에서 활동하기로 결정하... \n", + "1 1923년에 발생한 대규모 재난은 무엇인가? \n", + "2 원치 않는 사전 설치 소프트웨어 또는 번들 프로그램을 기술하기 위해 사용되는 용어는... \n", + "3 제정 러시아의 전 장군으로, 볼셰비키에 강하게 반대한 인물은 누구인가? \n", + "4 토론토의 교통 확장과 관련하여 중요성이 점점 커진 도로는 무엇인가? \n", + "... ... \n", + "1967 2018년 어느 동계 올림픽을 목표로 대한민국이 아이스하키 본선 진출을 노리고 있는가? \n", + "1968 중국이 2017년 1월에 동북지방에 배치했다고 보도한 사정거리 14,000 km의 ... \n", + "1969 한일 병합 조약 체결 후 한국병합기념장을 수여받은 정치인은 누구인가? \n", + "1970 폴리스 아카데미에서 치안감으로 경찰학교의 교장을 맡고 있는 사람의 이름은 무엇인가? \n", + "1971 당사자 간의 합의에 의해 사법상의 권리 기타 법률관계에 관한 분쟁을 법원의 소송 절... \n", + "\n", + "[1972 rows x 6 columns]\n" + ] + } + ], + "execution_count": 92 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-15T08:22:44.835357Z", + "start_time": "2024-10-15T08:22:44.825262Z" + } + }, + "cell_type": "code", + "source": [ + "from datasets import load_from_disk\n", + "import os\n", + "current_dir = os.getcwd()\n", + "parent_dir = os.path.dirname(current_dir)\n", + "\n", + "# Arrow 파일 경로 설정\n", + "train_file_path = os.path.join(parent_dir, 'data', 'train_dataset')\n", + "test_file_path = os.path.join(parent_dir, 'data', 'test_dataset')\n", + "dataset = load_from_disk(train_file_path)\n", + "test_dataset=load_from_disk(test_file_path)" + ], + "id": "335a456ef81942e2", + "outputs": [], + "execution_count": 93 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-15T08:22:45.272202Z", + "start_time": "2024-10-15T08:22:45.081868Z" + } + }, + "cell_type": "code", + "source": [ + "train_dataset = dataset[\"train\"]\n", + "valid_dataset = dataset[\"validation\"]\n", + "test_dataset=test_dataset['validation']\n", + "\n", + "train_df=pd.DataFrame(train_dataset)\n", + "valid_df=pd.DataFrame(valid_dataset)\n", + "test_df=pd.DataFrame(test_dataset)\n", + "\n", + "print(f\"Train length : {len(train_df)}\")\n", + "print(f\"Valid length : {len(valid_df)}\")\n", + "print(f\"Test length : {len(test_df)}\")" + ], + "id": "3fee5b5268a65880", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Train length : 3952\n", + "Valid length : 240\n", + "Test length : 600\n" + ] + } + ], + "execution_count": 94 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-15T08:22:45.629264Z", + "start_time": "2024-10-15T08:22:45.614132Z" + } + }, + "cell_type": "code", + "source": "train_df.head()", + "id": "369451dd34aea1e1", + "outputs": [ + { + "data": { + "text/plain": [ + " title context \\\n", + "0 미국 상원 미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국... \n", + "1 인사조직관리 '근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19... \n", + "2 강희제 강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전... \n", + "3 금동삼존불감 불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든... \n", + "4 계사명 사리구 동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기... \n", + "\n", + " question id \\\n", + "0 대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은? mrc-1-000067 \n", + "1 현대적 인사조직관리의 시발점이 된 책은? mrc-0-004397 \n", + "2 강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가? mrc-1-000362 \n", + "3 11~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요? mrc-0-001510 \n", + "4 명문이 적힌 유물을 구성하는 그릇의 총 개수는? mrc-0-000823 \n", + "\n", + " answers document_id \\\n", + "0 {'answer_start': [235], 'text': ['하원']} 18293 \n", + "1 {'answer_start': [212], 'text': ['《경영의 실제》']} 51638 \n", + "2 {'answer_start': [510], 'text': ['백성']} 5028 \n", + "3 {'answer_start': [625], 'text': ['중국']} 34146 \n", + "4 {'answer_start': [30], 'text': ['4개']} 47334 \n", + "\n", + " __index_level_0__ \n", + "0 42 \n", + "1 2873 \n", + "2 230 \n", + "3 992 \n", + "4 548 " + ], + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionidanswersdocument_id__index_level_0__
0미국 상원미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국...대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은?mrc-1-000067{'answer_start': [235], 'text': ['하원']}1829342
1인사조직관리'근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19...현대적 인사조직관리의 시발점이 된 책은?mrc-0-004397{'answer_start': [212], 'text': ['《경영의 실제》']}516382873
2강희제강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전...강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가?mrc-1-000362{'answer_start': [510], 'text': ['백성']}5028230
3금동삼존불감불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든...11~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요?mrc-0-001510{'answer_start': [625], 'text': ['중국']}34146992
4계사명 사리구동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기...명문이 적힌 유물을 구성하는 그릇의 총 개수는?mrc-0-000823{'answer_start': [30], 'text': ['4개']}47334548
\n", + "
" + ] + }, + "execution_count": 95, + "metadata": {}, + "output_type": "execute_result" + } + ], + "execution_count": 95 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-15T08:22:46.237804Z", + "start_time": "2024-10-15T08:22:46.219182Z" + } + }, + "cell_type": "code", + "source": [ + "\n", + "# __index_level_0__와 id 컬럼 삭제\n", + "train_df = train_df.drop(columns=[\"__index_level_0__\", \"id\"])\n", + "valid_df = valid_df.drop(columns=[\"__index_level_0__\", \"id\"])\n" + ], + "id": "d886cf4a750b5a30", + "outputs": [], + "execution_count": 96 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-15T08:22:46.919877Z", + "start_time": "2024-10-15T08:22:46.747941Z" + } + }, + "cell_type": "code", + "source": [ + "\n", + "# 어그멘테이션된 CSV 파일 로드\n", + "augmentation_csv_path = 'mrc_keywords_questions_data.csv'\n", + "augmented_df = pd.read_csv(augmentation_csv_path)\n", + "\n", + "# 어그멘테이션 데이터를 기존 데이터프레임에 추가\n", + "# 필요한 컬럼 매핑이 제대로 되어 있는지 확인해야 함\n", + "# keyword를 answers로 변환: {'answer_start': [start_pos], 'text': [keyword]}\n", + "augmented_data = augmented_df[['context', 'keyword', 'question', 'document_id', 'start_pos']].rename(columns={\n", + " 'keyword': 'answers', # 'answers'는 keyword를 text로 변환\n", + " 'question': 'question',\n", + " 'context': 'context',\n", + " 'document_id': 'document_id',\n", + " 'start_pos': 'start_pos'\n", + "})\n", + "\n", + "# answers 컬럼을 {'answer_start': [start_pos], 'text': [keyword]} 형식으로 변경\n", + "augmented_data['answers'] = augmented_data.apply(lambda row: {'answer_start': [row['start_pos']], 'text': [row['answers']]}, axis=1)\n", + "\n", + "# start_pos 컬럼은 이제 answers에 포함되므로 삭제\n", + "augmented_data = augmented_data.drop(columns=['start_pos'])\n", + "\n", + "\n", + "# 새로운 데이터를 기존 데이터셋에 추가 (train 데이터에 추가하는 예시)\n", + "train_augmented = pd.concat([train_df, augmented_data], ignore_index=True)\n", + "\n", + "# 결과 저장 (필요 시 validation 및 test 데이터셋에도 추가 가능)\n", + "output_train_file = \"augmented_train_dataset.csv\"\n", + "train_augmented.to_csv(output_train_file, index=False)\n", + "\n", + "# 결과 출력\n", + "print(f\"Train data length after augmentation: {len(train_augmented)}\")\n", + "print(train_augmented.head())\n" + ], + "id": "6bac30a020411b0a", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Train data length after augmentation: 5924\n", + " title context \\\n", + "0 미국 상원 미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국... \n", + "1 인사조직관리 '근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19... \n", + "2 강희제 강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전... \n", + "3 금동삼존불감 불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든... \n", + "4 계사명 사리구 동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기... \n", + "\n", + " question \\\n", + "0 대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은? \n", + "1 현대적 인사조직관리의 시발점이 된 책은? \n", + "2 강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가? \n", + "3 11~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요? \n", + "4 명문이 적힌 유물을 구성하는 그릇의 총 개수는? \n", + "\n", + " answers document_id \n", + "0 {'answer_start': [235], 'text': ['하원']} 18293 \n", + "1 {'answer_start': [212], 'text': ['《경영의 실제》']} 51638 \n", + "2 {'answer_start': [510], 'text': ['백성']} 5028 \n", + "3 {'answer_start': [625], 'text': ['중국']} 34146 \n", + "4 {'answer_start': [30], 'text': ['4개']} 47334 \n" + ] + } + ], + "execution_count": 97 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-15T08:23:17.251583Z", + "start_time": "2024-10-15T08:23:17.210113Z" + } + }, + "cell_type": "code", + "source": [ + "# Dataset으로 변환 (from pandas DataFrame)\n", + "train_dataset_augmented = Dataset.from_pandas(train_augmented)\n", + "\n", + "# 동일하게 validation과 test도 처리 가능\n", + "valid_dataset_augmented = Dataset.from_pandas(valid_df)\n", + "\n", + "# DatasetDict로 결합\n", + "dataset_dict = DatasetDict({\n", + " \"train\": train_dataset_augmented,\n", + " \"validation\": valid_dataset_augmented,\n", + "})\n", + "\n", + "# Arrow 파일로 저장\n", + "output_dir = os.path.join(parent_dir, 'data', 'augmented_dataset2')\n", + "dataset_dict.save_to_disk(output_dir)\n", + "\n", + "# 확인\n", + "print(f\"Augmented dataset saved to {output_dir}\")" + ], + "id": "1c74c05b0b866034", + "outputs": [ + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Saving the dataset (1/1 shards): 100%|██████████| 5924/5924 [00:00<00:00, 710545.25 examples/s]\n", + "Saving the dataset (1/1 shards): 100%|██████████| 240/240 [00:00<00:00, 59279.96 examples/s]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Augmented dataset saved to D:\\boost-camp\\07주_MRC\\level2-mrc-nlp-04\\data\\augmented_dataset2\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "\n" + ] + } + ], + "execution_count": 99 + }, + { + "metadata": {}, + "cell_type": "code", + "outputs": [], + "execution_count": null, + "source": "", + "id": "fb995e9ea5c540ff" + } + ], + "metadata": { + "kernelspec": { + "display_name": "Python 3", + "language": "python", + "name": "python3" + }, + "language_info": { + "codemirror_mode": { + "name": "ipython", + "version": 2 + }, + "file_extension": ".py", + "mimetype": "text/x-python", + "name": "python", + "nbconvert_exporter": "python", + "pygments_lexer": "ipython2", + "version": "2.7.6" + } + }, + "nbformat": 4, + "nbformat_minor": 5 +} diff --git a/notebooks/analyze_test_difficulty.ipynb b/notebooks/analyze_test_difficulty.ipynb new file mode 100644 index 0000000..1ca5cf4 --- /dev/null +++ b/notebooks/analyze_test_difficulty.ipynb @@ -0,0 +1,1297 @@ +{ + "cells": [ + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "# 상위권 예측 결과 분석" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "### prediction.json 병합" + ] + }, + { + "cell_type": "code", + "execution_count": 33, + "metadata": {}, + "outputs": [], + "source": [ + "import json\n", + "import os\n", + "from collections import defaultdict\n", + "\n", + "\n", + "def merge_json_files(directory_path, output_file):\n", + " # 결과를 저장할 딕셔너리 생성\n", + " merged_data = defaultdict(list)\n", + "\n", + " # 디렉토리 내의 모든 JSON 파일 처리\n", + " for filename in os.listdir(directory_path):\n", + " if filename.endswith(\".json\"):\n", + " file_path = os.path.join(directory_path, filename)\n", + " with open(file_path, \"r\", encoding=\"utf-8\") as file:\n", + " data = json.load(file)\n", + " # 각 키-값 쌍을 merged_data에 추가\n", + " for key, value in data.items():\n", + " merged_data[key].append(value)\n", + "\n", + " # 결과를 새 JSON 파일로 저장\n", + " with open(output_file, \"w\", encoding=\"utf-8\") as outfile:\n", + " json.dump(dict(merged_data), outfile, ensure_ascii=False, indent=4)\n", + "\n", + " print(f\"병합된 데이터가 {output_file}에 저장되었습니다.\")" + ] + }, + { + "cell_type": "code", + "execution_count": 34, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "병합된 데이터가 ./data/merged_output.json에 저장되었습니다.\n" + ] + } + ], + "source": [ + "# json 병합\n", + "directory_path = \"./data/hard_ensemble\" # JSON 파일이 있는 디렉토리 경로\n", + "output_file = \"./data/merged_output.json\" # 결과를 저장할 파일 이름\n", + "merge_json_files(directory_path, output_file)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "### 난이도별로 json 분리" + ] + }, + { + "cell_type": "code", + "execution_count": 35, + "metadata": {}, + "outputs": [], + "source": [ + "from collections import Counter, defaultdict\n", + "\n", + "\n", + "def classify_difficulty(data):\n", + " difficulty_levels = defaultdict(list)\n", + "\n", + " for key, values in data.items():\n", + " value_counts = Counter(values)\n", + " max_count = max(value_counts.values())\n", + "\n", + " if max_count <= 2:\n", + " difficulty_levels[\"어려움\"].append({key: values})\n", + " elif 3 <= max_count <= 5:\n", + " difficulty_levels[\"중간\"].append({key: values})\n", + " elif 6 <= max_count <= 8:\n", + " difficulty_levels[\"쉬움\"].append({key: values})\n", + "\n", + " return difficulty_levels\n", + "\n", + "\n", + "def save_difficulty_levels(difficulty_levels):\n", + " for difficulty, items in difficulty_levels.items():\n", + " filename = f\"{difficulty}.json\"\n", + " with open(filename, \"w\", encoding=\"utf-8\") as outfile:\n", + " json.dump(items, outfile, ensure_ascii=False, indent=4)" + ] + }, + { + "cell_type": "code", + "execution_count": null, + "metadata": {}, + "outputs": [], + "source": [ + "# json 파일 불러오기\n", + "file_path = \"./data/merged_output.json\"\n", + "with open(file_path, \"r\", encoding=\"utf-8\") as file:\n", + " data = json.load(file)\n", + "# 난이도 분류\n", + "classified_data = classify_difficulty(data)\n", + "# 분류된 데이터 저장\n", + "save_difficulty_levels(classified_data)\n", + "print(\"데이터가 난이도별로 분류되어 저장되었습니다.\")" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "### Question & Prediction 분석" + ] + }, + { + "cell_type": "code", + "execution_count": 36, + "metadata": {}, + "outputs": [], + "source": [ + "import pandas as pd\n", + "\n", + "pd.options.display.max_colwidth = 200\n", + "pd.set_option(\"display.max_rows\", 30)" + ] + }, + { + "cell_type": "code", + "execution_count": 45, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
idquestionpredictionsdifficulty
0mrc-1-000653유령'은 어느 행성에서 지구로 왔는가?[우스, 사만 행성, 사만, 베텔게우스(Betelgeuse) 근처의 작은 행성, 지구, 사만, 사만 행성]2
1mrc-1-001113용병회사의 경기가 좋아진 것은 무엇이 끝난 이후부터인가?[냉전, 냉전, 냉전, 냉전, 냉전, 냉전, 냉전 종식]6
2mrc-0-002191돌푸스에게 불특정 기간동안 하원이 잠시 쉬는 것을 건의 받았던 인물은?[빌헬름 미클라스, 빌헬름 미클라스, 대통령인 빌헬름 미클라스, 대통령인 빌헬름 미클라스, 대통령인 빌헬름 미클라스, 대통령인 빌헬름 미클라스, 대통령인 빌헬름 미클라스]5
3mrc-0-003951마오리언어와 영어, 뉴질랜드 수화를 공식 언어로 사용하는 나라는?[뉴질랜드, 뉴질랜드, 뉴질랜드, 뉴질랜드, 뉴질랜드, 뉴질랜드, 뉴질랜드]7
4mrc-1-001272디엔비엔푸 전투에서 보응우옌잡이 상대한 국가는?[프랑스, 프랑스, 프랑스군, 프랑스, 프랑스, 프랑스, 프랑스]6
\n", + "
" + ], + "text/plain": [ + " id question \\\n", + "0 mrc-1-000653 유령'은 어느 행성에서 지구로 왔는가? \n", + "1 mrc-1-001113 용병회사의 경기가 좋아진 것은 무엇이 끝난 이후부터인가? \n", + "2 mrc-0-002191 돌푸스에게 불특정 기간동안 하원이 잠시 쉬는 것을 건의 받았던 인물은? \n", + "3 mrc-0-003951 마오리언어와 영어, 뉴질랜드 수화를 공식 언어로 사용하는 나라는? \n", + "4 mrc-1-001272 디엔비엔푸 전투에서 보응우옌잡이 상대한 국가는? \n", + "\n", + " predictions \\\n", + "0 [우스, 사만 행성, 사만, 베텔게우스(Betelgeuse) 근처의 작은 행성, 지구, 사만, 사만 행성] \n", + "1 [냉전, 냉전, 냉전, 냉전, 냉전, 냉전, 냉전 종식] \n", + "2 [빌헬름 미클라스, 빌헬름 미클라스, 대통령인 빌헬름 미클라스, 대통령인 빌헬름 미클라스, 대통령인 빌헬름 미클라스, 대통령인 빌헬름 미클라스, 대통령인 빌헬름 미클라스] \n", + "3 [뉴질랜드, 뉴질랜드, 뉴질랜드, 뉴질랜드, 뉴질랜드, 뉴질랜드, 뉴질랜드] \n", + "4 [프랑스, 프랑스, 프랑스군, 프랑스, 프랑스, 프랑스, 프랑스] \n", + "\n", + " difficulty \n", + "0 2 \n", + "1 6 \n", + "2 5 \n", + "3 7 \n", + "4 6 " + ] + }, + "execution_count": 45, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "import pandas as pd\n", + "import json\n", + "from collections import Counter\n", + "\n", + "# CSV 파일 로드\n", + "df = pd.read_csv(\"data/test_validation_dataset.csv\")\n", + "\n", + "# JSON 파일 로드\n", + "with open(\"data/merged_output.json\", \"r\", encoding=\"utf-8\") as f:\n", + " json_data = json.load(f)\n", + "\n", + "\n", + "# 동일 예측 개수 반환\n", + "def determine_difficulty(values):\n", + " value_counts = Counter(values)\n", + " max_count = max(value_counts.values())\n", + " return max_count\n", + "\n", + "# predictions와 difficulty 컬럼 추가\n", + "df[\"predictions\"] = df[\"id\"].map(json_data)\n", + "df[\"difficulty\"] = df[\"predictions\"].apply(determine_difficulty)\n", + "\n", + "# 컬럼 위치 변경\n", + "df = df[[\"id\", \"question\", \"predictions\", \"difficulty\"]]\n", + "\n", + "df.head()" + ] + }, + { + "cell_type": "code", + "execution_count": 46, + "metadata": {}, + "outputs": [ + { + "data": { + "text/plain": [ + "difficulty\n", + "7 241\n", + "6 90\n", + "5 77\n", + "3 77\n", + "4 76\n", + "2 30\n", + "1 9\n", + "Name: count, dtype: int64" + ] + }, + "execution_count": 46, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "df[\"difficulty\"].value_counts()" + ] + }, + { + "cell_type": "code", + "execution_count": 47, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "각 인덱스별 혼자 다른 값의 총 개수:\n", + "Index 0: 105\n", + "Index 1: 76\n", + "Index 2: 76\n", + "Index 3: 80\n", + "Index 4: 103\n", + "Index 5: 63\n", + "Index 6: 77\n" + ] + } + ], + "source": [ + "# 혼자 다른 값을 가진 인덱스의 빈도를 계산하는 함수\n", + "def count_unique_indices(predictions_list):\n", + " n = len(predictions_list)\n", + " counts = [0] * n\n", + "\n", + " for i in range(n):\n", + " if predictions_list.count(predictions_list[i]) == 1:\n", + " counts[i] += 1\n", + "\n", + " return counts\n", + "\n", + "\n", + "# 전체 데이터프레임에 대해 인덱스별 카운트 계산\n", + "all_counts = df[\"predictions\"].apply(count_unique_indices)\n", + "\n", + "# 인덱스별 총 카운트 계산\n", + "total_counts = [sum(counts) for counts in zip(*all_counts)]\n", + "\n", + "print(\"각 인덱스별 혼자 다른 값의 총 개수:\")\n", + "for idx, count in enumerate(total_counts):\n", + " print(f\"Index {idx}: {count}\")\n" + ] + }, + { + "cell_type": "code", + "execution_count": 39, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
idquestionpredictionsdifficulty
7mrc-1-000163아시노 호가 만들어진 원인은 무엇인가?[무명, 호조 마사코, 인격적 존재, 시공을 초월한 영원한 존재, 지질, 선종 조사 초상에 연고를 두고 있기 때문, 유루(有漏)]1
150mrc-1-000116튀폰의 아버지는 누구인가?[대지의 여신 가이아, 카를 마르텔, 가이아, 타르타로스, 제우스, 제우스가 크로노스를 물리치고 신들의 지배자 자리에 오르자 이에 분노하여 크로노스의 원수를 갚기 위해 그녀의 또 다른 배우자인 타르타로스, 프랑스 귀족 생시몽 공작 클로드]1
256mrc-0-002231정치적 코미트를 담고있는 작품은?[바이스, <고골에게 보내는 편지>, 벨린스키의 <고골에게 보내는 편지>, <마라의 박해와 암살>, ≪악령≫, 격언시, 싱글 Shipbuilding]1
300mrc-0-004196루이가 사망하게 될 원인은 무엇인가?[식중독, 헬리콥터 추락사고, 중풍, 독살, 요로감염증, 중풍과 등창, 노환 등의 합병증, 합병증]1
460mrc-1-000870아즈마의 초기 명칭은?[이즈마 하치로로, '주즈 알-나시샤바', ≪바람 속에서 벌거벗고(Naked in the Wind)≫, 마하프라즈냐파라미타샤스트라(Mahaprajnaparamita­sastra), Mustang (야생마), 마하프라즈냐파라미타샤스트라, 코우테츠]1
472mrc-1-000278청구취지는 밝히는 방법은?['청구의 원인', '청구의 원인' 기재, 정보공개, 충분한 시간, 소송, 구술, 사전 구속 영장]1
528mrc-0-000030수사들이 전쟁의 대가로 지은 건물은?[충무사(忠武祠), 평창향교, 크로메르지시궁, 아타우알파, 임진왜란, 영천 숭렬당, 충무사]1
538mrc-0-004085맥국이라는 명칭을 알린 사람은?[실학자들, 표트르 1세, 제임스 맥헨리, 지바 쿤다(Ziva Kunda), R. J. 셰퍼, 프랭크 맥린, 실학자]1
583mrc-0-001659인간에게 불타는 느낌의 아픔을 주는 것은?[유산, 위대한 유토피아, 세계, 이중예정론, 백루검, 바위, 솔레놉신이]1
\n", + "
" + ], + "text/plain": [ + " id question \\\n", + "7 mrc-1-000163 아시노 호가 만들어진 원인은 무엇인가? \n", + "150 mrc-1-000116 튀폰의 아버지는 누구인가? \n", + "256 mrc-0-002231 정치적 코미트를 담고있는 작품은? \n", + "300 mrc-0-004196 루이가 사망하게 될 원인은 무엇인가? \n", + "460 mrc-1-000870 아즈마의 초기 명칭은? \n", + "472 mrc-1-000278 청구취지는 밝히는 방법은? \n", + "528 mrc-0-000030 수사들이 전쟁의 대가로 지은 건물은? \n", + "538 mrc-0-004085 맥국이라는 명칭을 알린 사람은? \n", + "583 mrc-0-001659 인간에게 불타는 느낌의 아픔을 주는 것은? \n", + "\n", + " predictions \\\n", + "7 [무명, 호조 마사코, 인격적 존재, 시공을 초월한 영원한 존재, 지질, 선종 조사 초상에 연고를 두고 있기 때문, 유루(有漏)] \n", + "150 [대지의 여신 가이아, 카를 마르텔, 가이아, 타르타로스, 제우스, 제우스가 크로노스를 물리치고 신들의 지배자 자리에 오르자 이에 분노하여 크로노스의 원수를 갚기 위해 그녀의 또 다른 배우자인 타르타로스, 프랑스 귀족 생시몽 공작 클로드] \n", + "256 [바이스, <고골에게 보내는 편지>, 벨린스키의 <고골에게 보내는 편지>, <마라의 박해와 암살>, ≪악령≫, 격언시, 싱글 Shipbuilding] \n", + "300 [식중독, 헬리콥터 추락사고, 중풍, 독살, 요로감염증, 중풍과 등창, 노환 등의 합병증, 합병증] \n", + "460 [이즈마 하치로로, '주즈 알-나시샤바', ≪바람 속에서 벌거벗고(Naked in the Wind)≫, 마하프라즈냐파라미타샤스트라(Mahaprajnaparamita­sastra), Mustang (야생마), 마하프라즈냐파라미타샤스트라, 코우테츠] \n", + "472 ['청구의 원인', '청구의 원인' 기재, 정보공개, 충분한 시간, 소송, 구술, 사전 구속 영장] \n", + "528 [충무사(忠武祠), 평창향교, 크로메르지시궁, 아타우알파, 임진왜란, 영천 숭렬당, 충무사] \n", + "538 [실학자들, 표트르 1세, 제임스 맥헨리, 지바 쿤다(Ziva Kunda), R. J. 셰퍼, 프랭크 맥린, 실학자] \n", + "583 [유산, 위대한 유토피아, 세계, 이중예정론, 백루검, 바위, 솔레놉신이] \n", + "\n", + " difficulty \n", + "7 1 \n", + "150 1 \n", + "256 1 \n", + "300 1 \n", + "460 1 \n", + "472 1 \n", + "528 1 \n", + "538 1 \n", + "583 1 " + ] + }, + "execution_count": 39, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "df[df[\"difficulty\"]==1]" + ] + }, + { + "cell_type": "code", + "execution_count": 40, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
idquestionpredictionsdifficulty
0mrc-1-000653유령'은 어느 행성에서 지구로 왔는가?[우스, 사만 행성, 사만, 베텔게우스(Betelgeuse) 근처의 작은 행성, 지구, 사만, 사만 행성]2
16mrc-0-000266통대를 뽑을 수 있었던 주체는 누구인가?[국민, 데르브포르갈, 학교, 충분한 시간, 앙리 브리송 행정부, 하느님, 국민]2
57mrc-0-003763불상에 대한 정보가 적혀있는 것은?[묘법연화경, 광배(光背)의 뒷면, 중수 발원문, 광배(光背)의 뒷면, 조성발원기에, 중수 발원문, 복장유물]2
74mrc-0-004430어머니를 죽음에 이르게 한 것은 아들이 무엇처럼 행동했기 때문인가?[길거리 불한당, 자신의 감정을 드러내보인 적이 없었기 때문, 교육 평론가, 제우스, 정신이상자, 골수암, 길거리 불한당]2
85mrc-1-000813태풍 초이완의 경보는 어떤 순간부터 풀렸는가?[9월 16일 오후, 5월 18일, 9월 14일, 9월 16일 오후, 9월 13일, 9월 13일, 10월 10일 21시경]2
134mrc-0-001034공소권이 사라질 경우 무엇에서 벗어나게 되는가?['죄를 범한 자', 폭행, 피고인, 검찰의 공소 유지에 의한 명백한 한계, 피고인, 흉기를 사용하며 협박한 부분이 무혐의, '죄를 범한 자']2
155mrc-0-001884레빌 장군은 무엇이 없었기 때문에 실망했나?[전차포와 부무장을 '인간형'의 상반신, '인간형'의 상반신, 복잡한 2족 보행기구, 복잡한 2족 보행기구, 유효한 요격 방법, 하반신, 하반신]2
166mrc-0-003205석조지장보살상이 조각되지 않았을 것으로 추정되는 시기는?[조선후기에, 17세기, 17세기, 조선후기에, 18세기 전반, 조선 초기, 1646년]2
214mrc-1-000256본인의 일에 진중하게 임했고 많은 것을 연습했지만, 자신의 옷차림에 불만을 제기했던 인물은?[매소드, 대마녀, 를르네 지카르트, 이재현, 쿠니스, 마튀랭이, 쿠니스]2
263mrc-1-001797이경언이 사망한 장소는?[감옥, 청주, 청주, 서구 감천동 뒷산, 미얀마 아웅산 묘역, 서구 감천동 뒷산, 감옥]2
295mrc-0-001961낮에는 어떤 바람이 부는가?[동남풍, 남서풍, 열대 계절풍(몬순), 따뜻하고 건조한 바람, 저지로부터 올라 오는 바람, 북동풍, 동남풍]2
329mrc-0-001847자신의 사리사욕만 채우며 무능했던 진나라의 황제는?[2세 황제 호해, 유스티니아누스 1세, 진시황, 2세 황제 호해, 진 시황제, 유스티니아누스 1세, 이세황제]2
333mrc-0-001757Yoo Doo Right이 수록된 앨범명은?[Delay 1968, 《私このままでいいのかな》(나 이대로 괜찮을까), So Wrong, It's Right, 《Beatles for Sale》, 《私このままでいいのかな》(나 이대로 괜찮을까), 《십만개위십마》, Delay 1968]2
354mrc-0-002074야전의 전투 제한 시간은?[최대 10일, 밤, 밤, 북한군의 진격을 지연시키기 위한 전투, 태릉전투, 5턴, 최대 10일]2
369mrc-0-001415이무훈에게 살해당한 인물의 직책은?[시인, 총무주석간사, 중의원 의원, 노룡군의 대장, 성문교위(城門校尉), 양복점의 직공, 노룡군의 대장]2
381mrc-0-002033신문 <파시스트 정권,Il Regime Fascista>의 주된 논조는?[급진파 파시스트, 급진파, 급진파, 급진파 파시스트, 정치평론면, 정치평론면, 반(反)파시스트]2
400mrc-0-002618무관학교를 설립한 인물은?[태황제, 조진태, 기호흥학회, 기호흥학회, 오가와 오사무, 이항직, 태황제]2
407mrc-0-003639단어 '토레혼'의 어근은?[토레, '온' (ón)은 엄청난 크기나 높이를 강조할 때 흔히 붙이는 접미사다. 따라서 '토레혼 (torrejón)'이라는 말은 '거대한 탑', 탑, '거대한 탑', '온' (ón), '온', '온']2
434mrc-1-000218레이크가 가장 큰 영향을 받았다고 한 작품의 이름은?[《나뭇잎의 집》, 보러블 3부작, <The Romaunt of Rose>, ≪나체즈 족≫, <The Romaunt of Rose>, 보러블 3부작, 《나뭇잎의 집》]2
436mrc-1-000690레이가 골트 이후에 사용한 가짜 이름은 무엇인가요?[리카르도 클레멘트, 츠와몬, 드미트리 1세, 드미트리 1세, \"에릭 스타보 골트\", 츠와몬, '리카르도 클레멘트']2
466mrc-0-000527조선박물연구회가 공포하고자 한 것은?[국보 제151호, 보물, 남원 양대박 부자충의문, 남원 양대박 부자충의문, 과학, 수문장계회도, 과학의 중요성]2
468mrc-0-001931스탈린그라드의 소련군 중 사정이 나았던 부대는?[제4기갑군, 64 군, 프리드리히 파울루스의 독일군, 제6군, 제6군, 독일 제6군, 제 6군]2
477mrc-0-004371역할을 가장 먼저 구체화 시킨 사람은?[신돈, 미드(Mead), 리처드 파인먼, 본문\\n본문(body), 미드(Mead), 나카지마 타츠오, 블라디미르 레닌]2
486mrc-1-000651대한민국 보물 제 1540호를 보관하는 장소는 어디인가?[호림박물관, <고려대 도서관>, 동·서 사간판전(寺刊版殿), 서울시 종로구 종로4가 동원예식장 뒤뜰, 국립춘천박물관, <고려대 도서관>, 호림박물관]2
513mrc-0-002696베이핑-톈진 전투가 시작된 연도는?[1947년, 1948년, 1946년, 1949년, 1948년, 1946년, 1942년]2
516mrc-1-000972연방군의 레이다를 무력화시킨 화학무기는?[미노프스키 입자 산포, 염소가스, '오딘(ODIN - Orbital Defense Initiative, 궤도 방어 무기)', 「솔라 시스템」, 미노프스키 입자, 염소가스, 미노프스키 입자]2
530mrc-0-000162최재수는 2012년에 어디로 이적했는가?[ASD 토레스 칼초, 레딩, 레딩, 1. FFC 투르비네 포츠담, 튀레쇠 FF, 스타베크 포트발 크빈네르, AEK 아테네]2
540mrc-0-003441에스토니아는 희망을 가졌는가' 를 발표한 인물이 리투아니와 협력한 떄는?[에스토니아 인민전선, 에스토니아 인민전선의 창립위원으로서 라트비아와 리투아니아 인민전선, 에스토니아 인민전선의 창립위원으로서 라트비아, 에스토니아 인민전선, 인민전선, 외셀, 인민전선]2
558mrc-1-001426한국이 무시한 일본 측의 주장은?[독도 주변수역, 독도 영유권, 독도 영유권, 중재위원회를 설치, \"수출 규제 해제 요청\", 독도, 직선기선]2
584mrc-0-002991처음에는 후짱을 반대했지만 마지막에 후짱의 도움을 받은 인물은?[호시노 청년, 아유미, 스마일과 스위트 멤버들이, 스마일과 스위트 멤버들이, 아유미, 사카가미 아유미, 응오시리엔]2
\n", + "
" + ], + "text/plain": [ + " id question \\\n", + "0 mrc-1-000653 유령'은 어느 행성에서 지구로 왔는가? \n", + "16 mrc-0-000266 통대를 뽑을 수 있었던 주체는 누구인가? \n", + "57 mrc-0-003763 불상에 대한 정보가 적혀있는 것은? \n", + "74 mrc-0-004430 어머니를 죽음에 이르게 한 것은 아들이 무엇처럼 행동했기 때문인가? \n", + "85 mrc-1-000813 태풍 초이완의 경보는 어떤 순간부터 풀렸는가? \n", + "134 mrc-0-001034 공소권이 사라질 경우 무엇에서 벗어나게 되는가? \n", + "155 mrc-0-001884 레빌 장군은 무엇이 없었기 때문에 실망했나? \n", + "166 mrc-0-003205 석조지장보살상이 조각되지 않았을 것으로 추정되는 시기는? \n", + "214 mrc-1-000256 본인의 일에 진중하게 임했고 많은 것을 연습했지만, 자신의 옷차림에 불만을 제기했던 인물은? \n", + "263 mrc-1-001797 이경언이 사망한 장소는? \n", + "295 mrc-0-001961 낮에는 어떤 바람이 부는가? \n", + "329 mrc-0-001847 자신의 사리사욕만 채우며 무능했던 진나라의 황제는? \n", + "333 mrc-0-001757 Yoo Doo Right이 수록된 앨범명은? \n", + "354 mrc-0-002074 야전의 전투 제한 시간은? \n", + "369 mrc-0-001415 이무훈에게 살해당한 인물의 직책은? \n", + "381 mrc-0-002033 신문 <파시스트 정권,Il Regime Fascista>의 주된 논조는? \n", + "400 mrc-0-002618 무관학교를 설립한 인물은? \n", + "407 mrc-0-003639 단어 '토레혼'의 어근은? \n", + "434 mrc-1-000218 레이크가 가장 큰 영향을 받았다고 한 작품의 이름은? \n", + "436 mrc-1-000690 레이가 골트 이후에 사용한 가짜 이름은 무엇인가요? \n", + "466 mrc-0-000527 조선박물연구회가 공포하고자 한 것은? \n", + "468 mrc-0-001931 스탈린그라드의 소련군 중 사정이 나았던 부대는? \n", + "477 mrc-0-004371 역할을 가장 먼저 구체화 시킨 사람은? \n", + "486 mrc-1-000651 대한민국 보물 제 1540호를 보관하는 장소는 어디인가? \n", + "513 mrc-0-002696 베이핑-톈진 전투가 시작된 연도는? \n", + "516 mrc-1-000972 연방군의 레이다를 무력화시킨 화학무기는? \n", + "530 mrc-0-000162 최재수는 2012년에 어디로 이적했는가? \n", + "540 mrc-0-003441 에스토니아는 희망을 가졌는가' 를 발표한 인물이 리투아니와 협력한 떄는? \n", + "558 mrc-1-001426 한국이 무시한 일본 측의 주장은? \n", + "584 mrc-0-002991 처음에는 후짱을 반대했지만 마지막에 후짱의 도움을 받은 인물은? \n", + "\n", + " predictions \\\n", + "0 [우스, 사만 행성, 사만, 베텔게우스(Betelgeuse) 근처의 작은 행성, 지구, 사만, 사만 행성] \n", + "16 [국민, 데르브포르갈, 학교, 충분한 시간, 앙리 브리송 행정부, 하느님, 국민] \n", + "57 [묘법연화경, 광배(光背)의 뒷면, 중수 발원문, 광배(光背)의 뒷면, 조성발원기에, 중수 발원문, 복장유물] \n", + "74 [길거리 불한당, 자신의 감정을 드러내보인 적이 없었기 때문, 교육 평론가, 제우스, 정신이상자, 골수암, 길거리 불한당] \n", + "85 [9월 16일 오후, 5월 18일, 9월 14일, 9월 16일 오후, 9월 13일, 9월 13일, 10월 10일 21시경] \n", + "134 ['죄를 범한 자', 폭행, 피고인, 검찰의 공소 유지에 의한 명백한 한계, 피고인, 흉기를 사용하며 협박한 부분이 무혐의, '죄를 범한 자'] \n", + "155 [전차포와 부무장을 '인간형'의 상반신, '인간형'의 상반신, 복잡한 2족 보행기구, 복잡한 2족 보행기구, 유효한 요격 방법, 하반신, 하반신] \n", + "166 [조선후기에, 17세기, 17세기, 조선후기에, 18세기 전반, 조선 초기, 1646년] \n", + "214 [매소드, 대마녀, 를르네 지카르트, 이재현, 쿠니스, 마튀랭이, 쿠니스] \n", + "263 [감옥, 청주, 청주, 서구 감천동 뒷산, 미얀마 아웅산 묘역, 서구 감천동 뒷산, 감옥] \n", + "295 [동남풍, 남서풍, 열대 계절풍(몬순), 따뜻하고 건조한 바람, 저지로부터 올라 오는 바람, 북동풍, 동남풍] \n", + "329 [2세 황제 호해, 유스티니아누스 1세, 진시황, 2세 황제 호해, 진 시황제, 유스티니아누스 1세, 이세황제] \n", + "333 [Delay 1968, 《私このままでいいのかな》(나 이대로 괜찮을까), So Wrong, It's Right, 《Beatles for Sale》, 《私このままでいいのかな》(나 이대로 괜찮을까), 《십만개위십마》, Delay 1968] \n", + "354 [최대 10일, 밤, 밤, 북한군의 진격을 지연시키기 위한 전투, 태릉전투, 5턴, 최대 10일] \n", + "369 [시인, 총무주석간사, 중의원 의원, 노룡군의 대장, 성문교위(城門校尉), 양복점의 직공, 노룡군의 대장] \n", + "381 [급진파 파시스트, 급진파, 급진파, 급진파 파시스트, 정치평론면, 정치평론면, 반(反)파시스트] \n", + "400 [태황제, 조진태, 기호흥학회, 기호흥학회, 오가와 오사무, 이항직, 태황제] \n", + "407 [토레, '온' (ón)은 엄청난 크기나 높이를 강조할 때 흔히 붙이는 접미사다. 따라서 '토레혼 (torrejón)'이라는 말은 '거대한 탑', 탑, '거대한 탑', '온' (ón), '온', '온'] \n", + "434 [《나뭇잎의 집》, 보러블 3부작, , ≪나체즈 족≫, , 보러블 3부작, 《나뭇잎의 집》] \n", + "436 [리카르도 클레멘트, 츠와몬, 드미트리 1세, 드미트리 1세, \"에릭 스타보 골트\", 츠와몬, '리카르도 클레멘트'] \n", + "466 [국보 제151호, 보물, 남원 양대박 부자충의문, 남원 양대박 부자충의문, 과학, 수문장계회도, 과학의 중요성] \n", + "468 [제4기갑군, 64 군, 프리드리히 파울루스의 독일군, 제6군, 제6군, 독일 제6군, 제 6군] \n", + "477 [신돈, 미드(Mead), 리처드 파인먼, 본문\\n본문(body), 미드(Mead), 나카지마 타츠오, 블라디미르 레닌] \n", + "486 [호림박물관, <고려대 도서관>, 동·서 사간판전(寺刊版殿), 서울시 종로구 종로4가 동원예식장 뒤뜰, 국립춘천박물관, <고려대 도서관>, 호림박물관] \n", + "513 [1947년, 1948년, 1946년, 1949년, 1948년, 1946년, 1942년] \n", + "516 [미노프스키 입자 산포, 염소가스, '오딘(ODIN - Orbital Defense Initiative, 궤도 방어 무기)', 「솔라 시스템」, 미노프스키 입자, 염소가스, 미노프스키 입자] \n", + "530 [ASD 토레스 칼초, 레딩, 레딩, 1. FFC 투르비네 포츠담, 튀레쇠 FF, 스타베크 포트발 크빈네르, AEK 아테네] \n", + "540 [에스토니아 인민전선, 에스토니아 인민전선의 창립위원으로서 라트비아와 리투아니아 인민전선, 에스토니아 인민전선의 창립위원으로서 라트비아, 에스토니아 인민전선, 인민전선, 외셀, 인민전선] \n", + "558 [독도 주변수역, 독도 영유권, 독도 영유권, 중재위원회를 설치, \"수출 규제 해제 요청\", 독도, 직선기선] \n", + "584 [호시노 청년, 아유미, 스마일과 스위트 멤버들이, 스마일과 스위트 멤버들이, 아유미, 사카가미 아유미, 응오시리엔] \n", + "\n", + " difficulty \n", + "0 2 \n", + "16 2 \n", + "57 2 \n", + "74 2 \n", + "85 2 \n", + "134 2 \n", + "155 2 \n", + "166 2 \n", + "214 2 \n", + "263 2 \n", + "295 2 \n", + "329 2 \n", + "333 2 \n", + "354 2 \n", + "369 2 \n", + "381 2 \n", + "400 2 \n", + "407 2 \n", + "434 2 \n", + "436 2 \n", + "466 2 \n", + "468 2 \n", + "477 2 \n", + "486 2 \n", + "513 2 \n", + "516 2 \n", + "530 2 \n", + "540 2 \n", + "558 2 \n", + "584 2 " + ] + }, + "execution_count": 40, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "df[df[\"difficulty\"] == 2]" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## 가설\n", + "1. 여러 모델이 똑같이 답변한 예측은 정답일 확률이 높고, 답이 갈리면 오답일 확률이 높을 것이다.\n", + "2. 여러 모델이 똑같이 답변한 예측은 난이도가 쉬운 편일 것이고, 답이 갈리면 난이도가 높을 것이다.\n", + "3. 모든 모델이 다 틀리는 경우는 거의 없을 것이다. 적어도 하나의 모델은 정답을 예측했을 것이다.\n", + "4. 난이도를 분류할 수 있고, 쉬운 문제만 잘 푸는 모델과 어려운 문제만 잘 푸는 모델이 존재한다면 계층적으로 앙상블을 적용할 수 있을 것이다." + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## 궁금증\n", + "1. 쉬운 문제만 잘 푸는 모델이 있지 않을까?\n", + "2. 쉬운 문제를 틀리면서 어려운 문제 잘 맞추는 모델이 존재할 수 있을까? 혹은 어려운 문제를 잘 풀면 쉬운 문제도 잘 풀지 않을까?" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "# 최상위 두 예측 비교" + ] + }, + { + "cell_type": "code", + "execution_count": 53, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "같은 값을 가진 항목들은 data/same_values.json에 저장되었습니다.\n", + "다른 값을 가진 항목들은 data/diff_values.json에 저장되었습니다.\n" + ] + } + ], + "source": [ + "import json\n", + "\n", + "\n", + "def merge_and_split_json(file1_path, file2_path, same_output_path, diff_output_path):\n", + " # 두 JSON 파일 읽기\n", + " with open(file1_path, \"r\", encoding=\"utf-8\") as f1, open(\n", + " file2_path, \"r\", encoding=\"utf-8\"\n", + " ) as f2:\n", + " data1 = json.load(f1)\n", + " data2 = json.load(f2)\n", + "\n", + " same_values = {}\n", + " diff_values = {}\n", + "\n", + " # 모든 키에 대해 반복\n", + " all_keys = set(data1.keys()) | set(data2.keys())\n", + " for key in all_keys:\n", + " value1 = data1.get(key)\n", + " value2 = data2.get(key)\n", + "\n", + " if value1 == value2:\n", + " # 값이 같은 경우\n", + " same_values[key] = value1\n", + " else:\n", + " # 값이 다른 경우\n", + " diff_values[key] = [value1, value2]\n", + "\n", + " # 결과를 JSON 파일로 저장\n", + " with open(same_output_path, \"w\", encoding=\"utf-8\") as f_same:\n", + " json.dump(same_values, f_same, ensure_ascii=False, indent=2)\n", + "\n", + " with open(diff_output_path, \"w\", encoding=\"utf-8\") as f_diff:\n", + " json.dump(diff_values, f_diff, ensure_ascii=False, indent=2)\n", + "\n", + " print(f\"같은 값을 가진 항목들은 {same_output_path}에 저장되었습니다.\")\n", + " print(f\"다른 값을 가진 항목들은 {diff_output_path}에 저장되었습니다.\")\n", + "\n", + "\n", + "# 사용 예시\n", + "file1_path = \"data/output1.json\"\n", + "file2_path = \"data/output2.json\"\n", + "same_output_path = \"data/same_values.json\"\n", + "diff_output_path = \"data/diff_values.json\"\n", + "\n", + "merge_and_split_json(file1_path, file2_path, same_output_path, diff_output_path)" + ] + }, + { + "cell_type": "code", + "execution_count": 68, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "32\n" + ] + } + ], + "source": [ + "with open(diff_output_path, \"r\", encoding=\"utf-8\") as f:\n", + " data = json.load(f)\n", + "\n", + "print(len(data))\n", + "\n", + "df = pd.read_csv(\"data/test_validation_dataset.csv\")\n", + "df[\"predictions\"] = df[\"id\"].map(data)\n", + "df = df.dropna()\n", + "df = df[[\"id\", \"question\", \"predictions\"]]" + ] + }, + { + "cell_type": "code", + "execution_count": 70, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
idquestionpredictions
27mrc-0-001206펌프가 발매된 해는 언제인가?[2004년, 2007년]
30mrc-0-003133아델리 펭귄의 목숨에 지장을 주는 사람의 업종은 무엇인가요?[책, 불법 어업]
93mrc-0-003670최고령 초등학생으로 기네스북에 올라있는 사람은?[퍼스트 그레이더, ‘마루게’]
129mrc-0-001241협동 화폐 거래소의 인정은 어느 부문에서 나타나는 변화인가?[환율 부문, 상업 분야]
150mrc-1-000116튀폰의 아버지는 누구인가?[대지의 여신 가이아, 타르타로스]
162mrc-0-004626장정기가 들어있는 우산이끼의 가지는?[웅기탁(수그루), 웅기탁]
172mrc-0-003614호르몬의 주요 생성장소가 위치한 곳은?[복벽 내, 생식샘]
186mrc-0-004460주인규는 무엇 때문에 스스로 생을 마감하게 되는가?[고문, 말기 폐암]
259mrc-0-001220양산이씨 종가가 보유한 왕지 중 양산이씨의 시조와 관련한 왕지는 몇 점이 있는가?[4점, 1점]
280mrc-0-004738주권재민의 원칙은 어디에 명시되어 있는가?[헌법, 일본국헌법]
288mrc-0-000288도스토옙스키를 연구할 때 큰 도움이 됐던 책은?[『훈민정음』, 《작가의 일기》]
300mrc-0-004196루이가 사망하게 될 원인은 무엇인가?[식중독, 합병증]
308mrc-0-002848퀵실버(영화)에서 집시를 고가도로에서 추락시킨 사람을 연기한 배우는?[케빈 베이컨 분, 케빈 베이컨]
310mrc-1-000267도쇼구 역의 승강장은 몇 층에 있는가?[2층, 3층]
324mrc-0-003514함세환은 어느 군대에 스스로 입대하여 전투에 참여했나요?[붉은 군대, 인민의용군]
334mrc-0-001778고스자쿠 천황이 사망한 연도는?[1953년, 1045년]
381mrc-0-002033신문 <파시스트 정권,Il Regime Fascista>의 주된 논조는?[급진파 파시스트, 급진파]
385mrc-0-004245이토 히로부미가 정치적 대립관계인 오쿠마 시게노부에게 준 관직은?[외무대신, 외무대신과 농상무대신]
388mrc-1-001394중세 아랍 제국에서 여권과 세금 납부 증명서를 겸용한 서류의 이름은 무엇인가?[바라아, 바라아가]
407mrc-0-003639단어 '토레혼'의 어근은?['온', '거대한 탑']
423mrc-1-001071좌운검이 도연이 정조의 자손인 것을 아무도 모르게 하기 위해 한 행동은?[남자아이 빈, 남자아이 빈을 데려다 양자로 삼는다.]
431mrc-1-001269에이몬 b. 킹을 파견한 사람은?[제임스 패닌 대령, 패닌]
436mrc-1-000690레이가 골트 이후에 사용한 가짜 이름은 무엇인가요?[츠와몬, '리카르도 클레멘트']
441mrc-0-005410쓰루가 방면의 신쾌속 열차가 특급 선더버드 호의 추월을 위해 대기할 때는 언제인가?[오미이마즈 역에서 병결 및 분리를 하는 동안, 오미이마즈 역]
442mrc-0-004579경서교회를 설립한 사람이 태어난 도시는 어디인가?[루이지애나주 센터빌, 전라북도 전주]
466mrc-0-000527조선박물연구회가 공포하고자 한 것은?[남원 양대박 부자충의문, 과학의 중요성]
472mrc-1-000278청구취지는 밝히는 방법은?['청구의 원인', 사전 구속 영장]
487mrc-0-004649히틀러의 권한을 합법적으로 확대시켜준 국가 기관은?[내각, 에피타시아]
516mrc-1-000972연방군의 레이다를 무력화시킨 화학무기는?[염소가스, 미노프스키 입자 산포]
530mrc-0-000162최재수는 2012년에 어디로 이적했는가?[레딩, 스타베크 포트발 크빈네르]
536mrc-0-001878속리산에서 임경업 장군의 설화가 깃들어있는 곳은 어디인가?[문장대, 입석대(立石臺)]
584mrc-0-002991처음에는 후짱을 반대했지만 마지막에 후짱의 도움을 받은 인물은?[아유미, 스마일과 스위트 멤버들이]
\n", + "
" + ], + "text/plain": [ + " id question \\\n", + "27 mrc-0-001206 펌프가 발매된 해는 언제인가? \n", + "30 mrc-0-003133 아델리 펭귄의 목숨에 지장을 주는 사람의 업종은 무엇인가요? \n", + "93 mrc-0-003670 최고령 초등학생으로 기네스북에 올라있는 사람은? \n", + "129 mrc-0-001241 협동 화폐 거래소의 인정은 어느 부문에서 나타나는 변화인가? \n", + "150 mrc-1-000116 튀폰의 아버지는 누구인가? \n", + "162 mrc-0-004626 장정기가 들어있는 우산이끼의 가지는? \n", + "172 mrc-0-003614 호르몬의 주요 생성장소가 위치한 곳은? \n", + "186 mrc-0-004460 주인규는 무엇 때문에 스스로 생을 마감하게 되는가? \n", + "259 mrc-0-001220 양산이씨 종가가 보유한 왕지 중 양산이씨의 시조와 관련한 왕지는 몇 점이 있는가? \n", + "280 mrc-0-004738 주권재민의 원칙은 어디에 명시되어 있는가? \n", + "288 mrc-0-000288 도스토옙스키를 연구할 때 큰 도움이 됐던 책은? \n", + "300 mrc-0-004196 루이가 사망하게 될 원인은 무엇인가? \n", + "308 mrc-0-002848 퀵실버(영화)에서 집시를 고가도로에서 추락시킨 사람을 연기한 배우는? \n", + "310 mrc-1-000267 도쇼구 역의 승강장은 몇 층에 있는가? \n", + "324 mrc-0-003514 함세환은 어느 군대에 스스로 입대하여 전투에 참여했나요? \n", + "334 mrc-0-001778 고스자쿠 천황이 사망한 연도는? \n", + "381 mrc-0-002033 신문 <파시스트 정권,Il Regime Fascista>의 주된 논조는? \n", + "385 mrc-0-004245 이토 히로부미가 정치적 대립관계인 오쿠마 시게노부에게 준 관직은? \n", + "388 mrc-1-001394 중세 아랍 제국에서 여권과 세금 납부 증명서를 겸용한 서류의 이름은 무엇인가? \n", + "407 mrc-0-003639 단어 '토레혼'의 어근은? \n", + "423 mrc-1-001071 좌운검이 도연이 정조의 자손인 것을 아무도 모르게 하기 위해 한 행동은? \n", + "431 mrc-1-001269 에이몬 b. 킹을 파견한 사람은? \n", + "436 mrc-1-000690 레이가 골트 이후에 사용한 가짜 이름은 무엇인가요? \n", + "441 mrc-0-005410 쓰루가 방면의 신쾌속 열차가 특급 선더버드 호의 추월을 위해 대기할 때는 언제인가? \n", + "442 mrc-0-004579 경서교회를 설립한 사람이 태어난 도시는 어디인가? \n", + "466 mrc-0-000527 조선박물연구회가 공포하고자 한 것은? \n", + "472 mrc-1-000278 청구취지는 밝히는 방법은? \n", + "487 mrc-0-004649 히틀러의 권한을 합법적으로 확대시켜준 국가 기관은? \n", + "516 mrc-1-000972 연방군의 레이다를 무력화시킨 화학무기는? \n", + "530 mrc-0-000162 최재수는 2012년에 어디로 이적했는가? \n", + "536 mrc-0-001878 속리산에서 임경업 장군의 설화가 깃들어있는 곳은 어디인가? \n", + "584 mrc-0-002991 처음에는 후짱을 반대했지만 마지막에 후짱의 도움을 받은 인물은? \n", + "\n", + " predictions \n", + "27 [2004년, 2007년] \n", + "30 [책, 불법 어업] \n", + "93 [퍼스트 그레이더, ‘마루게’] \n", + "129 [환율 부문, 상업 분야] \n", + "150 [대지의 여신 가이아, 타르타로스] \n", + "162 [웅기탁(수그루), 웅기탁] \n", + "172 [복벽 내, 생식샘] \n", + "186 [고문, 말기 폐암] \n", + "259 [4점, 1점] \n", + "280 [헌법, 일본국헌법] \n", + "288 [『훈민정음』, 《작가의 일기》] \n", + "300 [식중독, 합병증] \n", + "308 [케빈 베이컨 분, 케빈 베이컨] \n", + "310 [2층, 3층] \n", + "324 [붉은 군대, 인민의용군] \n", + "334 [1953년, 1045년] \n", + "381 [급진파 파시스트, 급진파] \n", + "385 [외무대신, 외무대신과 농상무대신] \n", + "388 [바라아, 바라아가] \n", + "407 ['온', '거대한 탑'] \n", + "423 [남자아이 빈, 남자아이 빈을 데려다 양자로 삼는다.] \n", + "431 [제임스 패닌 대령, 패닌] \n", + "436 [츠와몬, '리카르도 클레멘트'] \n", + "441 [오미이마즈 역에서 병결 및 분리를 하는 동안, 오미이마즈 역] \n", + "442 [루이지애나주 센터빌, 전라북도 전주] \n", + "466 [남원 양대박 부자충의문, 과학의 중요성] \n", + "472 ['청구의 원인', 사전 구속 영장] \n", + "487 [내각, 에피타시아] \n", + "516 [염소가스, 미노프스키 입자 산포] \n", + "530 [레딩, 스타베크 포트발 크빈네르] \n", + "536 [문장대, 입석대(立石臺)] \n", + "584 [아유미, 스마일과 스위트 멤버들이] " + ] + }, + "execution_count": 70, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "pd.set_option(\"display.max_rows\", 32)\n", + "df" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "### 질문과 답변의 유사성, 그리고 답변간의 유사성을 통해 Retriever가 틀린 Context를 가져왔는지 여부와 두 모델이 동일한 Context를 참고했는지 등을 추정할 수 있다.\n", + "- 예를 들어 `도스토옙스키를 연구할 때 큰 도움이 됐던 책은?` -> `[『훈민정음』, 《작가의 일기》]`는 이는 서로 다른 문서에서 정답을 가져왔을 것이다.\n", + "- `주권재민의 원칙은 어디에 명시되어 있는가?` -> `[헌법, 일본국헌법]`는 같은 문서지만 Reader가 서로 다른 정답을 추정한 것이다." + ] + } + ], + "metadata": { + "kernelspec": { + "display_name": "MRC", + "language": "python", + "name": "python3" + }, + "language_info": { + "codemirror_mode": { + "name": "ipython", + "version": 3 + }, + "file_extension": ".py", + "mimetype": "text/x-python", + "name": "python", + "nbconvert_exporter": "python", + "pygments_lexer": "ipython3", + "version": "3.10.14" + } + }, + "nbformat": 4, + "nbformat_minor": 2 +} diff --git a/notebooks/data_info1.png b/notebooks/data_info1.png new file mode 100644 index 0000000..ac17c48 Binary files /dev/null and b/notebooks/data_info1.png differ diff --git a/notebooks/dense_top-k_confirm.ipynb b/notebooks/dense_top-k_confirm.ipynb new file mode 100644 index 0000000..c5d19f1 --- /dev/null +++ b/notebooks/dense_top-k_confirm.ipynb @@ -0,0 +1,290 @@ +{ + "cells": [ + { + "cell_type": "code", + "execution_count": 200, + "metadata": {}, + "outputs": [], + "source": [ + "# import\n", + "import re\n", + "import json\n", + "import numpy as np\n", + "from tqdm import tqdm\n", + "from pprint import pprint\n", + "import pickle\n", + "\n", + "import torch\n", + "import torch.nn.functional as F\n", + "from datasets import load_from_disk\n", + "from transformers import (\n", + " AutoTokenizer, TrainingArguments,\n", + " BertModel, BertPreTrainedModel\n", + ")" + ] + }, + { + "cell_type": "code", + "execution_count": 51, + "metadata": {}, + "outputs": [], + "source": [ + "class BertEncoder(BertPreTrainedModel):\n", + "\n", + " def __init__(self,\n", + " config\n", + " ):\n", + " super(BertEncoder, self).__init__(config)\n", + "\n", + " self.bert = BertModel(config)\n", + " self.init_weights()\n", + "\n", + "\n", + " def forward(self,\n", + " input_ids,\n", + " attention_mask=None,\n", + " token_type_ids=None\n", + " ):\n", + "\n", + " outputs = self.bert(\n", + " input_ids,\n", + " attention_mask=attention_mask,\n", + " token_type_ids=token_type_ids\n", + " )\n", + "\n", + " pooled_output = outputs[1]\n", + " return pooled_output" + ] + }, + { + "cell_type": "code", + "execution_count": 44, + "metadata": {}, + "outputs": [], + "source": [ + "# 0 ~ 1.0 사이 값으로 scaling\n", + "def min_max_scaling(scores):\n", + " min_score = torch.min(scores)\n", + " max_score = torch.max(scores)\n", + " scaled_scores = (scores - min_score) / (max_score - min_score)\n", + " return scaled_scores" + ] + }, + { + "cell_type": "code", + "execution_count": null, + "metadata": {}, + "outputs": [], + "source": [ + "# top-k 확인\n", + "def get_relevant_doc(\n", + " tokenizer,\n", + " query,\n", + " passage,\n", + " ground_truth,\n", + " p_name,\n", + " q_name,\n", + " topk=1,\n", + " args=None\n", + " ): # 유사도 높은 context 및 ground-truth context와의 유사도 추출\n", + " \n", + " with open(\"../code/retrieval/dense_encoder/\" + p_name, \"rb\") as f:\n", + " p_encoder = pickle.load(f)\n", + " with open(\"../code/retrieval/dense_encoder/\" + q_name, \"rb\") as f:\n", + " q_encoder = pickle.load(f)\n", + "\n", + " with torch.no_grad():\n", + " p_encoder.eval()\n", + " q_encoder.eval()\n", + " q_seps = tokenizer([query], padding=\"max_length\", truncation=True, return_tensors=\"pt\").to(\"cuda\")\n", + " q_emb = q_encoder(**q_seps).to(\"cpu\") # (num_query, emb_dim)\n", + "\n", + " ground_truth = tokenizer(ground_truth, padding=\"max_length\", truncation=True, return_tensors=\"pt\").to(\"cuda\")\n", + " g_emb = p_encoder(**ground_truth).to(\"cpu\")\n", + "\n", + " p_embs = []\n", + " for p in passage:\n", + " p = tokenizer(p, padding=\"max_length\", truncation=True, return_tensors=\"pt\").to(\"cuda\")\n", + " p_emb = p_encoder(**p).to(\"cpu\").numpy()\n", + " p_embs.append(p_emb)\n", + " \n", + " p_embs = torch.Tensor(p_embs).squeeze() # (num_passage, emb_dim)\n", + " dot_prod_scores = torch.matmul(q_emb, torch.transpose(p_embs, 0, 1)) # question과의 유사도\n", + " rank = torch.argsort(dot_prod_scores, dim=1, descending=True).squeeze()\n", + "\n", + " # ground_truth와 passages의 유사도\n", + " p_embs = F.normalize(p_embs, dim=-1)\n", + " g_emb = F.normalize(g_emb, dim=-1)\n", + " dot_prod_scores = torch.matmul(\n", + " g_emb, torch.transpose(p_embs, 0, 1)).squeeze() # 각 문서간의 유사도\n", + " # softmax = F.softmax(dot_prod_scores, dim=1).squeeze() # (num_passage,) → ground-truth 문서에 대한 전체 유사도\n", + " dot_prod_scores = min_max_scaling(dot_prod_scores)\n", + "\n", + " return dot_prod_scores, rank[:topk]" + ] + }, + { + "cell_type": "code", + "execution_count": 187, + "metadata": {}, + "outputs": [], + "source": [ + "# document search\n", + "def search_doc(tokenizer, query, contexts, p_name, q_name, topk): # query가 여럿일 경우 순서대로 검색\n", + " context_score = []\n", + "\n", + " # for q in query\n", + " for i, q in tqdm(enumerate(query), total=len(query), desc=\"Searching\", unit=\"query\"):\n", + " score, indices = get_relevant_doc(\n", + " tokenizer=tokenizer, query=q, passage=contexts, ground_truth=contexts[i], p_name=p_name, q_name=q_name, topk=topk)\n", + "\n", + " # print(f\"[Search Query] {q}\")\n", + " # print(f'score : {scores}')\n", + "\n", + " arr = [[contexts[idx], score[idx]] for idx in indices] \n", + " context_score.append(arr) # [context, score]\n", + "\n", + " return context_score # (num_query, k, 2) query마다 top-k개의 context와 score로 구성된 리스트 반환\n", + "\n", + " # top-k 문서 및 유사도 확인\n", + " # for rank, idx in enumerate(indices):\n", + " # print(f\"Top-{rank + 1}th Passage (Index {idx})\")\n", + " # # pprint(retriever.passage['context'][idx])\n", + " # print(f\"유사도 : {score[idx]}\")\n", + " # pprint(contexts[idx])" + ] + }, + { + "cell_type": "code", + "execution_count": 188, + "metadata": {}, + "outputs": [ + { + "name": "stderr", + "output_type": "stream", + "text": [ + "/opt/conda/envs/main/lib/python3.10/site-packages/huggingface_hub/file_download.py:1142: FutureWarning: `resume_download` is deprecated and will be removed in version 1.0.0. Downloads always resume when possible. If you want to force a new download, use `force_download=True`.\n", + " warnings.warn(\n", + "Searching: 100%|██████████| 240/240 [16:24<00:00, 4.10s/query]\n" + ] + } + ], + "source": [ + "# wikipedia 불러오기\n", + "# with open(\"../data/wikipedia_documents.json\", \"r\", encoding=\"utf-8\") as f:\n", + "# wiki = json.load(f)\n", + "# contexts = list(dict.fromkeys([\n", + "# value[\"text\"] for value in wiki.values()\n", + "# ]))\n", + "\n", + "model_checkpoint = \"klue/bert-base\"\n", + "p_name = \"p_korquad_1.bin\"\n", + "q_name = \"q_korquad_1.bin\"\n", + "\n", + "tokenizer = AutoTokenizer.from_pretrained(model_checkpoint)\n", + "\n", + "dataset = load_from_disk(\"../data/train_dataset\")\n", + "val_dataset = dataset[\"validation\"][\"question\"]\n", + "contexts = dataset[\"validation\"][\"context\"]\n", + "\n", + "# query와 비교하여 문서 찾기\n", + "query = val_dataset\n", + "\n", + "context_score = search_doc(tokenizer, query, contexts, p_name, q_name)" + ] + }, + { + "cell_type": "code", + "execution_count": 191, + "metadata": {}, + "outputs": [], + "source": [ + "context_score = np.array(context_score)" + ] + }, + { + "cell_type": "code", + "execution_count": 194, + "metadata": {}, + "outputs": [], + "source": [ + "def top_k_see(k):\n", + " correct_ids = []\n", + " wrong_ids = []\n", + "\n", + " for con_sco in context_score:\n", + " for idx in range(k):\n", + " context, score = con_sco[idx]\n", + " score = re.sub(\n", + " \"[A-Za-z()]\",\n", + " \"\",\n", + " score\n", + " )\n", + " if float(score) >= 0.99:\n", + " correct_ids.append(context)\n", + " break\n", + " else:\n", + " wrong_ids.append(context)\n", + "\n", + " print(f\"전체 개수: {len(context_score)}, 정답 개수: {len(correct_ids)}, 오답 개수: {len(wrong_ids)}, 정답률: {len(correct_ids)/len(context_score):.4%}\")" + ] + }, + { + "cell_type": "code", + "execution_count": 198, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체 개수: 240, 정답 개수: 237, 오답 개수: 3, 정답률: 98.7500%\n" + ] + } + ], + "source": [ + "top_k_see(40)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "train_dataset\n", + "epoch: 3, lr: 5e-5, batch: 8, weight_decay: 0.01, top-k: 20\n", + "전체 개수: 240, 정답 개수: 221, 오답 개수: 19, 정답률: 92.0833%\n", + "\n", + "train_dataset + korquad v1.0 (context 당 question 랜덤 하나만 추출)\n", + "epoch: 2, lr: 4e-5, batch: 5, weight_decay: 0.01, top-k: 5\n", + "전체 개수: 240, 정답 개수: 211, 오답 개수: 29, 정답률: 87.9167%\n", + "\n", + "epoch: 2, lr: 4e-5, batch: 5, weight_decay: 0.01, top-k: 20\n", + "전체 개수: 240, 정답 개수: 231, 오답 개수: 9, 정답률: 96.2500%\n", + "\n", + "epoch: 2, lr: 4e-5, batch: 5, weight_decay: 0.01, top-k: 40\n", + "전체 개수: 240, 정답 개수: 236, 오답 개수: 4, 정답률: 98.3333%\n" + ] + } + ], + "metadata": { + "kernelspec": { + "display_name": "main", + "language": "python", + "name": "python3" + }, + "language_info": { + "codemirror_mode": { + "name": "ipython", + "version": 3 + }, + "file_extension": ".py", + "mimetype": "text/x-python", + "name": "python", + "nbconvert_exporter": "python", + "pygments_lexer": "ipython3", + "version": "3.10.13" + } + }, + "nbformat": 4, + "nbformat_minor": 2 +} diff --git a/notebooks/eda_for_data_cleaning.ipynb b/notebooks/eda_for_data_cleaning.ipynb new file mode 100644 index 0000000..8f763ac --- /dev/null +++ b/notebooks/eda_for_data_cleaning.ipynb @@ -0,0 +1,3643 @@ +{ + "cells": [ + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "# eda에 앞서 고민\n", + "1. 고유명사: 토큰화가 정상적으로 되지 않거나 형태소 분석에서 큰 오류가 생길 위험이 높아 어려울 것이다.\n", + " - 고유명사는 따옴표로 감싼다.\n", + " - \n", + "2. 동의어, 유의어, 반의어 + 부정 표현: 정확히 일치하는 단어에 비해 크게 어려울 것이다. 증강 아이디어로 활용해도 좋을 듯하다.\n", + "3. 추론 문제는 어떻게?\n", + "4. (증강시) context에 정답 단어가 여러번 나올 때는 직접 어디 맥락인지 지정해주어야 한다." + ] + }, + { + "cell_type": "code", + "execution_count": 2, + "metadata": {}, + "outputs": [ + { + "name": "stderr", + "output_type": "stream", + "text": [ + "/opt/miniconda3/envs/MRC/lib/python3.10/site-packages/tqdm/auto.py:21: TqdmWarning: IProgress not found. Please update jupyter and ipywidgets. See https://ipywidgets.readthedocs.io/en/stable/user_install.html\n", + " from .autonotebook import tqdm as notebook_tqdm\n" + ] + } + ], + "source": [ + "import os\n", + "import json\n", + "import pandas as pd\n", + "from datasets import load_from_disk" + ] + }, + { + "cell_type": "code", + "execution_count": 3, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Train length : 3952\n", + "Valid length : 240\n", + "Test length : 600\n" + ] + } + ], + "source": [ + "current_dir = os.getcwd()\n", + "parent_dir = os.path.dirname(current_dir)\n", + "\n", + "# Arrow 파일 경로 설정\n", + "dataset = load_from_disk(os.path.join(parent_dir, \"data\", \"train_dataset\"))\n", + "test_dataset = load_from_disk(os.path.join(parent_dir, \"data\", \"test_dataset\"))\n", + "\n", + "train_df = pd.DataFrame(dataset[\"train\"])\n", + "valid_df = pd.DataFrame(dataset[\"validation\"])\n", + "test_df = pd.DataFrame(test_dataset[\"validation\"])\n", + "\n", + "print(f\"Train length : {len(train_df)}\")\n", + "print(f\"Valid length : {len(valid_df)}\")\n", + "print(f\"Test length : {len(test_df)}\")" + ] + }, + { + "cell_type": "code", + "execution_count": 4, + "metadata": {}, + "outputs": [], + "source": [ + "current_dir = os.getcwd()\n", + "parent_dir = os.path.dirname(current_dir)\n", + "file_path = os.path.join(parent_dir, 'data', \"wikipedia_documents.json\")\n", + "\n", + "with open(file_path, \"r\", encoding=\"utf-8\") as json_file:\n", + " json_data = json.load(json_file)\n", + " \n", + "df_wiki=pd.read_json(file_path).transpose()" + ] + }, + { + "cell_type": "code", + "execution_count": 5, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
textcorpus_sourceurldomaintitleauthorhtmldocument_id
0이 문서는 나라 목록이며, 전 세계 206개 나라의 각 현황과 주권 승인 정보를 개...위키피디아TODONone나라 목록NoneNone0
1이 목록에 실린 국가 기준은 1933년 몬테비데오 협약 1장을 참고로 하였다. 협정...위키피디아TODONone나라 목록NoneNone1
2현 서울특별시 종로구 서린동 (구 일제 강점기 경기도 경성부 서린정) 출신이다. 친...위키피디아TODONone백남준NoneNone2
3아오조라 문고(靑空文庫, あおぞらぶんこ|아오조라 분고)는 ‘일본어판 구텐베르크 프로...위키피디아TODONone아오조라 문고NoneNone3
4저자 사망 이후 50년이 지나 저작권이 소멸한 메이지 시대부터 쇼와 시대 초기까지의...위키피디아TODONone아오조라 문고NoneNone4
\n", + "
" + ], + "text/plain": [ + " text corpus_source url \\\n", + "0 이 문서는 나라 목록이며, 전 세계 206개 나라의 각 현황과 주권 승인 정보를 개... 위키피디아 TODO \n", + "1 이 목록에 실린 국가 기준은 1933년 몬테비데오 협약 1장을 참고로 하였다. 협정... 위키피디아 TODO \n", + "2 현 서울특별시 종로구 서린동 (구 일제 강점기 경기도 경성부 서린정) 출신이다. 친... 위키피디아 TODO \n", + "3 아오조라 문고(靑空文庫, あおぞらぶんこ|아오조라 분고)는 ‘일본어판 구텐베르크 프로... 위키피디아 TODO \n", + "4 저자 사망 이후 50년이 지나 저작권이 소멸한 메이지 시대부터 쇼와 시대 초기까지의... 위키피디아 TODO \n", + "\n", + " domain title author html document_id \n", + "0 None 나라 목록 None None 0 \n", + "1 None 나라 목록 None None 1 \n", + "2 None 백남준 None None 2 \n", + "3 None 아오조라 문고 None None 3 \n", + "4 None 아오조라 문고 None None 4 " + ] + }, + "execution_count": 5, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "df_wiki.head()" + ] + }, + { + "cell_type": "code", + "execution_count": 6, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionidanswersdocument_id__index_level_0__
0미국 상원미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국...대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은?mrc-1-000067{'answer_start': [235], 'text': ['하원']}1829342
1인사조직관리'근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19...현대적 인사조직관리의 시발점이 된 책은?mrc-0-004397{'answer_start': [212], 'text': ['《경영의 실제》']}516382873
2강희제강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전...강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가?mrc-1-000362{'answer_start': [510], 'text': ['백성']}5028230
3금동삼존불감불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든...11~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요?mrc-0-001510{'answer_start': [625], 'text': ['중국']}34146992
4계사명 사리구동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기...명문이 적힌 유물을 구성하는 그릇의 총 개수는?mrc-0-000823{'answer_start': [30], 'text': ['4개']}47334548
\n", + "
" + ], + "text/plain": [ + " title context \\\n", + "0 미국 상원 미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국... \n", + "1 인사조직관리 '근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19... \n", + "2 강희제 강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전... \n", + "3 금동삼존불감 불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든... \n", + "4 계사명 사리구 동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기... \n", + "\n", + " question id \\\n", + "0 대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은? mrc-1-000067 \n", + "1 현대적 인사조직관리의 시발점이 된 책은? mrc-0-004397 \n", + "2 강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가? mrc-1-000362 \n", + "3 11~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요? mrc-0-001510 \n", + "4 명문이 적힌 유물을 구성하는 그릇의 총 개수는? mrc-0-000823 \n", + "\n", + " answers document_id \\\n", + "0 {'answer_start': [235], 'text': ['하원']} 18293 \n", + "1 {'answer_start': [212], 'text': ['《경영의 실제》']} 51638 \n", + "2 {'answer_start': [510], 'text': ['백성']} 5028 \n", + "3 {'answer_start': [625], 'text': ['중국']} 34146 \n", + "4 {'answer_start': [30], 'text': ['4개']} 47334 \n", + "\n", + " __index_level_0__ \n", + "0 42 \n", + "1 2873 \n", + "2 230 \n", + "3 992 \n", + "4 548 " + ] + }, + "execution_count": 6, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "train_df.head()" + ] + }, + { + "cell_type": "code", + "execution_count": 7, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionidanswersdocument_id__index_level_0__
0전효숙순천여자고등학교 졸업, 1973년 이화여자대학교를 졸업하고 1975년 제17회 사법...처음으로 부실 경영인에 대한 보상 선고를 받은 회사는?mrc-0-003264{'answer_start': [284], 'text': ['한보철강']}90272146
1스토우빌선요크 카운티 동쪽에 처음으로 여객 열차 운행이 시작한 시점은 1868년 토론토 & ...스카버러 남쪽과 코보콘그 마을의 철도 노선이 처음 연장된 연도는?mrc-0-004762{'answer_start': [146], 'text': ['1871년']}517653106
2촐라촐라 정부\\n 촐라의 정부 체제는 전제군주제였으며,2001 촐라의 군주는 절대적인 ...촌락에서 운영 위원 후보자 이름을 쓰기위해 사용된 것은?mrc-1-001810{'answer_start': [517], 'text': ['나뭇잎']}156941180
3백조 기사프랑스의 십자군 무훈시는 1099년 예루살렘 왕국의 통치자가 된 고드프루아 드 부용...로타이르가 백조를 구하기 위해 사용한 것은?mrc-1-000219{'answer_start': [1109], 'text': ['금대야']}59536141
4탈관료제화탈관료제화는 현대사회에서 관료제 성격이 약화되는 현상이다. 현대사회에서 관료제는 약...의견을 자유롭게 나누는 것은 조직 내 어떤 관계에서 가능한가?mrc-1-000285{'answer_start': [386], 'text': ['수평적 관계']}32991184
\n", + "
" + ], + "text/plain": [ + " title context \\\n", + "0 전효숙 순천여자고등학교 졸업, 1973년 이화여자대학교를 졸업하고 1975년 제17회 사법... \n", + "1 스토우빌선 요크 카운티 동쪽에 처음으로 여객 열차 운행이 시작한 시점은 1868년 토론토 & ... \n", + "2 촐라 촐라 정부\\n 촐라의 정부 체제는 전제군주제였으며,2001 촐라의 군주는 절대적인 ... \n", + "3 백조 기사 프랑스의 십자군 무훈시는 1099년 예루살렘 왕국의 통치자가 된 고드프루아 드 부용... \n", + "4 탈관료제화 탈관료제화는 현대사회에서 관료제 성격이 약화되는 현상이다. 현대사회에서 관료제는 약... \n", + "\n", + " question id \\\n", + "0 처음으로 부실 경영인에 대한 보상 선고를 받은 회사는? mrc-0-003264 \n", + "1 스카버러 남쪽과 코보콘그 마을의 철도 노선이 처음 연장된 연도는? mrc-0-004762 \n", + "2 촌락에서 운영 위원 후보자 이름을 쓰기위해 사용된 것은? mrc-1-001810 \n", + "3 로타이르가 백조를 구하기 위해 사용한 것은? mrc-1-000219 \n", + "4 의견을 자유롭게 나누는 것은 조직 내 어떤 관계에서 가능한가? mrc-1-000285 \n", + "\n", + " answers document_id __index_level_0__ \n", + "0 {'answer_start': [284], 'text': ['한보철강']} 9027 2146 \n", + "1 {'answer_start': [146], 'text': ['1871년']} 51765 3106 \n", + "2 {'answer_start': [517], 'text': ['나뭇잎']} 15694 1180 \n", + "3 {'answer_start': [1109], 'text': ['금대야']} 59536 141 \n", + "4 {'answer_start': [386], 'text': ['수평적 관계']} 32991 184 " + ] + }, + "execution_count": 7, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "valid_df.head()" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## ID나 __index_level_0__는 무슨 의미일까?" + ] + }, + { + "cell_type": "code", + "execution_count": 7, + "metadata": {}, + "outputs": [ + { + "data": { + "text/plain": [ + "id\n", + "mrc-0 2957\n", + "mrc-1 995\n", + "Name: count, dtype: int64" + ] + }, + "execution_count": 7, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "train_id_prefix = train_df[\"id\"].map(lambda x: x[:5])\n", + "train_id_prefix.value_counts()" + ] + }, + { + "cell_type": "code", + "execution_count": 8, + "metadata": {}, + "outputs": [ + { + "data": { + "text/plain": [ + "id\n", + "mrc-0 176\n", + "mrc-1 64\n", + "Name: count, dtype: int64" + ] + }, + "execution_count": 8, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "valid_id_prefix = valid_df[\"id\"].map(lambda x: x[:5])\n", + "valid_id_prefix.value_counts()" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "__index_level_0__은 CSV 파일 등을 pyarrow로 읽어올 때 index를 보존하는 경우 생성된다." + ] + }, + { + "cell_type": "code", + "execution_count": 9, + "metadata": {}, + "outputs": [], + "source": [ + "train_df = train_df.drop([\"id\", \"__index_level_0__\"],axis=1)" + ] + }, + { + "cell_type": "code", + "execution_count": 10, + "metadata": {}, + "outputs": [], + "source": [ + "valid_df = valid_df.drop([\"id\", \"__index_level_0__\"], axis=1)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## Wikipedia에 존재하는 데이터인가?" + ] + }, + { + "cell_type": "code", + "execution_count": 11, + "metadata": {}, + "outputs": [], + "source": [ + "def is_df_in_wiki(df):\n", + " no_wiki = [\n", + " row\n", + " for _, row in df.iterrows()\n", + " if row[\"document_id\"] not in df_wiki[\"document_id\"]\n", + " ]\n", + " return pd.DataFrame(no_wiki, columns=df.columns)" + ] + }, + { + "cell_type": "code", + "execution_count": 12, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "0 0\n" + ] + } + ], + "source": [ + "print(\n", + " len(is_df_in_wiki(train_df)), \n", + " len(is_df_in_wiki(valid_df))\n", + ")" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## answer가 context에 존재하는가?" + ] + }, + { + "cell_type": "code", + "execution_count": 13, + "metadata": {}, + "outputs": [], + "source": [ + "def is_answer_in_context(df):\n", + " answer_in_question = [\n", + " row for _, row in df.iterrows() if row[\"answers\"][\"text\"][0] not in row[\"context\"]\n", + " ]\n", + " return pd.DataFrame(answer_in_question, columns=df.columns)" + ] + }, + { + "cell_type": "code", + "execution_count": 14, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_id
\n", + "
" + ], + "text/plain": [ + "Empty DataFrame\n", + "Columns: [title, context, question, answers, document_id]\n", + "Index: []" + ] + }, + "execution_count": 14, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "is_answer_in_context(train_df)" + ] + }, + { + "cell_type": "code", + "execution_count": 15, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_id
\n", + "
" + ], + "text/plain": [ + "Empty DataFrame\n", + "Columns: [title, context, question, answers, document_id]\n", + "Index: []" + ] + }, + "execution_count": 15, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "is_answer_in_context(valid_df)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## answer_start가 정확한가?" + ] + }, + { + "cell_type": "code", + "execution_count": 85, + "metadata": {}, + "outputs": [], + "source": [ + "# 정답 검증 함수\n", + "def verify_answer(row):\n", + " context = row[\"context\"]\n", + " answer_text = row[\"answers\"][\"text\"][0]\n", + " answer_start = row[\"answers\"][\"answer_start\"][0]\n", + "\n", + " # answer_start부터 answer_text 길이만큼의 문장을 추출\n", + " extracted_answer = context[answer_start : answer_start + len(answer_text)]\n", + "\n", + " # 추출한 정답과 answer_text가 동일한지 검증\n", + " return extracted_answer == answer_text\n", + "\n", + "\n", + "# 잘못된 정답을 포함한 행만 모아서 새로운 DataFrame 반환\n", + "def get_incorrect_rows(df):\n", + " # 각 행에 대해 검증 수행하여 False인 행만 필터링\n", + " incorrect_df = df[~df.apply(verify_answer, axis=1)]\n", + " return incorrect_df" + ] + }, + { + "cell_type": "code", + "execution_count": 11, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "16일 14\n" + ] + } + ], + "source": [ + "# find 함수 사용하여 검증할 수도 있음\n", + "context = \"오늘은 2024년 10월 16일 입니다.\"\n", + "answer_text = \"16일\"\n", + "answer_start = context.find(answer_text)\n", + "print(context[answer_start : answer_start + len(answer_text)], answer_start)" + ] + }, + { + "cell_type": "code", + "execution_count": 86, + "metadata": {}, + "outputs": [], + "source": [ + "train_incorrect = get_incorrect_rows(train_df)\n", + "valid_incorrect = get_incorrect_rows(valid_df)" + ] + }, + { + "cell_type": "code", + "execution_count": 87, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_idanswer_sentence
\n", + "
" + ], + "text/plain": [ + "Empty DataFrame\n", + "Columns: [title, context, question, answers, document_id, answer_sentence]\n", + "Index: []" + ] + }, + "execution_count": 87, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "train_incorrect" + ] + }, + { + "cell_type": "code", + "execution_count": 88, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_idanswer_sentence
\n", + "
" + ], + "text/plain": [ + "Empty DataFrame\n", + "Columns: [title, context, question, answers, document_id, answer_sentence]\n", + "Index: []" + ] + }, + "execution_count": 88, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "valid_incorrect" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## answer가 question에도 존재하는가?" + ] + }, + { + "cell_type": "code", + "execution_count": 16, + "metadata": {}, + "outputs": [], + "source": [ + "def is_answer_in_question(df):\n", + " answer_in_question = [\n", + " row for _, row in df.iterrows() if row[\"answers\"][\"text\"][0] in row[\"question\"]\n", + " ]\n", + " return pd.DataFrame(answer_in_question, columns=df.columns)" + ] + }, + { + "cell_type": "code", + "execution_count": 17, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_id
147교황 클레멘스 2세오늘날 독일 니더작센주 호른부르크 태생인 그는 몰스레벤 및 호른부르크 백작 콘라드와...아물라드의 아들이 밤베르크의 주교로 서임된 해는?{'answer_start': [53], 'text': ['아물라드']}6736
275아베 오사무1980년 프로 야구 드래프트 회의에서 세이부 라이온스로부터 4순위 지명을 받아 입...9월 23일 세이부 돔에서 진행된 경기에서 긴테쓰의 상대팀은 어디였나?{'answer_start': [681], 'text': ['세이부']}36873
404고창 오거리 당산고창읍 중앙동에 위치한 당산이다. 당산은 민간신앙에서 신이 있다고 믿고 섬기는 것으...중앙동·중거리·하거리 할아버지당 중 가장 높은 당산은?{'answer_start': [415], 'text': ['하거리 할아버지당']}45428
614마이어로위츠 이야기 (제대로 고른 신작)마이어로위츠 가족의 맏아들 대니는 최근 아내와 이혼한 후 뉴욕 맨해튼에 있는 아버지...폴이 어릴 적 성적으로 흥분을 느꼈던 대상은?{'answer_start': [918], 'text': ['폴']}47869
631대한민국의 보수주의보수주의\\n*진정한 자유민주주의를 추구하는 게 아니라는 비판\\n** 자유민주주의는 ...자유민주주의에서 사람들 모두가 보장받아야 하는 것은?{'answer_start': [51], 'text': ['자유']}29784
927탈염과 완충액 교환작은 (4mL 미만의) 부피에 대해 겔 여과를 수행하기위한 여러가지 일반적인 방식이...크로마토 그래피 카트리지가 한 번에 사용 가능한 샘플의 수는?{'answer_start': [641], 'text': ['한 샘플']}53185
945네덜란드 대 대한민국 (1998년 FIFA 월드컵)1998년 대회에서 대한민국은 네덜란드, 멕시코, 벨기에와 함께 E조에 편성되었다....한국 대 멕시코 경기에서 선제골을 넣은 쪽은?{'answer_start': [1317], 'text': ['한국']}51777
1451창녕 관룡사 석장승관룡사로 가는 오솔길 양쪽에 서 있는 한 쌍의 돌장승이다.\\n\\n사찰 입구에 두는 ...여장승과 남장승 중에 키가 더 큰 것은 무엇인가?{'answer_start': [336], 'text': ['여장승']}39893
1584규소 수지규소 수지(硅素樹脂)는 실리콘 물질의 일종이다.\\n\\n이산화규소는 1개의 규소 원자...실리콘을 실리콘유로 만들기 위해 거치는 과정은?{'answer_start': [190], 'text': ['실리콘']}56358
1634피아노 협주곡 1번 (베토벤)하이든 밑에서 본격적으로 작곡을 배우기 위해 1792년 본에서 빈으로 자리를 옮긴 ...두 번째, 세 번째 피아노 협주곡 중 먼저 세상에 알려진 곡은?{'answer_start': [255], 'text': ['세 번째 피아노 협주곡']}58986
1910캐나디안 케이퍼1979년, 격해지는 반미 시위 가운데 이란 시위대가 주 이란 미국 대사관 벽을 넘...앤더스 그룹은 시위하는 집단을 피해 누구의 집으로 갔는가?{'answer_start': [314], 'text': ['앤더스']}33784
2687사망유희 (인터넷 토론)2012년 10월 19일 진중권은 시사토론에 출연해 NLL과 정수장학회에 대한 토론...사람들은 간결과 진중권의 토론에서 누가 이겼다고 생각하는가?{'answer_start': [546], 'text': ['진중권']}35704
3460칠보사 목조관음보살좌상칠보사 목조관음보살좌상은 약간 구부린 자세에 넓은 어깨와 무릅이 높고 넓어 안정감이...창녕 포교당 목조여래좌상과 대구 동화사 대웅전 목조삼세불좌상 중 먼저 만들어진 것은?{'answer_start': [447], 'text': ['대구 동화사 대웅전 목...47336
3523시민적 및 정치적 권리에 관한 국제규약세계 인권 선언은 국제관습법이 되어서 모든 나라에 법률적 효력이 있다는 일각의 주장...세계인권선언과 국제인권규약을 비교했을 때 어떤 것이 더 세세한 규약을 담고있나?{'answer_start': [165], 'text': ['국제인권규약']}28063
3727토하라인기원전 2세기 흉노로 인해 타림분지에서 인도로 이동하였다. 스키타이족을 비롯한 이란...토하라어는 인도이란어와 켈트어 중에서 무엇과 더 유사한가?{'answer_start': [120], 'text': ['켈트어']}14242
3922수소 결합물에서의 수소 결합은 H-O-H···O-2H 형태로 나타난다.\\n\\n물 분자에서 2...밤이 되면 공기가 위로 올라가는 곳은 육지와 바다 중 어디인가?{'answer_start': [627], 'text': ['바다']}10486
\n", + "
" + ], + "text/plain": [ + " title \\\n", + "147 교황 클레멘스 2세 \n", + "275 아베 오사무 \n", + "404 고창 오거리 당산 \n", + "614 마이어로위츠 이야기 (제대로 고른 신작) \n", + "631 대한민국의 보수주의 \n", + "927 탈염과 완충액 교환 \n", + "945 네덜란드 대 대한민국 (1998년 FIFA 월드컵) \n", + "1451 창녕 관룡사 석장승 \n", + "1584 규소 수지 \n", + "1634 피아노 협주곡 1번 (베토벤) \n", + "1910 캐나디안 케이퍼 \n", + "2687 사망유희 (인터넷 토론) \n", + "3460 칠보사 목조관음보살좌상 \n", + "3523 시민적 및 정치적 권리에 관한 국제규약 \n", + "3727 토하라인 \n", + "3922 수소 결합 \n", + "\n", + " context \\\n", + "147 오늘날 독일 니더작센주 호른부르크 태생인 그는 몰스레벤 및 호른부르크 백작 콘라드와... \n", + "275 1980년 프로 야구 드래프트 회의에서 세이부 라이온스로부터 4순위 지명을 받아 입... \n", + "404 고창읍 중앙동에 위치한 당산이다. 당산은 민간신앙에서 신이 있다고 믿고 섬기는 것으... \n", + "614 마이어로위츠 가족의 맏아들 대니는 최근 아내와 이혼한 후 뉴욕 맨해튼에 있는 아버지... \n", + "631 보수주의\\n*진정한 자유민주주의를 추구하는 게 아니라는 비판\\n** 자유민주주의는 ... \n", + "927 작은 (4mL 미만의) 부피에 대해 겔 여과를 수행하기위한 여러가지 일반적인 방식이... \n", + "945 1998년 대회에서 대한민국은 네덜란드, 멕시코, 벨기에와 함께 E조에 편성되었다.... \n", + "1451 관룡사로 가는 오솔길 양쪽에 서 있는 한 쌍의 돌장승이다.\\n\\n사찰 입구에 두는 ... \n", + "1584 규소 수지(硅素樹脂)는 실리콘 물질의 일종이다.\\n\\n이산화규소는 1개의 규소 원자... \n", + "1634 하이든 밑에서 본격적으로 작곡을 배우기 위해 1792년 본에서 빈으로 자리를 옮긴 ... \n", + "1910 1979년, 격해지는 반미 시위 가운데 이란 시위대가 주 이란 미국 대사관 벽을 넘... \n", + "2687 2012년 10월 19일 진중권은 시사토론에 출연해 NLL과 정수장학회에 대한 토론... \n", + "3460 칠보사 목조관음보살좌상은 약간 구부린 자세에 넓은 어깨와 무릅이 높고 넓어 안정감이... \n", + "3523 세계 인권 선언은 국제관습법이 되어서 모든 나라에 법률적 효력이 있다는 일각의 주장... \n", + "3727 기원전 2세기 흉노로 인해 타림분지에서 인도로 이동하였다. 스키타이족을 비롯한 이란... \n", + "3922 물에서의 수소 결합은 H-O-H···O-2H 형태로 나타난다.\\n\\n물 분자에서 2... \n", + "\n", + " question \\\n", + "147 아물라드의 아들이 밤베르크의 주교로 서임된 해는? \n", + "275 9월 23일 세이부 돔에서 진행된 경기에서 긴테쓰의 상대팀은 어디였나? \n", + "404 중앙동·중거리·하거리 할아버지당 중 가장 높은 당산은? \n", + "614 폴이 어릴 적 성적으로 흥분을 느꼈던 대상은? \n", + "631 자유민주주의에서 사람들 모두가 보장받아야 하는 것은? \n", + "927 크로마토 그래피 카트리지가 한 번에 사용 가능한 샘플의 수는? \n", + "945 한국 대 멕시코 경기에서 선제골을 넣은 쪽은? \n", + "1451 여장승과 남장승 중에 키가 더 큰 것은 무엇인가? \n", + "1584 실리콘을 실리콘유로 만들기 위해 거치는 과정은? \n", + "1634 두 번째, 세 번째 피아노 협주곡 중 먼저 세상에 알려진 곡은? \n", + "1910 앤더스 그룹은 시위하는 집단을 피해 누구의 집으로 갔는가? \n", + "2687 사람들은 간결과 진중권의 토론에서 누가 이겼다고 생각하는가? \n", + "3460 창녕 포교당 목조여래좌상과 대구 동화사 대웅전 목조삼세불좌상 중 먼저 만들어진 것은? \n", + "3523 세계인권선언과 국제인권규약을 비교했을 때 어떤 것이 더 세세한 규약을 담고있나? \n", + "3727 토하라어는 인도이란어와 켈트어 중에서 무엇과 더 유사한가? \n", + "3922 밤이 되면 공기가 위로 올라가는 곳은 육지와 바다 중 어디인가? \n", + "\n", + " answers document_id \n", + "147 {'answer_start': [53], 'text': ['아물라드']} 6736 \n", + "275 {'answer_start': [681], 'text': ['세이부']} 36873 \n", + "404 {'answer_start': [415], 'text': ['하거리 할아버지당']} 45428 \n", + "614 {'answer_start': [918], 'text': ['폴']} 47869 \n", + "631 {'answer_start': [51], 'text': ['자유']} 29784 \n", + "927 {'answer_start': [641], 'text': ['한 샘플']} 53185 \n", + "945 {'answer_start': [1317], 'text': ['한국']} 51777 \n", + "1451 {'answer_start': [336], 'text': ['여장승']} 39893 \n", + "1584 {'answer_start': [190], 'text': ['실리콘']} 56358 \n", + "1634 {'answer_start': [255], 'text': ['세 번째 피아노 협주곡']} 58986 \n", + "1910 {'answer_start': [314], 'text': ['앤더스']} 33784 \n", + "2687 {'answer_start': [546], 'text': ['진중권']} 35704 \n", + "3460 {'answer_start': [447], 'text': ['대구 동화사 대웅전 목... 47336 \n", + "3523 {'answer_start': [165], 'text': ['국제인권규약']} 28063 \n", + "3727 {'answer_start': [120], 'text': ['켈트어']} 14242 \n", + "3922 {'answer_start': [627], 'text': ['바다']} 10486 " + ] + }, + "execution_count": 17, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "is_answer_in_question(train_df)" + ] + }, + { + "cell_type": "code", + "execution_count": 18, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_id
35착생식물해양 착생식물의 생태는 지상 착생식물의 생태와는 다르다. 해양 생태계의 착생식물은 ...해초나 조류 표면에서 자라는 유기체 중 가장 비율이 높은 것은?{'answer_start': [180], 'text': ['조류']}51188
\n", + "
" + ], + "text/plain": [ + " title context \\\n", + "35 착생식물 해양 착생식물의 생태는 지상 착생식물의 생태와는 다르다. 해양 생태계의 착생식물은 ... \n", + "\n", + " question \\\n", + "35 해초나 조류 표면에서 자라는 유기체 중 가장 비율이 높은 것은? \n", + "\n", + " answers document_id \n", + "35 {'answer_start': [180], 'text': ['조류']} 51188 " + ] + }, + "execution_count": 18, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "is_answer_in_question(valid_df)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "# question이 객관식 형태인가?" + ] + }, + { + "cell_type": "code", + "execution_count": 19, + "metadata": {}, + "outputs": [], + "source": [ + "def is_multiple_choice_question(df):\n", + " answer_in_question = [\n", + " row\n", + " for _, row in df.iterrows()\n", + " if \" 중 \" in row[\"question\"] or \" 중에\" in row[\"question\"]\n", + " ]\n", + " return pd.DataFrame(answer_in_question, columns=df.columns)" + ] + }, + { + "cell_type": "code", + "execution_count": 20, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_id
84유달산유달산(儒達山)은 전라남도 목포시 유달동, 목원동, 죽교동에 있는 높이 228미터의...가수 이난영의 노래 중 기념비까지 세워진 것은?{'answer_start': [286], 'text': ['〈목포의 눈물〉']}15686
106균혈증혈액 감염에 대한 면역반응|패혈증\\n \\n균혈증(菌血症, bacteremia, ba...치과 시술 중 혈관 속으로 들어올 수 있는 것은?{'answer_start': [177], 'text': ['세균']}57963
144원정 (군주제)에도 시대에 들어 금중병공가제법도(禁中竝公家諸法度)를 제정한 에도 막부의 조정 개입...일본의 원정 중 가장 최근의 원정은 언제 실행되었는가?{'answer_start': [365], 'text': ['에도 말기']}17340
180허계임그녀는 경기도 용인의 한 이교도 집안에서 태어났다. 그녀는 경기도 봉천리에 있는 한...허계임과 그녀의 두 딸 중 가장 먼저 순교한 것은 누구인가?{'answer_start': [165], 'text': ['이영희 막달레나']}39168
183천연두출혈성 천연두는 피부, 점막, 소화관에 광범한 내출혈을 동반하는 심각한 천연두 유형...천연두에 감염된 모든 사례 중 출혈성 천연두는 얼마의 비중을 차지하는가?{'answer_start': [73], 'text': ['약 2% 정도']}5536
..................
3745삼국지 IX다시 군주제로 변환했고, 10일 단위의 반(half) 리얼타임제를 도입했다. 도시 ...장수 개인의 특성 중 유일하게 다시 추가된 능력치는?{'answer_start': [239], 'text': ['통솔']}47415
3746충주 조동리 고인돌지석묘는 청동기시대의 대표적인 무덤으로 고인돌이라고도 부른다. 우리나라의 고인돌은 ...우리나라 고인돌의 형식 중 지석묘는 무엇에 해당하는가?{'answer_start': [241], 'text': ['바둑판식 고인돌']}42506
3748개방경지제중세 시기 대상재배의 전형적인 삼경법은 밭을 셋으로 나눠 첫번째 밭에는 봄에 보리,...중세 시기 삼경법이 이루어지는 밭 중 세균이나 몇몇 식물의 질소 고정 작용이 일어나...{'answer_start': [85], 'text': ['세번째 밭']}59627
3917차바하르파키스탄은 중국과 손잡고 차바하르항에서 동쪽으로 불과 약 70 km에 떨어진 과다르...차바하르항은 이란 항구 중 어느 국가의 제재를 유일하게 받지 않았나?{'answer_start': [180], 'text': ['미국']}54152
3922수소 결합물에서의 수소 결합은 H-O-H···O-2H 형태로 나타난다.\\n\\n물 분자에서 2...밤이 되면 공기가 위로 올라가는 곳은 육지와 바다 중 어디인가?{'answer_start': [627], 'text': ['바다']}10486
\n", + "

109 rows × 5 columns

\n", + "
" + ], + "text/plain": [ + " title context \\\n", + "84 유달산 유달산(儒達山)은 전라남도 목포시 유달동, 목원동, 죽교동에 있는 높이 228미터의... \n", + "106 균혈증 혈액 감염에 대한 면역반응|패혈증\\n \\n균혈증(菌血症, bacteremia, ba... \n", + "144 원정 (군주제) 에도 시대에 들어 금중병공가제법도(禁中竝公家諸法度)를 제정한 에도 막부의 조정 개입... \n", + "180 허계임 그녀는 경기도 용인의 한 이교도 집안에서 태어났다. 그녀는 경기도 봉천리에 있는 한... \n", + "183 천연두 출혈성 천연두는 피부, 점막, 소화관에 광범한 내출혈을 동반하는 심각한 천연두 유형... \n", + "... ... ... \n", + "3745 삼국지 IX 다시 군주제로 변환했고, 10일 단위의 반(half) 리얼타임제를 도입했다. 도시 ... \n", + "3746 충주 조동리 고인돌 지석묘는 청동기시대의 대표적인 무덤으로 고인돌이라고도 부른다. 우리나라의 고인돌은 ... \n", + "3748 개방경지제 중세 시기 대상재배의 전형적인 삼경법은 밭을 셋으로 나눠 첫번째 밭에는 봄에 보리,... \n", + "3917 차바하르 파키스탄은 중국과 손잡고 차바하르항에서 동쪽으로 불과 약 70 km에 떨어진 과다르... \n", + "3922 수소 결합 물에서의 수소 결합은 H-O-H···O-2H 형태로 나타난다.\\n\\n물 분자에서 2... \n", + "\n", + " question \\\n", + "84 가수 이난영의 노래 중 기념비까지 세워진 것은? \n", + "106 치과 시술 중 혈관 속으로 들어올 수 있는 것은? \n", + "144 일본의 원정 중 가장 최근의 원정은 언제 실행되었는가? \n", + "180 허계임과 그녀의 두 딸 중 가장 먼저 순교한 것은 누구인가? \n", + "183 천연두에 감염된 모든 사례 중 출혈성 천연두는 얼마의 비중을 차지하는가? \n", + "... ... \n", + "3745 장수 개인의 특성 중 유일하게 다시 추가된 능력치는? \n", + "3746 우리나라 고인돌의 형식 중 지석묘는 무엇에 해당하는가? \n", + "3748 중세 시기 삼경법이 이루어지는 밭 중 세균이나 몇몇 식물의 질소 고정 작용이 일어나... \n", + "3917 차바하르항은 이란 항구 중 어느 국가의 제재를 유일하게 받지 않았나? \n", + "3922 밤이 되면 공기가 위로 올라가는 곳은 육지와 바다 중 어디인가? \n", + "\n", + " answers document_id \n", + "84 {'answer_start': [286], 'text': ['〈목포의 눈물〉']} 15686 \n", + "106 {'answer_start': [177], 'text': ['세균']} 57963 \n", + "144 {'answer_start': [365], 'text': ['에도 말기']} 17340 \n", + "180 {'answer_start': [165], 'text': ['이영희 막달레나']} 39168 \n", + "183 {'answer_start': [73], 'text': ['약 2% 정도']} 5536 \n", + "... ... ... \n", + "3745 {'answer_start': [239], 'text': ['통솔']} 47415 \n", + "3746 {'answer_start': [241], 'text': ['바둑판식 고인돌']} 42506 \n", + "3748 {'answer_start': [85], 'text': ['세번째 밭']} 59627 \n", + "3917 {'answer_start': [180], 'text': ['미국']} 54152 \n", + "3922 {'answer_start': [627], 'text': ['바다']} 10486 \n", + "\n", + "[109 rows x 5 columns]" + ] + }, + "execution_count": 20, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "is_multiple_choice_question(train_df)" + ] + }, + { + "cell_type": "code", + "execution_count": 21, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_id
32레닌주의레닌주의에서 협동조합 개념을 이해할 때 주의해야 할 것은, 레닌이 주장하는 것은 자...레닌이 출간한 책 중 농민의 자발적 참여에 대한 내용이 포함되어있는 것은?{'answer_start': [312], 'text': ['『협동조합에 관하여』']}5779
35착생식물해양 착생식물의 생태는 지상 착생식물의 생태와는 다르다. 해양 생태계의 착생식물은 ...해초나 조류 표면에서 자라는 유기체 중 가장 비율이 높은 것은?{'answer_start': [180], 'text': ['조류']}51188
81자수장수를 놓을 때에 사용하는 기법을 문양의 형태에 따라 나누어 보면 선을 잇는 수, 면...수를 놓을 때에 사용하는 기법 중 아주 작은 점으로 표현하는 방식은?{'answer_start': [101], 'text': ['점수']}19975
82코스모케라톱스코스모케라톱스는 장식이 많은 두개골로 구분할 수 있는데, 어떤 공룡보다도 더 많은 ...각룡류 중에서 가장 짧은 프릴을 가지고 있는 공룡은?{'answer_start': [250], 'text': ['코스모케라톱스']}40380
121최종생산물한 나라의 경제활동의 일정기간 내의 모든 성과는 생산이라는 관점에서 본다면 여러 분...생산물 중 다른 물건을 만들기 위해 사용되는 것은?{'answer_start': [331], 'text': ['중간 생산물']}59701
167취업 빙하기취업 빙하기가 진행되는 과정에서는 미취직자, 무직자가 급증하는데 이는 생산성 감소 ...중고령자의 채취업 활성화로 경제 주체마저 옮겨가는 바람에 생기는 부작용 중 하나는?{'answer_start': [365], 'text': ['소비감소']}40838
236티칼현재 우리가 볼 수 있는 티칼의 모습은 펜실베이니아 대학교와 과테말라 정부의 협조 ...공놀이 경기장 중 일부는 어디에 위치하고 있나?{'answer_start': [343], 'text': [''일곱 개의 신전 광장...12190
\n", + "
" + ], + "text/plain": [ + " title context \\\n", + "32 레닌주의 레닌주의에서 협동조합 개념을 이해할 때 주의해야 할 것은, 레닌이 주장하는 것은 자... \n", + "35 착생식물 해양 착생식물의 생태는 지상 착생식물의 생태와는 다르다. 해양 생태계의 착생식물은 ... \n", + "81 자수장 수를 놓을 때에 사용하는 기법을 문양의 형태에 따라 나누어 보면 선을 잇는 수, 면... \n", + "82 코스모케라톱스 코스모케라톱스는 장식이 많은 두개골로 구분할 수 있는데, 어떤 공룡보다도 더 많은 ... \n", + "121 최종생산물 한 나라의 경제활동의 일정기간 내의 모든 성과는 생산이라는 관점에서 본다면 여러 분... \n", + "167 취업 빙하기 취업 빙하기가 진행되는 과정에서는 미취직자, 무직자가 급증하는데 이는 생산성 감소 ... \n", + "236 티칼 현재 우리가 볼 수 있는 티칼의 모습은 펜실베이니아 대학교와 과테말라 정부의 협조 ... \n", + "\n", + " question \\\n", + "32 레닌이 출간한 책 중 농민의 자발적 참여에 대한 내용이 포함되어있는 것은? \n", + "35 해초나 조류 표면에서 자라는 유기체 중 가장 비율이 높은 것은? \n", + "81 수를 놓을 때에 사용하는 기법 중 아주 작은 점으로 표현하는 방식은? \n", + "82 각룡류 중에서 가장 짧은 프릴을 가지고 있는 공룡은? \n", + "121 생산물 중 다른 물건을 만들기 위해 사용되는 것은? \n", + "167 중고령자의 채취업 활성화로 경제 주체마저 옮겨가는 바람에 생기는 부작용 중 하나는? \n", + "236 공놀이 경기장 중 일부는 어디에 위치하고 있나? \n", + "\n", + " answers document_id \n", + "32 {'answer_start': [312], 'text': ['『협동조합에 관하여』']} 5779 \n", + "35 {'answer_start': [180], 'text': ['조류']} 51188 \n", + "81 {'answer_start': [101], 'text': ['점수']} 19975 \n", + "82 {'answer_start': [250], 'text': ['코스모케라톱스']} 40380 \n", + "121 {'answer_start': [331], 'text': ['중간 생산물']} 59701 \n", + "167 {'answer_start': [365], 'text': ['소비감소']} 40838 \n", + "236 {'answer_start': [343], 'text': [''일곱 개의 신전 광장... 12190 " + ] + }, + "execution_count": 21, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "is_multiple_choice_question(valid_df)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## answer이 여러개인가?" + ] + }, + { + "cell_type": "code", + "execution_count": 22, + "metadata": {}, + "outputs": [], + "source": [ + "def is_multiple_answers(df):\n", + " answer_in_question = [\n", + " row for _, row in df.iterrows() if len(row[\"answers\"][\"text\"])!=1\n", + " ]\n", + " return pd.DataFrame(answer_in_question, columns=df.columns)" + ] + }, + { + "cell_type": "code", + "execution_count": 23, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_id
\n", + "
" + ], + "text/plain": [ + "Empty DataFrame\n", + "Columns: [title, context, question, answers, document_id]\n", + "Index: []" + ] + }, + "execution_count": 23, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "is_multiple_answers(train_df)" + ] + }, + { + "cell_type": "code", + "execution_count": 24, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_id
\n", + "
" + ], + "text/plain": [ + "Empty DataFrame\n", + "Columns: [title, context, question, answers, document_id]\n", + "Index: []" + ] + }, + "execution_count": 24, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "is_multiple_answers(valid_df)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## answer가 숫자만 있는 경우도 있는가?" + ] + }, + { + "cell_type": "code", + "execution_count": 10, + "metadata": {}, + "outputs": [], + "source": [ + "def is_answer_digit(df):\n", + " answer_digit = [\n", + " row for _, row in df.iterrows() if row[\"answers\"][\"text\"][0].isdigit()\n", + " ]\n", + " return pd.DataFrame(answer_digit, columns=df.columns)" + ] + }, + { + "cell_type": "code", + "execution_count": 11, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionidanswersdocument_id__index_level_0__
50폴리스 박스타디스\\nBBC의 텔레비전 공상과학 드라마 시리즈 《닥터 후》에서는 타임머신인 타디...BBC의 파란 경찰 박스 디자인 상표권에 대한 법적 논란이 종료된 해는?mrc-0-002942{'answer_start': [477], 'text': ['2002']}395171936
425중동신도시중동신도시(中洞新都市)는 경기도 부천시 중동, 상동 일대에 조성된 신도시이다. 중동...중동신도시 개발에 기관 몇 곳이 적극적으로 뛰어들었나?mrc-0-002948{'answer_start': [388], 'text': ['3']}296521939
595마틸데 디 카노사 디 토스카나 여변경백마틸데의 아버지는 레지오, 모데나, 만토바, 브레시아, 페라라 등에 영지를 가진 이...마틸데의 첫째 언니가 사망한 년도는?mrc-0-005249{'answer_start': [168], 'text': ['1053']}204683418
646여운형1907년부터 1910년까지 초기 민중교회였던 승동교회 (서울특별시 종로구 인사동 ...여운형의 노비들이 자유를 찾았던 해는?mrc-0-002644{'answer_start': [365], 'text': ['1908']}55861734
705박근혜 정부2013년 대학수학능력시험 세계지리 과목의 문제에 오류가 있다고 일부 학계와 수험생...수능에서 가장 많은 오류가 발생한 연도는?mrc-0-002421{'answer_start': [369], 'text': ['2014']}335441584
776겔라티 수도원겔라티 수도원은 조지아 서부의 이메레티의 쿠타이시 근교에 있는 수도원 단지이다. 그...갈라티 수도원이 세계 문화 유산으로 선정된 해는?mrc-1-000947{'answer_start': [631], 'text': ['1994']}26526613
854대한민국 아이스하키 국가대표팀한국에 아이스하키가 도입된 것은 1920년대로 알려져 있으나, 세계 아이스하키 선수...대한민국이 5개국을 꺾고 디비전 1A로 승급될 수 있었던 해는?mrc-1-000253{'answer_start': [645], 'text': ['2012']}24567163
9392002년 독일 연방의회 선거2002년 독일 총선거는 전체 603석의 독일 연방의회 의원들을 선출하기 위해 20...2002년 9월 22일에 시행된 독일 총선거에서 뽑고자 했던 연방의회 의원 수는?mrc-0-000782{'answer_start': [17], 'text': ['603']}40138523
972철원 갈말읍 토성토성리 마을의 밭을 둘러 싸고 있는 흙으로 쌓은 성과 군탄리 마을의 옛 풍전역터에 ...이호민이 과거시험에 합격한 것은 몇년도인가?mrc-0-002562{'answer_start': [467], 'text': ['1801']}393141670
1170어번 네트워크1987년에 일본국유철도의 분할 민영화가 진행되고, 서일본 여객철도는 오사카 권을 ...일부 노선이 어번 네트워크 구역에 소속되지 않았던 해는?mrc-0-000300{'answer_start': [347], 'text': ['1988']}19437200
1302웨스트민스터궁웨스트민스터 홀은 현재 궁전 내부에 있는 가장 오래된 방이다. 윌리엄 2세에 의해 ...조지 4세의 즉위 연회가 열린곳이 지어진 해는?mrc-1-001456{'answer_start': [46], 'text': ['1097']}15319948
13051972년 독일 연방의회 선거1972년 서독 총선거는 전체 496석의 서독 연방의회의 의원들과 서베를린에 할당된...1972년에 실시된 서독 총선거에서 뽑아야 하는 서베를린의 의원 수는?mrc-1-000005{'answer_start': [47], 'text': ['22']}344763
1447대한민국 대 독일 (2018년 FIFA 월드컵)대한민국과 독일이 FIFA 월드컵에서 3번째로 맞붙은 경기이자 양 팀의 4번째 A매...미국 댈러스의 코튼볼에서 있었던 경기에서 독일이 전반전에 넣은 골 수는?mrc-0-004080{'answer_start': [213], 'text': ['3']}505102672
1511밀양 표충사 삼층석탑 출토 유물 일괄밀양 표충사 삼층석탑 출토 유물 일괄은 1995년 실시된 삼층석탑의 해체보수 과정에...표충사 삼층석탑에서 유물을 발굴한 해는?mrc-0-005141{'answer_start': [22], 'text': ['1995']}483033345
1713좌종당염군의 난\\n1866년(동치 5년)에는 섬감총독으로 전임하여, 회족(이슬람교도)인 ...좌종당이 둥간족을 진압하기 위해 출동한 해는?mrc-1-001643{'answer_start': [311], 'text': ['1868']}223031076
1839동방귀형수 ~ Wily Beast and Weakest Creature적을 쓰러뜨리면 떨어뜨리는 '동물령 아이템'을 5개 모음으로써 발동된다. 동물령 아...동일한 동물령 몇 가지를 모으면 모드를 플레이할 수 있는 시간이 늘어나는가?mrc-0-004705{'answer_start': [480], 'text': ['5']}534563067
2013크노소스크노소스는 신석기 시대(기원전 7000년경)부터 사람이 거주해왔다. 크레타에는 동굴...궁전 아래에 위치하던 집에는 몇 칸의 방이 있었는가?mrc-0-004785{'answer_start': [1656], 'text': ['5']}320563122
25593·1 운동3·1독립선언서\\n 1919년 3월 1일 오후 2시 에 모이기로 했던 조선의 민족대...야마가타 이자부로에게 독립선언 사실을 알린 사람은 모두 몇 명인가?mrc-0-003618{'answer_start': [101], 'text': ['29']}85012375
2727구스타프 하이네만학생으로서 하이네만은 바이마르 공화국을 강하게 후원한 자유적 독일 민주당의 학생 기...하이네만이 두 번째로 법무장관에 취임한 것은 몇 년인가?mrc-0-000659{'answer_start': [1019], 'text': ['1966']}26785444
2730히지카타 도시조10월 20일, 에조치 와시노키에 상륙 후 도시조는 문도군 총독이 되어서 고료카쿠(...후타마타구치 전투가 일어났던 달은?mrc-0-000322{'answer_start': [847], 'text': ['4']}11835215
2755고바야시 세이조1920년에는 다시 영국의 주재무관으로 파견되었고, 이때 영국의 항공전문가 윌리엄 ...일본이 영국과의 런던 군축조약에서 파기한 해는 언제인가?mrc-0-004856{'answer_start': [736], 'text': ['1936']}201333162
2861상산군부인 김씨처음에는 시신을 그해 8월 8일 경기도 금천 하북면 번대방리(현, 서울특별시 동작구...밀풍군 탄의 아들이 김씨의 양자가 된 해는?mrc-0-004723{'answer_start': [233], 'text': ['1727']}494403080
2869마흐무드 알카슈가리마흐무드 알카슈가리는, 그의 니스바 알카슈가리(الكاشغري)에서 알 수 있듯, ...마흐무드 알카슈가리가 <튀르크어 대사전>을 만들기 시작한 년도는?mrc-0-002606{'answer_start': [666], 'text': ['1072']}526031704
3060부다페스트 축제 관현악단부다페스트 축제 관현악단(Budapesti Fesztiválzenekar, Buda...코치슈가 음악 감독을 그만둔 건 언제인가?mrc-0-003595{'answer_start': [537], 'text': ['1997']}155382359
3182윌리엄 잭슨잭슨은 영국의 컴벌랜드 카운티에서 태어나 부모가 죽은 후에, 사우스캐롤라이나의 찰스...잭슨이 생애 첫 전투를 치른 해는?mrc-0-003059{'answer_start': [242], 'text': ['1776']}365482014
3259쓰치야 히로시우스다 고등학교 시절에는 2학년 때부터 에이스로서 활약하여 1961년 추계 호쿠신에...쓰치야 히로시가 우수 선수상을 받은 해는?mrc-0-004745{'answer_start': [473], 'text': ['1967']}548173093
3379마라의 죽음‘마라의 죽음’은 널리 찬양을 받았고 공포 정치 시대의 지도자들은 오리지널 작품의 ...마라의 죽음'의 복제품은 몇 년도부터 제작되기 시작했는가?mrc-0-004931{'answer_start': [76], 'text': ['1793']}471613202
3538수요의 가격 탄력성수요의 가격탄력성은 각 요인들의 변화가 수요량이 얼마나 민감하게 반응하게 되는지를 ...가격탄력성의 정도를 표현을 위해 기준이 되는 숫자는?mrc-0-004189{'answer_start': [118], 'text': ['1']}217912743
3566하템 트라벨시트라벨시는 스팍스에서 자랐으며 그의 축구 인생도 그곳에 자리잡은 CS 스팍시앙에서 ...트라벨시가 멘체스터 시티 FC로 이적한 해는?mrc-0-003680{'answer_start': [458], 'text': ['2006']}354692419
3581갈로로마인로마는 갈리아를 3개 속주로 나누어 지배했고, 행정구역으로는 과거 갈리아 부족들의 ...로마 시민권 부여에 관한 규정을 발표한 것은 언제인가?mrc-0-001493{'answer_start': [97], 'text': ['212']}47931981
\n", + "
" + ], + "text/plain": [ + " title \\\n", + "50 폴리스 박스 \n", + "425 중동신도시 \n", + "595 마틸데 디 카노사 디 토스카나 여변경백 \n", + "646 여운형 \n", + "705 박근혜 정부 \n", + "776 겔라티 수도원 \n", + "854 대한민국 아이스하키 국가대표팀 \n", + "939 2002년 독일 연방의회 선거 \n", + "972 철원 갈말읍 토성 \n", + "1170 어번 네트워크 \n", + "1302 웨스트민스터궁 \n", + "1305 1972년 독일 연방의회 선거 \n", + "1447 대한민국 대 독일 (2018년 FIFA 월드컵) \n", + "1511 밀양 표충사 삼층석탑 출토 유물 일괄 \n", + "1713 좌종당 \n", + "1839 동방귀형수 ~ Wily Beast and Weakest Creature \n", + "2013 크노소스 \n", + "2559 3·1 운동 \n", + "2727 구스타프 하이네만 \n", + "2730 히지카타 도시조 \n", + "2755 고바야시 세이조 \n", + "2861 상산군부인 김씨 \n", + "2869 마흐무드 알카슈가리 \n", + "3060 부다페스트 축제 관현악단 \n", + "3182 윌리엄 잭슨 \n", + "3259 쓰치야 히로시 \n", + "3379 마라의 죽음 \n", + "3538 수요의 가격 탄력성 \n", + "3566 하템 트라벨시 \n", + "3581 갈로로마인 \n", + "\n", + " context \\\n", + "50 타디스\\nBBC의 텔레비전 공상과학 드라마 시리즈 《닥터 후》에서는 타임머신인 타디... \n", + "425 중동신도시(中洞新都市)는 경기도 부천시 중동, 상동 일대에 조성된 신도시이다. 중동... \n", + "595 마틸데의 아버지는 레지오, 모데나, 만토바, 브레시아, 페라라 등에 영지를 가진 이... \n", + "646 1907년부터 1910년까지 초기 민중교회였던 승동교회 (서울특별시 종로구 인사동 ... \n", + "705 2013년 대학수학능력시험 세계지리 과목의 문제에 오류가 있다고 일부 학계와 수험생... \n", + "776 겔라티 수도원은 조지아 서부의 이메레티의 쿠타이시 근교에 있는 수도원 단지이다. 그... \n", + "854 한국에 아이스하키가 도입된 것은 1920년대로 알려져 있으나, 세계 아이스하키 선수... \n", + "939 2002년 독일 총선거는 전체 603석의 독일 연방의회 의원들을 선출하기 위해 20... \n", + "972 토성리 마을의 밭을 둘러 싸고 있는 흙으로 쌓은 성과 군탄리 마을의 옛 풍전역터에 ... \n", + "1170 1987년에 일본국유철도의 분할 민영화가 진행되고, 서일본 여객철도는 오사카 권을 ... \n", + "1302 웨스트민스터 홀은 현재 궁전 내부에 있는 가장 오래된 방이다. 윌리엄 2세에 의해 ... \n", + "1305 1972년 서독 총선거는 전체 496석의 서독 연방의회의 의원들과 서베를린에 할당된... \n", + "1447 대한민국과 독일이 FIFA 월드컵에서 3번째로 맞붙은 경기이자 양 팀의 4번째 A매... \n", + "1511 밀양 표충사 삼층석탑 출토 유물 일괄은 1995년 실시된 삼층석탑의 해체보수 과정에... \n", + "1713 염군의 난\\n1866년(동치 5년)에는 섬감총독으로 전임하여, 회족(이슬람교도)인 ... \n", + "1839 적을 쓰러뜨리면 떨어뜨리는 '동물령 아이템'을 5개 모음으로써 발동된다. 동물령 아... \n", + "2013 크노소스는 신석기 시대(기원전 7000년경)부터 사람이 거주해왔다. 크레타에는 동굴... \n", + "2559 3·1독립선언서\\n 1919년 3월 1일 오후 2시 에 모이기로 했던 조선의 민족대... \n", + "2727 학생으로서 하이네만은 바이마르 공화국을 강하게 후원한 자유적 독일 민주당의 학생 기... \n", + "2730 10월 20일, 에조치 와시노키에 상륙 후 도시조는 문도군 총독이 되어서 고료카쿠(... \n", + "2755 1920년에는 다시 영국의 주재무관으로 파견되었고, 이때 영국의 항공전문가 윌리엄 ... \n", + "2861 처음에는 시신을 그해 8월 8일 경기도 금천 하북면 번대방리(현, 서울특별시 동작구... \n", + "2869 마흐무드 알카슈가리는, 그의 니스바 알카슈가리(الكاشغري)에서 알 수 있듯, ... \n", + "3060 부다페스트 축제 관현악단(Budapesti Fesztiválzenekar, Buda... \n", + "3182 잭슨은 영국의 컴벌랜드 카운티에서 태어나 부모가 죽은 후에, 사우스캐롤라이나의 찰스... \n", + "3259 우스다 고등학교 시절에는 2학년 때부터 에이스로서 활약하여 1961년 추계 호쿠신에... \n", + "3379 ‘마라의 죽음’은 널리 찬양을 받았고 공포 정치 시대의 지도자들은 오리지널 작품의 ... \n", + "3538 수요의 가격탄력성은 각 요인들의 변화가 수요량이 얼마나 민감하게 반응하게 되는지를 ... \n", + "3566 트라벨시는 스팍스에서 자랐으며 그의 축구 인생도 그곳에 자리잡은 CS 스팍시앙에서 ... \n", + "3581 로마는 갈리아를 3개 속주로 나누어 지배했고, 행정구역으로는 과거 갈리아 부족들의 ... \n", + "\n", + " question id \\\n", + "50 BBC의 파란 경찰 박스 디자인 상표권에 대한 법적 논란이 종료된 해는? mrc-0-002942 \n", + "425 중동신도시 개발에 기관 몇 곳이 적극적으로 뛰어들었나? mrc-0-002948 \n", + "595 마틸데의 첫째 언니가 사망한 년도는? mrc-0-005249 \n", + "646 여운형의 노비들이 자유를 찾았던 해는? mrc-0-002644 \n", + "705 수능에서 가장 많은 오류가 발생한 연도는? mrc-0-002421 \n", + "776 갈라티 수도원이 세계 문화 유산으로 선정된 해는? mrc-1-000947 \n", + "854 대한민국이 5개국을 꺾고 디비전 1A로 승급될 수 있었던 해는? mrc-1-000253 \n", + "939 2002년 9월 22일에 시행된 독일 총선거에서 뽑고자 했던 연방의회 의원 수는? mrc-0-000782 \n", + "972 이호민이 과거시험에 합격한 것은 몇년도인가? mrc-0-002562 \n", + "1170 일부 노선이 어번 네트워크 구역에 소속되지 않았던 해는? mrc-0-000300 \n", + "1302 조지 4세의 즉위 연회가 열린곳이 지어진 해는? mrc-1-001456 \n", + "1305 1972년에 실시된 서독 총선거에서 뽑아야 하는 서베를린의 의원 수는? mrc-1-000005 \n", + "1447 미국 댈러스의 코튼볼에서 있었던 경기에서 독일이 전반전에 넣은 골 수는? mrc-0-004080 \n", + "1511 표충사 삼층석탑에서 유물을 발굴한 해는? mrc-0-005141 \n", + "1713 좌종당이 둥간족을 진압하기 위해 출동한 해는? mrc-1-001643 \n", + "1839 동일한 동물령 몇 가지를 모으면 모드를 플레이할 수 있는 시간이 늘어나는가? mrc-0-004705 \n", + "2013 궁전 아래에 위치하던 집에는 몇 칸의 방이 있었는가? mrc-0-004785 \n", + "2559 야마가타 이자부로에게 독립선언 사실을 알린 사람은 모두 몇 명인가? mrc-0-003618 \n", + "2727 하이네만이 두 번째로 법무장관에 취임한 것은 몇 년인가? mrc-0-000659 \n", + "2730 후타마타구치 전투가 일어났던 달은? mrc-0-000322 \n", + "2755 일본이 영국과의 런던 군축조약에서 파기한 해는 언제인가? mrc-0-004856 \n", + "2861 밀풍군 탄의 아들이 김씨의 양자가 된 해는? mrc-0-004723 \n", + "2869 마흐무드 알카슈가리가 <튀르크어 대사전>을 만들기 시작한 년도는? mrc-0-002606 \n", + "3060 코치슈가 음악 감독을 그만둔 건 언제인가? mrc-0-003595 \n", + "3182 잭슨이 생애 첫 전투를 치른 해는? mrc-0-003059 \n", + "3259 쓰치야 히로시가 우수 선수상을 받은 해는? mrc-0-004745 \n", + "3379 마라의 죽음'의 복제품은 몇 년도부터 제작되기 시작했는가? mrc-0-004931 \n", + "3538 가격탄력성의 정도를 표현을 위해 기준이 되는 숫자는? mrc-0-004189 \n", + "3566 트라벨시가 멘체스터 시티 FC로 이적한 해는? mrc-0-003680 \n", + "3581 로마 시민권 부여에 관한 규정을 발표한 것은 언제인가? mrc-0-001493 \n", + "\n", + " answers document_id \\\n", + "50 {'answer_start': [477], 'text': ['2002']} 39517 \n", + "425 {'answer_start': [388], 'text': ['3']} 29652 \n", + "595 {'answer_start': [168], 'text': ['1053']} 20468 \n", + "646 {'answer_start': [365], 'text': ['1908']} 5586 \n", + "705 {'answer_start': [369], 'text': ['2014']} 33544 \n", + "776 {'answer_start': [631], 'text': ['1994']} 26526 \n", + "854 {'answer_start': [645], 'text': ['2012']} 24567 \n", + "939 {'answer_start': [17], 'text': ['603']} 40138 \n", + "972 {'answer_start': [467], 'text': ['1801']} 39314 \n", + "1170 {'answer_start': [347], 'text': ['1988']} 19437 \n", + "1302 {'answer_start': [46], 'text': ['1097']} 15319 \n", + "1305 {'answer_start': [47], 'text': ['22']} 34476 \n", + "1447 {'answer_start': [213], 'text': ['3']} 50510 \n", + "1511 {'answer_start': [22], 'text': ['1995']} 48303 \n", + "1713 {'answer_start': [311], 'text': ['1868']} 22303 \n", + "1839 {'answer_start': [480], 'text': ['5']} 53456 \n", + "2013 {'answer_start': [1656], 'text': ['5']} 32056 \n", + "2559 {'answer_start': [101], 'text': ['29']} 8501 \n", + "2727 {'answer_start': [1019], 'text': ['1966']} 26785 \n", + "2730 {'answer_start': [847], 'text': ['4']} 11835 \n", + "2755 {'answer_start': [736], 'text': ['1936']} 20133 \n", + "2861 {'answer_start': [233], 'text': ['1727']} 49440 \n", + "2869 {'answer_start': [666], 'text': ['1072']} 52603 \n", + "3060 {'answer_start': [537], 'text': ['1997']} 15538 \n", + "3182 {'answer_start': [242], 'text': ['1776']} 36548 \n", + "3259 {'answer_start': [473], 'text': ['1967']} 54817 \n", + "3379 {'answer_start': [76], 'text': ['1793']} 47161 \n", + "3538 {'answer_start': [118], 'text': ['1']} 21791 \n", + "3566 {'answer_start': [458], 'text': ['2006']} 35469 \n", + "3581 {'answer_start': [97], 'text': ['212']} 47931 \n", + "\n", + " __index_level_0__ \n", + "50 1936 \n", + "425 1939 \n", + "595 3418 \n", + "646 1734 \n", + "705 1584 \n", + "776 613 \n", + "854 163 \n", + "939 523 \n", + "972 1670 \n", + "1170 200 \n", + "1302 948 \n", + "1305 3 \n", + "1447 2672 \n", + "1511 3345 \n", + "1713 1076 \n", + "1839 3067 \n", + "2013 3122 \n", + "2559 2375 \n", + "2727 444 \n", + "2730 215 \n", + "2755 3162 \n", + "2861 3080 \n", + "2869 1704 \n", + "3060 2359 \n", + "3182 2014 \n", + "3259 3093 \n", + "3379 3202 \n", + "3538 2743 \n", + "3566 2419 \n", + "3581 981 " + ] + }, + "execution_count": 11, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "is_answer_digit(train_df)" + ] + }, + { + "cell_type": "code", + "execution_count": 12, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionidanswersdocument_id__index_level_0__
\n", + "
" + ], + "text/plain": [ + "Empty DataFrame\n", + "Columns: [title, context, question, id, answers, document_id, __index_level_0__]\n", + "Index: []" + ] + }, + "execution_count": 12, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "is_answer_digit(valid_df)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## question에 물음표가 항상 존재하는가?" + ] + }, + { + "cell_type": "code", + "execution_count": 25, + "metadata": {}, + "outputs": [], + "source": [ + "def is_not_q_marks(df):\n", + " not_q_marks = [\n", + " row for _, row in df.iterrows() if \"?\" not in row[\"question\"]\n", + " ]\n", + " return pd.DataFrame(not_q_marks, columns=df.columns)" + ] + }, + { + "cell_type": "code", + "execution_count": 26, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_id
295피아노 협주곡 5번 (베토벤)자신의 후견자 겸 제자인 루돌프 대공을 위해, 1809년에 프랑스 군대의 포격이 쏟...피아니스트이자 출판업을 하는 베토벤의 친구는{'answer_start': [432], 'text': ['요한 B. 크라머']}7870
\n", + "
" + ], + "text/plain": [ + " title context \\\n", + "295 피아노 협주곡 5번 (베토벤) 자신의 후견자 겸 제자인 루돌프 대공을 위해, 1809년에 프랑스 군대의 포격이 쏟... \n", + "\n", + " question answers \\\n", + "295 피아니스트이자 출판업을 하는 베토벤의 친구는 {'answer_start': [432], 'text': ['요한 B. 크라머']} \n", + "\n", + " document_id \n", + "295 7870 " + ] + }, + "execution_count": 26, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "is_not_q_marks(train_df)" + ] + }, + { + "cell_type": "code", + "execution_count": 27, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_id
\n", + "
" + ], + "text/plain": [ + "Empty DataFrame\n", + "Columns: [title, context, question, answers, document_id]\n", + "Index: []" + ] + }, + "execution_count": 27, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "is_not_q_marks(valid_df)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## 답변 가능성\n", + "- 답변 가능한지 아닌지에 대한 라벨을 추가한다면 No Answer를 더 잘 학습할 수 있을것." + ] + }, + { + "cell_type": "code", + "execution_count": 28, + "metadata": {}, + "outputs": [], + "source": [ + "def is_answer_blank(df):\n", + " answer_in_question = [\n", + " row for _, row in df.iterrows() if row[\"answers\"][\"text\"]==\"\"\n", + " ]\n", + " return pd.DataFrame(answer_in_question, columns=df.columns)" + ] + }, + { + "cell_type": "code", + "execution_count": 29, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_id
\n", + "
" + ], + "text/plain": [ + "Empty DataFrame\n", + "Columns: [title, context, question, answers, document_id]\n", + "Index: []" + ] + }, + "execution_count": 29, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "is_answer_blank(train_df)" + ] + }, + { + "cell_type": "code", + "execution_count": 30, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_id
\n", + "
" + ], + "text/plain": [ + "Empty DataFrame\n", + "Columns: [title, context, question, answers, document_id]\n", + "Index: []" + ] + }, + "execution_count": 30, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "is_answer_blank(valid_df)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## Rule-base 에러 탐지" + ] + }, + { + "cell_type": "code", + "execution_count": 14, + "metadata": {}, + "outputs": [], + "source": [ + "t = train_df[[\"document_id\", \"question\", \"answers\"]].copy()\n", + "t[\"answers\"] = t[\"answers\"].map(lambda x: x[\"text\"][0])\n", + "\n", + "v = valid_df[[\"document_id\", \"question\", \"answers\"]].copy()\n", + "v[\"answers\"] = v[\"answers\"].map(lambda x: x[\"text\"][0])" + ] + }, + { + "cell_type": "code", + "execution_count": 23, + "metadata": {}, + "outputs": [], + "source": [ + "from konlpy.tag import Kkma\n", + "import re\n", + "import pandas as pd\n", + "\n", + "# Kkma 형태소 분석기 사용\n", + "kkma = Kkma()\n", + "\n", + "\n", + "def check_answer(df):\n", + " wrong_data = []\n", + " keywords = [\"언제\", \"날짜\", \"누구\", \"어디\", \"무엇\", \"왜\", \"어떻게\"]\n", + "\n", + " # DataFrame에서 각 행에 대해 검사\n", + " for index, row in df.iterrows():\n", + " question = row[\"question\"]\n", + " answer = row[\"answers\"]\n", + "\n", + " # 질문에서 키워드 추출\n", + " keyword = None\n", + " tokens = kkma.pos(question)\n", + " for word, tag in tokens:\n", + " if word in keywords:\n", + " keyword = word\n", + " break\n", + "\n", + " if keyword is None:\n", + " continue # 질문에서 키워드가 발견되지 않으면 넘어감\n", + "\n", + " # 답변 유형 판단\n", + " if keyword in [\"언제\", \"날짜\"]:\n", + " # 숫자 있는지 체크\n", + " if not bool(re.search(r\"\\d\", answer)):\n", + " wrong_data.append(row)\n", + " elif keyword == \"누구\":\n", + " # 사람 이름인지 판단 (KoNLPy를 사용하여 고유명사 추출)\n", + " answer_tokens = kkma.pos(answer)\n", + " person_found = False\n", + " for word, tag in answer_tokens:\n", + " if tag == \"NNP\" or tag == \"NNG\": # 고유명사 또는 일반명사\n", + " person_found = True\n", + " break\n", + "\n", + " if not person_found:\n", + " wrong_data.append(row)\n", + "\n", + " return pd.DataFrame(wrong_data, columns=df.columns)\n", + "\n", + "def check_date_answer(df):\n", + " def contains_keyword(text, keywords):\n", + " for keyword in keywords:\n", + " if keyword in text:\n", + " return True\n", + " return False\n", + "\n", + " wrong_data = []\n", + " date_keywords = [\"언제\",\"날짜\",\"해\",\"년\",\"월\",\"일\",\"때\",\"시기\",\"연도\",\"기간\"]\n", + "\n", + " # DataFrame에서 각 행에 대해 검사\n", + " for index, row in df.iterrows():\n", + " question = row[\"question\"]\n", + " answer = row[\"answers\"]\n", + " if contains_keyword(question,date_keywords):\n", + " continue\n", + " if answer.isdigit() or contains_keyword(answer,date_keywords):\n", + " wrong_data.append(row)\n", + " return pd.DataFrame(wrong_data, columns=df.columns)" + ] + }, + { + "cell_type": "code", + "execution_count": 55, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
document_idquestionanswers
14417340일본의 원정 중 가장 최근의 원정은 언제 실행되었는가?에도 말기
16739694푸르바더는 언제 세상 밖으로 나왔는가?에흐네가 죽은 뒤
20039711만덕사는 언제 설립되었나?고려 전기
21733762중국에서 쿨리가 공식적으로 해외에 나갈 수 있게 되었던 시점은 언제부터인가?베이징 조약 체결 이후
31620216호남선은 언제 생겼나?일제 강점기
33918041임영관 건물이 학교로 사용된 것은 언제인가?일제시대
36910698세카이와 코토노하가 마코토에게 줄 선물은 언제를 위한 것인가?크리스마스
42623287탑에 시멘트를 바른 것은 언제인가?일제강점기
45935475부여석조가 만들어진 시기는 언제인가?백제시대
54929601사이판의 전선과 하수구 파이프는 언제 수리하기 시작했는가?태풍 초이완이 지난 후
66046378네이든이 몰래 좋아하고 있었던 인물은 누구인가요?닉
71657423기갑 세력을 이용하여 호르티에게 항복을 받아낸 사람은 누구인가?슈코르체니
78136795튜더 왕가의 정통성에 해를 가했던 사람들은 언제 죽음을 당하였나요?튜더 왕조 시대
78326355조지아인과 오세트인이 화합을 이루웠던 때는 언제인가?소비에트 시대
79915951남상철의 아버지는 언제 살아남았나요?병인박해
80115361빔비사라의 아들이며 앙가를 다스린 사람은 누구인가?아자타샤트루
95016451저고리의 길이가 짧아진 시기는 언제부터인가?고려 말
97728351순무 제도가 생긴 것은 언제인가?영락제 시기
107918910밀본을 얕잡아 본 인물은 누구의 친구였나요?수천
11558950반 아이들에게 세리가 누구를 좋아한다고 들통났나요?욱
115939874프라이드 하우스는 누구에 의해 처음 설치되었는가?딘 넬슨
141151793유세군은 누구와의 관계 때문에 시를 지었나요?곤막
173529587조금씩 유럽사회가 계급사회로 접어들게 된 때는 언제인가?중세 시대
195036795레지널드 폴의 어머니는 언제 사망하였나요?튜더 왕조 시대
198328300언론, 교육 등에 힘썼던 가톨릭 조직은 언제 활동하였는가?일제시대
256243065성매매 종사자가 계약에 묶일 필요없이 언제든 그만 둘 수 있음을 의미하는 말은?자율적 결정
258620027도조 히데키는 누구의 죽음 이후에 통제파의 주요 인물이 되었나요?나가타
269525919공자 돌이 임금의 자리에 올랐던 시기는 언제인가?기해일
289720170CIS 탄생의 계기가 된 인물은 누구인가?옐친
297830159철불상이 많이 제작된 시대는 언제인가?통일신라 후기
301626472후두의 영어표현은 누구에게서 비롯된 것인가?아담
311526445통일된 조지아 왕국의 초대 왕은 누구인가?바그라트
314113020이중창은 언제를 대비한 것인가?겨울철
323545731아르타크세르크세스를 독으로 살해한 인물은 누구인가?바고아스
325620027도조 히데키는 누구의 사망 이후에 비황도파의 중심 인물이 되었나요?나가타
340341390아버지를 존중하지 않았던 인물은 누구인가요?킴
341722186임산부가 태몽을 꾸는 시기는 주로 임신전후와 또 언제인가?분만직전
34265866번오기의 진군에 의해 살해 당한 대장은 누구인가?호첩
361845853야야티의 아들이자 파우라바 왕국을 건국한 민족의 선조는 누구인가?푸루
364828469타티키오스가 비밀협상에 나선 것은 누구의 기록을 통해 알 수 있나요?안나 콤네나
382747270지석묘는 언제 만들어졌나요?청동기시대
\n", + "
" + ], + "text/plain": [ + " document_id question answers\n", + "144 17340 일본의 원정 중 가장 최근의 원정은 언제 실행되었는가? 에도 말기\n", + "167 39694 푸르바더는 언제 세상 밖으로 나왔는가? 에흐네가 죽은 뒤\n", + "200 39711 만덕사는 언제 설립되었나? 고려 전기\n", + "217 33762 중국에서 쿨리가 공식적으로 해외에 나갈 수 있게 되었던 시점은 언제부터인가? 베이징 조약 체결 이후\n", + "316 20216 호남선은 언제 생겼나? 일제 강점기\n", + "339 18041 임영관 건물이 학교로 사용된 것은 언제인가? 일제시대\n", + "369 10698 세카이와 코토노하가 마코토에게 줄 선물은 언제를 위한 것인가? 크리스마스\n", + "426 23287 탑에 시멘트를 바른 것은 언제인가? 일제강점기\n", + "459 35475 부여석조가 만들어진 시기는 언제인가? 백제시대\n", + "549 29601 사이판의 전선과 하수구 파이프는 언제 수리하기 시작했는가? 태풍 초이완이 지난 후\n", + "660 46378 네이든이 몰래 좋아하고 있었던 인물은 누구인가요? 닉\n", + "716 57423 기갑 세력을 이용하여 호르티에게 항복을 받아낸 사람은 누구인가? 슈코르체니\n", + "781 36795 튜더 왕가의 정통성에 해를 가했던 사람들은 언제 죽음을 당하였나요? 튜더 왕조 시대\n", + "783 26355 조지아인과 오세트인이 화합을 이루웠던 때는 언제인가? 소비에트 시대\n", + "799 15951 남상철의 아버지는 언제 살아남았나요? 병인박해\n", + "801 15361 빔비사라의 아들이며 앙가를 다스린 사람은 누구인가? 아자타샤트루\n", + "950 16451 저고리의 길이가 짧아진 시기는 언제부터인가? 고려 말\n", + "977 28351 순무 제도가 생긴 것은 언제인가? 영락제 시기\n", + "1079 18910 밀본을 얕잡아 본 인물은 누구의 친구였나요? 수천\n", + "1155 8950 반 아이들에게 세리가 누구를 좋아한다고 들통났나요? 욱\n", + "1159 39874 프라이드 하우스는 누구에 의해 처음 설치되었는가? 딘 넬슨\n", + "1411 51793 유세군은 누구와의 관계 때문에 시를 지었나요? 곤막\n", + "1735 29587 조금씩 유럽사회가 계급사회로 접어들게 된 때는 언제인가? 중세 시대\n", + "1950 36795 레지널드 폴의 어머니는 언제 사망하였나요? 튜더 왕조 시대\n", + "1983 28300 언론, 교육 등에 힘썼던 가톨릭 조직은 언제 활동하였는가? 일제시대\n", + "2562 43065 성매매 종사자가 계약에 묶일 필요없이 언제든 그만 둘 수 있음을 의미하는 말은? 자율적 결정\n", + "2586 20027 도조 히데키는 누구의 죽음 이후에 통제파의 주요 인물이 되었나요? 나가타\n", + "2695 25919 공자 돌이 임금의 자리에 올랐던 시기는 언제인가? 기해일\n", + "2897 20170 CIS 탄생의 계기가 된 인물은 누구인가? 옐친\n", + "2978 30159 철불상이 많이 제작된 시대는 언제인가? 통일신라 후기\n", + "3016 26472 후두의 영어표현은 누구에게서 비롯된 것인가? 아담\n", + "3115 26445 통일된 조지아 왕국의 초대 왕은 누구인가? 바그라트\n", + "3141 13020 이중창은 언제를 대비한 것인가? 겨울철\n", + "3235 45731 아르타크세르크세스를 독으로 살해한 인물은 누구인가? 바고아스\n", + "3256 20027 도조 히데키는 누구의 사망 이후에 비황도파의 중심 인물이 되었나요? 나가타\n", + "3403 41390 아버지를 존중하지 않았던 인물은 누구인가요? 킴\n", + "3417 22186 임산부가 태몽을 꾸는 시기는 주로 임신전후와 또 언제인가? 분만직전\n", + "3426 5866 번오기의 진군에 의해 살해 당한 대장은 누구인가? 호첩\n", + "3618 45853 야야티의 아들이자 파우라바 왕국을 건국한 민족의 선조는 누구인가? 푸루\n", + "3648 28469 타티키오스가 비밀협상에 나선 것은 누구의 기록을 통해 알 수 있나요? 안나 콤네나\n", + "3827 47270 지석묘는 언제 만들어졌나요? 청동기시대" + ] + }, + "execution_count": 55, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "wrong_train = check_answer(t)\n", + "wrong_train" + ] + }, + { + "cell_type": "code", + "execution_count": 24, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
document_idquestionanswers
5745428당산제를 시행하던 날은 언제였는가?매년 음력 정월
7828290대한민국 민법에서 채권의 권리가 누구에게 있으면 채권이 사라지지 않는다고 명시하는가?제 3자
10410728콘스탄스를 죽인 것은 누구인가?350년
17541382나오치카는 주살의 위험을 피해 누구의 영지로 도망갔나요?다케다
2249420배현경과 신숭겸 등이 일을 꾀하여 찾아간 인물의 부인은 누구인가?제1부인
\n", + "
" + ], + "text/plain": [ + " document_id question answers\n", + "57 45428 당산제를 시행하던 날은 언제였는가? 매년 음력 정월\n", + "78 28290 대한민국 민법에서 채권의 권리가 누구에게 있으면 채권이 사라지지 않는다고 명시하는가? 제 3자\n", + "104 10728 콘스탄스를 죽인 것은 누구인가? 350년\n", + "175 41382 나오치카는 주살의 위험을 피해 누구의 영지로 도망갔나요? 다케다\n", + "224 9420 배현경과 신숭겸 등이 일을 꾀하여 찾아간 인물의 부인은 누구인가? 제1부인" + ] + }, + "execution_count": 24, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "wrong_valid = check_answer(v)\n", + "wrong_valid" + ] + }, + { + "cell_type": "code", + "execution_count": 25, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
document_idquestionanswers
1547810권번에서 요릿집에 제공한 기생 명부의 이름은?'초일기'
5823216많은 갈등을 불러온 툴민의 책은?≪인간의 이해: 개념의 집단적 사용 및 진화 (1972)≫
857119에케르트가 시행착오를 겪었던 국가는?일본
9944197소프트 머신의 이전 명칭은?와일드 플라워즈
12859489시네마토그래프 유료 상영회가 개최된 날은?1895년 12월 28일
............
371319657보로메오 가문의 문장은 어떤 의미를 지니고 있었나요?삼위일체
381434647학교형태의 평생교육시설이 어떠한 목적으로 이용되는 것을 막아야 하는가?고등학교를 보다 일찍 졸업하기 위한 수단
382410511프로비던스와 함께 가장 먼저 노예제를 없앤 곳은?로드아일랜드 주
38455016강희제는 장병 간의 관계가 어떻다고 믿었나?일심동체
389051962대교파출소는 어떤 사람한테서 장난 전화를 받았는가?김현정 양을 살해한 범인
\n", + "

157 rows × 3 columns

\n", + "
" + ], + "text/plain": [ + " document_id question \\\n", + "15 47810 권번에서 요릿집에 제공한 기생 명부의 이름은? \n", + "58 23216 많은 갈등을 불러온 툴민의 책은? \n", + "85 7119 에케르트가 시행착오를 겪었던 국가는? \n", + "99 44197 소프트 머신의 이전 명칭은? \n", + "128 59489 시네마토그래프 유료 상영회가 개최된 날은? \n", + "... ... ... \n", + "3713 19657 보로메오 가문의 문장은 어떤 의미를 지니고 있었나요? \n", + "3814 34647 학교형태의 평생교육시설이 어떠한 목적으로 이용되는 것을 막아야 하는가? \n", + "3824 10511 프로비던스와 함께 가장 먼저 노예제를 없앤 곳은? \n", + "3845 5016 강희제는 장병 간의 관계가 어떻다고 믿었나? \n", + "3890 51962 대교파출소는 어떤 사람한테서 장난 전화를 받았는가? \n", + "\n", + " answers \n", + "15 '초일기' \n", + "58 ≪인간의 이해: 개념의 집단적 사용 및 진화 (1972)≫ \n", + "85 일본 \n", + "99 와일드 플라워즈 \n", + "128 1895년 12월 28일 \n", + "... ... \n", + "3713 삼위일체 \n", + "3814 고등학교를 보다 일찍 졸업하기 위한 수단 \n", + "3824 로드아일랜드 주 \n", + "3845 일심동체 \n", + "3890 김현정 양을 살해한 범인 \n", + "\n", + "[157 rows x 3 columns]" + ] + }, + "execution_count": 25, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "wrong_train = check_date_answer(t)\n", + "wrong_train" + ] + }, + { + "cell_type": "code", + "execution_count": 26, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
document_idquestionanswers
118777인형사'를 만들어낸 것으로 추측되는 사업의 이름은?'일급 비밀 프로젝트 2501'
1757479이흥구의 사법시험 이야기를 기사로 작성한 곳은?〈중앙일보〉
5118819슈트레제만이 이끌었던 당은 무엇인가?독일인민당
608823벨기에가 리에주 전투에서 맞서 싸운 상대방은?독일군
7711517할더가 히틀러의 공격안을 반대한 결과는?독일
10146019메테스키가 최초로 폭탄을 설치하였던 지역은?맨해튼
10410728콘스탄스를 죽인 것은 누구인가?350년
10924978어느정도 규모 이상의 대회에서 깃털 셔틀콕만을 사용하는 이유는?깃털 셔틀콕의 타구감을 선호하고, 또한 플라스틱보다 깃털 셔틀콕이 정교한 컨트롤을 ...
1976690아카키우스 분열은 얼마나 유지됐는가?35년
20943204마오를 직접적으로 죽인 사람은?일등병 토머스
\n", + "
" + ], + "text/plain": [ + " document_id question \\\n", + "11 8777 인형사'를 만들어낸 것으로 추측되는 사업의 이름은? \n", + "17 57479 이흥구의 사법시험 이야기를 기사로 작성한 곳은? \n", + "51 18819 슈트레제만이 이끌었던 당은 무엇인가? \n", + "60 8823 벨기에가 리에주 전투에서 맞서 싸운 상대방은? \n", + "77 11517 할더가 히틀러의 공격안을 반대한 결과는? \n", + "101 46019 메테스키가 최초로 폭탄을 설치하였던 지역은? \n", + "104 10728 콘스탄스를 죽인 것은 누구인가? \n", + "109 24978 어느정도 규모 이상의 대회에서 깃털 셔틀콕만을 사용하는 이유는? \n", + "197 6690 아카키우스 분열은 얼마나 유지됐는가? \n", + "209 43204 마오를 직접적으로 죽인 사람은? \n", + "\n", + " answers \n", + "11 '일급 비밀 프로젝트 2501' \n", + "17 〈중앙일보〉 \n", + "51 독일인민당 \n", + "60 독일군 \n", + "77 독일 \n", + "101 맨해튼 \n", + "104 350년 \n", + "109 깃털 셔틀콕의 타구감을 선호하고, 또한 플라스틱보다 깃털 셔틀콕이 정교한 컨트롤을 ... \n", + "197 35년 \n", + "209 일등병 토머스 " + ] + }, + "execution_count": 26, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "wrong_valid = check_date_answer(v)\n", + "wrong_valid" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## 정답 문장 추출" + ] + }, + { + "cell_type": "code", + "execution_count": 113, + "metadata": {}, + "outputs": [], + "source": [ + "# 정답이 포함된 문장을 추출하는 함수\n", + "def extract_answer_sentence(row):\n", + " context = row[\"context\"]\n", + " answer_text = row[\"answers\"][\"text\"][0]\n", + " answer_start = row[\"answers\"][\"answer_start\"][0]\n", + "\n", + " # 정답의 끝 위치 계산\n", + " answer_end = answer_start + len(answer_text)\n", + "\n", + " # 문장의 시작 부분 찾기 (answer_start부터 왼쪽으로)\n", + " sentence_start = answer_start\n", + " while sentence_start > 0 and context[sentence_start - 1] not in [\n", + " \".\",\n", + " \"?\",\n", + " \"!\",\n", + " \"\\n\",\n", + " ]: # 문장 부호 및 개행 확인\n", + " sentence_start -= 1\n", + "\n", + " # 문장의 끝 부분 찾기 (answer_end부터 오른쪽으로)\n", + " sentence_end = answer_end\n", + " while sentence_end < len(context) and context[sentence_end] not in [\n", + " \".\",\n", + " \"?\",\n", + " \"!\",\n", + " \"\\n\",\n", + " ]: # 문장 부호 및 개행 확인\n", + " sentence_end += 1\n", + "\n", + " # 완전한 문장을 추출\n", + " extracted_sentence = context[sentence_start:sentence_end].strip()\n", + "\n", + " return extracted_sentence" + ] + }, + { + "cell_type": "code", + "execution_count": 117, + "metadata": {}, + "outputs": [], + "source": [ + "valid_df[\"answer_sentence\"] = valid_df.apply(extract_answer_sentence, axis=1)" + ] + }, + { + "cell_type": "code", + "execution_count": 118, + "metadata": {}, + "outputs": [], + "source": [ + "train_df[\"answer_sentence\"] = train_df.apply(extract_answer_sentence, axis=1)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## 눈으로 직접 확인하기: QA 쌍 보기" + ] + }, + { + "cell_type": "code", + "execution_count": 122, + "metadata": {}, + "outputs": [], + "source": [ + "pd.options.display.max_colwidth = 2000\n", + "pd.set_option(\"display.max_rows\", 20)" + ] + }, + { + "cell_type": "code", + "execution_count": 119, + "metadata": {}, + "outputs": [], + "source": [ + "v = valid_df[[\"document_id\", \"answer_sentence\", \"question\", \"answers\"]].copy()\n", + "v[\"answers\"] = v[\"answers\"].map(lambda x: x[\"text\"][0])\n", + "v.to_json(\"./valid.json\", force_ascii=False, orient = 'records', indent=4)" + ] + }, + { + "cell_type": "code", + "execution_count": 127, + "metadata": {}, + "outputs": [ + { + "data": { + "text/plain": [ + "'\\n10728: 360년 -> 마그넨티우스\\n9420: 제1부인 -> 신혜왕후 또는 유씨\\n'" + ] + }, + "execution_count": 127, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "'''\n", + "10728: 360년 -> 마그넨티우스\n", + "9420: 제1부인 -> 신혜왕후 또는 유씨\n", + "'''" + ] + }, + { + "cell_type": "code", + "execution_count": 120, + "metadata": {}, + "outputs": [], + "source": [ + "t = train_df[[\"document_id\", \"answer_sentence\", \"question\", \"answers\"]].copy()\n", + "t[\"answers\"] = t[\"answers\"].map(lambda x: x[\"text\"][0])\n", + "t.to_json(\"./train.json\", force_ascii=False, orient=\"records\", indent=4)" + ] + }, + { + "cell_type": "code", + "execution_count": 123, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_idanswer_sentence
167취업 빙하기취업 빙하기가 진행되는 과정에서는 미취직자, 무직자가 급증하는데 이는 생산성 감소 및 경기 침체 가속화, 생산성 감소, 소비 감소, 저출산 고령화, 만혼화, 미혼화 등의 원인이 된다. 이들 미취직자, 무직자들 중에는 구직 의욕 자체가 없는 니트족과 구직 의욕은 있으나 쉽게 일자리를 구하지 못하는 실업자 또는 실직자로 분류된다. 구직을 포기한 미취직자는 잠재적 사회불안 요인 및 반사회적 범죄의 우려가 있으며 모든 미취직자, 무직자를 사회부적응으로 규정할 수는 없으나, 이들 중에는 은둔형 사회부적응자가 되기도 한다. 신규자 고용 감소와 경력자 선호 등으로 중고령자의 재취업이 활성화되면서 경제 주체가 청년층에서 중고령자, 중장년층으로 옮겨갔으며 이는 소비감소 등의 다른 부작용도 유발되고 있다.\\n\\n업무를 이해하지 못한 상태에서 취직했거나, 학교에서 가르친 현장 실무와는 동떨어진 이론 위주의 교육 및 경제적, 정서적 문제 등으로 취직 후 1년 안에 그만두거나 이직하는 사례가 증가한다. 또한 생산 현장에 맞지 않는 지나친 고학력 인력의 과잉 공급으로, 전공 분야로 취업했으나 현장에서 오래 근무한 이들과의 감정적 대립으로 쉽게 자퇴하거나 이직하는 일도 종종 발생한다. 그밖에 학교에서의 교육이 지나친 암기 강요 또는 암기 위주의 이론 교육에 치중했던 점 또한 학생과 신규 졸업자의 현장 진출을 어렵게 만드는 구조적 문제점의 하나로 지적된다.\\n\\n취업 빙하기의 문제점으로 청년 구직자의 눈높이 문제가 지적된다. 그러나 학교에서 산업 현장의 수요에 맞는 인력을 양성하지 못하는 것과, 현장 수요에 맞지 않는 지나친 고학력화 및 대학교, 전문대, 대학원 등 고등 학력 기관의 남발로 학생 및 신규 졸업자의 일자리에 대한 기대도는 높아진 반면, 기업 현장에서는 즉시 투입될 수 있는 인물만을 선호하여 구직자와 구인자 간의 갈등의 양상도 띄고 있다. 즉시 현장 실무에 투입될 수 있는 인물을 가리켜 즉전인재라 한다. 한편 산업 현장에서는 신규자 실무 교육 시간이 없다는 이유로 방치하거나, 과도한 업무를 맡기거나 심리적 스트레스를 유발케 하여 의도적으로 그만두도록 만드는 유도퇴직 등의 현상도 등장하였다.중고령자의 채취업 활성화로 경제 주체마저 옮겨가는 바람에 생기는 부작용 중 하나는?{'answer_start': [365], 'text': ['소비감소']}40838신규자 고용 감소와 경력자 선호 등으로 중고령자의 재취업이 활성화되면서 경제 주체가 청년층에서 중고령자, 중장년층으로 옮겨갔으며 이는 소비감소 등의 다른 부작용도 유발되고 있다
\n", + "
" + ], + "text/plain": [ + " title \\\n", + "167 취업 빙하기 \n", + "\n", + " context \\\n", + "167 취업 빙하기가 진행되는 과정에서는 미취직자, 무직자가 급증하는데 이는 생산성 감소 및 경기 침체 가속화, 생산성 감소, 소비 감소, 저출산 고령화, 만혼화, 미혼화 등의 원인이 된다. 이들 미취직자, 무직자들 중에는 구직 의욕 자체가 없는 니트족과 구직 의욕은 있으나 쉽게 일자리를 구하지 못하는 실업자 또는 실직자로 분류된다. 구직을 포기한 미취직자는 잠재적 사회불안 요인 및 반사회적 범죄의 우려가 있으며 모든 미취직자, 무직자를 사회부적응으로 규정할 수는 없으나, 이들 중에는 은둔형 사회부적응자가 되기도 한다. 신규자 고용 감소와 경력자 선호 등으로 중고령자의 재취업이 활성화되면서 경제 주체가 청년층에서 중고령자, 중장년층으로 옮겨갔으며 이는 소비감소 등의 다른 부작용도 유발되고 있다.\\n\\n업무를 이해하지 못한 상태에서 취직했거나, 학교에서 가르친 현장 실무와는 동떨어진 이론 위주의 교육 및 경제적, 정서적 문제 등으로 취직 후 1년 안에 그만두거나 이직하는 사례가 증가한다. 또한 생산 현장에 맞지 않는 지나친 고학력 인력의 과잉 공급으로, 전공 분야로 취업했으나 현장에서 오래 근무한 이들과의 감정적 대립으로 쉽게 자퇴하거나 이직하는 일도 종종 발생한다. 그밖에 학교에서의 교육이 지나친 암기 강요 또는 암기 위주의 이론 교육에 치중했던 점 또한 학생과 신규 졸업자의 현장 진출을 어렵게 만드는 구조적 문제점의 하나로 지적된다.\\n\\n취업 빙하기의 문제점으로 청년 구직자의 눈높이 문제가 지적된다. 그러나 학교에서 산업 현장의 수요에 맞는 인력을 양성하지 못하는 것과, 현장 수요에 맞지 않는 지나친 고학력화 및 대학교, 전문대, 대학원 등 고등 학력 기관의 남발로 학생 및 신규 졸업자의 일자리에 대한 기대도는 높아진 반면, 기업 현장에서는 즉시 투입될 수 있는 인물만을 선호하여 구직자와 구인자 간의 갈등의 양상도 띄고 있다. 즉시 현장 실무에 투입될 수 있는 인물을 가리켜 즉전인재라 한다. 한편 산업 현장에서는 신규자 실무 교육 시간이 없다는 이유로 방치하거나, 과도한 업무를 맡기거나 심리적 스트레스를 유발케 하여 의도적으로 그만두도록 만드는 유도퇴직 등의 현상도 등장하였다. \n", + "\n", + " question \\\n", + "167 중고령자의 채취업 활성화로 경제 주체마저 옮겨가는 바람에 생기는 부작용 중 하나는? \n", + "\n", + " answers document_id \\\n", + "167 {'answer_start': [365], 'text': ['소비감소']} 40838 \n", + "\n", + " answer_sentence \n", + "167 신규자 고용 감소와 경력자 선호 등으로 중고령자의 재취업이 활성화되면서 경제 주체가 청년층에서 중고령자, 중장년층으로 옮겨갔으며 이는 소비감소 등의 다른 부작용도 유발되고 있다 " + ] + }, + "execution_count": 123, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "valid_df[valid_df[\"document_id\"] == 40838]" + ] + }, + { + "cell_type": "code", + "execution_count": 129, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionanswersdocument_idanswer_sentence
145첩혈쌍웅살인 청부업자인 아장(주윤발)은 살인청부를 실행하다 무고한 여가수 제니(엽청문)의 눈을 실명하게 만든다. 이에 대한 자책감으로 제니의 주변을 맴돌던 아장은 제니와 사랑에 빠진다. 한편 과감한 결단력으로 수사를 진행하는 이응(이수현)은 경찰 상부로부터 이때문에 늘 문책을 당하는 입장이다. 한편 주윤발은 제니의 각막 수술 비용을 벌기 위해 토니왕이라는 재력가이자 암흑가와도 연관성이 있는 자의 살인 청부를 맡고, 이응은 상부의 명령으로 토니왕의 경호를 맡지만 그다지 내켜하지는 않는다. 아장이 토니왕을 저격하고 도주하자 이응은 이를 추격하는데 침착함을 잃지 않으면서 무고한 희생을 피하는 아장에게 이응은 강한 인상을 받는다. 한편 아장은 토니왕의 암살을 지시한 토니왕의 조카 헤이왕으로부터 돈을 받기는커녕 오히려 살해 위협을 당해 도주하게된다. 이응은 제니에게 접근해서 아장을 체포하러 시도하지만 실패하고 문책당한다. 아장을 노리고 잠복해있던 이응의 동료경관과 헤이왕의 부하들은 충돌해서 이응의 동료경관은 사망하게되고 이에 분노한 이응은 아장을 추격하지만 아장의 의리, 우정, 사랑에 감복해 아장의 편이 된다. 한편 아장의 살인청부 대리인 역할을 하던 아장의 친구가 아장이 받아야 할 돈을 받아내려다 헤이왕의 부하들에게 살해당하자 아장은 복수를 다짐하고 직접 자신을 죽이러 부하들과 찾아온 헤이왕과 총격전을 벌인다. 그 과정에서 헤이왕의 부하들은 모두 죽고 제니는 헤이왕에게 인질로 잡힌다. 제니를 구하려다 아장은 온몸에 총격을 맞고 결국 사망하고, 헤이왕은 도주하던 끝에 경찰들을 보자 목숨을 건지기 위해 자수한다. 그러나 이를 쫓아온 이응은 경찰들에게 체포된 헤이왕에게 총을 쏘면서 아장을 그리워한다.토니왕의 조카에게 총을 쏜 자는?{'answer_start': [804], 'text': ['이응']}28730그러나 이를 쫓아온 이응은 경찰들에게 체포된 헤이왕에게 총을 쏘면서 아장을 그리워한다
1173첩혈쌍웅살인 청부업자인 아장(주윤발)은 살인청부를 실행하다 무고한 여가수 제니(엽청문)의 눈을 실명하게 만든다. 이에 대한 자책감으로 제니의 주변을 맴돌던 아장은 제니와 사랑에 빠진다. 한편 과감한 결단력으로 수사를 진행하는 이응(이수현)은 경찰 상부로부터 이때문에 늘 문책을 당하는 입장이다. 한편 주윤발은 제니의 각막 수술 비용을 벌기 위해 토니왕이라는 재력가이자 암흑가와도 연관성이 있는 자의 살인 청부를 맡고, 이응은 상부의 명령으로 토니왕의 경호를 맡지만 그다지 내켜하지는 않는다. 아장이 토니왕을 저격하고 도주하자 이응은 이를 추격하는데 침착함을 잃지 않으면서 무고한 희생을 피하는 아장에게 이응은 강한 인상을 받는다. 한편 아장은 토니왕의 암살을 지시한 토니왕의 조카 헤이왕으로부터 돈을 받기는커녕 오히려 살해 위협을 당해 도주하게된다. 이응은 제니에게 접근해서 아장을 체포하러 시도하지만 실패하고 문책당한다. 아장을 노리고 잠복해있던 이응의 동료경관과 헤이왕의 부하들은 충돌해서 이응의 동료경관은 사망하게되고 이에 분노한 이응은 아장을 추격하지만 아장의 의리, 우정, 사랑에 감복해 아장의 편이 된다. 한편 아장의 살인청부 대리인 역할을 하던 아장의 친구가 아장이 받아야 할 돈을 받아내려다 헤이왕의 부하들에게 살해당하자 아장은 복수를 다짐하고 직접 자신을 죽이러 부하들과 찾아온 헤이왕과 총격전을 벌인다. 그 과정에서 헤이왕의 부하들은 모두 죽고 제니는 헤이왕에게 인질로 잡힌다. 제니를 구하려다 아장은 온몸에 총격을 맞고 결국 사망하고, 헤이왕은 도주하던 끝에 경찰들을 보자 목숨을 건지기 위해 자수한다. 그러나 이를 쫓아온 이응은 경찰들에게 체포된 헤이왕에게 총을 쏘면서 아장을 그리워한다.제니가 아장에 의해 장애를 가지게 된 신체 부위는 어디인가?{'answer_start': [46], 'text': ['눈']}28730살인 청부업자인 아장(주윤발)은 살인청부를 실행하다 무고한 여가수 제니(엽청문)의 눈을 실명하게 만든다
\n", + "
" + ], + "text/plain": [ + " title \\\n", + "145 첩혈쌍웅 \n", + "1173 첩혈쌍웅 \n", + "\n", + " context \\\n", + "145 살인 청부업자인 아장(주윤발)은 살인청부를 실행하다 무고한 여가수 제니(엽청문)의 눈을 실명하게 만든다. 이에 대한 자책감으로 제니의 주변을 맴돌던 아장은 제니와 사랑에 빠진다. 한편 과감한 결단력으로 수사를 진행하는 이응(이수현)은 경찰 상부로부터 이때문에 늘 문책을 당하는 입장이다. 한편 주윤발은 제니의 각막 수술 비용을 벌기 위해 토니왕이라는 재력가이자 암흑가와도 연관성이 있는 자의 살인 청부를 맡고, 이응은 상부의 명령으로 토니왕의 경호를 맡지만 그다지 내켜하지는 않는다. 아장이 토니왕을 저격하고 도주하자 이응은 이를 추격하는데 침착함을 잃지 않으면서 무고한 희생을 피하는 아장에게 이응은 강한 인상을 받는다. 한편 아장은 토니왕의 암살을 지시한 토니왕의 조카 헤이왕으로부터 돈을 받기는커녕 오히려 살해 위협을 당해 도주하게된다. 이응은 제니에게 접근해서 아장을 체포하러 시도하지만 실패하고 문책당한다. 아장을 노리고 잠복해있던 이응의 동료경관과 헤이왕의 부하들은 충돌해서 이응의 동료경관은 사망하게되고 이에 분노한 이응은 아장을 추격하지만 아장의 의리, 우정, 사랑에 감복해 아장의 편이 된다. 한편 아장의 살인청부 대리인 역할을 하던 아장의 친구가 아장이 받아야 할 돈을 받아내려다 헤이왕의 부하들에게 살해당하자 아장은 복수를 다짐하고 직접 자신을 죽이러 부하들과 찾아온 헤이왕과 총격전을 벌인다. 그 과정에서 헤이왕의 부하들은 모두 죽고 제니는 헤이왕에게 인질로 잡힌다. 제니를 구하려다 아장은 온몸에 총격을 맞고 결국 사망하고, 헤이왕은 도주하던 끝에 경찰들을 보자 목숨을 건지기 위해 자수한다. 그러나 이를 쫓아온 이응은 경찰들에게 체포된 헤이왕에게 총을 쏘면서 아장을 그리워한다. \n", + "1173 살인 청부업자인 아장(주윤발)은 살인청부를 실행하다 무고한 여가수 제니(엽청문)의 눈을 실명하게 만든다. 이에 대한 자책감으로 제니의 주변을 맴돌던 아장은 제니와 사랑에 빠진다. 한편 과감한 결단력으로 수사를 진행하는 이응(이수현)은 경찰 상부로부터 이때문에 늘 문책을 당하는 입장이다. 한편 주윤발은 제니의 각막 수술 비용을 벌기 위해 토니왕이라는 재력가이자 암흑가와도 연관성이 있는 자의 살인 청부를 맡고, 이응은 상부의 명령으로 토니왕의 경호를 맡지만 그다지 내켜하지는 않는다. 아장이 토니왕을 저격하고 도주하자 이응은 이를 추격하는데 침착함을 잃지 않으면서 무고한 희생을 피하는 아장에게 이응은 강한 인상을 받는다. 한편 아장은 토니왕의 암살을 지시한 토니왕의 조카 헤이왕으로부터 돈을 받기는커녕 오히려 살해 위협을 당해 도주하게된다. 이응은 제니에게 접근해서 아장을 체포하러 시도하지만 실패하고 문책당한다. 아장을 노리고 잠복해있던 이응의 동료경관과 헤이왕의 부하들은 충돌해서 이응의 동료경관은 사망하게되고 이에 분노한 이응은 아장을 추격하지만 아장의 의리, 우정, 사랑에 감복해 아장의 편이 된다. 한편 아장의 살인청부 대리인 역할을 하던 아장의 친구가 아장이 받아야 할 돈을 받아내려다 헤이왕의 부하들에게 살해당하자 아장은 복수를 다짐하고 직접 자신을 죽이러 부하들과 찾아온 헤이왕과 총격전을 벌인다. 그 과정에서 헤이왕의 부하들은 모두 죽고 제니는 헤이왕에게 인질로 잡힌다. 제니를 구하려다 아장은 온몸에 총격을 맞고 결국 사망하고, 헤이왕은 도주하던 끝에 경찰들을 보자 목숨을 건지기 위해 자수한다. 그러나 이를 쫓아온 이응은 경찰들에게 체포된 헤이왕에게 총을 쏘면서 아장을 그리워한다. \n", + "\n", + " question \\\n", + "145 토니왕의 조카에게 총을 쏜 자는? \n", + "1173 제니가 아장에 의해 장애를 가지게 된 신체 부위는 어디인가? \n", + "\n", + " answers document_id \\\n", + "145 {'answer_start': [804], 'text': ['이응']} 28730 \n", + "1173 {'answer_start': [46], 'text': ['눈']} 28730 \n", + "\n", + " answer_sentence \n", + "145 그러나 이를 쫓아온 이응은 경찰들에게 체포된 헤이왕에게 총을 쏘면서 아장을 그리워한다 \n", + "1173 살인 청부업자인 아장(주윤발)은 살인청부를 실행하다 무고한 여가수 제니(엽청문)의 눈을 실명하게 만든다 " + ] + }, + "execution_count": 129, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "train_df[train_df[\"document_id\"] == 28730]" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "### 결론 (train 310개, val 240개 약 550개의 데이터 직접 체크함)\n", + "1. 생각보다 데이터 품질이 좋음. 전반적으로 큰 오류를 찾기 어려웠다.\n", + "2. 외부 데이터를 사용하는 것 만큼 대회 제공 데이터를 증강하는 것이 유효할 것이라고 생각이 든다." + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "### 추가적으로 검증해보면 좋을 내용\n", + "1. question의 난이도 평가 (question 유형, question에 사용된 어휘가 context와 얼마나 일치하는지 등으로)" + ] + } + ], + "metadata": { + "kernelspec": { + "display_name": "MRC", + "language": "python", + "name": "python3" + }, + "language_info": { + "codemirror_mode": { + "name": "ipython", + "version": 3 + }, + "file_extension": ".py", + "mimetype": "text/x-python", + "name": "python", + "nbconvert_exporter": "python", + "pygments_lexer": "ipython3", + "version": "3.10.14" + } + }, + "nbformat": 4, + "nbformat_minor": 2 +} diff --git a/notebooks/elasticsearch.ipynb b/notebooks/elasticsearch.ipynb new file mode 100644 index 0000000..68d2340 --- /dev/null +++ b/notebooks/elasticsearch.ipynb @@ -0,0 +1,140 @@ +{ + "cells": [ + { + "cell_type": "code", + "execution_count": 1, + "metadata": {}, + "outputs": [], + "source": [ + "import sys\n", + "import os\n", + "\n", + "# 상위 디렉토리로 이동한 후 code 폴더에 접근\n", + "sys.path.append(os.path.abspath(\"../code\"))" + ] + }, + { + "cell_type": "code", + "execution_count": 2, + "metadata": {}, + "outputs": [ + { + "name": "stderr", + "output_type": "stream", + "text": [ + "/opt/conda/envs/main/lib/python3.10/site-packages/tqdm/auto.py:21: TqdmWarning: IProgress not found. Please update jupyter and ipywidgets. See https://ipywidgets.readthedocs.io/en/stable/user_install.html\n", + " from .autonotebook import tqdm as notebook_tqdm\n" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Ping Elasticsearch : True\n" + ] + } + ], + "source": [ + "from retrieval.elastic import ElasticClient\n", + "\n", + "# Elasticsearch index 초기화\n", + "elastic_client = ElasticClient(\n", + " index_name=\"origin-wiki\",\n", + " setting_path=\"../code/config/elastic_setting.json\",\n", + " dataset_path=\"../data/wikipedia_documents.json\",\n", + " manual_mode=True,\n", + ")" + ] + }, + { + "cell_type": "code", + "execution_count": 3, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Index deletion has been completed\n" + ] + } + ], + "source": [ + "elastic_client.delete_index()" + ] + }, + { + "cell_type": "code", + "execution_count": 4, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Index creation has been completed\n" + ] + }, + { + "data": { + "text/plain": [ + "True" + ] + }, + "execution_count": 4, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "elastic_client.create_index()" + ] + }, + { + "cell_type": "code", + "execution_count": 5, + "metadata": {}, + "outputs": [ + { + "name": "stderr", + "output_type": "stream", + "text": [ + "100%|██████████| 56737/56737 [12:10<00:00, 77.71it/s]\n" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Succesfully loaded 56737 into origin-wiki\n", + "@@@@@@@ 데이터 삽입 완료 @@@@@@@\n" + ] + } + ], + "source": [ + "elastic_client.insert_data()" + ] + } + ], + "metadata": { + "kernelspec": { + "display_name": "main", + "language": "python", + "name": "python3" + }, + "language_info": { + "codemirror_mode": { + "name": "ipython", + "version": 3 + }, + "file_extension": ".py", + "mimetype": "text/x-python", + "name": "python", + "nbconvert_exporter": "python", + "pygments_lexer": "ipython3", + "version": "3.10.13" + } + }, + "nbformat": 4, + "nbformat_minor": 2 +} diff --git a/notebooks/question_classification_GPT.ipynb b/notebooks/question_classification_GPT.ipynb new file mode 100644 index 0000000..84b2742 --- /dev/null +++ b/notebooks/question_classification_GPT.ipynb @@ -0,0 +1,3790 @@ +{ + "cells": [ + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-10T06:33:29.549221Z", + "start_time": "2024-10-10T06:33:22.931056Z" + } + }, + "cell_type": "code", + "source": "!pip install openai", + "id": "76d5e2969b8490d7", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Collecting openai\n", + " Downloading openai-1.51.2-py3-none-any.whl.metadata (24 kB)\n", + "Requirement already satisfied: anyio<5,>=3.5.0 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from openai) (4.2.0)\n", + "Collecting distro<2,>=1.7.0 (from openai)\n", + " Downloading distro-1.9.0-py3-none-any.whl.metadata (6.8 kB)\n", + "Requirement already satisfied: httpx<1,>=0.23.0 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from openai) (0.27.0)\n", + "Collecting jiter<1,>=0.4.0 (from openai)\n", + " Downloading jiter-0.6.1-cp310-none-win_amd64.whl.metadata (5.3 kB)\n", + "Collecting pydantic<3,>=1.9.0 (from openai)\n", + " Downloading pydantic-2.9.2-py3-none-any.whl.metadata (149 kB)\n", + "Requirement already satisfied: sniffio in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from openai) (1.3.0)\n", + "Requirement already satisfied: tqdm>4 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from openai) (4.66.5)\n", + "Requirement already satisfied: typing-extensions<5,>=4.11 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from openai) (4.11.0)\n", + "Requirement already satisfied: idna>=2.8 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from anyio<5,>=3.5.0->openai) (3.7)\n", + "Requirement already satisfied: exceptiongroup>=1.0.2 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from anyio<5,>=3.5.0->openai) (1.2.0)\n", + "Requirement already satisfied: certifi in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from httpx<1,>=0.23.0->openai) (2024.8.30)\n", + "Requirement already satisfied: httpcore==1.* in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from httpx<1,>=0.23.0->openai) (1.0.2)\n", + "Requirement already satisfied: h11<0.15,>=0.13 in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from httpcore==1.*->httpx<1,>=0.23.0->openai) (0.14.0)\n", + "Collecting annotated-types>=0.6.0 (from pydantic<3,>=1.9.0->openai)\n", + " Downloading annotated_types-0.7.0-py3-none-any.whl.metadata (15 kB)\n", + "Collecting pydantic-core==2.23.4 (from pydantic<3,>=1.9.0->openai)\n", + " Downloading pydantic_core-2.23.4-cp310-none-win_amd64.whl.metadata (6.7 kB)\n", + "Requirement already satisfied: colorama in c:\\users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages (from tqdm>4->openai) (0.4.6)\n", + "Downloading openai-1.51.2-py3-none-any.whl (383 kB)\n", + "Downloading distro-1.9.0-py3-none-any.whl (20 kB)\n", + "Downloading jiter-0.6.1-cp310-none-win_amd64.whl (200 kB)\n", + "Downloading pydantic-2.9.2-py3-none-any.whl (434 kB)\n", + "Downloading pydantic_core-2.23.4-cp310-none-win_amd64.whl (1.9 MB)\n", + " ---------------------------------------- 0.0/1.9 MB ? eta -:--:--\n", + " ---------------------------------------- 1.9/1.9 MB 11.8 MB/s eta 0:00:00\n", + "Downloading annotated_types-0.7.0-py3-none-any.whl (13 kB)\n", + "Installing collected packages: pydantic-core, jiter, distro, annotated-types, pydantic, openai\n", + "Successfully installed annotated-types-0.7.0 distro-1.9.0 jiter-0.6.1 openai-1.51.2 pydantic-2.9.2 pydantic-core-2.23.4\n" + ] + } + ], + "execution_count": 8 + }, + { + "cell_type": "code", + "id": "initial_id", + "metadata": { + "collapsed": true, + "ExecuteTime": { + "end_time": "2024-10-10T07:05:11.371775Z", + "start_time": "2024-10-10T07:05:10.101975Z" + } + }, + "source": [ + "from logging import disable\n", + "\n", + "from datasets import load_from_disk\n", + "import os\n", + "import pandas as pd\n", + "current_dir = os.getcwd()\n", + "parent_dir = os.path.dirname(current_dir)\n", + "\n", + "# 파일 경로 설정\n", + "train_file_path = os.path.join(parent_dir, 'data', 'train_dataset.csv')\n", + "valid_file_path = os.path.join(parent_dir, 'data', 'train_validation_dataset.csv')\n", + "test_file_path = os.path.join(parent_dir, 'data', 'test_validation_dataset.csv')\n", + "\n", + "# CSV 파일을 pandas DataFrame으로 로드\n", + "df_train = pd.read_csv(train_file_path)\n", + "df_valid = pd.read_csv(valid_file_path)\n", + "df_test = pd.read_csv(test_file_path)" + ], + "outputs": [ + { + "name": "stderr", + "output_type": "stream", + "text": [ + "C:\\Users\\spdlq\\.conda\\envs\\boost-camp1\\lib\\site-packages\\tqdm\\auto.py:21: TqdmWarning: IProgress not found. Please update jupyter and ipywidgets. See https://ipywidgets.readthedocs.io/en/stable/user_install.html\n", + " from .autonotebook import tqdm as notebook_tqdm\n" + ] + } + ], + "execution_count": 1 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-10T08:02:35.859056Z", + "start_time": "2024-10-10T08:02:35.838936Z" + } + }, + "cell_type": "code", + "source": "display(df_test.head(30))", + "id": "15b3142cb70d2297", + "outputs": [ + { + "data": { + "text/plain": [ + " question id\n", + "0 유령'은 어느 행성에서 지구로 왔는가? mrc-1-000653\n", + "1 용병회사의 경기가 좋아진 것은 무엇이 끝난 이후부터인가? mrc-1-001113\n", + "2 돌푸스에게 불특정 기간동안 하원이 잠시 쉬는 것을 건의 받았던 인물은? mrc-0-002191\n", + "3 마오리언어와 영어, 뉴질랜드 수화를 공식 언어로 사용하는 나라는? mrc-0-003951\n", + "4 디엔비엔푸 전투에서 보응우옌잡이 상대한 국가는? mrc-1-001272\n", + "5 단공류가 일반 포유류와 다르다는 것을 알 수 있는 신체 부위는? mrc-1-000993\n", + "6 상류 부르주아의 정치 독점을 불러일으킨 체계는? mrc-0-005021\n", + "7 아시노 호가 만들어진 원인은 무엇인가? mrc-1-000163\n", + "8 흉년이 발생하고 곳곳에 난이 일어났던 시기는? mrc-0-001283\n", + "9 급전궤도는 보통 무엇으로 만들어져 있는가? mrc-0-004543\n", + "10 클레어에게 오세아닉 815편을 타라고 말한 사람의 이름은? mrc-0-000439\n", + "11 제6군이 18일 동안이나 대기해야 했던 장소는? mrc-0-002895\n", + "12 누가 시장으로 선출되면서 트랜짓 시티 계획안이 불발되었나? mrc-0-000535\n", + "13 1차 대각성 운동이 일어나는데 큰 영향을 끼친 설교는 어디서 진행되었는가? mrc-1-001724\n", + "14 괴수로부터 메구밍을 구해준 사람은 누구인가? mrc-0-000901\n", + "15 슈파이어 대성당 2차 축조시에 가장 우선순위로 고려했던 천장 건축 방식은? mrc-0-001606\n", + "16 통대를 뽑을 수 있었던 주체는 누구인가? mrc-0-000266\n", + "17 이유립씨가 1970년대 중반에 본인의 글을 기고하기 시작한 곳은? mrc-0-001326\n", + "18 미군이 충원되지 않으면 서울이 전쟁 시작 후 2주만에 함락될 것이라 밝힌 문서는? mrc-0-000032\n", + "19 임경업 장군이 도를 닦은 곳으로 알려진 곳은? mrc-0-005215\n", + "20 화재에서 인종을 구한 공으로 귀인으로 직위가 오른 사람은? mrc-0-005407\n", + "21 초등학생 일기검사의 인권침해 여부를 판단하는 주체는? mrc-0-003683\n", + "22 콘스탄티누스가 군사 4만 명을 이끌고 침범한 나라는? mrc-0-003644\n", + "23 불보살이 천도할 대상은? mrc-0-002835\n", + "24 루돌로지스트들이 게임에서 가장 주된 것이라 주장하는 것은? mrc-0-000049\n", + "25 조조에게 신고한 사람도 조사해야한다고 한 것은 누구인가? mrc-1-001829\n", + "26 나카무라 번이 메이지 정부에 굴복하게 된 결투의 이름은 무엇인가요? mrc-1-001662\n", + "27 펌프가 발매된 해는 언제인가? mrc-0-001206\n", + "28 밀러허긴스가 법학을 전공한 곳은? mrc-0-004007\n", + "29 유달산에서 다도해 절경을 볼 수 있는 바위는 무엇인가? mrc-1-000418" + ], + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
questionid
0유령'은 어느 행성에서 지구로 왔는가?mrc-1-000653
1용병회사의 경기가 좋아진 것은 무엇이 끝난 이후부터인가?mrc-1-001113
2돌푸스에게 불특정 기간동안 하원이 잠시 쉬는 것을 건의 받았던 인물은?mrc-0-002191
3마오리언어와 영어, 뉴질랜드 수화를 공식 언어로 사용하는 나라는?mrc-0-003951
4디엔비엔푸 전투에서 보응우옌잡이 상대한 국가는?mrc-1-001272
5단공류가 일반 포유류와 다르다는 것을 알 수 있는 신체 부위는?mrc-1-000993
6상류 부르주아의 정치 독점을 불러일으킨 체계는?mrc-0-005021
7아시노 호가 만들어진 원인은 무엇인가?mrc-1-000163
8흉년이 발생하고 곳곳에 난이 일어났던 시기는?mrc-0-001283
9급전궤도는 보통 무엇으로 만들어져 있는가?mrc-0-004543
10클레어에게 오세아닉 815편을 타라고 말한 사람의 이름은?mrc-0-000439
11제6군이 18일 동안이나 대기해야 했던 장소는?mrc-0-002895
12누가 시장으로 선출되면서 트랜짓 시티 계획안이 불발되었나?mrc-0-000535
131차 대각성 운동이 일어나는데 큰 영향을 끼친 설교는 어디서 진행되었는가?mrc-1-001724
14괴수로부터 메구밍을 구해준 사람은 누구인가?mrc-0-000901
15슈파이어 대성당 2차 축조시에 가장 우선순위로 고려했던 천장 건축 방식은?mrc-0-001606
16통대를 뽑을 수 있었던 주체는 누구인가?mrc-0-000266
17이유립씨가 1970년대 중반에 본인의 글을 기고하기 시작한 곳은?mrc-0-001326
18미군이 충원되지 않으면 서울이 전쟁 시작 후 2주만에 함락될 것이라 밝힌 문서는?mrc-0-000032
19임경업 장군이 도를 닦은 곳으로 알려진 곳은?mrc-0-005215
20화재에서 인종을 구한 공으로 귀인으로 직위가 오른 사람은?mrc-0-005407
21초등학생 일기검사의 인권침해 여부를 판단하는 주체는?mrc-0-003683
22콘스탄티누스가 군사 4만 명을 이끌고 침범한 나라는?mrc-0-003644
23불보살이 천도할 대상은?mrc-0-002835
24루돌로지스트들이 게임에서 가장 주된 것이라 주장하는 것은?mrc-0-000049
25조조에게 신고한 사람도 조사해야한다고 한 것은 누구인가?mrc-1-001829
26나카무라 번이 메이지 정부에 굴복하게 된 결투의 이름은 무엇인가요?mrc-1-001662
27펌프가 발매된 해는 언제인가?mrc-0-001206
28밀러허긴스가 법학을 전공한 곳은?mrc-0-004007
29유달산에서 다도해 절경을 볼 수 있는 바위는 무엇인가?mrc-1-000418
\n", + "
" + ] + }, + "metadata": {}, + "output_type": "display_data" + } + ], + "execution_count": 49 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-10T08:05:09.957595Z", + "start_time": "2024-10-10T08:05:09.936155Z" + } + }, + "cell_type": "code", + "source": [ + "import time\n", + "\n", + "def generate_question_types_batch(question_list):\n", + " retries = 3 # 최대 재시도 횟수\n", + " question_types = []\n", + " \n", + " # 질문 유형을 매핑하는 딕셔너리\n", + " question_type_dict = {\n", + " \"1\": \"사실 기반 질문\",\n", + " \"2\": \"이유/원인 질문\",\n", + " \"3\": \"방법 질문\",\n", + " \"4\": \"비교 질문\",\n", + " \"5\": \"추론 질문\",\n", + " \"6\": \"기타 질문\"\n", + " }\n", + " \n", + " categories = \"\"\"\n", + " 가능한 질문 유형은 다음 중 하나입니다:\n", + " 1. 사실 기반 질문: 사실이나 정보(누가, 무엇을, 언제, 어디서)를 묻는 질문.\n", + " 2. 이유/원인 질문: 이유나 원인, 설명을 요구하는 질문.\n", + " 3. 방법 질문: 어떤 방법으로 무언가를 하는지 묻는 질문.\n", + " 4. 비교 질문: 두 가지 이상의 사물을 비교하는 질문.\n", + " 5. 추론 질문: 추론이나 논리적 해석을 요구하는 질문.\n", + " 6. 기타 질문: 위의 기준에 맞지 않는 기타 질문.\n", + " \n", + " 예시:\n", + " 사실 기반 질문: \"누가 전쟁에서 이겼는가?\" \"조약이 언제 체결되었는가?\"\n", + " 이유/원인 질문: \"왜 전쟁이 시작되었는가?\" \"이 사건의 원인은 무엇인가?\"\n", + " 방법 질문: \"이 시스템은 어떻게 작동하는가?\" \"이 절차는 어떻게 수행되는가?\"\n", + " 비교 질문: \"어느 방법이 더 좋은가?\" \"이것과 저것의 차이점은 무엇인가?\"\n", + " 추론 질문: \"이 데이터에서 무엇을 추론할 수 있는가?\" \"이것이 무엇을 의미하는가?\"\n", + " \"\"\"\n", + " \n", + " for question in question_list:\n", + " attempt = 0\n", + " question_type = None\n", + " while attempt < retries:\n", + " try:\n", + " prompt = f\"다음 질문의 유형을 위 목록에서 숫자로 선택하세요.\\n{categories}\\n질문: {question}\\n질문의 유형은? 반드시 숫자 하나로만 대답하시오 반드시\"\n", + " completion = client.chat.completions.create(\n", + " model=\"gpt-4o-mini\",\n", + " messages=[{\"role\": \"system\", \"content\": \"You are a helpful assistant.\"},\n", + " {\"role\": \"user\", \"content\": prompt}],\n", + " max_tokens=5,\n", + " temperature=0.5,\n", + " )\n", + " \n", + " # 응답 처리 부분 수정\n", + " response_text = completion.choices[0].message['content'] if 'content' in completion.choices[0].message else completion.choices[0].message.content\n", + " response_text = response_text.strip()\n", + " print(f\"API 응답: {response_text}\") # 디버그용 응답 출력\n", + " question_type_number = response_text.split(\".\")[0].strip() # 숫자만 추출\n", + "\n", + " # 숫자를 글자로 변환\n", + " question_type = question_type_dict.get(question_type_number)\n", + " \n", + " # 만약 매핑에 실패하면 재시도\n", + " if question_type:\n", + " break # 성공 시 반복 종료\n", + " else:\n", + " print(f\"Error: 변환 실패. Question Type: {response_text}\")\n", + " except Exception as e:\n", + " print(f\"Error generating question type for question: {question} - Attempt {attempt + 1} failed. Error: {e}\")\n", + " attempt += 1\n", + " time.sleep(5) # 재시도 전 5초 대기 (대기 시간 증가)\n", + " \n", + " # 재시도 횟수 모두 실패 시 \"Unknown\" 추가\n", + " question_types.append(question_type if question_type else \"Unknown\")\n", + " \n", + " return question_types\n" + ], + "id": "f56dc64933960974", + "outputs": [], + "execution_count": 52 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-10T07:55:05.119308Z", + "start_time": "2024-10-10T07:55:05.105316Z" + } + }, + "cell_type": "code", + "source": "export OPENAI_API_KEY='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'", + "id": "75383cb40db33680", + "outputs": [ + { + "ename": "SyntaxError", + "evalue": "invalid syntax (430455336.py, line 1)", + "output_type": "error", + "traceback": [ + "\u001B[1;36m Cell \u001B[1;32mIn[40], line 1\u001B[1;36m\u001B[0m\n\u001B[1;33m export OPENAI_API_KEY='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'\u001B[0m\n\u001B[1;37m ^\u001B[0m\n\u001B[1;31mSyntaxError\u001B[0m\u001B[1;31m:\u001B[0m invalid syntax\n" + ] + } + ], + "execution_count": 40 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-10T08:12:02.866324Z", + "start_time": "2024-10-10T08:05:11.788338Z" + } + }, + "cell_type": "code", + "source": [ + "# new\n", + "from openai import OpenAI\n", + "import time\n", + "from tqdm import tqdm # TQDM 모듈 가져오기\n", + "\n", + "client = OpenAI(\n", + " api_key=os.environ['OPENAI_API_KEY'], # this is also the default, it can be omitted\n", + ")\n", + "\n", + "# Batch 크기 설정 (한 번에 여러 문장을 처리하기 위함)\n", + "BATCH_SIZE = 10\n", + "\n", + "# 전체 데이터를 배치로 나눠서 처리\n", + "df_test['question_type'] = \"\"\n", + "\n", + "# tqdm을 사용한 for 루프 - 진행 상황을 표시\n", + "for i in tqdm(range(0, len(df_test), BATCH_SIZE), desc=\"Processing batches\"):\n", + " batch_questions = df_test['question'][i:i + BATCH_SIZE].tolist()\n", + "\n", + " # 질문 유형 생성\n", + " batch_question_types = generate_question_types_batch(batch_questions)\n", + "\n", + " # 생성된 질문 유형을 데이터프레임에 저장\n", + " df_test.loc[i:i + BATCH_SIZE - 1, 'question_type'] = batch_question_types\n", + " \n", + "\n", + " # 각각의 질문과 생성된 질문 유형 출력\n", + " for question, question_type in zip(batch_questions, batch_question_types):\n", + " print(f\"Question: {question}\\nGenerated Question Type: {question_type}\\n\")\n", + "\n", + " # API 호출 사이에 대기 시간을 추가 (필요에 따라)\n", + " time.sleep(1)\n", + "\n", + "# 처리된 데이터 확인\n", + "display(df_test.head())" + ], + "id": "1c69fbe63b55fca3", + "outputs": [ + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 0%| | 0/60 [00:00이라는 가극에서 극 중 여자 주연의 이름은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 8%|▊ | 5/60 [00:34<06:23, 6.98s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 4\n", + "Question: 횡령 범죄자 조니를 체포한 요원은 누구인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 자신이 고안한 14개조 평화원칙을 국제 사회에 발표하고 싶어한 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 동인이 본격적인 세력을 잡은 때는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 미나미 칸토 대회에서 구마가야 고등학교의 1차전 상대 학교는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 독일에서 외국 영화를 상영할 수 없게 된 연도는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 팔과 다리가 밋밋한 형태인 신체표현은 어떤 시기를 반영한 것인가요?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 19세기 후반의 장갑함에 사용된 화포 형식은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 불상에 대한 정보가 적혀있는 것은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 제2군에 참여한 일본의 유명인사 중 군인 신분으로 참여한 사람은 누구인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 연방군의 캘리포니아 기지보다 더 큰 규모의 기지는 어디에 있는가?\n", + "Generated Question Type: 비교 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 10%|█ | 6/60 [00:41<06:12, 6.90s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 6\n", + "API 응답: 1\n", + "API 응답: 5\n", + "Question: 베토벤이 받았던 후원 요금을 칭하는 단어는 무엇인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 기븐 가의 첫째 아들은 누구인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 여호와가 기드온의 조상을 어디에서 구해냈는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 핀란드의 원주민들이 부족사회에서 벗어난 것은 언제인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 병으로 인해 피렌체의 수많은 사람들이 죽어갔음을 언급한 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 안드레우치오 디 피에트로를 몰래 지켜보던 인물은 어떤 지역 출신인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 1876년 일반 투표에서 틸던에 패배한 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 경영을 위해 기관지에 싣기도 하는 것은?\n", + "Generated Question Type: 기타 질문\n", + "\n", + "Question: 윌리엄 키드에게 공로장을 준 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 창원평야 구릉의 평평한 지형에서 발견된 흔적을 통해 성이 언제 지어졌다는 것을 알 수 있는가?\n", + "Generated Question Type: 추론 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 12%|█▏ | 7/60 [00:47<05:59, 6.77s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 5\n", + "Question: 수증기가 물이 되는 과정에서 가해지는 것은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 1994년 FIFA 월드컵 당시 대한민국 축구 대표팀의 감독은 누구인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 나가시마에게 감독직을 맡아줄 것을 가장 열렬히 부탁했던 팀은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 에이미는 서터에게 졸업 이후 어디에서 지내자고 권유하나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 어머니를 죽음에 이르게 한 것은 아들이 무엇처럼 행동했기 때문인가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 후지무라 감독 퇴진 요구서에 대한 내용을 보도한 언론은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 선라이즈의 애니메이션 작품 기획부는 야타테 하지메를 무엇으로 사용하는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 여운형이 조동호와 함께 조직한 것은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 즈와쓰의 한계 오라력 값보다 필요 오라력 값이 낮은 기체는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 평행 진화의 결과로 마블고양이가 가지고 있는 것은?\n", + "Generated Question Type: 추론 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 13%|█▎ | 8/60 [00:54<05:55, 6.83s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 연합 함대가 국지 경비 부대와 해상 호위 부대의 인재 육성을 경시해 일어난 결과는?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 정주영이 쌀가게 배달원으로 일한 가게를 인수한 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 적이 항복 의사를 밝히며 다가오고 있음을 대대장에게 보고한 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 캐릭터의 다친 장면이 유일하게 나오지 않는 단계는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 미치류가 해안가를 통해 다른 곳으로 이동했다는 주장을 뒷받침하는 것은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 태풍 초이완의 경보는 어떤 순간부터 풀렸는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 잘리어 왕조의 초대황제 이름은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 야고보가 강압적으로 배교에 관해 설교당했던 장소는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 진시황이 죽은 이후 황제의 자리에 즉위한 인물은 누구인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 단색 배경에 추상적인 디자인을 쓰는 양식이 유행하던 시기는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 15%|█▌ | 9/60 [01:01<05:53, 6.92s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 3\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 2010년 국가대표팀 훈련에 참가한 이다혜가 독일로 돌아가게 된 이유는?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 웃시야의 정예 전투 병력을 통솔하는 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 포도주 테이스팅에서는 공평한 평가를 위해 무엇을 진행하기도 하나요?\n", + "Generated Question Type: 방법 질문\n", + "\n", + "Question: 최고령 초등학생으로 기네스북에 올라있는 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 클린턴이 대통령 선거 초반에 내걸었던 정책은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 베르글룬트가 직장을 그만둔 후 그 자리를 이어받은 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 베트남전 진실위원회 이후에 세워진 단체의 대표는 누구인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 첫 도입 당시 1013개가 있던 것은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 628년에 새롭게 왕위에 오른 사람은 누구인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 전쟁에서 군인들의 삶을 보여주는 주요 등장인물은 누구인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 17%|█▋ | 10/60 [01:08<05:42, 6.84s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 4\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 6\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 셰이크 무지부르 라흐만의 딸이 처음으로 선거에서 졌던 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 산조 대금보다 약 2도 정도 음정이 높은 대금은?\n", + "Generated Question Type: 비교 질문\n", + "\n", + "Question: 소설 <형제>의 작가가 태어난 지역은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 예수의 테오토코스에 대해 부정적으로 인식했던 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 파라메스와르가 해적의 도움으로 세운 나라는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 온라인 사이트에 접속하지 못하게 하는 웹상에서의 시위는?\n", + "Generated Question Type: 기타 질문\n", + "\n", + "Question: 로마가 판노니아를 장악한 시기는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 1980년부터 1985년 사이, 미국달러가 세계 중요 4대 통화에 대해 50% 정도 평가절상된 이유는?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 헌터가 조지아에서 지시한 사항은 무엇인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 윤락행위등방지법이 전문 개정되었던 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 18%|█▊ | 11/60 [01:15<05:30, 6.75s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 무엇이 창 아래에 설치되어 표시기가 한 개 늘어났는가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 베토벤의 귀 상태가 악화된 연도는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 기존의 공중 네트워크로 중요 문서와 데이터를 전송하는데에 문제가 되었던 것은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 1919년 정광조의 보직은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 잉글랜드에서 보리와 함께 가장 많이 경작하는 작물은 무엇인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 동화사 석조비로자나불이 제작될 때, 당시 임금은 누구였는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 미자르는 무엇의 일부인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 스트라디바리가 고령의 조짐을 보이기 시작한 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 공격적 현실주의와 대비되는 고전적 현실주의를 설파한 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 컴퓨터 시각에서 분할의 대상은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 20%|██ | 12/60 [01:22<05:26, 6.81s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "Question: 삼한총왕설의 근거를 제공한 서적은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 리자베타가 꿈 속에서 들었던 장소에 실제로 찾아가 발견한 것은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 현직 추밀원사무처장 웨인울터즈의 선임은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 진평공이 통치할 때 망해서 사라진 가문은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 트로이 군사들은 아킬레우스에 의해 어디에서 사망했나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 세이드를 행하는 여성을 지칭하는 명칭은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 세니와 대국 사무관들은 어느 편과 힘을 합치기로 했는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 공식적인 첫 새천년베이비의 이름은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 레바논 전투에서 헤즈볼라는 누구에 대한 지지를 표명했나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 협동 화폐 거래소의 인정은 어느 부문에서 나타나는 변화인가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 22%|██▏ | 13/60 [01:28<05:16, 6.73s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 5\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 5\n", + "Question: 조선역사를 수호하는데 위기를 제공한 사람은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 1930년대 흑인음악으로 백인들의 열렬한 사랑을 받았던 재즈의 한 분야는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 여성의 몸치장에 쓰인 장신구의 위치가 저고리 밑으로 올라오게 된 때는 언제인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 비자나무의 열매는 어떤 증상을 치료하기 위해 쓰이나요?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 공소권이 사라질 경우 무엇에서 벗어나게 되는가?\n", + "Generated Question Type: 추론 질문\n", + "\n", + "Question: 드레이어 감독이 잔 다르크에 비유한 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: \"아오테아로아\"의 기원에 관한 이야기마다 등장하는 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 용통의 위치는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: <바다의 일꾼들>이 나온 연도는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 일반비용과 특수비용을 더한 값을 총생산물로 나눴을 때 나오는 값은 무엇인가?\n", + "Generated Question Type: 추론 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 23%|██▎ | 14/60 [01:35<05:09, 6.72s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 3\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 2\n", + "Question: 지금에도 여전히 진화압을 받고 있는 헤마글루티닌 유전자의 한 종류는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 질량을 킬로그램으로 정의하는 단위 규칙은 무엇인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 해적중의 활동을 승인한 것은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 윤치호가 사촌동생을 통해 만나려고 했던 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 인쇄사전에서 쉽게 읽히게 하기 위해 사용하는 것은?\n", + "Generated Question Type: 방법 질문\n", + "\n", + "Question: 미자가 일을 때려친 것은 누구 때문인가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 피렌체파의 대미를 수놓은 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 고석포, 장군석, 할망바우라는 이름을 가진 바위는 무엇으로 유명한가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 법안에서 제재를 취소할 수 있는 권리가 발생하는 경우는 무엇인가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 영화 <제7의 봉인>의 제목의 모티브가 된 것은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 25%|██▌ | 15/60 [01:42<05:08, 6.85s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 튀폰의 아버지는 누구인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 가톨릭 교회에서 주교에게 '최고사제'의 자격을 주는 직함의 이름은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 아랑을 살해한 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 제1 공수 사단은 어느 나라 부대인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 당의 군대를 몰살시킨 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 레빌 장군은 무엇이 없었기 때문에 실망했나?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 이스다렌의 여인이 중심적으로 스파이 활동을 한 국가는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 헨리 5세가 1415년에 프랑스 북쪽을 공격하기 위해 동원한 군사는 몇 명인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 전반전이 6분이 지난 후 골을 넣은 선수는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 천자등극설'을 대중들에게 확산시킨 행사는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 27%|██▋ | 16/60 [01:48<04:55, 6.72s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 갖지 못한 국가'가 위기를 극복하기 위해 광폭한 전쟁과 함께 시행한 것은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 통근특급이 걸림돌인 노선과 서로 평면교차하는 노선은 어디인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 장정기가 들어있는 우산이끼의 가지는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 멕시코 연방 정부는 메탈클래드에게 얼마를 보상하라고 하였나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 대학원에서 수업을 듣던 시절 소설을 출품하던 곳은 어디었는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 국경일에 일장기를 달아도 반대하지 않을 것이라는 내용을 담은 윤치호의 일기는 언제 쓰여진 것인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 석조지장보살상이 조각되지 않았을 것으로 추정되는 시기는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 이회광이 이용구의 추천으로 원종 고문 자리에 세운 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 갈릴레오 호 직전에 관측을 진행한 발사체의 이름은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 사관학교에서 졸업을 할 때 던지는 물건은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 28%|██▊ | 17/60 [01:55<04:51, 6.78s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 5\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 노르웨이 노르카프에서는 어느 계절에 백야를 항상 볼 수 있나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 1991년에 오브차라를 강제수용소로 변경하여 사용하려 했던 세력은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 호르몬의 주요 생성장소가 위치한 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 금산법 제 24조에 의거하여 대통령령이 시행되는 경우 어느 기관의 승인을 받아야 하는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 셰익스피어의 <<실수 연발>>에서 두 쌍의 쌍둥이 형제들이 재회하는 장소는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 자미토프가 개혁을 강행하기 위해 설립한 사병 집단은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 실제 상황을 이해하려면 몇 차원 상자 속 입자 문제를 풀어야 하나?\n", + "Generated Question Type: 추론 질문\n", + "\n", + "Question: 메구밍에게 자신이 사용하던 안대를 준 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 아나톨은 언제부터 작성되었나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 사라스테의 후임은 누구인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 30%|███ | 18/60 [02:02<04:46, 6.81s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 일제강점기 당시 형조와 같은 역할을 한 기관은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 버넘이 허빅-아로천체를 찾아냈을 때, 사용한 물건은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 윤창중이 인턴 직원을 성추행한 것으로 알려진 날짜는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 린후이인이 원래 진학하고 싶어했던 과는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 강요에 의한 개혁이 아니라 긴 기간 동안 의회의 권한을 키운 국가는?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 한중을 공격 시, 군량과 운송이 속한 조조의 부대는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 주인규는 무엇 때문에 스스로 생을 마감하게 되는가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 프리츠는 어느 나라의 왕인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 트루먼이 탐험을 하지 못하게 크리스토프가 제거한 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 반-베블런 효과가 처음 소개된 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 32%|███▏ | 19/60 [02:09<04:37, 6.76s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 성 요한 기사단이 로도스 섬으로 거처를 옮긴 년도는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 단순 조화 진동자의 진동 주기는 무엇의 세기에 비례하나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 팰퍼틴에게 비상시의 권리를 도맡아 달라고 의견을 냈던 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 제1차 마른강 전투에서 이긴 국가는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 텔 아파르나 키프리를 탈환하기 위해 계획 중인 집단이 소속된 나라는 어디인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 상하이의 북역과 남역 모두를 자유롭게 타기 시작했던 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 브레킨리지가 루이지애나주 배턴루지를 얻는 데 실패한 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 매우 센 중력에 의해 빛이 탈출하지 못하는 천체는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 국부 제거술로 인한 환관지망생들의 사망률은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 날개 앞쪽으로 연꽃을 들고 있는 인면조가 그려진 백제의 유물은 무엇인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 33%|███▎ | 20/60 [02:16<04:38, 6.97s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 3\n", + "API 응답: 2\n", + "API 응답: 3\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 각 측에서 주장된 포로교환 방법 중 선택된 것은?\n", + "Generated Question Type: 방법 질문\n", + "\n", + "Question: 억스브릿지선이 생긴 이유는?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 암컷류가 수중에 생식을 하거나 알주머니를 다른 물체에 붙이는 생식 방법은?\n", + "Generated Question Type: 방법 질문\n", + "\n", + "Question: 판 호이동크에게 어시스트를 해준 선수는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 레오폴 2세가 국제아프리카협회로 부른 민간 지주 회사를 결성한 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 티나헤로가 아칸바로의 유적을 날조한 것이라고 주장한 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 메리의 사촌은 어디에서 영웅으로 활약하기도 했나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 대가족제도에서 차별의식을 더욱 강화시켰던 문화는?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 마'를 피하기 위해 살몬 신전을 보낸 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 모하치 전투 후 오스만 제국과 헝가리 왕국을 둘로 나눈 나라는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 35%|███▌ | 21/60 [02:24<04:36, 7.09s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 3\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 임규남이 병원에 입원하는 바람에 해고 당한 직장은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 모세가 십계명을 받고 시나이 산에서 내려와 누구를 보고 슬퍼하고 분노했다고 <탈출기>는 전하는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 타격이 시작되는 것은 대상이 어디에 나타날 때인가?\n", + "Generated Question Type: 방법 질문\n", + "\n", + "Question: 귀족적인 정치가의 이미지를 탈피하기 위해 노력하였으나 실패한 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 본인의 일에 진중하게 임했고 많은 것을 연습했지만, 자신의 옷차림에 불만을 제기했던 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 로마의 인력 수급에 중요한 역할을 한 나라는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 몇 년간의 전쟁을 통해 '귀방'이라 불리는 이민족이 정벌되었는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 슈타우펜베르크는 들 것에 실려나온 사람이 무엇을 덮고 있는 것을 보고 히틀러의 죽음을 단정했나?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 화물과 배가 시내 가까이에 갈 수 있는지의 여부를 정하는 기준이 된 문서는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 버섯왕국의 피치 공주를 납치한 악당 거북의 이름은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 37%|███▋ | 22/60 [02:31<04:32, 7.16s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 작센군과 오스트리아군은 함께 어디를 공격할 예정이였나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 팬들이 스스로 만드는 상품을 뭐라 하는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 박헌영이 정부의 역할을 미군정에서 인민위원회로 즉시 넘겨달라고 요구했던 성명은 무엇인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 한국에서 음식을 올려놓을때 쓰이는 세간의 이름은 무엇인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 네델란드와의 친선 경기에서 유일하게 골을 넣은 선수의 소속팀은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 독일의 식민 지배는 언제까지 지속됐는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 전효숙이 재판관직 사임으로 민간인이 되었을 때 헌법소장직을 대행 한 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 우리손은 위상 공간을 거리화하려면 그 공간이 제2 가산 공간임과 더불어 어떤 공간이어야 한다고 증명했나?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 할릴자드 대사와 정치적 이야기를 나눈 아프간 대통령은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 베니 간츠가 리쿠드당과 같은 노선을 밟겠다는 입장을 표명한 이후, 청백당을 나갔던 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 38%|███▊ | 23/60 [02:38<04:17, 6.97s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 2\n", + "API 응답: 5\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "Question: 아일랜드의 자원 공급 불안과 지구 온난화에 대한 해결방안은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 안전한 거래를 지지하는 주식 시장 참여자들은 어떤 집단 극화 양상을 보이나요?\n", + "Generated Question Type: 추론 질문\n", + "\n", + "Question: 경신자오단오제가 지금의 이름이 되기 직전의 명칭은 무엇이었는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 히틀러의 반란은 누구를 모방한 것인가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 최초로 공산주의 정당을 제외한 선거 이후 메리가 맡은 직책은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 게임 발표회에서 제작기간이 부족했다고 한 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 히키코모리가 유독 많아졌던 세대는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 1985년 스토우빌선 열차가 스토우빌에서 출발해 여섯 번째로 정차했던 역은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 2012년에 공금횡령의 죄목으로 김모씨의 긴급 체포를 진행한 집단은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 오노에게 영향을 미친 장 폴 사르트르의 철학은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 40%|████ | 24/60 [02:44<04:07, 6.88s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 3\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 밀란 루키치는 그의 위법행위로 인해 어떤 형을 받았나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 북버지니아군이 챈슬러즈빌 전투에서 상대한 것은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 산악 자전거 프리 라이드 부문에 출전하는 마틴 소더스트롬이 이용하는 제품은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: <굳세어라 금순아>의 작곡가가 실제 피난생활을 했던곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 크리스티앙 드카스를 포로로 잡은 인물은 누구인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 폐예노르트와 아약스가 \"더 클라시커르\"에서 맞대결을 할 때 경기가 치뤄지는 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 총 14만 명의 인도인들이 영국 전쟁의 지원을 위해 보내졌던 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 강희제가 310 마리의 토끼를 사냥하려면 얼마나 걸리는가?\n", + "Generated Question Type: 방법 질문\n", + "\n", + "Question: 공공 사업 법안이 통과되지 못하자 와그너가 내세운 법령은 무엇인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 모스크바로 가기 위한 여권이 필요한 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 42%|████▏ | 25/60 [02:51<03:58, 6.80s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 6\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "Question: 부피와 무게감을 나타낸 얼굴이나 짧은 목 등을 통해 알 수 있는 불상의 축조 시기는?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 금속을 다루는 능력의 진보가 이루어지며 등장한 대포는 무엇인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 로마의 성벽을 확장한 인물을 기록한 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 반사는 어디에서 온 데이터로 인해 발생하는가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 마켓가든 작전을 다룬 작품은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 도플라밍고가 해군에 체포되기 전에 서로 싸웠으며 그가 현상금 3억 베리를 건 인물은 누구인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 정치적 코미트를 담고있는 작품은?\n", + "Generated Question Type: 기타 질문\n", + "\n", + "Question: 군자면에서 당 선전으로 활동한 사람들의 직업은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 합동조사반에 의하면 사고의 원인에는 과적 외에 어떤 것이 있는가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 양산이씨 종가가 보유한 왕지 중 양산이씨의 시조와 관련한 왕지는 몇 점이 있는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 43%|████▎ | 26/60 [02:57<03:48, 6.73s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 4\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 공룡을 닮은 토우는 어디에서 발견되었나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 주파수가 높은 강한 전자파가 사람의 몸에 닿아 부정적 영향을 일으키는 원리는?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 10세기 초에 글라골 문자와 그리스 문자를 이용해 새롭게 만들어 낸 문자는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 이경언이 사망한 장소는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 김일성이 소련인으로서 살고 싶어했다고 말을 한 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 고구려에 크게 지고 그 전쟁때문에 병이나서 죽은 당나라 왕은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 안더스가 폴란드 제2군단을 설립한 나라는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 이탈리아계 미국인들의 민주당 뉴딜 연정 가입으로인해 이득을 본 공화단원은?\n", + "Generated Question Type: 비교 질문\n", + "\n", + "Question: 국민회의 측이 비판한 대통령의 발언은 언제 한 발언이었나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 화가 난 스승이 아힘사에게 살인 후 목걸이로 만들어 오라고 한 신체부위는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 45%|████▌ | 27/60 [03:04<03:41, 6.71s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 아테네가 주도권을 잃어버리는데 영향을 준 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 레닌에 의하면 자본주의식 농업 시스템을 통해 일반 시민들이 더 쉽게 사용할 수 있게 된 것은 무엇인가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 아르튀르가 베르린과의 연애생활을 한 경험을 쓴 시집이름은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 섬 정부가 영국 정부가 지시내리기전에 섬에서 모두 쫓아낸 민족은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 로버트 마틴은 단일 책임 원칙을 알려주기 위해 누구의 책을 참고하였나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 네덜란드어를 몰랐으나 타펠 아나토미아의 해부도 번역에 참여한 것은 누구인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 금기시된 소재를 다룬 소설이 출간된 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 하이네스에게 화염의 힘을 받은 인물은 누구인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 선생님에게 창씨개명을 하지 않겠다고 한 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 교황의 자리에 오른 후 보니파시오 3세가 바꾼 것은 몇 개인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 47%|████▋ | 28/60 [03:11<03:39, 6.86s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 주권재민의 원칙은 어디에 명시되어 있는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 제임스 와트와 같은 역사적인 발명가를 배출한 곳은 어디인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 사이트에 올라오는 콘텐츠를 검열하는 주체는 누구인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 교전 당사자에 대한 전쟁 범죄 심판시 판단 기준이 되는 법은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: A지구 아랫부분에서 민무늬토기와 더불어 어떤 유물이 발굴되었나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 시켈리아 원정을 기획한 국가는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 마지막까지 동래권번에 드나든 동래한량꾼은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 표준어 보급으로 오키나와현에서 고사될 위기에 있는 언어는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 도스토옙스키를 연구할 때 큰 도움이 됐던 책은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 인도의 아육왕 계통의 불상의 의복 형식과 유사한 자료를 소장하고 있는 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 48%|████▊ | 29/60 [03:18<03:31, 6.83s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 3\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 5\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 21대 총선을 겨냥하여 사법개혁을 이끌어갈 수 있다는 것에 뒷받침된 명목은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 카를이 교황으로부터 신성 로마 제국 황제관을 부여받은 장소는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 둠 3: 악마의 부활에서는 최대 몇 명까지 동시에 즐길 수 있나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 클라우드 컴퓨팅으로 작동하는 시스템은 무엇을 통해 어플리케이션에 들어갈 수 있나요?\n", + "Generated Question Type: 방법 질문\n", + "\n", + "Question: 티칼왕조의 창건자는 몇 번 무덤에 묻혔다고 알려져있나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 낮에는 어떤 바람이 부는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 보닌의 흉터는 어디서 만들어졌을거라 추측되는가?\n", + "Generated Question Type: 추론 질문\n", + "\n", + "Question: 유럽에서 두 번째로 큰 국가에는 몇 개의 국립공원이 존재하는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 윤치호의 아내는 누구의 부인을 방문했나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 17도선이 '잠정적인 군사분계선'으로 규정된 연도는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 50%|█████ | 30/60 [03:25<03:21, 6.73s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 2\n", + "API 응답: 4\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 6\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 4\n", + "Question: 루이가 사망하게 될 원인은 무엇인가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 기독교와 메시아에 대한 생각이 다른 사람들은?\n", + "Generated Question Type: 비교 질문\n", + "\n", + "Question: 종교 개혁 전 영국에서 인기를 끌었던 헌신은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 107고지를 처음 함락시킨 부대는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 결론에 표시하지 않는 개념은?\n", + "Generated Question Type: 기타 질문\n", + "\n", + "Question: 코드 서명이 보증하는 대상은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 위트레흐트 육군 군의학교가 폐교된 해는 언제인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 타누당(TANU)를 설립한 인물이 태어난 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 퀵실버(영화)에서 집시를 고가도로에서 추락시킨 사람을 연기한 배우는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 고구려와 당나라 사이에 4대 전투 중 유일하게 다른 해에 일어난 전투는?\n", + "Generated Question Type: 비교 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 52%|█████▏ | 31/60 [03:31<03:14, 6.70s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "Question: 도쇼구 역의 승강장은 몇 층에 있는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: navigation'이 올라온 사이트는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 1661년 건축 시 제팅기법의 지나친 사용을 제재한 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 코페르니쿠스 유해의 진위여부를 밝힌 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 오가키로 향하는 아보시 발 도카이도 본선 기차를 운영하는 때는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 해안포를 정착해 해안을 방어하기 위해 건설한 것은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 네덜란드의 모든 이들이 오라녜나사우 훈장을 받을 수 있게 된 건 몇 년인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 스위스가 월드컵에서 이긴 나라는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 출혈성 천연두 초기와 말기 환자 모두에게 증가하는 물질은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 도룡뇽이 수분 증발을 예방하고 몸이 마르지 않도록 내뿜는 것은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 53%|█████▎ | 32/60 [03:38<03:06, 6.68s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 6\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 경상좌도 수군절도사영이 관리했던 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 공원으로 변화되는 곳은?\n", + "Generated Question Type: 기타 질문\n", + "\n", + "Question: 신돈의 어미니는 어느 곳에 소속된 노비인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 사건 몇 개를 풀 때 마다 아키이시가 아이템을 주나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 함세환은 어느 군대에 스스로 입대하여 전투에 참여했나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 일제의 남한 대토벌 작전은 어느 지역에 대한 압박이었나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 대원씨아이가 어떤 회사와 계약하여 한국에서 뉴타입을 출간할 수 있었나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 장하준 교수의 한국경제에 대한 생각에 대해 반론한 김상조 교수의 저서는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 베르니이헝 조약이 체결된 해는 언제인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 자신의 사리사욕만 채우며 무능했던 진나라의 황제는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 55%|█████▌ | 33/60 [03:44<02:59, 6.63s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 4\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 5\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 보스턴 차 사건이 발발한 년도는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 시에나의 신비주의에 대비되는 피렌체 미술계의 성향은?\n", + "Generated Question Type: 비교 질문\n", + "\n", + "Question: 목포근대역사관 본관의 건축 양식은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: Yoo Doo Right이 수록된 앨범명은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 고스자쿠 천황이 사망한 연도는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 조비에게 정의를 살려달라고 부탁했다가 사망한 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 황금방울새 그림을 유리창의 일부였을거라 추측한 인물은?\n", + "Generated Question Type: 추론 질문\n", + "\n", + "Question: 외국인 근로자 고용 등에 대한 법률'의 목적은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 17세기 피쿼트로부터 독립하여 모하칸족을 만든 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 해동검도의 예도 검법 중에 나한일과 김정호가 직접 만든 검법은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 57%|█████▋ | 34/60 [03:52<02:57, 6.82s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 4\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 2\n", + "Question: 무슈 두 파리를 선발하는 기관은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 헨드릭스가 공화당 행정부를 공격했을 당시 어디서 선거 유세를 하던 중이었나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 1대부터 4대 칼리파를 통틀어 부른 명칭은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 그레이가 수술을 받은 것은 어디를 다쳤기 때문인가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 프랑스군은 마렝고에서 어떤 나라의 군대와 마주하였나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 월드컵에 출전 한 다른 나라에 비해 대한민국 선수들이 강하지 못한 부분은 무엇인가?\n", + "Generated Question Type: 비교 질문\n", + "\n", + "Question: 크라테로스를 사망에 이르게 한 동물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 누아다가 오른손이 없는 이유는 누구 때문인가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 현대 식물원은 언제 오픈되었는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 필리프가 왕실에서 쫒겨난 사건의 단초가 된 역사적 사건은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 58%|█████▊ | 35/60 [03:59<02:56, 7.04s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 6\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 5\n", + "Question: 의존성 주입은 어디에서 쓰이는 기술인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 시바사키의 이전 소속 부서는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 높은 기온과 과식으로 인해 유발되는 증상은 무엇인가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 평등과 복지 사회를 이루기 위해 필요한 것이라는 선전 하에 행해지는 것은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 야전의 전투 제한 시간은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 키요미와 자신이 아끼는 2명을 지키기 위해 목숨도 아까워 하지 않은 사람은?\n", + "Generated Question Type: 기타 질문\n", + "\n", + "Question: 카이사르가 브리튼인의 문화와 흡사한 문화를 가지고 있다고 생각한 부족은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 《서편 삼층석탑》은 어느 지역의 유형문화재로 지정되어있나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 셀린 문학의 스타일은 무엇이라 묘사되는가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 공하류는 어디로 분류되는 것으로 추측하고 있는가?\n", + "Generated Question Type: 추론 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 60%|██████ | 36/60 [04:06<02:47, 6.99s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 맬컴이 맥더프에게 상실에 슬퍼할 줄 알아야 함을 배우는 장은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 헝가리 요리와 오스트리아 요리가 교류한 시기는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 와그너법령이 통과된 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 파프니르의 피를 마시고 배신당할 것을 알게 된 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 이보담은 어느 절에서 스님이 되었는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 헌재 결정에 대해 적극적으로 동의한 당은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 후방에 배치된 돈 후안 호세 나바로의 함대의 배는 몇 척인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 요원들의 마지막 임무 대상은 누구인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 1998년 5월에 리치먼드와 함께 워싱턴 위저즈로 팀을 옮긴 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 이무훈에게 살해당한 인물의 직책은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 62%|██████▏ | 37/60 [04:13<02:41, 7.02s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 5\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 천왕성에서 계절의 변화가 크지 않은 것은 무엇 때문인가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 조흔색은 무엇을 구별하는데 도움을 주나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 수술대 하부에 꿀샘이 존재하면 꽃밥은 어디를 향해 있는가?\n", + "Generated Question Type: 추론 질문\n", + "\n", + "Question: 부부 중 1인이 단독으로 혼인취소소송을 제기하고자 하는 경우 누구를 상대로 소를 제기하여야 하는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 군부세력들이 어떤 상황을 빌미로 쿠테타를 일으키려고 했나?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 1754년에 철거되었던 시장이 왕실 특허를 재확인받았던 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 우치쿠라노 이시메가 작성한 내용이 실린 기록은 무엇인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 호적을 '남'에서 '여'로 바꾼 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 보디 스타킹에서 봉제되지 않은 부분은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 프랑크 왕족들의 무덤이 있는 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 63%|██████▎ | 38/60 [04:20<02:31, 6.86s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 스페인령 아메리카에서는 누구의 공격에 대응하는 것이 주요한 문제였나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 신문 <파시스트 정권,Il Regime Fascista>의 주된 논조는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 롬멜이 어디에 대응하기 위해 나무 기둥과 통나무를 이용하라고 지시했나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 아우구스트 빌헬름은 어떤 군지휘관이 모이 전투에서 전사하며 타격을 입게 되나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 카쿠와 로브 루치의 현재 신분은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 이토 히로부미가 정치적 대립관계인 오쿠마 시게노부에게 준 관직은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 홉베마의 스승은 누구인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 정치 형태를 홍보하려는 목적으로 류경 스마트폰에 내장된 책의 이름은 무엇인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 중세 아랍 제국에서 여권과 세금 납부 증명서를 겸용한 서류의 이름은 무엇인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 일본 히로히토 천황이 항복을 선언한 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 65%|██████▌ | 39/60 [04:26<02:21, 6.76s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 5\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 안채와 사랑채 사이에 있는 장소의 앞면은 몇 칸인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 쿠챤과 밀로셰비치의 협의에 대해서 작성한 작가의 출신국가는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 시도 도지사가 시도 소속 소방공무원을 임용할 수 있도록 개정된 법은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 피아노 즉흥 연주 경연대회에서 베토벤의 스폰서는 누구였는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 곰팡이에 대해 무지했던 사람들은 까망베르 껍질에 대해 어떻게 생각했는가?\n", + "Generated Question Type: 추론 질문\n", + "\n", + "Question: 2016시즌 당시 테일러는 누구 대신 주전이 되었나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 존 크루거가 유일하게 믿는 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 호연재 김씨의 시증조부는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 아랍 연합 공화국은 어느 국가를 상대로 전쟁을 벌였는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 볼세비키에 참가해 볼세비키의 군적 역량을 강화시킨 사람은 누구인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 67%|██████▋ | 40/60 [04:33<02:15, 6.79s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 무관학교를 설립한 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 너비아니에 돼지고기를 사용한 시대는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 레르도의 군대가 디아스의 군대에게 대패한 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 박철민이 처음 연기를 시작한 것은 언제인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 손턴 와일더 사후, 최고의 명작으로 손꼽히는 작품은 무엇인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 신립이 스스로 목숨을 끊은 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 학생이 테스트에서 탈락하고 다시 검증을 받는 과정은 언제까지 반복되는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 단어 '토레혼'의 어근은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 윤치호가 송도고등보통학교의 네 번째 교장을 맡게 된 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 투표하기로한 후보 대신 당선되면 시장직을 수행하겠다는 솔터에게 표를 준 단체는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 68%|██████▊ | 41/60 [04:40<02:08, 6.79s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 4\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 6\n", + "Question: 김옥균이 암살을 피하기 위해 돌아다닌 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 파아 디브루노 함을 끝까지 공격했던 배는 어느 나라 소속인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 미시시피 강으로 인해 멕시코 만류가 생겼다는 주장이 힘을 잃은 이유는 멕시코 만류가 무엇으로 알려졌기 때문인가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 피아노 협주곡 5번의 첫 공개 초연이 이루어진 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 총선에서 듀이를 꺾은 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 베단타 학파와 차르바카파는 무엇을 기준으로 나뉘어졌나요?\n", + "Generated Question Type: 비교 질문\n", + "\n", + "Question: 윤치호는 성주이씨의 묘소를 누구에게 알려주었는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 진관희가 짧은 기자 회견을 가진 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 히보코가 용서의 대가로 받은 물건은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 토산물을 착취하는 등과 같은 업무의 명목은?\n", + "Generated Question Type: 기타 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 70%|███████ | 42/60 [04:46<02:01, 6.75s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 프리덤 건담의 이름을 지은 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 부첼라토가 지니는 전통적인 의미는?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 인천상륙장면의 재촬영에 소요된 금액은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 좌운검이 도연이 정조의 자손인 것을 아무도 모르게 하기 위해 한 행동은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 통진당을 해산시킨 결정을 인정한다고 직접 말한 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 진홍빛 장미가 만들어진 원인을 제공한 자는?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 콘코바르가 알릴과 메브와의 전투에서 분실한 것은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 가트나는 2020년에 사물 인터넷 기술을 사용하는 사물은 몇 개일거라 예측했나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 마가렛의 모친은 어떤 나라의 왕족이었나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 카틸리나는 누구 덕분에 간통 혐의에서 벗어날 수 있었나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 72%|███████▏ | 43/60 [04:53<01:55, 6.81s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 6\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 파브르는 그의 글을 통해 누구에게 자연과학에 대한 사랑을 전했는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 에이몬 b. 킹을 파견한 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 지방총감부 제도를 없애기로 결정한 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 처음으로 염색된 섬유가 발견되었던 장소는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 레이크가 가장 큰 영향을 받았다고 한 작품의 이름은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 붉은자이언트날다람쥐 암컷의 일 년 평균 번식 횟수는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 레이가 골트 이후에 사용한 가짜 이름은 무엇인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 물방울에 급수대의 이물질이 없는 가습기는?\n", + "Generated Question Type: 기타 질문\n", + "\n", + "Question: 강현의 아들 이름은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 유에에게 마력을 넘겨준 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 73%|███████▎ | 44/60 [05:00<01:47, 6.74s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 어버이새가 새끼들의 먹이를 보관하는 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 쓰루가 방면의 신쾌속 열차가 특급 선더버드 호의 추월을 위해 대기할 때는 언제인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 경서교회를 설립한 사람이 태어난 도시는 어디인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 베언트 푀어슈터 덕분에 얻은 페널티 킥을 누가 하였는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 사장이 부하직원에게 행사할 수 있는 권리는 무엇인가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 19세기 가곡이 성행하는 데 큰 역할을 한 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 부부가 딸을 차에 태운 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 국사가 국내 인부 동원의 권한을 얻는 계기가 된 사건이 일어난 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 미종예의 전신은 무엇인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 고조선의 도읍지와 관련하여 한국 역사학계에서 널리 인정받는 이론은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 75%|███████▌ | 45/60 [05:07<01:40, 6.71s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 3\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "Question: 분류 작업 중 일정한 시점에 미리 종료함으로써 속도를 올릴 수 있는 것은?\n", + "Generated Question Type: 방법 질문\n", + "\n", + "Question: 제미니 상을 탄 프로그램의 제작 시기는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 행인의 플로이드가 코피난다는 말에 경찰관은 뭐라고 말했는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 세종대학교의 기후변화센터는 언제 만들어졌나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 이대우를 중심으로 모인 학생들은 무엇에 항변하기 위해 시위대를 조직했는가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 바이츠만은 어떤 나라를 향해 밸푸어 선언을 했나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 타코벨을 한국에 세 번째로 도입한 회사는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 기무라의 이론을 기반으로 2명의 학자가 새로운 이론을 발표한 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 아만시오가 처음으로 출전한 유럽대항전의 결과는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 다중 계정 사용자의 판별을 불가능하게 하는 것은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 77%|███████▋ | 46/60 [05:13<01:34, 6.73s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 3\n", + "Question: 아즈마의 초기 명칭은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 로타르 마이어가 1853년에 병리학을 공부하던 대학교는 어디였는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 러시아를 견제하기 위해 조선에 군사를 요구한 청나라의 왕은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 인간에게 가장 익숙한 크기의 개념은 무엇인가요?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 니콜라 요셉이 벨기에에 돌아가도록 결정적인 영향을 준 기사를 내보낸 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 발산형 경계와 수렴형경계의 마그마 점성이 다른 이유는?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 조선박물연구회가 공포하고자 한 것은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 태사 백은 환공의 질문에 왜 남쪽이 부적절하다고 답하였는가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 스탈린그라드의 소련군 중 사정이 나았던 부대는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 특정한 글자에 대해서만 모아치기가 가능한 자판은?\n", + "Generated Question Type: 방법 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 78%|███████▊ | 47/60 [05:20<01:27, 6.73s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 4\n", + "API 응답: 1\n", + "API 응답: 3\n", + "API 응답: 5\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 3\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 이론물리학에 비해 수학적인 부분을 더 강조하는 학문은?\n", + "Generated Question Type: 비교 질문\n", + "\n", + "Question: 쇼와 천황이 맥아더 옆에 직립부동자세로 찍힌 사진이 일반 신문에 실린 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 청구취지는 밝히는 방법은?\n", + "Generated Question Type: 방법 질문\n", + "\n", + "Question: 광배는 부처의 육신에서 나오는 어떠한 것을 하나의 형체로 표현한 것인가?\n", + "Generated Question Type: 추론 질문\n", + "\n", + "Question: 쇼 자마가 부모에 대한 반발을 계기로 가지게 된 장래희망은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 남자친구를 잃은 슬픔에 대해 《Moonlight Shadow》에서 말한 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 알레르기를 관리하는 계획에는 어떤 호르몬을 투여하는 것도 포함되는가?\n", + "Generated Question Type: 방법 질문\n", + "\n", + "Question: 역할을 가장 먼저 구체화 시킨 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 윤치호가 '질곡의 인디아' 저자를 만났던 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: <구해줘> 바로 이전에 출간된 책은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 80%|████████ | 48/60 [05:27<01:19, 6.66s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 4\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 2\n", + "Question: 보니파시오가 캔터베리 대주교에게 권고 서신을 보낸 적 있다고 말한 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 오스트레일리아의 새로운 개혁정책은 주위 어느 나라에 영향을 주었는가?\n", + "Generated Question Type: 비교 질문\n", + "\n", + "Question: 가와바타가 술 '고도'를 직접 사와서 시음시킨 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 미국 국민들이 일본 대지진에 대한 관심을 갖도록 만드는 데 도움을 준 미국의 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 신혜왕후가 묻혀있는 지역은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 요안니스 5세의 쿠테타를 지원한 것은 어느 나라인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 대한민국 보물 제 1540호를 보관하는 장소는 어디인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 히틀러의 권한을 합법적으로 확대시켜준 국가 기관은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 연구자들이 설계된 실험실을 이용하는 것은 무엇을 위해서인가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 세리자와 박사가 숨기려고 한 것은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 82%|████████▏ | 49/60 [05:33<01:13, 6.67s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 1642년 초 이후로 누구의 군대가 유일하게 방패막으로 쓰였나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 삼탄당 인산 이성질화효소 결핍증은 주로 어떤 물질의 돌연변이로 일어나나요?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 투자 초기 비용보다 매출액이 적더라도 흑자로 판단할 수 있는 기준은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 첫 해의 기대보다 65% 높은 기수를 받은 노선은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 일부 볼펜에서 잉크가 비교적 빨리 건조되기 위해 사용되는 것은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 2012년 런던 올림픽 결승전에서 리네르에게 패한 사람은 누구인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 에센의 시장에 하이네만이 당선된 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 조선인민공화국에서 최고로 높은 직위에 오른 자는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 조선수군의 길목을 차단하기 위해 일본군이 설치한 왜성이 위치한 장소는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 윤치호는 누구의 집에 숨어있었는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 83%|████████▎ | 50/60 [05:40<01:07, 6.71s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 5\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 오목이 수지에게 청탁한 남편의 일자리 장소는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 화순 유마사 해련탑은 누구의 무덤인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 코페르니쿠스가 겨울 학기에 등록한 대학은 무슨 대학으로 불리기도 하는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 정란이 방벽에 도달하면 방벽과 탑사이에 내리는 것은?\n", + "Generated Question Type: 추론 질문\n", + "\n", + "Question: 리파리 섬을 공격했을 때 아테네의 군사근거지 위치는 어디였나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 알키온의 주교 자리를 빼앗은 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 보닌이 살인 혐의로 체포되어 받은 형벌은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 러시아가 동원령을 내린 것은 어느 나라를 견제하기 위해서인가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 진석중이 잠업에 대한 전문기술을 습득한 기관은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 정중부의 난 이전 병권을 장악한 집단은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 85%|████████▌ | 51/60 [05:47<01:00, 6.70s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "Question: 서머힐 스쿨 조사관들의 주장이 주관적인 듯이 말한 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 설계자들이 원래 스카버러 도심을 만들려고 했던 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 유심 교수가 오랫동안 인터뷰를 해온 자들은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 베이핑-톈진 전투가 시작된 연도는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 2008년 당시 몰디브의 부통령은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 클린턴과 힐러리 여사가 저질렀다는 혐의를 받았던 스캔들은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 연방군의 레이다를 무력화시킨 화학무기는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 양인 전투에서 손견군과 충돌한 부대는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 과거 우리나라의 전국지는 어디서 출간되었나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 여성 작가들이 언제부터 여성 등장인물에 관심을 가지기 시작했나요?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 87%|████████▋ | 52/60 [05:54<00:55, 6.89s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 오늘날 양치식물이 다 자랐을 때 최대 높이는 몇 미터 미만인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 알렉스의 직업은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 스위니 토드의 본명은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 박기출이 후보지명 되면 조한백, 박재우, 장준하 등이 취하겠다고 한 행동은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 미네소타주 경찰이 오마르 히메네스를 체포한 날짜는 언제인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 모토코의 몸 중에 인공적인 기계장치로 되어 있지 않은 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 오에카키라는 이름의 모티브는?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 루트비히 2세의 사망 이후, 동프랑크 왕국의 중북부 지방의 땅을 물려받은 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 수사들이 전쟁의 대가로 지은 건물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 모세상은 누구를 위해 만들어졌었는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 88%|████████▊ | 53/60 [06:01<00:48, 6.87s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 최재수는 2012년에 어디로 이적했는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 핵무기 개발건으로 미국과 갈등을 겪다가 통합군사 조직에서 빠진 나라는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 셀레우쿠스에게 왕좌를 계승받은 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 헤드크랩의 공격을 받은 레이븐홈의 사람들은 어떤 존재로 변하였는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 게요인이 슨푸로 이사간 이유는?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 노동운동 단체가 소멸하기 시작한 연도는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 속리산에서 임경업 장군의 설화가 깃들어있는 곳은 어디인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 할리퀸이 소설 분위기를 미국풍으로 바꿀 무렵 세운 자회사는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 맥국이라는 명칭을 알린 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 쿠틉 앗딘이 이라크에 있는 칼리프 영지를 점거하기 위해 출정을 시작한 지역은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 90%|█████████ | 54/60 [06:08<00:40, 6.83s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 에스토니아는 희망을 가졌는가' 를 발표한 인물이 리투아니와 협력한 떄는?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 오두막의 첫 손님은 어떤 물건을 활용해 자살했는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: <어린이와 가정을 위한 이야기>는 원래 몇 편의 이야기로 구성되었나?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 인민군이 세르비아를 확장하는 쪽으로 돌아서게 만든 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 2008년에 니콜리치와 대선에서 맞붙어 승리한 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: Music Box앨범 이후 다음 앨범의 작업을 시작한 연도는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 서울교대를 상징하는 동물을 정한 연도는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 국내무사가 체포 활동에 참가한 것은 무엇 때문인가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 어떤 부서가 통일전선조직의 활동을 규제하는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 미국에서 나폴리식 요리를 의미하는 요리는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 92%|█████████▏| 55/60 [06:15<00:35, 7.08s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 미국이 한국과 더불어 비전략 핵무기를 공유하는 아시아의 파트너 나라는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 도르발 공항보다 미라벨 공항을 많이 이용할 것이라고 예측했던 기관은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 대성전의 전면 퇴칸을 제외한 면에 만들어진 것은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 임진왜란에서 일본 수군을 격파한 조선의 배는 무엇인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: \"이탈리아의 예술의 궁전\"이라는 별명을 가진 도시는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 삼길암 목조관음보살좌상이 조성된 해는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 원래 요괴를 위해 만들었으나 차후 인간들의 신봉도 받게된 시설은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 중국 국민당정부의 도움으로 1932년 설립된 교육 기관은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 한국이 무시한 일본 측의 주장은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 서인들은 어떤 왕에게 정여립의 탄핵을 주장하는 상소를 올렸는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 93%|█████████▎| 56/60 [06:22<00:28, 7.11s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 3\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 6\n", + "Question: 다키스트 던전을 만든 회사는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 학생들이 일본인 선생들을 몰아내기 위해 동맹휴학 시위를 일으킨 해는 ?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 장면이 가족과 떨어져 거처를 옮긴 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 프리비슬린스키 크라이는 어느 나라에 소속되어 있었는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 경찰은 어떤 기관의 GPS를 이용하여 오원춘을 체포할 수 있었나요?\n", + "Generated Question Type: 방법 질문\n", + "\n", + "Question: 도무라 가즈사쿠가 대표로 있던 단체가 공산당과 결별을 선언했던 시기는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 퍼시벌에게 앙심을 품고 총을 쏜 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 19세 이하 남녀가 한국대표로 참가할 수 있는 대회는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 광운전자공과대학 이전에 사용되던 명칭은 무엇인가요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 하나를 철거하면 열을 건다' 운동에 사용된 플랜카드의 내용은?\n", + "Generated Question Type: 기타 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 95%|█████████▌| 57/60 [06:30<00:21, 7.10s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 찰스 2세가 국내로 돌아오기 전에 있던 국가는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 필리포스 5세와 영토를 공유하기로 합의한 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 사용자가 마비노기에서 고를 수 있는 종족은 총 몇 개인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 클래식 연주시 중해금은 어느 악기 옆에 위치해 있는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: PK, 수탈을 목적으로 하는 플레이어에게 인기가 많은 직업군은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 백병전은 사람의 신체부위 중 어디를 겨냥하는 무술인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 폭스바겐이 곤충명을 이름으로 지은 차량은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 윤치호가 고종 독살설을 믿게된 것은 누구 때문인가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 금동관음보살입상이 처음 발견된곳으로 추정되는곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 헌제는 추격을 당하다 누구에게 도움을 청하였나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 97%|█████████▋| 58/60 [06:37<00:14, 7.25s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 이용문이 육군본부의 장교들과 의견을 나눴던 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 용수로가 운반하는 것은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 사회민주주의와 민주사회주의를 합친 사상을 가진 집단의 우두머리는 누구인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 인간에게 불타는 느낌의 아픔을 주는 것은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 처음에는 후짱을 반대했지만 마지막에 후짱의 도움을 받은 인물은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 듀이는 닉슨을 공천 후보에서 내리는 것이 어떤 결과를 초래할 것이라고 말했는가?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 대신들이 대홍려 풍야왕을 추천한 직위는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 코르비니아노가 비판한 인물은 누구와 혼인하였나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 조청상민수륙무역장정중의 8개조중, 장정의 개정에 대한 조항은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 관음정사 존상은 무엇으로 만들어졌나요?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 98%|█████████▊| 59/60 [06:44<00:07, 7.03s/it]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 1\n", + "API 응답: 2\n", + "API 응답: 2\n", + "API 응답: 1\n", + "API 응답: 1\n", + "Question: 이규완이 강원도에 철도 건설을 제안할 당시 직책은 무엇이었는가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 법맥과 전등을 중시하면 스승없이 깨달음을 얻을 수 없다고 주장한 사람은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 《그리스 비극 시대의 철학》은 누구의 저서인가?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 중국 공산당원과 가족의 미국 입국 금지 방안 검토와 관련된 마이크 폼페이오 장관의 입장을 보도한 언론은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 디즈니랜드에서 개인회원을 뽑기 시작한 년도는?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 타입 2 가이아 메모리을 만든 집단은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 장면이 정치보복에 반대하는 입장에서 처벌을 원치 않은 대상은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 콜드게임 중 어떠한 계기로 인해 잠시 중단된 뒤, 익일에 게임이 진행되는 것은?\n", + "Generated Question Type: 이유/원인 질문\n", + "\n", + "Question: 제2캐나다기갑여단이 상륙한 곳은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n", + "Question: 구립운석을 이루는 물질 중 널리 알려진 것은?\n", + "Generated Question Type: 사실 기반 질문\n", + "\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Processing batches: 100%|██████████| 60/60 [06:50<00:00, 6.85s/it]\n" + ] + }, + { + "data": { + "text/plain": [ + " question id question_type\n", + "0 유령'은 어느 행성에서 지구로 왔는가? mrc-1-000653 사실 기반 질문\n", + "1 용병회사의 경기가 좋아진 것은 무엇이 끝난 이후부터인가? mrc-1-001113 이유/원인 질문\n", + "2 돌푸스에게 불특정 기간동안 하원이 잠시 쉬는 것을 건의 받았던 인물은? mrc-0-002191 사실 기반 질문\n", + "3 마오리언어와 영어, 뉴질랜드 수화를 공식 언어로 사용하는 나라는? mrc-0-003951 사실 기반 질문\n", + "4 디엔비엔푸 전투에서 보응우옌잡이 상대한 국가는? mrc-1-001272 사실 기반 질문" + ], + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
questionidquestion_type
0유령'은 어느 행성에서 지구로 왔는가?mrc-1-000653사실 기반 질문
1용병회사의 경기가 좋아진 것은 무엇이 끝난 이후부터인가?mrc-1-001113이유/원인 질문
2돌푸스에게 불특정 기간동안 하원이 잠시 쉬는 것을 건의 받았던 인물은?mrc-0-002191사실 기반 질문
3마오리언어와 영어, 뉴질랜드 수화를 공식 언어로 사용하는 나라는?mrc-0-003951사실 기반 질문
4디엔비엔푸 전투에서 보응우옌잡이 상대한 국가는?mrc-1-001272사실 기반 질문
\n", + "
" + ] + }, + "metadata": {}, + "output_type": "display_data" + } + ], + "execution_count": 53 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-10T08:17:24.738328Z", + "start_time": "2024-10-10T08:17:24.662519Z" + } + }, + "cell_type": "code", + "source": [ + "# 결과를 새로운 CSV로 저장\n", + "df_train.to_csv(os.path.join(parent_dir, 'data', 'test_dataset_with_question_types.csv'), index=False)" + ], + "id": "d5471e0c3137194e", + "outputs": [], + "execution_count": 54 + }, + { + "metadata": {}, + "cell_type": "code", + "outputs": [], + "execution_count": null, + "source": "", + "id": "667569d36d8bec65" + } + ], + "metadata": { + "kernelspec": { + "display_name": "Python 3", + "language": "python", + "name": "python3" + }, + "language_info": { + "codemirror_mode": { + "name": "ipython", + "version": 2 + }, + "file_extension": ".py", + "mimetype": "text/x-python", + "name": "python", + "nbconvert_exporter": "python", + "pygments_lexer": "ipython2", + "version": "2.7.6" + } + }, + "nbformat": 4, + "nbformat_minor": 5 +} diff --git a/notebooks/retriever_base_dataset.ipynb b/notebooks/retriever_base_dataset.ipynb new file mode 100644 index 0000000..0248aaf --- /dev/null +++ b/notebooks/retriever_base_dataset.ipynb @@ -0,0 +1,1088 @@ +{ + "cells": [ + { + "cell_type": "code", + "execution_count": 36, + "metadata": {}, + "outputs": [], + "source": [ + "from datasets import load_from_disk\n", + "import pandas as pd\n", + "import os\n", + "\n", + "current_dir = os.getcwd()\n", + "parent_dir = os.path.dirname(current_dir)\n", + "\n", + "# Arrow 파일 경로 설정\n", + "train_file_path = os.path.join(parent_dir, \"data\", \"train_dataset\")\n", + "test_file_path = os.path.join(parent_dir, \"data\", \"test_dataset\")\n", + "dataset = load_from_disk(train_file_path)\n", + "# test_dataset = load_from_disk(test_file_path)" + ] + }, + { + "cell_type": "code", + "execution_count": 37, + "metadata": {}, + "outputs": [], + "source": [ + "train_dataset = dataset[\"train\"]\n", + "valid_dataset = dataset[\"validation\"]\n", + "# test_dataset = test_dataset[\"validation\"]\n", + "\n", + "train_df = pd.DataFrame(train_dataset)\n", + "valid_df = pd.DataFrame(valid_dataset)\n", + "# test_df = pd.DataFrame(test_dataset)" + ] + }, + { + "cell_type": "code", + "execution_count": 38, + "metadata": {}, + "outputs": [], + "source": [ + "import re\n", + "import ast\n", + "\n", + "\n", + "def preprocess(text):\n", + " text = re.sub(r\"\\n\", \" \", text)\n", + " text = re.sub(r\"\\\\n\", \" \", text)\n", + " text = re.sub(r\"#\", \" \", text)\n", + " text = re.sub(\n", + " r\"[^A-Za-z0-9가-힣.?!,()~‘’“”\" \":%&《》〈〉''㈜·\\-'+\\s一-龥サマーン]\",\n", + " \"\",\n", + " text,\n", + " ) # サマーン 는 predictions.json에 있었음\n", + " text = re.sub(r\"\\s+\", \" \", text).strip() # 두 개 이상의 연속된 공백을 하나로 치환\n", + " # text = re.sub(r\"[^A-Za-z0-9가-힣.?!,()~‘’“”\"\":%&《》〈〉''㈜·\\-\\'+\\s一-龥]\", \"\", text)\n", + "\n", + " return text" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "# rerank 결과에 타이틀 추가" + ] + }, + { + "cell_type": "code", + "execution_count": 39, + "metadata": {}, + "outputs": [], + "source": [ + "import json\n", + "import pandas as pd\n", + "import os\n", + "\n", + "current_dir = os.getcwd()\n", + "parent_dir = os.path.dirname(current_dir)\n", + "file_path = os.path.join(parent_dir, \"data\", \"wikipedia_documents.json\")\n", + "\n", + "with open(file_path, \"r\", encoding=\"utf-8\") as json_file:\n", + " json_data = json.load(json_file)\n", + "\n", + "df_wiki = pd.read_json(file_path).transpose()" + ] + }, + { + "cell_type": "code", + "execution_count": 41, + "metadata": {}, + "outputs": [], + "source": [ + "df_wiki[\"text\"] = df_wiki[\"text\"].apply(preprocess)" + ] + }, + { + "cell_type": "code", + "execution_count": 43, + "metadata": {}, + "outputs": [], + "source": [ + "# es_path = os.path.join(parent_dir, \"data\", \"es_train\")\n", + "# df_train_reranked = pd.read_csv(os.path.join(es_path, \"not_test_es_40_rerank_5.csv\"))\n", + "\n", + "# df_train_reranked[\"context\"] = \" \".join(\n", + "# [\n", + "# [\n", + "# f\"{df_wiki[df_wiki['text']==c]['title']}: {c}\"\n", + "# for c in row[\"context\"]\n", + "# ]\n", + "# for _, row in df_train_reranked.iterrows()\n", + "# ]\n", + "# )\n", + "# df_train_reranked.to_csv(\"test_es_40_rerank_5_title.csv\", index=False)" + ] + }, + { + "cell_type": "code", + "execution_count": 50, + "metadata": {}, + "outputs": [], + "source": [ + "es_path = os.path.join(parent_dir, \"data\", \"es_train\")\n", + "df_train_reranked = pd.read_csv(os.path.join(es_path, \"not_test_es_40_rerank_5.csv\"))\n", + "\n", + "df_train_reranked[\"context\"] = df_train_reranked[\"context\"].apply(\n", + " lambda x: ast.literal_eval(x)\n", + ")" + ] + }, + { + "cell_type": "code", + "execution_count": null, + "metadata": {}, + "outputs": [], + "source": [ + "def construct_context(row, wiki_df):\n", + " return \" \".join(\n", + " [\n", + " f\"{wiki_df.loc[wiki_df['text'] == c, 'title'].values[0]}: {c}\"\n", + " for c in row\n", + " if not wiki_df.loc[wiki_df[\"text\"] == c, \"title\"].empty\n", + " ]\n", + " )\n", + "\n", + "df_train_reranked[\"context\"] = df_train_reranked[\"context\"].apply(\n", + " construct_context, wiki_df=df_wiki\n", + ")" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "# context에 negative passage 추가된 데이터셋 만들기" + ] + }, + { + "cell_type": "code", + "execution_count": 105, + "metadata": {}, + "outputs": [], + "source": [ + "# 정답 검증 함수\n", + "def verify_answer(row):\n", + " context = row[\"context\"]\n", + " answer_text = row[\"answers\"][\"text\"][0]\n", + " answer_start = row[\"answers\"][\"answer_start\"][0]\n", + "\n", + " # answer_start부터 answer_text 길이만큼의 문장을 추출\n", + " extracted_answer = context[answer_start : answer_start + len(answer_text)]\n", + "\n", + " # 추출한 정답과 answer_text가 동일한지 검증\n", + " return extracted_answer == answer_text\n", + "\n", + "\n", + "# 잘못된 정답을 포함한 행만 모아서 새로운 DataFrame 반환\n", + "def get_incorrect_rows(df):\n", + " # 각 행에 대해 검증 수행하여 False인 행만 필터링\n", + " incorrect_df = df[~df.apply(verify_answer, axis=1)]\n", + " return incorrect_df\n", + "\n", + "# 정답 찾는 함수\n", + "def find_start_position(row):\n", + " context = row[\"context\"]\n", + " answer = row[\"answers\"]\n", + " start_position = context.find(answer[\"text\"][0])\n", + " answer[\"answer_start\"][0] = start_position\n", + " return answer" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "### Validation" + ] + }, + { + "cell_type": "code", + "execution_count": 148, + "metadata": {}, + "outputs": [], + "source": [ + "# val \n", + "es_path = os.path.join(parent_dir, \"data\", \"es_train\")\n", + "df_train_reranked = pd.read_csv(os.path.join(es_path, \"not_train_es_100_rerank_5.csv\"))" + ] + }, + { + "cell_type": "code", + "execution_count": 149, + "metadata": {}, + "outputs": [], + "source": [ + "df_train_reranked[\"context\"] = df_train_reranked[\"context\"].apply(\n", + " lambda x: ast.literal_eval(x)\n", + ")\n", + "df_train_reranked[\"answers\"] = df_train_reranked[\"answers\"].apply(\n", + " lambda x: ast.literal_eval(x)\n", + ")" + ] + }, + { + "cell_type": "code", + "execution_count": 150, + "metadata": {}, + "outputs": [], + "source": [ + "df_train_reranked[\"context\"] = [\n", + " (\n", + " row[\"context\"] + [preprocess(row[\"original_context\"])]\n", + " if preprocess(row[\"original_context\"]) not in row[\"context\"]\n", + " else row[\"context\"]\n", + " )\n", + " for _, row in df_train_reranked.iterrows()\n", + "]" + ] + }, + { + "cell_type": "code", + "execution_count": 151, + "metadata": {}, + "outputs": [], + "source": [ + "df_train_reranked[\"context\"] = df_train_reranked[\"context\"].apply(lambda x: \" \".join(x))\n", + "df_train_reranked[\"answers\"] = df_train_reranked.apply(find_start_position, axis=1)" + ] + }, + { + "cell_type": "code", + "execution_count": 152, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
questionidcontextoriginal_contextanswers
0처음으로 부실 경영인에 대한 보상 선고를 받은 회사는?mrc-0-003264순천여자고등학교 졸업, 1973년 이화여자대학교를 졸업하고 1975년 제17회 사법...순천여자고등학교 졸업, 1973년 이화여자대학교를 졸업하고 1975년 제17회 사법...{'answer_start': [192], 'text': ['한보철강']}
1스카버러 남쪽과 코보콘그 마을의 철도 노선이 처음 연장된 연도는?mrc-0-004762요크 카운티 동쪽에 처음으로 여객 열차 운행이 시작한 시점은 1868년 토론토 & ...요크 카운티 동쪽에 처음으로 여객 열차 운행이 시작한 시점은 1868년 토론토 & ...{'answer_start': [108], 'text': ['1871년']}
2촌락에서 운영 위원 후보자 이름을 쓰기위해 사용된 것은?mrc-1-001810촐라 정부 촐라의 정부 체제는 전제군주제였으며,2001 촐라의 군주는 절대적인 권력...촐라 정부\\n 촐라의 정부 체제는 전제군주제였으며,2001 촐라의 군주는 절대적인 ...{'answer_start': [509], 'text': ['나뭇잎']}
3로타이르가 백조를 구하기 위해 사용한 것은?mrc-1-000219프랑스의 십자군 무훈시는 1099년 예루살렘 왕국의 통치자가 된 고드프루아 드 부용...프랑스의 십자군 무훈시는 1099년 예루살렘 왕국의 통치자가 된 고드프루아 드 부용...{'answer_start': [1100], 'text': ['금대야']}
4의견을 자유롭게 나누는 것은 조직 내 어떤 관계에서 가능한가?mrc-1-000285탈관료제화는 현대사회에서 관료제 성격이 약화되는 현상이다. 현대사회에서 관료제는 약...탈관료제화는 현대사회에서 관료제 성격이 약화되는 현상이다. 현대사회에서 관료제는 약...{'answer_start': [383], 'text': ['수평적 관계']}
\n", + "
" + ], + "text/plain": [ + " question id \\\n", + "0 처음으로 부실 경영인에 대한 보상 선고를 받은 회사는? mrc-0-003264 \n", + "1 스카버러 남쪽과 코보콘그 마을의 철도 노선이 처음 연장된 연도는? mrc-0-004762 \n", + "2 촌락에서 운영 위원 후보자 이름을 쓰기위해 사용된 것은? mrc-1-001810 \n", + "3 로타이르가 백조를 구하기 위해 사용한 것은? mrc-1-000219 \n", + "4 의견을 자유롭게 나누는 것은 조직 내 어떤 관계에서 가능한가? mrc-1-000285 \n", + "\n", + " context \\\n", + "0 순천여자고등학교 졸업, 1973년 이화여자대학교를 졸업하고 1975년 제17회 사법... \n", + "1 요크 카운티 동쪽에 처음으로 여객 열차 운행이 시작한 시점은 1868년 토론토 & ... \n", + "2 촐라 정부 촐라의 정부 체제는 전제군주제였으며,2001 촐라의 군주는 절대적인 권력... \n", + "3 프랑스의 십자군 무훈시는 1099년 예루살렘 왕국의 통치자가 된 고드프루아 드 부용... \n", + "4 탈관료제화는 현대사회에서 관료제 성격이 약화되는 현상이다. 현대사회에서 관료제는 약... \n", + "\n", + " original_context \\\n", + "0 순천여자고등학교 졸업, 1973년 이화여자대학교를 졸업하고 1975년 제17회 사법... \n", + "1 요크 카운티 동쪽에 처음으로 여객 열차 운행이 시작한 시점은 1868년 토론토 & ... \n", + "2 촐라 정부\\n 촐라의 정부 체제는 전제군주제였으며,2001 촐라의 군주는 절대적인 ... \n", + "3 프랑스의 십자군 무훈시는 1099년 예루살렘 왕국의 통치자가 된 고드프루아 드 부용... \n", + "4 탈관료제화는 현대사회에서 관료제 성격이 약화되는 현상이다. 현대사회에서 관료제는 약... \n", + "\n", + " answers \n", + "0 {'answer_start': [192], 'text': ['한보철강']} \n", + "1 {'answer_start': [108], 'text': ['1871년']} \n", + "2 {'answer_start': [509], 'text': ['나뭇잎']} \n", + "3 {'answer_start': [1100], 'text': ['금대야']} \n", + "4 {'answer_start': [383], 'text': ['수평적 관계']} " + ] + }, + "execution_count": 152, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "df_train_reranked.head()" + ] + }, + { + "cell_type": "code", + "execution_count": 130, + "metadata": {}, + "outputs": [], + "source": [ + "def update_answer_start(row):\n", + " answers = row[\"answers\"]\n", + " context = row[\"context\"]\n", + "\n", + " # answer_start가 -1인 경우에만 전처리 수행\n", + " if answers[\"answer_start\"][0] == -1:\n", + " # text 전처리\n", + " original_text = answers[\"text\"][0]\n", + " processed_text = preprocess(original_text)\n", + "\n", + " # 전처리된 텍스트로 시작 위치 다시 찾기\n", + " new_start = context.find(processed_text)\n", + "\n", + " # 새로운 딕셔너리 반환\n", + " return {\"text\": [processed_text], \"answer_start\": [new_start]}\n", + "\n", + " return answers\n", + "\n", + "\n", + "# answer_start가 -1인 행만 업데이트\n", + "mask = df_train_reranked[\"answers\"].apply(lambda x: x[\"answer_start\"][0] == -1)\n", + "df_train_reranked.loc[mask, \"answers\"] = df_train_reranked[mask].apply(\n", + " update_answer_start, axis=1\n", + ")" + ] + }, + { + "cell_type": "code", + "execution_count": 131, + "metadata": {}, + "outputs": [], + "source": [ + "df_train_reranked[\"answers\"] = df_train_reranked.apply(find_start_position, axis=1)" + ] + }, + { + "cell_type": "code", + "execution_count": 132, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
questionidcontextoriginal_contextanswers
\n", + "
" + ], + "text/plain": [ + "Empty DataFrame\n", + "Columns: [question, id, context, original_context, answers]\n", + "Index: []" + ] + }, + "execution_count": 132, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "# answer_start가 [-1]인 행 찾기\n", + "invalid_rows = df_train_reranked[\n", + " df_train_reranked[\"answers\"].apply(lambda x: x[\"answer_start\"][0] == -1)\n", + "]\n", + "invalid_rows" + ] + }, + { + "cell_type": "code", + "execution_count": 154, + "metadata": {}, + "outputs": [], + "source": [ + "df_train_reranked.to_csv(\"n_passage_train_validation_dataset.csv\", index=False)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "### train" + ] + }, + { + "cell_type": "code", + "execution_count": 134, + "metadata": {}, + "outputs": [], + "source": [ + "# train\n", + "es_path = os.path.join(parent_dir, \"data\", \"es_train\")\n", + "df_train_reranked = pd.read_csv(\n", + " os.path.join(es_path, \"train_es_train_100_rerank_5_for_dataset.csv\")\n", + ")" + ] + }, + { + "cell_type": "code", + "execution_count": 135, + "metadata": {}, + "outputs": [], + "source": [ + "df_train_reranked[\"context\"] = [\n", + " (\n", + " row[\"context\"] + preprocess(row[\"original_context\"])\n", + " if preprocess(row[\"original_context\"]) not in row[\"context\"]\n", + " else row[\"context\"]\n", + " )\n", + " for _, row in df_train_reranked.iterrows()\n", + "]" + ] + }, + { + "cell_type": "code", + "execution_count": 136, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
questionidcontextoriginal_contextanswers
0대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은?mrc-1-000067미국의 외교정책의 수립과 이행에 대한 주된 책임을 대통령이 지게 되어 있으나, 의회...미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국...{'answer_start': [235], 'text': ['하원']}
1현대적 인사조직관리의 시발점이 된 책은?mrc-0-004397'근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19...'근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19...{'answer_start': [212], 'text': ['《경영의 실제》']}
2강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가?mrc-1-000362강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전...강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전...{'answer_start': [510], 'text': ['백성']}
311~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요?mrc-0-001510불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든...불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든...{'answer_start': [625], 'text': ['중국']}
4명문이 적힌 유물을 구성하는 그릇의 총 개수는?mrc-0-000823동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기...동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기...{'answer_start': [30], 'text': ['4개']}
\n", + "
" + ], + "text/plain": [ + " question id \\\n", + "0 대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은? mrc-1-000067 \n", + "1 현대적 인사조직관리의 시발점이 된 책은? mrc-0-004397 \n", + "2 강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가? mrc-1-000362 \n", + "3 11~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요? mrc-0-001510 \n", + "4 명문이 적힌 유물을 구성하는 그릇의 총 개수는? mrc-0-000823 \n", + "\n", + " context \\\n", + "0 미국의 외교정책의 수립과 이행에 대한 주된 책임을 대통령이 지게 되어 있으나, 의회... \n", + "1 '근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19... \n", + "2 강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전... \n", + "3 불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든... \n", + "4 동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기... \n", + "\n", + " original_context \\\n", + "0 미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국... \n", + "1 '근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19... \n", + "2 강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전... \n", + "3 불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든... \n", + "4 동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기... \n", + "\n", + " answers \n", + "0 {'answer_start': [235], 'text': ['하원']} \n", + "1 {'answer_start': [212], 'text': ['《경영의 실제》']} \n", + "2 {'answer_start': [510], 'text': ['백성']} \n", + "3 {'answer_start': [625], 'text': ['중국']} \n", + "4 {'answer_start': [30], 'text': ['4개']} " + ] + }, + "execution_count": 136, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "df_train_reranked.head()" + ] + }, + { + "cell_type": "code", + "execution_count": 137, + "metadata": {}, + "outputs": [], + "source": [ + "df_train_reranked[\"answers\"] = df_train_reranked[\"answers\"].apply(\n", + " lambda x: ast.literal_eval(x)\n", + ")" + ] + }, + { + "cell_type": "code", + "execution_count": 138, + "metadata": {}, + "outputs": [], + "source": [ + "df_train_reranked[\"answers\"] = df_train_reranked.apply(find_start_position, axis=1)" + ] + }, + { + "cell_type": "code", + "execution_count": 139, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
questionidcontextoriginal_contextanswers
0대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은?mrc-1-000067미국의 외교정책의 수립과 이행에 대한 주된 책임을 대통령이 지게 되어 있으나, 의회...미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국...{'answer_start': [100], 'text': ['하원']}
1현대적 인사조직관리의 시발점이 된 책은?mrc-0-004397'근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19...'근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19...{'answer_start': [212], 'text': ['《경영의 실제》']}
2강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가?mrc-1-000362강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전...강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전...{'answer_start': [362], 'text': ['백성']}
311~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요?mrc-0-001510불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든...불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든...{'answer_start': [615], 'text': ['중국']}
4명문이 적힌 유물을 구성하는 그릇의 총 개수는?mrc-0-000823동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기...동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기...{'answer_start': [30], 'text': ['4개']}
\n", + "
" + ], + "text/plain": [ + " question id \\\n", + "0 대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은? mrc-1-000067 \n", + "1 현대적 인사조직관리의 시발점이 된 책은? mrc-0-004397 \n", + "2 강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가? mrc-1-000362 \n", + "3 11~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요? mrc-0-001510 \n", + "4 명문이 적힌 유물을 구성하는 그릇의 총 개수는? mrc-0-000823 \n", + "\n", + " context \\\n", + "0 미국의 외교정책의 수립과 이행에 대한 주된 책임을 대통령이 지게 되어 있으나, 의회... \n", + "1 '근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19... \n", + "2 강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전... \n", + "3 불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든... \n", + "4 동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기... \n", + "\n", + " original_context \\\n", + "0 미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국... \n", + "1 '근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19... \n", + "2 강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전... \n", + "3 불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든... \n", + "4 동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기... \n", + "\n", + " answers \n", + "0 {'answer_start': [100], 'text': ['하원']} \n", + "1 {'answer_start': [212], 'text': ['《경영의 실제》']} \n", + "2 {'answer_start': [362], 'text': ['백성']} \n", + "3 {'answer_start': [615], 'text': ['중국']} \n", + "4 {'answer_start': [30], 'text': ['4개']} " + ] + }, + "execution_count": 139, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "df_train_reranked.head()" + ] + }, + { + "cell_type": "code", + "execution_count": 140, + "metadata": {}, + "outputs": [], + "source": [ + "def update_answer_start(row):\n", + " answers = row[\"answers\"]\n", + " context = row[\"context\"]\n", + "\n", + " # answer_start가 -1인 경우에만 전처리 수행\n", + " if answers[\"answer_start\"][0] == -1:\n", + " # text 전처리\n", + " original_text = answers[\"text\"][0]\n", + " processed_text = preprocess(original_text)\n", + "\n", + " # 전처리된 텍스트로 시작 위치 다시 찾기\n", + " new_start = context.find(processed_text)\n", + "\n", + " # 새로운 딕셔너리 반환\n", + " return {\"text\": [processed_text], \"answer_start\": [new_start]}\n", + "\n", + " return answers\n", + "\n", + "\n", + "# answer_start가 -1인 행만 업데이트\n", + "mask = df_train_reranked[\"answers\"].apply(lambda x: x[\"answer_start\"][0] == -1)\n", + "df_train_reranked.loc[mask, \"answers\"] = df_train_reranked[mask].apply(\n", + " update_answer_start, axis=1\n", + ")" + ] + }, + { + "cell_type": "code", + "execution_count": 141, + "metadata": {}, + "outputs": [], + "source": [ + "df_train_reranked[\"answers\"] = df_train_reranked.apply(find_start_position, axis=1)" + ] + }, + { + "cell_type": "code", + "execution_count": 142, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
questionidcontextoriginal_contextanswers
\n", + "
" + ], + "text/plain": [ + "Empty DataFrame\n", + "Columns: [question, id, context, original_context, answers]\n", + "Index: []" + ] + }, + "execution_count": 142, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "# answer_start가 [-1]인 행 찾기\n", + "invalid_rows = df_train_reranked[\n", + " df_train_reranked[\"answers\"].apply(lambda x: x[\"answer_start\"][0] == -1)\n", + "]\n", + "invalid_rows" + ] + }, + { + "cell_type": "code", + "execution_count": 147, + "metadata": {}, + "outputs": [ + { + "data": { + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
questionidcontextoriginal_contextanswers
0대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은?mrc-1-000067미국의 외교정책의 수립과 이행에 대한 주된 책임을 대통령이 지게 되어 있으나, 의회...미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국...{'answer_start': [100], 'text': ['하원']}
1현대적 인사조직관리의 시발점이 된 책은?mrc-0-004397'근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19...'근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19...{'answer_start': [212], 'text': ['《경영의 실제》']}
2강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가?mrc-1-000362강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전...강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전...{'answer_start': [362], 'text': ['백성']}
311~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요?mrc-0-001510불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든...불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든...{'answer_start': [615], 'text': ['중국']}
4명문이 적힌 유물을 구성하는 그릇의 총 개수는?mrc-0-000823동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기...동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기...{'answer_start': [30], 'text': ['4개']}
..................
3947대부분의 이오의 산이 형성되는데 영향을 끼친 것은?mrc-0-005285이오의 산 이오의 산 목록 이오에는 100~150개의 산이 있다. 이들 산의 평균 ...이오의 산\\n이오의 산 목록\\n 이오에는 100~150개의 산이 있다. 이들 산의 ...{'answer_start': [309], 'text': ['지질 구조']}
3948애니는 어디서 태어났는가?mrc-1-000699애니 점프 캐논은 1863년 12월 11일 델라웨어 주 도버에서 태어났다. 그녀는 ...애니의 고군분투 뉴욕 입성기!!\\n\\n인류학자가 꿈인 21살 소녀 '애니(스칼렛 요...{'answer_start': [1098], 'text': ['뉴저지']}
39491854년에 니콜라이의 뒤를 이어 상임 지휘자로서 활동한 인물은?mrc-0-0034291842년에 작곡가이자 지휘자인 오토 니콜라이가 빈 궁정 오페라극장 소속 관현악단을...1842년에 작곡가이자 지휘자인 오토 니콜라이가 빈 궁정 오페라극장 소속 관현악단을...{'answer_start': [252], 'text': ['칼 에케르트']}
3950드래곤의 암수 구분이 있는 신화는?mrc-0-003956원어는 고대 그리스어까지 거슬러 올라간다. 영어 문헌에 이 말이 나타나기 시작한 것...원어는 고대 그리스어까지 거슬러 올라간다. 영어 문헌에 이 말이 나타나기 시작한 것...{'answer_start': [452], 'text': ['슬라브 신화']}
3951올레 폰 보이스트 이후에 시장으로 임명된 사람은 누구인가?mrc-0-0035892008년 2월 28일 실시된 2008년 함부르크 주의회 선거에서 기민련은 과반수 ...2008년 2월 28일 실시된 2008년 함부르크 주의회 선거에서 기민련은 과반수 ...{'answer_start': [186], 'text': ['크리스토포 알하우스']}
\n", + "

3952 rows × 5 columns

\n", + "
" + ], + "text/plain": [ + " question id \\\n", + "0 대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은? mrc-1-000067 \n", + "1 현대적 인사조직관리의 시발점이 된 책은? mrc-0-004397 \n", + "2 강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가? mrc-1-000362 \n", + "3 11~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요? mrc-0-001510 \n", + "4 명문이 적힌 유물을 구성하는 그릇의 총 개수는? mrc-0-000823 \n", + "... ... ... \n", + "3947 대부분의 이오의 산이 형성되는데 영향을 끼친 것은? mrc-0-005285 \n", + "3948 애니는 어디서 태어났는가? mrc-1-000699 \n", + "3949 1854년에 니콜라이의 뒤를 이어 상임 지휘자로서 활동한 인물은? mrc-0-003429 \n", + "3950 드래곤의 암수 구분이 있는 신화는? mrc-0-003956 \n", + "3951 올레 폰 보이스트 이후에 시장으로 임명된 사람은 누구인가? mrc-0-003589 \n", + "\n", + " context \\\n", + "0 미국의 외교정책의 수립과 이행에 대한 주된 책임을 대통령이 지게 되어 있으나, 의회... \n", + "1 '근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19... \n", + "2 강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전... \n", + "3 불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든... \n", + "4 동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기... \n", + "... ... \n", + "3947 이오의 산 이오의 산 목록 이오에는 100~150개의 산이 있다. 이들 산의 평균 ... \n", + "3948 애니 점프 캐논은 1863년 12월 11일 델라웨어 주 도버에서 태어났다. 그녀는 ... \n", + "3949 1842년에 작곡가이자 지휘자인 오토 니콜라이가 빈 궁정 오페라극장 소속 관현악단을... \n", + "3950 원어는 고대 그리스어까지 거슬러 올라간다. 영어 문헌에 이 말이 나타나기 시작한 것... \n", + "3951 2008년 2월 28일 실시된 2008년 함부르크 주의회 선거에서 기민련은 과반수 ... \n", + "\n", + " original_context \\\n", + "0 미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국... \n", + "1 '근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19... \n", + "2 강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전... \n", + "3 불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든... \n", + "4 동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기... \n", + "... ... \n", + "3947 이오의 산\\n이오의 산 목록\\n 이오에는 100~150개의 산이 있다. 이들 산의 ... \n", + "3948 애니의 고군분투 뉴욕 입성기!!\\n\\n인류학자가 꿈인 21살 소녀 '애니(스칼렛 요... \n", + "3949 1842년에 작곡가이자 지휘자인 오토 니콜라이가 빈 궁정 오페라극장 소속 관현악단을... \n", + "3950 원어는 고대 그리스어까지 거슬러 올라간다. 영어 문헌에 이 말이 나타나기 시작한 것... \n", + "3951 2008년 2월 28일 실시된 2008년 함부르크 주의회 선거에서 기민련은 과반수 ... \n", + "\n", + " answers \n", + "0 {'answer_start': [100], 'text': ['하원']} \n", + "1 {'answer_start': [212], 'text': ['《경영의 실제》']} \n", + "2 {'answer_start': [362], 'text': ['백성']} \n", + "3 {'answer_start': [615], 'text': ['중국']} \n", + "4 {'answer_start': [30], 'text': ['4개']} \n", + "... ... \n", + "3947 {'answer_start': [309], 'text': ['지질 구조']} \n", + "3948 {'answer_start': [1098], 'text': ['뉴저지']} \n", + "3949 {'answer_start': [252], 'text': ['칼 에케르트']} \n", + "3950 {'answer_start': [452], 'text': ['슬라브 신화']} \n", + "3951 {'answer_start': [186], 'text': ['크리스토포 알하우스']} \n", + "\n", + "[3952 rows x 5 columns]" + ] + }, + "execution_count": 147, + "metadata": {}, + "output_type": "execute_result" + } + ], + "source": [ + "df_train_reranked" + ] + }, + { + "cell_type": "code", + "execution_count": 143, + "metadata": {}, + "outputs": [], + "source": [ + "df_train_reranked.to_csv(\"n_passage_train_dataset.csv\", index=False)" + ] + } + ], + "metadata": { + "kernelspec": { + "display_name": "MRC", + "language": "python", + "name": "python3" + }, + "language_info": { + "codemirror_mode": { + "name": "ipython", + "version": 3 + }, + "file_extension": ".py", + "mimetype": "text/x-python", + "name": "python", + "nbconvert_exporter": "python", + "pygments_lexer": "ipython3", + "version": "3.10.14" + } + }, + "nbformat": 4, + "nbformat_minor": 2 +} diff --git a/notebooks/retriever_evaluation.ipynb b/notebooks/retriever_evaluation.ipynb new file mode 100644 index 0000000..e7ec1d4 --- /dev/null +++ b/notebooks/retriever_evaluation.ipynb @@ -0,0 +1,881 @@ +{ + "cells": [ + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "# 리트리버 성능평가" + ] + }, + { + "cell_type": "code", + "execution_count": 23, + "metadata": {}, + "outputs": [], + "source": [ + "import pandas as pd\n", + "import os\n", + "from copy import deepcopy\n", + "\n", + "current_dir = os.getcwd()\n", + "parent_dir = os.path.dirname(current_dir)" + ] + }, + { + "cell_type": "code", + "execution_count": 24, + "metadata": {}, + "outputs": [], + "source": [ + "import ast\n", + "import re\n", + "\n", + "def preprocess(text):\n", + " text = re.sub(r\"\\n\", \" \", text)\n", + " text = re.sub(r\"\\\\n\", \" \", text)\n", + " text = re.sub(r\"#\", \" \", text)\n", + " text = re.sub(\n", + " r\"[^A-Za-z0-9가-힣.?!,()~‘’“”\" \":%&《》〈〉''㈜·\\-'+\\s一-龥サマーン]\",\n", + " \"\",\n", + " text,\n", + " ) # サマーン 는 predictions.json에 있었음\n", + " text = re.sub(r\"\\s+\", \" \", text).strip() # 두 개 이상의 연속된 공백을 하나로 치환\n", + " # text = re.sub(r\"[^A-Za-z0-9가-힣.?!,()~‘’“”\"\":%&《》〈〉''㈜·\\-\\'+\\s一-龥]\", \"\", text)\n", + "\n", + " return text\n", + "\n", + "\n", + "def evaluate_retriever(df, topk=100, is_preprocess=False, is_title=False):\n", + " df[\"context\"] = df[\"context\"].apply(\n", + " lambda x: ast.literal_eval(x)\n", + " )\n", + " correct_ids = []\n", + " wrong_ids = []\n", + " for idx,row in df.iterrows():\n", + " org_context = (\n", + " preprocess(row[\"original_context\"])\n", + " if is_preprocess\n", + " else row[\"original_context\"]\n", + " )\n", + " if is_title:\n", + " for passage in row[\"context\"][:topk]:\n", + " if passage.split(\": \")[1] == org_context:\n", + " correct_ids.append(row[\"id\"])\n", + " break\n", + " else:\n", + " wrong_ids.append(row[\"id\"])\n", + " else:\n", + " if org_context in row[\"context\"][:topk]:\n", + " correct_ids.append(row[\"id\"])\n", + " else:\n", + " wrong_ids.append(row[\"id\"])\n", + "\n", + " print(\n", + " f\"전체: {len(df)}, 맞은 개수: {len(correct_ids)}, 틀린 개수: {len(wrong_ids)}, 정답률: {(len(correct_ids)/len(df)):.4%}\"\n", + " )\n", + " return correct_ids, wrong_ids" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## Elasticsearch" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "### Train" + ] + }, + { + "cell_type": "code", + "execution_count": 6, + "metadata": {}, + "outputs": [], + "source": [ + "es_path = os.path.join(parent_dir, \"data\", \"es_train\")\n", + "df_train_es_100 = pd.read_csv(os.path.join(es_path, \"train_es_train_100.csv\"))\n", + "dfs = []\n", + "for i in range(10):\n", + " dfs.append(deepcopy(df_train_es_100))" + ] + }, + { + "cell_type": "code", + "execution_count": 7, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 3952, 맞은 개수: 3411, 틀린 개수: 541, 정답률: 86.3107%\n" + ] + } + ], + "source": [ + "_, _ = evaluate_retriever(deepcopy(df_train_es_100), topk=5, is_preprocess=True)" + ] + }, + { + "cell_type": "code", + "execution_count": 156, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 3952, 맞은 개수: 3543, 틀린 개수: 409, 정답률: 89.6508%\n", + "전체: 3952, 맞은 개수: 3667, 틀린 개수: 285, 정답률: 92.7885%\n", + "전체: 3952, 맞은 개수: 3722, 틀린 개수: 230, 정답률: 94.1802%\n", + "전체: 3952, 맞은 개수: 3741, 틀린 개수: 211, 정답률: 94.6609%\n", + "전체: 3952, 맞은 개수: 3764, 틀린 개수: 188, 정답률: 95.2429%\n", + "전체: 3952, 맞은 개수: 3783, 틀린 개수: 169, 정답률: 95.7237%\n", + "전체: 3952, 맞은 개수: 3793, 틀린 개수: 159, 정답률: 95.9767%\n", + "전체: 3952, 맞은 개수: 3803, 틀린 개수: 149, 정답률: 96.2298%\n", + "전체: 3952, 맞은 개수: 3810, 틀린 개수: 142, 정답률: 96.4069%\n", + "전체: 3952, 맞은 개수: 3817, 틀린 개수: 135, 정답률: 96.5840%\n" + ] + } + ], + "source": [ + "for df, topk in zip(deepcopy(dfs), [k for k in range(10, 110, 10)]):\n", + " _, _ = evaluate_retriever(df, topk=topk, is_preprocess=True)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "### Validation" + ] + }, + { + "cell_type": "code", + "execution_count": 8, + "metadata": {}, + "outputs": [], + "source": [ + "es_path = os.path.join(parent_dir, \"data\", \"es_train\")\n", + "df_val_es_100 = pd.read_csv(os.path.join(es_path, \"train_es_val_100.csv\"))\n", + "dfs = []\n", + "for i in range(10):\n", + " dfs.append(deepcopy(df_val_es_100))" + ] + }, + { + "cell_type": "code", + "execution_count": 9, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 240, 맞은 개수: 209, 틀린 개수: 31, 정답률: 87.0833%\n" + ] + } + ], + "source": [ + "_, _ = evaluate_retriever(deepcopy(df_val_es_100), topk=5, is_preprocess=True)" + ] + }, + { + "cell_type": "code", + "execution_count": 5, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 240, 맞은 개수: 222, 틀린 개수: 18, 정답률: 92.5000%\n", + "전체: 240, 맞은 개수: 227, 틀린 개수: 13, 정답률: 94.5833%\n", + "전체: 240, 맞은 개수: 231, 틀린 개수: 9, 정답률: 96.2500%\n", + "전체: 240, 맞은 개수: 232, 틀린 개수: 8, 정답률: 96.6667%\n", + "전체: 240, 맞은 개수: 232, 틀린 개수: 8, 정답률: 96.6667%\n", + "전체: 240, 맞은 개수: 234, 틀린 개수: 6, 정답률: 97.5000%\n", + "전체: 240, 맞은 개수: 234, 틀린 개수: 6, 정답률: 97.5000%\n", + "전체: 240, 맞은 개수: 234, 틀린 개수: 6, 정답률: 97.5000%\n", + "전체: 240, 맞은 개수: 235, 틀린 개수: 5, 정답률: 97.9167%\n", + "전체: 240, 맞은 개수: 235, 틀린 개수: 5, 정답률: 97.9167%\n" + ] + } + ], + "source": [ + "for df, topk in zip(deepcopy(dfs), [k for k in range(10, 110, 10)]):\n", + " _, _ = evaluate_retriever(df, topk=topk, is_preprocess=True)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "### Train + Validation" + ] + }, + { + "cell_type": "code", + "execution_count": 160, + "metadata": {}, + "outputs": [], + "source": [ + "df_concat = pd.concat([df_train_es_100,df_val_es_100],axis=0)\n", + "dfs = []\n", + "for i in range(10):\n", + " dfs.append(deepcopy(df_concat))" + ] + }, + { + "cell_type": "code", + "execution_count": 161, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 4192, 맞은 개수: 3765, 틀린 개수: 427, 정답률: 89.8139%\n", + "전체: 4192, 맞은 개수: 3894, 틀린 개수: 298, 정답률: 92.8912%\n", + "전체: 4192, 맞은 개수: 3953, 틀린 개수: 239, 정답률: 94.2987%\n", + "전체: 4192, 맞은 개수: 3973, 틀린 개수: 219, 정답률: 94.7758%\n", + "전체: 4192, 맞은 개수: 3996, 틀린 개수: 196, 정답률: 95.3244%\n", + "전체: 4192, 맞은 개수: 4017, 틀린 개수: 175, 정답률: 95.8254%\n", + "전체: 4192, 맞은 개수: 4027, 틀린 개수: 165, 정답률: 96.0639%\n", + "전체: 4192, 맞은 개수: 4037, 틀린 개수: 155, 정답률: 96.3025%\n", + "전체: 4192, 맞은 개수: 4045, 틀린 개수: 147, 정답률: 96.4933%\n", + "전체: 4192, 맞은 개수: 4052, 틀린 개수: 140, 정답률: 96.6603%\n" + ] + } + ], + "source": [ + "for df, topk in zip(deepcopy(dfs), [k for k in range(10, 110, 10)]):\n", + " _, _ = evaluate_retriever(df, topk=topk, is_preprocess=True)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## BM25" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "### Train" + ] + }, + { + "cell_type": "code", + "execution_count": 10, + "metadata": {}, + "outputs": [], + "source": [ + "bm25_path = os.path.join(parent_dir, \"data\", \"bm25_train\")\n", + "\n", + "df_train_bm25_100 = pd.read_csv(os.path.join(bm25_path, \"train_bm25_train_100.csv\"))\n", + "dfs = []\n", + "for i in range(10):\n", + " dfs.append(deepcopy(df_train_bm25_100))" + ] + }, + { + "cell_type": "code", + "execution_count": 7, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 3952, 맞은 개수: 3317, 틀린 개수: 635, 정답률: 83.9322%\n", + "전체: 3952, 맞은 개수: 3448, 틀린 개수: 504, 정답률: 87.2470%\n", + "전체: 3952, 맞은 개수: 3499, 틀린 개수: 453, 정답률: 88.5374%\n", + "전체: 3952, 맞은 개수: 3529, 틀린 개수: 423, 정답률: 89.2966%\n", + "전체: 3952, 맞은 개수: 3557, 틀린 개수: 395, 정답률: 90.0051%\n", + "전체: 3952, 맞은 개수: 3577, 틀린 개수: 375, 정답률: 90.5111%\n", + "전체: 3952, 맞은 개수: 3591, 틀린 개수: 361, 정답률: 90.8654%\n", + "전체: 3952, 맞은 개수: 3599, 틀린 개수: 353, 정답률: 91.0678%\n", + "전체: 3952, 맞은 개수: 3611, 틀린 개수: 341, 정답률: 91.3715%\n", + "전체: 3952, 맞은 개수: 3616, 틀린 개수: 336, 정답률: 91.4980%\n" + ] + } + ], + "source": [ + "for df, topk in zip(deepcopy(dfs), [k for k in range(10, 110, 10)]):\n", + " _, _ = evaluate_retriever(df, topk=topk, is_title=True)" + ] + }, + { + "cell_type": "code", + "execution_count": 3, + "metadata": {}, + "outputs": [], + "source": [ + "bm25_path = os.path.join(parent_dir, \"data\", \"bm25_train\")\n", + "\n", + "df_train_bm25_100 = pd.read_csv(os.path.join(bm25_path, \"train_bm25_train_100_notitle.csv\"))\n", + "dfs = []\n", + "for i in range(10):\n", + " dfs.append(deepcopy(df_train_bm25_100))" + ] + }, + { + "cell_type": "code", + "execution_count": 12, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 3952, 맞은 개수: 3280, 틀린 개수: 672, 정답률: 82.9960%\n" + ] + } + ], + "source": [ + "df_train_bm25_100 = pd.read_csv(os.path.join(bm25_path, \"train_bm25_train_100_notitle.csv\"))\n", + "_, _ = evaluate_retriever(deepcopy(df_train_bm25_100), topk=5)" + ] + }, + { + "cell_type": "code", + "execution_count": 5, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 3952, 맞은 개수: 3454, 틀린 개수: 498, 정답률: 87.3988%\n", + "전체: 3952, 맞은 개수: 3592, 틀린 개수: 360, 정답률: 90.8907%\n", + "전체: 3952, 맞은 개수: 3652, 틀린 개수: 300, 정답률: 92.4089%\n", + "전체: 3952, 맞은 개수: 3681, 틀린 개수: 271, 정답률: 93.1427%\n", + "전체: 3952, 맞은 개수: 3712, 틀린 개수: 240, 정답률: 93.9271%\n", + "전체: 3952, 맞은 개수: 3729, 틀린 개수: 223, 정답률: 94.3573%\n", + "전체: 3952, 맞은 개수: 3746, 틀린 개수: 206, 정답률: 94.7874%\n", + "전체: 3952, 맞은 개수: 3758, 틀린 개수: 194, 정답률: 95.0911%\n", + "전체: 3952, 맞은 개수: 3766, 틀린 개수: 186, 정답률: 95.2935%\n", + "전체: 3952, 맞은 개수: 3773, 틀린 개수: 179, 정답률: 95.4706%\n" + ] + } + ], + "source": [ + "for df, topk in zip(deepcopy(dfs), [k for k in range(10, 110, 10)]):\n", + " _, _ = evaluate_retriever(df, topk=topk, is_title=False)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "### Validation" + ] + }, + { + "cell_type": "code", + "execution_count": 8, + "metadata": {}, + "outputs": [], + "source": [ + "df_val_bm25_100 = pd.read_csv(os.path.join(bm25_path, \"train_bm25_val_100.csv\"))\n", + "dfs = []\n", + "for i in range(10):\n", + " dfs.append(deepcopy(df_val_bm25_100))" + ] + }, + { + "cell_type": "code", + "execution_count": 9, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 240, 맞은 개수: 203, 틀린 개수: 37, 정답률: 84.5833%\n", + "전체: 240, 맞은 개수: 210, 틀린 개수: 30, 정답률: 87.5000%\n", + "전체: 240, 맞은 개수: 215, 틀린 개수: 25, 정답률: 89.5833%\n", + "전체: 240, 맞은 개수: 216, 틀린 개수: 24, 정답률: 90.0000%\n", + "전체: 240, 맞은 개수: 217, 틀린 개수: 23, 정답률: 90.4167%\n", + "전체: 240, 맞은 개수: 217, 틀린 개수: 23, 정답률: 90.4167%\n", + "전체: 240, 맞은 개수: 217, 틀린 개수: 23, 정답률: 90.4167%\n", + "전체: 240, 맞은 개수: 217, 틀린 개수: 23, 정답률: 90.4167%\n", + "전체: 240, 맞은 개수: 218, 틀린 개수: 22, 정답률: 90.8333%\n", + "전체: 240, 맞은 개수: 218, 틀린 개수: 22, 정답률: 90.8333%\n" + ] + } + ], + "source": [ + "for df, topk in zip(deepcopy(dfs), [k for k in range(10, 110, 10)]):\n", + " _, _ = evaluate_retriever(df, topk=topk, is_title=True)" + ] + }, + { + "cell_type": "code", + "execution_count": 14, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 240, 맞은 개수: 216, 틀린 개수: 24, 정답률: 90.0000%\n", + "전체: 240, 맞은 개수: 223, 틀린 개수: 17, 정답률: 92.9167%\n", + "전체: 240, 맞은 개수: 228, 틀린 개수: 12, 정답률: 95.0000%\n", + "전체: 240, 맞은 개수: 228, 틀린 개수: 12, 정답률: 95.0000%\n", + "전체: 240, 맞은 개수: 228, 틀린 개수: 12, 정답률: 95.0000%\n", + "전체: 240, 맞은 개수: 230, 틀린 개수: 10, 정답률: 95.8333%\n", + "전체: 240, 맞은 개수: 230, 틀린 개수: 10, 정답률: 95.8333%\n", + "전체: 240, 맞은 개수: 230, 틀린 개수: 10, 정답률: 95.8333%\n", + "전체: 240, 맞은 개수: 231, 틀린 개수: 9, 정답률: 96.2500%\n", + "전체: 240, 맞은 개수: 232, 틀린 개수: 8, 정답률: 96.6667%\n" + ] + } + ], + "source": [ + "df_val_bm25_100 = pd.read_csv(os.path.join(bm25_path, \"train_bm25_val_100_notitle.csv\"))\n", + "dfs = []\n", + "for i in range(10):\n", + " dfs.append(deepcopy(df_val_bm25_100))\n", + "\n", + "for df, topk in zip(deepcopy(dfs), [k for k in range(10, 110, 10)]):\n", + " _, _ = evaluate_retriever(df, topk=topk, is_title=False)" + ] + }, + { + "cell_type": "code", + "execution_count": 13, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 240, 맞은 개수: 205, 틀린 개수: 35, 정답률: 85.4167%\n" + ] + } + ], + "source": [ + "df_val_bm25_100 = pd.read_csv(os.path.join(bm25_path, \"train_bm25_val_100_notitle.csv\"))\n", + "_, _ = evaluate_retriever(deepcopy(df_val_bm25_100), topk=5)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "### Train + Validatation" + ] + }, + { + "cell_type": "code", + "execution_count": 10, + "metadata": {}, + "outputs": [], + "source": [ + "df_concat = pd.concat([df_train_bm25_100, df_val_bm25_100], axis=0)\n", + "dfs = []\n", + "for i in range(10):\n", + " dfs.append(deepcopy(df_concat))" + ] + }, + { + "cell_type": "code", + "execution_count": 11, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 4192, 맞은 개수: 3520, 틀린 개수: 672, 정답률: 83.9695%\n", + "전체: 4192, 맞은 개수: 3658, 틀린 개수: 534, 정답률: 87.2615%\n", + "전체: 4192, 맞은 개수: 3714, 틀린 개수: 478, 정답률: 88.5973%\n", + "전체: 4192, 맞은 개수: 3745, 틀린 개수: 447, 정답률: 89.3368%\n", + "전체: 4192, 맞은 개수: 3774, 틀린 개수: 418, 정답률: 90.0286%\n", + "전체: 4192, 맞은 개수: 3794, 틀린 개수: 398, 정답률: 90.5057%\n", + "전체: 4192, 맞은 개수: 3808, 틀린 개수: 384, 정답률: 90.8397%\n", + "전체: 4192, 맞은 개수: 3816, 틀린 개수: 376, 정답률: 91.0305%\n", + "전체: 4192, 맞은 개수: 3829, 틀린 개수: 363, 정답률: 91.3406%\n", + "전체: 4192, 맞은 개수: 3834, 틀린 개수: 358, 정답률: 91.4599%\n" + ] + } + ], + "source": [ + "for df, topk in zip(deepcopy(dfs), [k for k in range(10, 110, 10)]):\n", + " _, _ = evaluate_retriever(df, topk=topk, is_title=True)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## Rerank-Elasticsearch" + ] + }, + { + "cell_type": "code", + "execution_count": 16, + "metadata": {}, + "outputs": [], + "source": [ + "es_path = os.path.join(parent_dir, \"data\", \"es_train\")\n", + "\n", + "df_es_20 = pd.read_csv(os.path.join(es_path, \"not_train_es_20_rerank_5.csv\"))\n", + "df_es_30 = pd.read_csv(os.path.join(es_path, \"not_train_es_30_rerank_5.csv\"))\n", + "df_es_40 = pd.read_csv(os.path.join(es_path, \"not_train_es_40_rerank_5.csv\"))\n", + "df_es_50 = pd.read_csv(os.path.join(es_path, \"not_train_es_50_rerank_5.csv\"))\n", + "df_es_60 = pd.read_csv(os.path.join(es_path, \"not_train_es_60_rerank_5.csv\"))\n", + "df_es_70 = pd.read_csv(os.path.join(es_path, \"not_train_es_70_rerank_5.csv\"))\n", + "df_es_80 = pd.read_csv(os.path.join(es_path, \"not_train_es_80_rerank_5.csv\"))\n", + "df_es_90 = pd.read_csv(os.path.join(es_path, \"not_train_es_90_rerank_5.csv\"))\n", + "df_es_100 = pd.read_csv(os.path.join(es_path, \"not_train_es_100_rerank_5.csv\"))\n", + "\n", + "dfs = [\n", + " df_es_20,\n", + " df_es_30,\n", + " df_es_40,\n", + " df_es_50,\n", + " df_es_60,\n", + " df_es_70,\n", + " df_es_80,\n", + " df_es_90,\n", + " df_es_100,\n", + "]" + ] + }, + { + "cell_type": "code", + "execution_count": 128, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 240, 맞은 개수: 220, 틀린 개수: 20, 정답률: 91.6667%\n", + "전체: 240, 맞은 개수: 223, 틀린 개수: 17, 정답률: 92.9167%\n", + "전체: 240, 맞은 개수: 222, 틀린 개수: 18, 정답률: 92.5000%\n", + "전체: 240, 맞은 개수: 222, 틀린 개수: 18, 정답률: 92.5000%\n", + "전체: 240, 맞은 개수: 224, 틀린 개수: 16, 정답률: 93.3333%\n", + "전체: 240, 맞은 개수: 222, 틀린 개수: 18, 정답률: 92.5000%\n", + "전체: 240, 맞은 개수: 222, 틀린 개수: 18, 정답률: 92.5000%\n", + "전체: 240, 맞은 개수: 222, 틀린 개수: 18, 정답률: 92.5000%\n", + "전체: 240, 맞은 개수: 222, 틀린 개수: 18, 정답률: 92.5000%\n" + ] + } + ], + "source": [ + "for df in deepcopy(dfs):\n", + " _, _ = evaluate_retriever(df, topk=5, is_preprocess=False)" + ] + }, + { + "cell_type": "code", + "execution_count": 129, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 240, 맞은 개수: 218, 틀린 개수: 22, 정답률: 90.8333%\n", + "전체: 240, 맞은 개수: 220, 틀린 개수: 20, 정답률: 91.6667%\n", + "전체: 240, 맞은 개수: 221, 틀린 개수: 19, 정답률: 92.0833%\n", + "전체: 240, 맞은 개수: 219, 틀린 개수: 21, 정답률: 91.2500%\n", + "전체: 240, 맞은 개수: 221, 틀린 개수: 19, 정답률: 92.0833%\n", + "전체: 240, 맞은 개수: 220, 틀린 개수: 20, 정답률: 91.6667%\n", + "전체: 240, 맞은 개수: 220, 틀린 개수: 20, 정답률: 91.6667%\n", + "전체: 240, 맞은 개수: 220, 틀린 개수: 20, 정답률: 91.6667%\n", + "전체: 240, 맞은 개수: 220, 틀린 개수: 20, 정답률: 91.6667%\n" + ] + } + ], + "source": [ + "for df in deepcopy(dfs):\n", + " _, _ = evaluate_retriever(df, topk=4, is_preprocess=True)" + ] + }, + { + "cell_type": "code", + "execution_count": 130, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 240, 맞은 개수: 215, 틀린 개수: 25, 정답률: 89.5833%\n", + "전체: 240, 맞은 개수: 215, 틀린 개수: 25, 정답률: 89.5833%\n", + "전체: 240, 맞은 개수: 214, 틀린 개수: 26, 정답률: 89.1667%\n", + "전체: 240, 맞은 개수: 214, 틀린 개수: 26, 정답률: 89.1667%\n", + "전체: 240, 맞은 개수: 216, 틀린 개수: 24, 정답률: 90.0000%\n", + "전체: 240, 맞은 개수: 215, 틀린 개수: 25, 정답률: 89.5833%\n", + "전체: 240, 맞은 개수: 214, 틀린 개수: 26, 정답률: 89.1667%\n", + "전체: 240, 맞은 개수: 215, 틀린 개수: 25, 정답률: 89.5833%\n", + "전체: 240, 맞은 개수: 215, 틀린 개수: 25, 정답률: 89.5833%\n" + ] + } + ], + "source": [ + "for df in deepcopy(dfs):\n", + " _, _ = evaluate_retriever(df, topk=3, is_preprocess=True)" + ] + }, + { + "cell_type": "code", + "execution_count": 131, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 240, 맞은 개수: 206, 틀린 개수: 34, 정답률: 85.8333%\n", + "전체: 240, 맞은 개수: 209, 틀린 개수: 31, 정답률: 87.0833%\n", + "전체: 240, 맞은 개수: 209, 틀린 개수: 31, 정답률: 87.0833%\n", + "전체: 240, 맞은 개수: 208, 틀린 개수: 32, 정답률: 86.6667%\n", + "전체: 240, 맞은 개수: 210, 틀린 개수: 30, 정답률: 87.5000%\n", + "전체: 240, 맞은 개수: 208, 틀린 개수: 32, 정답률: 86.6667%\n", + "전체: 240, 맞은 개수: 208, 틀린 개수: 32, 정답률: 86.6667%\n", + "전체: 240, 맞은 개수: 207, 틀린 개수: 33, 정답률: 86.2500%\n", + "전체: 240, 맞은 개수: 207, 틀린 개수: 33, 정답률: 86.2500%\n" + ] + } + ], + "source": [ + "for df in deepcopy(dfs):\n", + " _, _ = evaluate_retriever(df, topk=2, is_preprocess=True)" + ] + }, + { + "cell_type": "code", + "execution_count": 132, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 240, 맞은 개수: 190, 틀린 개수: 50, 정답률: 79.1667%\n", + "전체: 240, 맞은 개수: 191, 틀린 개수: 49, 정답률: 79.5833%\n", + "전체: 240, 맞은 개수: 191, 틀린 개수: 49, 정답률: 79.5833%\n", + "전체: 240, 맞은 개수: 191, 틀린 개수: 49, 정답률: 79.5833%\n", + "전체: 240, 맞은 개수: 191, 틀린 개수: 49, 정답률: 79.5833%\n", + "전체: 240, 맞은 개수: 191, 틀린 개수: 49, 정답률: 79.5833%\n", + "전체: 240, 맞은 개수: 191, 틀린 개수: 49, 정답률: 79.5833%\n", + "전체: 240, 맞은 개수: 191, 틀린 개수: 49, 정답률: 79.5833%\n", + "전체: 240, 맞은 개수: 191, 틀린 개수: 49, 정답률: 79.5833%\n" + ] + } + ], + "source": [ + "for df in deepcopy(dfs):\n", + " _, _ = evaluate_retriever(df, topk=1, is_preprocess=True)" + ] + }, + { + "cell_type": "markdown", + "metadata": {}, + "source": [ + "## Rerank-BM25" + ] + }, + { + "cell_type": "code", + "execution_count": 27, + "metadata": {}, + "outputs": [], + "source": [ + "bm25_path = os.path.join(parent_dir, \"data\", \"bm25_train\")\n", + "\n", + "df_bm25_20 = pd.read_csv(os.path.join(bm25_path, \"20_bm25_rerank_5.csv\"))\n", + "df_bm25_30 = pd.read_csv(os.path.join(bm25_path, \"30_bm25_rerank_5.csv\"))\n", + "df_bm25_40 = pd.read_csv(os.path.join(bm25_path, \"40_bm25_rerank_5.csv\"))\n", + "df_bm25_50 = pd.read_csv(os.path.join(bm25_path, \"50_bm25_rerank_5.csv\"))\n", + "df_bm25_60 = pd.read_csv(os.path.join(bm25_path, \"60_bm25_rerank_5.csv\"))\n", + "df_bm25_70 = pd.read_csv(os.path.join(bm25_path, \"70_bm25_rerank_5.csv\"))\n", + "df_bm25_80 = pd.read_csv(os.path.join(bm25_path, \"80_bm25_rerank_5.csv\"))\n", + "df_bm25_90 = pd.read_csv(os.path.join(bm25_path, \"90_bm25_rerank_5.csv\"))\n", + "df_bm25_100 = pd.read_csv(os.path.join(bm25_path, \"100_bm25_rerank_5.csv\"))\n", + "\n", + "dfs = [\n", + " df_bm25_20,\n", + " df_bm25_30,\n", + " df_bm25_40,\n", + " df_bm25_50,\n", + " df_bm25_60,\n", + " df_bm25_70,\n", + " df_bm25_80,\n", + " df_bm25_90,\n", + " df_bm25_100,\n", + "]" + ] + }, + { + "cell_type": "code", + "execution_count": 28, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 240, 맞은 개수: 216, 틀린 개수: 24, 정답률: 90.0000%\n", + "전체: 240, 맞은 개수: 217, 틀린 개수: 23, 정답률: 90.4167%\n", + "전체: 240, 맞은 개수: 217, 틀린 개수: 23, 정답률: 90.4167%\n", + "전체: 240, 맞은 개수: 217, 틀린 개수: 23, 정답률: 90.4167%\n", + "전체: 240, 맞은 개수: 219, 틀린 개수: 21, 정답률: 91.2500%\n", + "전체: 240, 맞은 개수: 219, 틀린 개수: 21, 정답률: 91.2500%\n", + "전체: 240, 맞은 개수: 219, 틀린 개수: 21, 정답률: 91.2500%\n", + "전체: 240, 맞은 개수: 219, 틀린 개수: 21, 정답률: 91.2500%\n", + "전체: 240, 맞은 개수: 220, 틀린 개수: 20, 정답률: 91.6667%\n" + ] + } + ], + "source": [ + "for df in deepcopy(dfs):\n", + " _, _ = evaluate_retriever(df)" + ] + }, + { + "cell_type": "code", + "execution_count": 30, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 240, 맞은 개수: 214, 틀린 개수: 26, 정답률: 89.1667%\n", + "전체: 240, 맞은 개수: 216, 틀린 개수: 24, 정답률: 90.0000%\n", + "전체: 240, 맞은 개수: 216, 틀린 개수: 24, 정답률: 90.0000%\n", + "전체: 240, 맞은 개수: 216, 틀린 개수: 24, 정답률: 90.0000%\n", + "전체: 240, 맞은 개수: 218, 틀린 개수: 22, 정답률: 90.8333%\n", + "전체: 240, 맞은 개수: 218, 틀린 개수: 22, 정답률: 90.8333%\n", + "전체: 240, 맞은 개수: 217, 틀린 개수: 23, 정답률: 90.4167%\n", + "전체: 240, 맞은 개수: 217, 틀린 개수: 23, 정답률: 90.4167%\n", + "전체: 240, 맞은 개수: 217, 틀린 개수: 23, 정답률: 90.4167%\n" + ] + } + ], + "source": [ + "for df in deepcopy(dfs):\n", + " _, _ = evaluate_retriever(df, topk=4)" + ] + }, + { + "cell_type": "code", + "execution_count": 31, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 240, 맞은 개수: 212, 틀린 개수: 28, 정답률: 88.3333%\n", + "전체: 240, 맞은 개수: 215, 틀린 개수: 25, 정답률: 89.5833%\n", + "전체: 240, 맞은 개수: 215, 틀린 개수: 25, 정답률: 89.5833%\n", + "전체: 240, 맞은 개수: 215, 틀린 개수: 25, 정답률: 89.5833%\n", + "전체: 240, 맞은 개수: 215, 틀린 개수: 25, 정답률: 89.5833%\n", + "전체: 240, 맞은 개수: 214, 틀린 개수: 26, 정답률: 89.1667%\n", + "전체: 240, 맞은 개수: 214, 틀린 개수: 26, 정답률: 89.1667%\n", + "전체: 240, 맞은 개수: 215, 틀린 개수: 25, 정답률: 89.5833%\n", + "전체: 240, 맞은 개수: 216, 틀린 개수: 24, 정답률: 90.0000%\n" + ] + } + ], + "source": [ + "for df in deepcopy(dfs):\n", + " _, _ = evaluate_retriever(df, topk=3)" + ] + }, + { + "cell_type": "code", + "execution_count": 32, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 240, 맞은 개수: 206, 틀린 개수: 34, 정답률: 85.8333%\n", + "전체: 240, 맞은 개수: 207, 틀린 개수: 33, 정답률: 86.2500%\n", + "전체: 240, 맞은 개수: 206, 틀린 개수: 34, 정답률: 85.8333%\n", + "전체: 240, 맞은 개수: 205, 틀린 개수: 35, 정답률: 85.4167%\n", + "전체: 240, 맞은 개수: 207, 틀린 개수: 33, 정답률: 86.2500%\n", + "전체: 240, 맞은 개수: 207, 틀린 개수: 33, 정답률: 86.2500%\n", + "전체: 240, 맞은 개수: 207, 틀린 개수: 33, 정답률: 86.2500%\n", + "전체: 240, 맞은 개수: 208, 틀린 개수: 32, 정답률: 86.6667%\n", + "전체: 240, 맞은 개수: 208, 틀린 개수: 32, 정답률: 86.6667%\n" + ] + } + ], + "source": [ + "for df in deepcopy(dfs):\n", + " _, _ = evaluate_retriever(df, topk=2)" + ] + }, + { + "cell_type": "code", + "execution_count": 33, + "metadata": {}, + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "전체: 240, 맞은 개수: 181, 틀린 개수: 59, 정답률: 75.4167%\n", + "전체: 240, 맞은 개수: 185, 틀린 개수: 55, 정답률: 77.0833%\n", + "전체: 240, 맞은 개수: 183, 틀린 개수: 57, 정답률: 76.2500%\n", + "전체: 240, 맞은 개수: 183, 틀린 개수: 57, 정답률: 76.2500%\n", + "전체: 240, 맞은 개수: 184, 틀린 개수: 56, 정답률: 76.6667%\n", + "전체: 240, 맞은 개수: 184, 틀린 개수: 56, 정답률: 76.6667%\n", + "전체: 240, 맞은 개수: 184, 틀린 개수: 56, 정답률: 76.6667%\n", + "전체: 240, 맞은 개수: 184, 틀린 개수: 56, 정답률: 76.6667%\n", + "전체: 240, 맞은 개수: 184, 틀린 개수: 56, 정답률: 76.6667%\n" + ] + } + ], + "source": [ + "for df in deepcopy(dfs):\n", + " _, _ = evaluate_retriever(df, topk=1)" + ] + }, + { + "cell_type": "code", + "execution_count": null, + "metadata": {}, + "outputs": [], + "source": [] + } + ], + "metadata": { + "kernelspec": { + "display_name": "MRC", + "language": "python", + "name": "python3" + }, + "language_info": { + "codemirror_mode": { + "name": "ipython", + "version": 3 + }, + "file_extension": ".py", + "mimetype": "text/x-python", + "name": "python", + "nbconvert_exporter": "python", + "pygments_lexer": "ipython3", + "version": "3.10.14" + } + }, + "nbformat": 4, + "nbformat_minor": 2 +} diff --git a/notebooks/shuffle_data.ipynb b/notebooks/shuffle_data.ipynb new file mode 100644 index 0000000..45bb316 --- /dev/null +++ b/notebooks/shuffle_data.ipynb @@ -0,0 +1,119 @@ +{ + "cells": [ + { + "cell_type": "code", + "id": "initial_id", + "metadata": { + "collapsed": true, + "ExecuteTime": { + "end_time": "2024-10-17T06:26:46.383252Z", + "start_time": "2024-10-17T06:26:46.097189Z" + } + }, + "source": [ + "import os\n", + "import pandas as pd\n", + "from datasets import Dataset, DatasetDict, load_from_disk\n", + "\n", + "# 데이터 경로 설정\n", + "current_dir = os.getcwd()\n", + "parent_dir = os.path.dirname(current_dir)\n", + "augmented_data_path = os.path.join(parent_dir, 'data', 'augmented_dataset2')\n", + "\n", + "# 데이터를 다시 불러오기\n", + "dataset = load_from_disk(augmented_data_path)\n", + "\n", + "# DataFrame으로 변환\n", + "train_df = pd.DataFrame(dataset[\"train\"])\n", + "valid_df = pd.DataFrame(dataset[\"validation\"])\n", + "\n", + "# Train과 Validation을 합침\n", + "combined_df = pd.concat([train_df, valid_df], ignore_index=True)\n", + "\n", + "# 데이터 셔플\n", + "shuffled_df = combined_df.sample(frac=1, random_state=42).reset_index(drop=True)\n", + "\n", + "# 원하는 비율 설정 (예시: 80% Train, 20% Validation)\n", + "train_ratio = 0.9\n", + "train_size = int(len(shuffled_df) * train_ratio)\n", + "\n", + "# Train과 Validation 나누기\n", + "new_train_df = shuffled_df[:train_size]\n", + "new_valid_df = shuffled_df[train_size:]\n", + "\n", + "# Dataset으로 변환\n", + "new_train_dataset = Dataset.from_pandas(new_train_df)\n", + "new_valid_dataset = Dataset.from_pandas(new_valid_df)\n", + "\n", + "# DatasetDict로 결합\n", + "new_dataset_dict = DatasetDict({\n", + " \"train\": new_train_dataset,\n", + " \"validation\": new_valid_dataset,\n", + "})\n", + "\n", + "# 다시 Arrow 파일로 저장\n", + "output_dir = os.path.join(parent_dir, 'data', 'shuffled_dataset')\n", + "new_dataset_dict.save_to_disk(output_dir)\n", + "\n", + "# 결과 확인\n", + "print(f\"New augmented dataset saved to {output_dir}\")\n", + "print(f\"Train size: {len(new_train_df)}, Validation size: {len(new_valid_df)}\")\n" + ], + "outputs": [ + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Saving the dataset (1/1 shards): 100%|██████████| 5547/5547 [00:00<00:00, 789715.36 examples/s]\n", + "Saving the dataset (1/1 shards): 100%|██████████| 617/617 [00:00<00:00, 205029.76 examples/s]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "New augmented dataset saved to D:\\boost-camp\\07주_MRC\\pj\\level2-mrc-nlp-04\\data\\shuffled_dataset\n", + "Train size: 5547, Validation size: 617\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "\n" + ] + } + ], + "execution_count": 3 + }, + { + "metadata": {}, + "cell_type": "code", + "outputs": [], + "execution_count": null, + "source": "", + "id": "3b1103fec637e31" + } + ], + "metadata": { + "kernelspec": { + "display_name": "Python 3", + "language": "python", + "name": "python3" + }, + "language_info": { + "codemirror_mode": { + "name": "ipython", + "version": 2 + }, + "file_extension": ".py", + "mimetype": "text/x-python", + "name": "python", + "nbconvert_exporter": "python", + "pygments_lexer": "ipython2", + "version": "2.7.6" + } + }, + "nbformat": 4, + "nbformat_minor": 5 +} diff --git a/notebooks/synonym_questions_augmentation_GPT.ipynb b/notebooks/synonym_questions_augmentation_GPT.ipynb new file mode 100644 index 0000000..68f0c1b --- /dev/null +++ b/notebooks/synonym_questions_augmentation_GPT.ipynb @@ -0,0 +1,4665 @@ +{ + "cells": [ + { + "cell_type": "code", + "id": "initial_id", + "metadata": { + "collapsed": true, + "ExecuteTime": { + "end_time": "2024-10-21T00:24:03.833303Z", + "start_time": "2024-10-21T00:23:55.999498Z" + } + }, + "source": [ + "import json\n", + "import random\n", + "import re\n", + "import pandas as pd\n", + "from datasets import Dataset, DatasetDict, load_from_disk\n", + "import os\n", + "current_dir = os.getcwd()\n", + "parent_dir = os.path.dirname(current_dir)\n", + "\n", + "# Arrow 파일 경로 설정\n", + "train_file_path = os.path.join(parent_dir, 'data', 'train_dataset')\n", + "test_file_path = os.path.join(parent_dir, 'data', 'test_dataset')\n", + "dataset = load_from_disk(train_file_path)\n", + "test_dataset=load_from_disk(test_file_path)\n", + "\n", + "wiki_path = os.path.join(parent_dir, 'data', \"wikipedia_documents.json\")\n", + "\n", + "with open(wiki_path, \"r\", encoding=\"utf-8\") as json_file:\n", + " json_data = json.load(json_file)\n", + "\n", + "\n", + "df_wiki=pd.read_json(wiki_path).transpose()" + ], + "outputs": [], + "execution_count": 2 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-21T00:24:05.245774Z", + "start_time": "2024-10-21T00:24:05.057407Z" + } + }, + "cell_type": "code", + "source": [ + "train_dataset = dataset[\"train\"]\n", + "valid_dataset = dataset[\"validation\"]\n", + "test_dataset=test_dataset\n", + "\n", + "train_df=pd.DataFrame(train_dataset)\n", + "valid_df=pd.DataFrame(valid_dataset)\n", + "test_df=pd.DataFrame(test_dataset)\n", + "\n", + "print(f\"Train length : {len(train_df)}\")\n", + "print(f\"Valid length : {len(valid_df)}\")\n", + "print(f\"Test length : {len(test_df)}\")\n", + "print(f\"df_wiki length : {len(df_wiki)}\")" + ], + "id": "3a7c6414870a97eb", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Train length : 3952\n", + "Valid length : 240\n", + "Test length : 600\n", + "df_wiki length : 60613\n" + ] + } + ], + "execution_count": 3 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-21T00:33:32.766414Z", + "start_time": "2024-10-21T00:33:32.755329Z" + } + }, + "cell_type": "code", + "source": "train_df.head()", + "id": "4f2774b80044f50a", + "outputs": [ + { + "data": { + "text/plain": [ + " title context \\\n", + "0 미국 상원 미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국... \n", + "1 인사조직관리 '근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19... \n", + "2 강희제 강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전... \n", + "3 금동삼존불감 불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든... \n", + "4 계사명 사리구 동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기... \n", + "\n", + " question id \\\n", + "0 대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은? mrc-1-000067 \n", + "1 현대적 인사조직관리의 시발점이 된 책은? mrc-0-004397 \n", + "2 강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가? mrc-1-000362 \n", + "3 11~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요? mrc-0-001510 \n", + "4 명문이 적힌 유물을 구성하는 그릇의 총 개수는? mrc-0-000823 \n", + "\n", + " answers document_id \\\n", + "0 {'answer_start': [235], 'text': ['하원']} 18293 \n", + "1 {'answer_start': [212], 'text': ['《경영의 실제》']} 51638 \n", + "2 {'answer_start': [510], 'text': ['백성']} 5028 \n", + "3 {'answer_start': [625], 'text': ['중국']} 34146 \n", + "4 {'answer_start': [30], 'text': ['4개']} 47334 \n", + "\n", + " __index_level_0__ \n", + "0 42 \n", + "1 2873 \n", + "2 230 \n", + "3 992 \n", + "4 548 " + ], + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionidanswersdocument_id__index_level_0__
0미국 상원미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국...대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은?mrc-1-000067{'answer_start': [235], 'text': ['하원']}1829342
1인사조직관리'근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19...현대적 인사조직관리의 시발점이 된 책은?mrc-0-004397{'answer_start': [212], 'text': ['《경영의 실제》']}516382873
2강희제강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전...강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가?mrc-1-000362{'answer_start': [510], 'text': ['백성']}5028230
3금동삼존불감불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든...11~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요?mrc-0-001510{'answer_start': [625], 'text': ['중국']}34146992
4계사명 사리구동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기...명문이 적힌 유물을 구성하는 그릇의 총 개수는?mrc-0-000823{'answer_start': [30], 'text': ['4개']}47334548
\n", + "
" + ] + }, + "execution_count": 6, + "metadata": {}, + "output_type": "execute_result" + } + ], + "execution_count": 6 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-21T00:59:45.916077Z", + "start_time": "2024-10-21T00:59:45.906355Z" + } + }, + "cell_type": "code", + "source": [ + "def generate_synonyms(question):\n", + " \"\"\"\n", + " 질문을 받아서 동의어로 변형된 여러 질문을 생성하는 함수\n", + " \"\"\"\n", + " \n", + " client = OpenAI(\n", + " # This is the default and can be omitted\n", + " api_key=os.environ.get(\"OPENAI_API_KEY\"),\n", + ")\n", + " \n", + " # 동의어 변형을 위한 간단한 예시 (직접 구축하거나, 동의어 사전 또는 paraphrasing 모델 사용 가능)\n", + " synonyms = [question]\n", + " try:\n", + " # GPT 또는 다른 언어 모델을 사용한 동의어 질문 생성\n", + " prompt = f\"mrc 질문을 증강하는거야. 다음 질문에 대해 동의어로 바꾼 질문을 하나만 생성하고 질문만 출력해줘: '{question}'\"\n", + " completion = client.chat.completions.create(\n", + " model=\"gpt-3.5-turbo\", # 사용할 모델\n", + " messages=[{\"role\": \"system\", \"content\": \"You are a helpful assistant.\"},\n", + " {\"role\": \"user\", \"content\": prompt}],\n", + " max_tokens=100,\n", + " temperature=0.5,\n", + " )\n", + " # 응답 처리 부분: 생성된 질문 추출\n", + " response_text = completion.choices[0].message.content.strip()\n", + " return response_text\n", + "\n", + " except Exception as e:\n", + " print(f\"Error generating synonyms: {e}\")\n", + " return None" + ], + "id": "63fa15dbc8599f91", + "outputs": [], + "execution_count": 27 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-21T00:59:46.212179Z", + "start_time": "2024-10-21T00:59:46.197128Z" + } + }, + "cell_type": "code", + "source": "", + "id": "bf2463b78b9ae434", + "outputs": [], + "execution_count": null + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-21T02:17:54.424808Z", + "start_time": "2024-10-21T01:02:33.103902Z" + } + }, + "cell_type": "code", + "source": [ + "import pandas as pd\n", + "import os\n", + "import random\n", + "from openai import OpenAI\n", + "\n", + "# 파일 경로 설정\n", + "csv_file_path = \"mrc_augmented_questions_data.csv\"\n", + "\n", + "# 빈 리스트 생성: 저장할 데이터를 담기 위한 리스트\n", + "data = []\n", + "\n", + "# 학습 데이터에서 질문 생성 및 동의어 질문 추가\n", + "total_questions = len(train_df) # 전체 데이터 수 계산\n", + "\n", + "for index, row in train_df.iterrows():\n", + " \n", + " # 기존 질문 추출\n", + " question = row['question']\n", + " \n", + " if question:\n", + "\n", + " # 기존 질문을 데이터에 추가\n", + " data.append({\n", + " \"title\": row['title'],\n", + " \"context\": row['context'],\n", + " \"document_id\": row['document_id'],\n", + " \"question\": question,\n", + " \"id\": row[\"id\"],\n", + " \"answers\": row[\"answers\"],\n", + " \"augmented_question\": False\n", + " })\n", + " \n", + " # 동의어로 변형된 질문 생성\n", + " augmented_question = generate_synonyms(question)\n", + " \n", + " # 현재 몇 번째 항목을 처리 중인지 출력\n", + " print(f\"Processing question {index + 1}/{total_questions} : {question}_____________{augmented_question}\")\n", + " \n", + " # 동의어 질문을 데이터에 추가\n", + " data.append({\n", + " \"title\": row['title'],\n", + " \"context\": row['context'],\n", + " \"document_id\": row['document_id'],\n", + " \"question\": augmented_question,\n", + " \"id\": row[\"id\"],\n", + " \"answers\": row[\"answers\"],\n", + " \"augmented_question\": True\n", + " })\n", + "\n", + "# 새로운 데이터를 데이터프레임으로 변환\n", + "df_new = pd.DataFrame(data)\n", + "\n", + "# 데이터프레임을 CSV 파일로 저장 (덮어쓰기)\n", + "df_new.to_csv(csv_file_path, index=False)\n", + "\n", + "# 데이터프레임 출력\n", + "print(df_new)\n" + ], + "id": "6d687d56fbfda883", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Processing question 1/3952 : 대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은?_____________미국의 행정부 견제권을 갖는 국가 기관은 무엇입니까?\n", + "Processing question 2/3952 : 현대적 인사조직관리의 시발점이 된 책은?_____________'현대적 인사관리의 원조서는 무엇인가요?'\n", + "Processing question 3/3952 : 강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가?_____________강희제가 1717년에 작성한 글은 누구를 위해 쓰여졌습니까?\n", + "Processing question 4/3952 : 11~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요?_____________11~12세기에 제작된 본존불은 주로 어떤 국가의 특징이 전파되었나요?\n", + "Processing question 5/3952 : 명문이 적힌 유물을 구성하는 그릇의 총 개수는?_____________유물에 새겨진 문구를 이루는 그릇의 전체 수는 몇 개인가요?\n", + "Processing question 6/3952 : 카드모스의 부하들이 간 곳에는 무엇이 있었는가?_____________카드모스의 부하들이 방문한 장소에는 어떤 것이 있었습니까?\n", + "Processing question 7/3952 : 관우를 불태워 죽이려한 사람 누구인가?_____________누가 관우를 불태워 죽이려 했습니까?\n", + "Processing question 8/3952 : 참호 속에 무기와 장비를 버리고 도주한 집단은?_____________어떤 집단이 무기와 장비를 버리고 도망쳤습니까?\n", + "Processing question 9/3952 : 제2차 세계 대전에 참전하여 사망한 자식은?_____________누가 제2차 세계 대전에 참전하여 사망했습니까?\n", + "Processing question 10/3952 : 고려 공민왕이 처가 식구들과 아내와 함께 피신처로 삼은 마을은?_____________\"공민왕이 가족들과 함께 피신한 마을은 어디였나요?\"\n", + "Processing question 11/3952 : 정여창은 어떻게 죽었나?_____________정여창의 사망에 대한 다른 표현으로 바꾼 질문: '정여창의 사망 원인은 무엇이었나요?'\n", + "Processing question 12/3952 : 아멜리아는 빅토르의 직업을 무엇으로 착각하나요?_____________빅토르의 직업을 잘못 이해한 것은 아멜리아인가요?\n", + "Processing question 13/3952 : 우핑가스 왕조의 이름은 어디서 유래하였나?_____________우핑가스 왕조의 이름은 어떻게 유래했나요?\n", + "Processing question 14/3952 : 장면이 한국으로 돌아온 년도는?_____________한국으로 돌아온 연도는 언제인가요?\n", + "Processing question 15/3952 : 유대교의 지나친 차별을 타파하려한 사람은?_____________누가 유대교의 차별을 없애기 위해 노력했나요?\n", + "Processing question 16/3952 : 권번에서 요릿집에 제공한 기생 명부의 이름은?_____________'권번에서 요릿집에 전달한 기생 명단의 이름은 무엇인가요?'\n", + "Processing question 17/3952 : 영국군 약 42만명의 사상자가 발생한 전투가 시작된 연도는?_____________영국군 약 42만명의 사상자가 발생한 전투가 시작된 연도는 언제인가요?\n", + "Processing question 18/3952 : 웨이크필드가 15번째 시즌에 활약한 팀의 이름은?_____________웨이크필드가 15번째 계절에 활동한 팀의 명칭은 무엇입니까?\n", + "Processing question 19/3952 : 김상옥이 종로경찰서에 폭탄을 던진 직후 피신한 곳은?_____________김상옥이 폭탄을 던진 후 피신한 장소는 어디였습니까?\n", + "Processing question 20/3952 : 윤치호가 극찬했던 조선시대의 인물은 누구인가요?_____________조선시대에서 칭찬을 받았던 인물은 누구인가요?\n", + "Processing question 21/3952 : 항우가 진나라를 멸하면서 조왕 헐은 어디로 이동했는가?_____________조왕이 진나라를 멸하면서 항우가 헐은 곳으로 어디로 이동했습니까?\n", + "Processing question 22/3952 : 30일에 한달 연장 근무를 신청하는 병사가 상금으로 받게 되는 금액은?_____________'한 달 연장 근무를 신청하는 군인이 상금으로 받는 금액은 얼마인가요?'\n", + "Processing question 23/3952 : 슈만이 미군에게 포로로 잡혔던 년도는?_____________슈만이 미군에게 포로로 잡힌 해는 언제였나요?\n", + "Processing question 24/3952 : 김건의 할아버지가 세운 학교는?_____________김건의 할아버지가 설립한 학교는 무엇입니까?\n", + "Processing question 25/3952 : 뇌에 탈피 신호를 보내는 부위는?_____________어두운 곳에서 시각을 개선하는데 사용되는 눈의 부위는 어디에 있습니까?\n", + "Processing question 26/3952 : 툴민은 ≪코스모폴리스≫에서 근대과학과 무엇에 대해 비평하나요?_____________툴민은 '코스모폴리스'에서 근대과학과 어떤 주제에 대해 비평하나요?\n", + "Processing question 27/3952 : 아테네와 파트라간의 거리는?_____________'아테네와 파트라 사이의 거리는 얼마인가요?'\n", + "Processing question 28/3952 : 페리데코가 궁전으로 주문한 서재는 무엇으로 널리 알려져 있었나요?_____________페리데코가 궁전으로 주문한 서재는 무엇으로 유명했나요?\n", + "Processing question 29/3952 : 카르텔 내부의 세력 다툼이 일어나기 전 카르텔의 리더는 누구였나?_____________카르텔 내부의 세력 충돌이 발생하기 전에 카르텔의 지도자는 누구였습니까?\n", + "Processing question 30/3952 : 개건 현대화의 계기가 된 승리자동차련합기업소의 생산 설비는?_____________승리자동차련합기업소의 생산 설비는 무엇입니까?\n", + "Processing question 31/3952 : 잘록한 허리가 두드러지게 옷을 입는 방법은?_____________어떻게 슬림한 허리를 강조하는 옷을 입는 방법이 있나요?\n", + "Processing question 32/3952 : 도연주와 백승희는 무슨 사이로 알려졌나?_____________도연주와 백승희는 어떤 관계로 알려졌나요?\n", + "Processing question 33/3952 : 러시아가 ISIL과 타 반정부 단체와 전투를 벌인 년도는?_____________러시아가 ISIL과 다른 반정부 단체와 전투를 벌인 연도는 언제였습니까?\n", + "Processing question 34/3952 : 비트겐슈타인은 누구와 친구가 되었는가?_____________빅터 스투르트는 누구와 친구가 되었습니까?\n", + "Processing question 35/3952 : 뷰포트는 대개 무슨 모양인가?_____________뷰포트는 일반적으로 어떤 형태를 하고 있나요?\n", + "Processing question 36/3952 : 브루노 라이헨바흐의 직업은?_____________브루노 라이헨바흐가 무슨 일을 했나요?\n", + "Processing question 37/3952 : 차바하르항은 어떤 나라 덕분에 미국의 제재를 받지 않게 되었나?_____________차바하르항이 미국의 제재를 피하기 위해 누구의 지원을 받았습니까?\n", + "Processing question 38/3952 : 항공기에 기름을 바르는 것은 누구의 일인가?_____________'항공기에 연료를 보충하는 것은 누가 하는 일인가?'\n", + "Processing question 39/3952 : 완장에 있는 별모양과 비슷한 모양의 빛을 뿜는 것은 누구의 손인가?_____________'완장에 새겨진 별 모양과 유사한 형태의 빛을 내는 것은 누구의 손에서 나오는가?'\n", + "Processing question 40/3952 : 어린아이임에도 불구하고 도스필라스의 왕이 된 사람은?_____________누가 어린아이임에도 불구하고 도스필라스의 왕이 되었습니까?\n", + "Processing question 41/3952 : KANU의 의장이었던 사람이 케냐 대통령이 된 날짜는?_____________KANU의 의장이었던 사람이 케냐 대통령으로 선출된 날짜는 언제였나요?\n", + "Processing question 42/3952 : 전기화학적 기울기가 ATP와 무엇을 만들어낼 수 있는가?_____________ATP와 무엇을 생성할 수 있는 전기화학적 기울기는 무엇인가요?\n", + "Processing question 43/3952 : 고든 프리맨이 레이븐홈을 떠날 수 있도록 도와준 사람은?_____________'고든 프리맨을 레이븐홈을 떠날 수 있도록 도와준 사람은 누구인가요?'\n", + "Processing question 44/3952 : 사후에 영장을 청구할 수 있는 예외조항이 존재하는 법 조항은?_____________영장을 청구할 수 있는 예외조항이 있는 법 조항은 무엇인가요?\n", + "Processing question 45/3952 : 이범래는 일본에서 언제까지 도피 생활을 했나요?_____________이범래는 언제까지 일본에서 은신생활을 했나요?\n", + "Processing question 46/3952 : 매사추세츠는 어느 지역의 사람들에게 공격을 받아 수많은 사람들이 죽었나?_____________매사추세츠는 어떤 지역의 주민들에 의해 공격을 받았고 많은 사람들이 사망했나요?\n", + "Processing question 47/3952 : 초고층 주거에서 차량과 사람의 활동 범위 중복을 최소화하는 장치는?_____________초고층 주거에서 차량과 사람의 활동 범위 중복을 최소화하는 장치는 무엇인가요?\n", + "Processing question 48/3952 : 풍수지리사상의 관점에서 보면 선몽대는 어떤 유형에 속하나요?_____________'풍수학적 시각에서 볼 때, 선몽대는 어떤 분류에 속하나요?'\n", + "Processing question 49/3952 : 농지법을 개혁할 당시 카이사르의 직위는?_____________카이사르가 농지법 개혁 당시 지키던 직위는 무엇이었습니까?\n", + "Processing question 50/3952 : 조에나 머레이 스미스가 여성주의를 비판한 것은 언제인가?_____________언제 조에나 머레이 스미스가 여성주의를 비판했나요?\n", + "Processing question 51/3952 : BBC의 파란 경찰 박스 디자인 상표권에 대한 법적 논란이 종료된 해는?_____________BBC의 파란 경찰 박스 디자인 상표권에 대한 법적 논란이 해결된 연도는 언제인가요?\n", + "Processing question 52/3952 : 도비가 아메리칸 리그에 데뷔할 수 있게 그를 발탁한 인물은?_____________도비가 아메리칸 리그에 데뷔할 수 있게 그를 발탁한 사람은 누구인가요?\n", + "Processing question 53/3952 : 이명한의 부탁을 외면한 인물의 지위는?_____________이명한의 부탁을 무시한 인물의 위치는 무엇입니까?\n", + "Processing question 54/3952 : 홀뮴이 평소와 다르게 강자성을 가지게 되는 온도는?_____________홀뮴이 강자성을 잃는 온도는 얼마인가요?\n", + "Processing question 55/3952 : 베커먼이 훔치려고 계획한 금괴는 어디에서 왔나요?_____________베커먼이 훔치려고 계획한 금괴는 어느 곳에서 왔습니까?\n", + "Processing question 56/3952 : 경기를 홍보하기 위해 언급된 사람은?_____________'경기를 홍보하기 위해 언급된 인물은 누구인가요?'\n", + "Processing question 57/3952 : 트윈타워에서의 살인사건 현장에 있던 증거품은 무엇인가?_____________트윈타워에서 벌어진 살인사건 현장에서 발견된 증거품은 무엇이었습니까?\n", + "Processing question 58/3952 : 작중 샤를 지 브리타니아가 비판한 사상은?_____________샤를 지 브리타니아가 비판한 사상은 무엇인가?\n", + "Processing question 59/3952 : 많은 갈등을 불러온 툴민의 책은?_____________툴민의 저서로 인한 많은 갈등을 일으킨 책은 무엇입니까?\n", + "Processing question 60/3952 : 군인의 관례을 가장 잘 들어내는 문화는?_____________어떤 문화가 군인의 전통을 가장 잘 유지하고 있나요?\n", + "Processing question 61/3952 : 고급 외무 관리에 관한 권리와 미국 정부의 조약 비준권을 가진 기관은?_____________어떤 기관은 고급 외무 관리에 대한 권리와 미국 정부의 조약 비준권을 가지고 있나요?\n", + "Processing question 62/3952 : 신 중심에서 인간 중심 사회로의 변화가 시작된 시기는?_____________언제 신 중심에서 인간 중심 사회로의 변화가 시작되었나요?\n", + "Processing question 63/3952 : 각절마다 미롱통 소리가 나오는 노래는?_____________어떤 노래는 각 구절마다 '미롱통' 소리가 들리나요?\n", + "Processing question 64/3952 : 차으르가 경계한 세력은?_____________차으르가 경계한 세력은 무엇인가요?\n", + "Processing question 65/3952 : 영국의 <원론> 번역본은 어떤 언어로 되어 있었는가?_____________'영국의 <원저> 번역본은 어떤 언어로 되어 있었나요?'\n", + "Processing question 66/3952 : 대만에서 단일 태풍 강우량 신기록을 남긴 지역은?_____________대만에서 태풍으로 인해 최대 강우량을 기록한 지역은 어디인가요?\n", + "Processing question 67/3952 : 쾌속 《미에》 호는 어느 방향으로 직결 운행하는 열차인가요?_____________쾌속 엑스프레스는 어느 방향으로 직행하는 열차입니까?\n", + "Processing question 68/3952 : 호프만 폭동이 수습된 해는?_____________호프만 폭동이 해결된 해는 언제인가요?\n", + "Processing question 69/3952 : 을미사변 직후에 이범래는 무엇에 임명되었나요?_____________이범래가 무엇에 임명되었습니까?\n", + "Processing question 70/3952 : 28인의 볼셰비키가 땅에 관련된 문제를 처리하고 싶었던 지역은?_____________28명의 볼셰비키가 땅과 관련된 문제를 해결하고자 했던 지역은 어디였습니까?\n", + "Processing question 71/3952 : 중세 초기의 스웨덴에서 역할을 제대로 수행하지 못한 것은?_____________중세 초기의 스웨덴에서 역할을 제대로 수행하지 못한 것은 무엇입니까?\n", + "Processing question 72/3952 : 러시아를 근대화하려는 노력을 통해 근대 열강의 하나로 자리잡게 한 왕은?_____________어떤 왕이 러시아를 근대화하려는 노력을 통해 근대 열강의 하나로 자리잡게 했나요?\n", + "Processing question 73/3952 : 나오코는 미아코토와 소개팅을 한 후 누구와 집에 돌아갔는가?_____________나오코는 미아코토와 소개팅을 한 후 누구와 집으로 돌아갔습니까?\n", + "Processing question 74/3952 : 경찰관이 딱지를 떼지 않은 것은 무엇을 위해서인가?_____________경찰관이 딱지를 붙이지 않은 이유는 무엇인가요?\n", + "Processing question 75/3952 : 농도산수가 일정하기 위한 전제조건은?_____________농도산수가 안정하게 유지되기 위한 필수 조건은 무엇입니까?\n", + "Processing question 76/3952 : 둠 3과 기존의 둠 게임에서 매번 지옥에 가는 인물은?_____________'둠 3과 이전 둠 게임에서 항상 지옥으로 가는 캐릭터는 누구인가요?'\n", + "Processing question 77/3952 : 에릭 레이먼드의 자유 소프트웨어 철학을 대변하는 글은?_____________에릭 레이먄드의 자유 소프트웨어 철학을 대변하는 글은 무엇인가요?\n", + "Processing question 78/3952 : 클라리넷 외에 유니즌의 형태로 연주되는 악기의 이름은?_____________어떤 악기가 클라리넷처럼 유니즌 형태로 연주되는지 알고 계세요?\n", + "Processing question 79/3952 : 핀 막 쿠월이 복수하고자 하는 아버지의 적은?_____________핀 막 쿠월이 복수하고자 하는 아버지의 적은 누구인가요?\n", + "Processing question 80/3952 : 기원전 324년에 드리페티스의 결혼 상대는 누구의 동료였나요?_____________드리페티스의 결혼 상대는 누구와 결혼했습니까?\n", + "Processing question 81/3952 : 이광은 감독이 LG트윈스를 매직리그 1위에 올린 해는?_____________이광은 감독이 LG트윈스를 매직리그 1위에 올린 연도는 언제인가요?\n", + "Processing question 82/3952 : 조지가 보트를 대여할 때 사용했던 이름은?_____________'조지가 보트를 빌릴 때 사용한 이름은 무엇이었나요?'\n", + "Processing question 83/3952 : 독일의 바르바로사 작전은 어느 국가를 대상으로 한 것이었나?_____________바르바로사 작전은 어떤 국가를 대상으로 했나요?\n", + "Processing question 84/3952 : 오토망게어족을 가장 많이 사용하는 곳은 어디인가?_____________어느 곳에서 오토망게어족을 가장 빈번하게 사용하나요?\n", + "Processing question 85/3952 : 가수 이난영의 노래 중 기념비까지 세워진 것은?_____________이난영의 노래 중에 기념비까지 세워진 것은 무엇인가요?\n", + "Processing question 86/3952 : 에케르트가 시행착오를 겪었던 국가는?_____________에케르트가 실험을 통해 배웠던 나라는 어디였나요?\n", + "Processing question 87/3952 : 우메노의 사인은?_____________'우메노의 신호는 무엇입니까?'\n", + "Processing question 88/3952 : 비석에 새겨진 문자를 돌궐 문자라고 한 사람은 누구인가?_____________누가 비석에 새겨진 문자를 돌궐 문자라고 했습니까?\n", + "Processing question 89/3952 : 일반 사람들이 합법적으로 문신을 하려면 누구를 찾아가야 하나?_____________문신을 합법적으로 받으려면 누구에게 방문해야 하나?\n", + "Processing question 90/3952 : 영국이 인도의 반영 운동을 무마시키고자 시행한 정책은?_____________영국이 인도의 반영 운동을 억누르기 위해 시행한 정책은 무엇입니까?\n", + "Processing question 91/3952 : 이명박 대통령이 직접 찾은 학교는?_____________이명박 대통령이 직접 찾은 대학은 어디인가요?\n", + "Processing question 92/3952 : 알랭 푸르니에의 매부는?_____________알랭 푸르니에의 매부는 무엇인가요?\n", + "Processing question 93/3952 : 도카이도 신칸센이 지나가며 시나가와 역까지 가는 교통수단은?_____________도카이도 신칸센이 통과하는 동안 시나가와 역까지 이동할 때 사용할 교통수단은 무엇입니까?\n", + "Processing question 94/3952 : 《우리들의》에서 다루고 있는 가정은 어느 나라 사람들인가?_____________'《우리들의》에서 다루고 있는 집단은 어느 국가 사람들인가?'\n", + "Processing question 95/3952 : 선언형 프로그램과 대비되는 프로그램은?_____________선언형 프로그램과 대비되는 프로그램은 무엇인가요?\n", + "Processing question 96/3952 : 한 마을 안에서 팀을 가를 경우에 사용하는 물건은?_____________한 마을 안에서 팀을 가를 경우에 사용하는 물건은 무엇인가요?\n", + "Processing question 97/3952 : 소나타의 시초가 된 연습곡을 만든 사람은?_____________소나타의 시초가 된 연습곡을 만든 사람은 누구인가요?\n", + "Processing question 98/3952 : 김대중을 구하기 위해 캐스퍼 와인버거 미 국방부 장관과 그레그 전 대사를 한국에 파견한 인물은?_____________'김대중을 찾기 위해 캐스퍼 와인버거 미 국방부 장관과 그레그 전 대사를 한국에 파견한 인물은 누구인가요?'\n", + "Processing question 99/3952 : 정해진 기간동안 목표 금액에 도달하지 못할 경우 돈을 받지 못하는 사람은?_____________목표 금액에 도달하지 못할 경우 돈을 받지 못하는 사람은 누구인가요?\n", + "Processing question 100/3952 : 소프트 머신의 이전 명칭은?_____________소프트 머신의 이전 명칭은 무엇입니까?\n", + "Processing question 101/3952 : 여운홍이 도움을 청한 사람은?_____________누가 여운홍에게 도움을 요청했나요?\n", + "Processing question 102/3952 : 이사벨이 나라를 대신 통치할 수 있는 권위를 준 인물의 이름은?_____________이사벨이 나라를 대신 통치할 수 있는 권위를 준 인물의 이름은 무엇인가요?\n", + "Processing question 103/3952 : 이익은 그대로 챙기면서 소비자에게 부담을 주는 방식을 시도해 코즈마케팅에 실패한 기업은?_____________어떤 기업이 이익을 유지하면서 소비자에게 부담을 주는 방식을 시도해 코즈마케팅에 실패했나요?\n", + "Processing question 104/3952 : 개막전에서 3안타 2실점을 기록해서 패한 선수는?_____________개막전에서 3안타 2실점을 기록해서 패한 선수는 누구인가요?\n", + "Processing question 105/3952 : 트윈 엘리베이터가 승강기 간의 충돌사고를 방지하기 위해 도입한 기술은 무엇인가?_____________트윈 엘리베이터가 승강기 간의 충돌사고를 방지하기 위해 도입한 기술은 무엇입니까?\n", + "Processing question 106/3952 : 자기감시성향이 높은 사람들은 무엇과 관계있는 어휘를 접했을 때 긍정적인 개인행동을 보인다고 밝혀졌나요?_____________자기감시성향이 높은 사람들은 어떤 어휘를 접했을 때 긍정적인 개인행동을 보인다고 밝혀졌나요?\n", + "Processing question 107/3952 : 치과 시술 중 혈관 속으로 들어올 수 있는 것은?_____________치과 시술 중 혈관 속으로 들어갈 수 있는 것은 무엇인가요?\n", + "Processing question 108/3952 : 존과 약혼한 여자의 이름은 무엇인가?_____________약혼한 여자의 이름은 무엇인가?\n", + "Processing question 109/3952 : 세종대 국제학부의 사업을 대학 특성화 사업으로 채택한 부처는 어디인가?_____________세종대 국제학부가 대학 특성화 사업으로 선정된 부처는 어디인가요?\n", + "Processing question 110/3952 : 맥스가 본사로 복귀하기 위해 활용한 인물은?_____________맥스가 사무실로 돌아가기 위해 활용한 인물은 누구인가요?\n", + "Processing question 111/3952 : 클린턴의 두 번째 임기는 어떤 스캔들로 인해 내리막을 걷게 되었나?_____________클린턴의 두 번째 임기는 어떤 사건으로 인해 위태로워졌나요?\n", + "Processing question 112/3952 : 어디에서 심학규의 눈이 떠졌는가?_____________심학규가 어디에서 깨어났나요?\n", + "Processing question 113/3952 : 프레시오지테는 누구에게 다양한 방면으로 영향을 주었는가?_____________프레시오지테가 누구에게 다양한 측면에서 영향을 미쳤습니까?\n", + "Processing question 114/3952 : 이스트미들랜즈 지국이 새롭게 갈라져 나간 해는?_____________이스트미들랜즈 지국이 새로운 분리를 시작한 연도는 언제인가요?\n", + "Processing question 115/3952 : 신비적 체험에 대해 '삶의 원천에서 깨끗하고 맑은 물을 마신 것 같다' 고 표현한 사람은?_____________누가 신비적 체험을 '삶의 근원에서 맑고 깨끗한 물을 마신 것 같다'고 표현했습니까?\n", + "Processing question 116/3952 : 베네딕토 16세가 영국 방문 이후 향한 곳은?_____________베네딕토 16세가 영국 방문 이후 향한 곳은 어디인가요?\n", + "Processing question 117/3952 : 메가비조스가 도시를 빼앗고, 나중에 생길 반란을 피하기 위해 부순 것은?_____________메가비조스가 도시를 차지하고, 나중에 일어날 반란을 막기 위해 파괴한 것은 무엇입니까?\n", + "Processing question 118/3952 : 인재에게 도전적인 일을 시키는 것은 가인지경영이 무엇에 중점을 두기 때문인가?_____________가인지경영이 인재에게 도전적인 일을 시키는 이유는 무엇인가요?\n", + "Processing question 119/3952 : 요자파트가 카를 프리드리히 가우스를 만나게 된 장소는 어디인가?_____________카를 프리드리히 가우스가 요자파트를 만나게 된 장소는 어디였나요?\n", + "Processing question 120/3952 : 무쇠시티 체육관 관장은?_____________무쇠시티 체육관의 책임자는 누구입니까?\n", + "Processing question 121/3952 : 왕게민이 중일전쟁을 시작하기 전에 설립한 것은?_____________왕게민이 중일전쟁을 시작하기 전에 만든 것은 무엇인가요?\n", + "Processing question 122/3952 : 루도비코가 비앙카와 결혼시킨 인물에게서 얻은 것은?_____________루도비코가 비앙카와 결혼시킨 인물에게서 얻은 것은 무엇인가요?\n", + "Processing question 123/3952 : 매년 해수온이 올라가는 현상으로 인해, 자리돔의 서식지가 어디까지 확장되었는가?_____________해수 온도 상승으로 인해 자리돔의 서식지가 어디까지 확대되었습니까?\n", + "Processing question 124/3952 : 알바니아계 이탈리아 교회가 소속된 교구는?_____________알바니아계 이탈리아 교회가 소속된 교구는 무엇인가요?\n", + "Processing question 125/3952 : 내전으로 인해 어마어마한 부채를 떠안고 있는 인물은?_____________어떤 사람이 막대한 빚을 갖고 있는 이유는 무엇인가요?\n", + "Processing question 126/3952 : 나치 독일이 지식인이나 귀족 등 65000여 명의 폴란드인을 잡아들이기 위해 준비한 것은?_____________나치 독일이 지식인이나 귀족 등 65000여 명의 폴란드인을 잡아들이기 위해 준비한 것은 무엇인가요?\n", + "Processing question 127/3952 : 확증 편향의 정의를 확립하게 된 연구는 언제 시작되었나요?_____________확증 편향에 대한 연구가 시작된 시기는 언제인가요?\n", + "Processing question 128/3952 : 치킨 누들 한 캔을 생산하기 위해 참여하는 회사의 수는?_____________'치킨 누들 한 캔을 만들기 위해 참여하는 기업의 수는 몇 개인가요?'\n", + "Processing question 129/3952 : 시네마토그래프 유료 상영회가 개최된 날은?_____________시네마토그래프 유료 상영회가 열린 날짜는 언제인가요?\n", + "Processing question 130/3952 : 몽케 칸 다음으로 즉위한 인물은?_____________두 번째로 칸이 된 인물은 누구인가요?\n", + "Processing question 131/3952 : 스태튼아일랜드의 영업은 언제 종료되었는가?_____________스태튼아일랜드의 운영은 언제 끝났습니까?\n", + "Processing question 132/3952 : 연병환이 영국인 친구의 소개를 통해 구한 중국의 직장은 어디인가?_____________연병환이 영국인 친구가 소개한 중국의 직장은 어디에 있습니까?\n", + "Processing question 133/3952 : 플레이어가 용언 사용 훈련을 받은 장소는 어디인가?_____________플레이어가 동사 사용 훈련을 받은 장소는 어디인가요?\n", + "Processing question 134/3952 : 인간의 의식 중, 사이코사이버네틱스를 통해 통제할 수 있는 것은?_____________'인간의 의식 중, 사이코사이버네틱스를 통해 조절할 수 있는 것은 무엇인가?'\n", + "Processing question 135/3952 : 싱가포르 내 최초 감염자의 나이는?_____________싱가포르 최초 확진자는 몇 살이었나요?\n", + "Processing question 136/3952 : 마라도나는 벌칙 구역에서 누구와 대치했는가?_____________마라도나는 벌칙 구역에서 누구와 맞서 싸웠나요?\n", + "Processing question 137/3952 : 프로이트의 정신 체계에서 현실적인 정신체계와 본능적 충동의 체계를 제외한 것의 명칭은?_____________프로이트의 정신 체계에서 현실적인 정신체계와 본능적 충동의 체계를 제외한 것은 무엇인가요?\n", + "Processing question 138/3952 : 옻칠의 가장 중요한 요소는 무엇인가?_____________옻칠의 주된 성분은 무엇입니까?\n", + "Processing question 139/3952 : 가리발디의 원정으로 마리아 테레사는 어디를 떠나 해외로 도피했나요?_____________가리발디의 원정으로 마리아 테레사가 해외로 도피한 곳은 어디였나요?\n", + "Processing question 140/3952 : 카보베르데의 저기압 순환의 원인이 된 것은?_____________카보베르데의 저기압 순환의 원인은 무엇입니까?\n", + "Processing question 141/3952 : 파이어폭스 이전 가장 잘나가던 웹 브라우저는?_____________어떤 웹 브라우저가 파이어폭스 이전에 가장 인기 있던 것이었습니까?\n", + "Processing question 142/3952 : 선장의 일지를 확인하는 기관은?_____________선장의 로그를 확인하는 기관은 무엇입니까?\n", + "Processing question 143/3952 : 작곡가인 루이스 슈포어의 또 다른 직업은 무엇인가?_____________루이스 슈포어가 수행하는 다른 직업은 무엇입니까?\n", + "Processing question 144/3952 : 남녀가 키스를 나눈 마을 이름은?_____________두 사람이 입을 맞출 때 사용되는 마을 이름은 무엇인가요?\n", + "Processing question 145/3952 : 일본의 원정 중 가장 최근의 원정은 언제 실행되었는가?_____________가장 최근의 일본의 해외 파병은 언제 이루어졌습니까?\n", + "Processing question 146/3952 : 토니왕의 조카에게 총을 쏜 자는?_____________토니왕의 조카를 살해한 범인은 누구인가요?\n", + "Processing question 147/3952 : 1955년부터 1973년까지 일본의 연평균 경제 성장률은?_____________일본의 1955년부터 1973년까지의 연평균 경제 성장률은 얼마였나요?\n", + "Processing question 148/3952 : 아물라드의 아들이 밤베르크의 주교로 서임된 해는?_____________아물라드의 자식이 밤베르크의 주교로 임명된 해는 언제였습니까?\n", + "Processing question 149/3952 : 2014년 돈노드가 스퀘어 에닉스와 함께 작업한 이유는 무엇을 위해서인가?_____________돈노드가 2014년에 스퀘어 에닉스와 협력한 목적은 무엇이었습니까?\n", + "Processing question 150/3952 : 에르망가르드가 유부녀가 된 연도는?_____________에르망가르드가 결혼한 해는 언제인가요?\n", + "Processing question 151/3952 : 쌍곡 기하학 모형이 처음 등장한 책은?_____________쌍곡 기하학 모형이 처음 소개된 책은 무엇인가요?\n", + "Processing question 152/3952 : 마쓰카타 마사요시의 재정정책으로 가장 많은 타격을 입은 산업분야는?_____________마쓰카타 마사요시의 경제정책으로 가장 크게 영향을 받은 산업 분야는 무엇인가요?\n", + "Processing question 153/3952 : 철수가 피하려고 하지만 사실 친구로 생각하는 사람은?_____________누구가 철수가 피하려고 하지만 실제로는 친구로 생각하는 사람인가요?\n", + "Processing question 154/3952 : KT가 '쇼옴니아' 명칭을 사용하지 못하는 계기가 된 핸드폰은 어느 회사 제품인가?_____________어떤 회사의 제품인가 KT가 '쇼옴니아'라는 명칭을 사용하지 못하게 된 핸드폰?\n", + "Processing question 155/3952 : 《논형》에 나오는 비판주의가 인정하지 않는 것은?_____________《논형》에서 비판주의가 인정하지 않는 것은 무엇입니까?\n", + "Processing question 156/3952 : 갈릴레오를 현대 과학의 아버지라 칭한 사람은?_____________갈릴레오를 현대 과학의 아버지로 인정한 사람은 누구인가요?\n", + "Processing question 157/3952 : 스웨덴과 함께 겨울 전쟁이 끝나길 바란 국가는?_____________어떤 국가가 스웨덴과 함께 겨울 전쟁이 종결되길 희망했습니까?\n", + "Processing question 158/3952 : 카를 체르니가 공연한 쾰른토나토아 극장은 어느 도시에 있는가?_____________카를 체르니가 공연한 쾰른토나토아 극장이 위치한 도시는 어디인가요?\n", + "Processing question 159/3952 : 수령자가 매매계약을 파기하기 위해서 지불해야하는 것은?_____________매매계약을 파기하기 위해 지불해야 하는 것은 무엇인가요?\n", + "Processing question 160/3952 : 김용준이 도쿄 미술학교 재학 당시 만난 전통적 모더니즘 계열 화가는 누구인가?_____________도쿄 미술학교에 다닐 당시 김용준이 만난 전통적 모더니즘 계열 화가는 누구인가요?\n", + "Processing question 161/3952 : 코페르니쿠스가 교회법 박사 학위를 받은 날은?_____________코페르니쿠스가 교회법 박사 학위를 받은 날은 언제였습니까?\n", + "Processing question 162/3952 : 고등 의사소통 체계를 사용할 수 있는 인류의 종은?_____________어떤 종은 고급 의사소통 체계를 사용할 수 있나요?\n", + "Processing question 163/3952 : 마차시 성당을 모스크로 리모델링한 나라는?_____________마차시 성당을 모스크로 변신시킨 국가는 어디인가요?\n", + "Processing question 164/3952 : 브리에르에게 광서군 잔당을 축출할 것을 명령받은 사람은?_____________브리에르에게 광서군 잔당을 제거하라는 명령을 받은 사람은 누구인가요?\n", + "Processing question 165/3952 : 스빈후부드가 대통령 선거에서 승리한 연도는?_____________스빈후부드가 대통령 선거에서 이겼던 해는 어느 해인가요?\n", + "Processing question 166/3952 : 카이가 22살에 한 일은?_____________'22살 때 카이가 한 행동은 무엇이었나요?'\n", + "Processing question 167/3952 : 접어서 가지고 다닐 수 있는 풍금이 제작된 해는?_____________풍금을 접어서 가지고 다닐 수 있는 악기가 제작된 해는 언제인가요?\n", + "Processing question 168/3952 : 푸르바더는 언제 세상 밖으로 나왔는가?_____________푸르바더가 언제 세계 밖으로 탈출했습니까?\n", + "Processing question 169/3952 : 햇빛으로 인해 생기는 물체의 그늘로 시간을 측정하는 기구는 무엇인가?_____________'태양 시계'로 알려진 장치는 무엇인가요?\n", + "Processing question 170/3952 : 조선인민공화국의 전신은?_____________북한의 전신은 무엇입니까?\n", + "Processing question 171/3952 : 진대감의 부인중, 임신했다고 거짓말을 한 부인은 몇 번째 부인인가?_____________몇 번째 부인이 임신했다고 거짓말을 한가요?\n", + "Processing question 172/3952 : 윤치호가 중앙 정계에서 다시 활동하기 전에 일어난 전투는?_____________윤치호가 중앙 정치 활동을 재개하기 전에 발생한 전투는 무엇입니까?\n", + "Processing question 173/3952 : 고려시대 때 마을의 걱정을 없애기 위해 만든 석불은 무엇으로 만들어졌나요?_____________고려시대 때 마을의 걱정을 없애기 위해 만든 석불은 어떤 재료로 제작되었습니까?\n", + "Processing question 174/3952 : 오다테의 난이 일어난 해는?_____________오다테의 난이 발생한 연도는 언제인가요?\n", + "Processing question 175/3952 : 예니체리가 완전히 해산되었을 시기 재위 중인 황제는?_____________예니체리가 완전히 해산되었을 때 재위 중인 황제는 누구인가요?\n", + "Processing question 176/3952 : 영국 해군이 다시 전장식으로 돌아가기를 결정했던 때는?_____________언제 영국 해군이 전통적인 전투복으로 복귀하기로 결정했습니까?\n", + "Processing question 177/3952 : 카복실산과 반응하여 니켈 비누를 만드는 것은?_____________카복실산이 아닌 물질과 반응하여 니켈 비누를 만드는 것은 무엇인가요?\n", + "Processing question 178/3952 : 정치하는 엄마들이 피해자들이 정상적인 일상생활을 할 수 있도록 돕기 위해 진행했던 서비스는?_____________어머니들이 정상적인 일상생활을 할 수 있도록 돕기 위해 진행했던 서비스는 무엇인가요?\n", + "Processing question 179/3952 : 성작은 어느 종교에서 쓰이는 잔인가요?_____________어떤 종교에서 성작이 사용되나요?\n", + "Processing question 180/3952 : 조기 심실 수축과 조기 심방 수축으로 나누는 기준은?_____________심실 조기 수축과 심방 조기 수축을 구분하는 근거는 무엇인가요?\n", + "Processing question 181/3952 : 허계임과 그녀의 두 딸 중 가장 먼저 순교한 것은 누구인가?_____________허계임과 그녀의 두 딸 중에서 먼저 순교한 사람은 누구인가요?\n", + "Processing question 182/3952 : 엘리노어 여사가 사망한 해는?_____________엘리노어 여사가 돌아가신 해는 언제인가요?\n", + "Processing question 183/3952 : 체크포인트에 와서 총을 쏜 것은 누구인가?_____________누가 체크포인트에서 총을 발사했습니까?\n", + "Processing question 184/3952 : 천연두에 감염된 모든 사례 중 출혈성 천연두는 얼마의 비중을 차지하는가?_____________출혈성 천연두가 발생하는 천연두 감염 사례의 비율은 얼마인가요?\n", + "Processing question 185/3952 : 벳쇼 다케히코가 다이요 웨일스에서 코치로 활동하다가 그만둔 연도는?_____________벳쇼 다케히코가 다이요 웨일스에서 코치로 활동하다가 그만둔 해는 몇 년도인가요?\n", + "Processing question 186/3952 : 번역가가 기본적으로 문화와 함께 잘 알아야 하는 것은?_____________번역사가 핵심적으로 문화와 함께 잘 이해해야 하는 것은 무엇인가요?\n", + "Processing question 187/3952 : 제 1차 바르바리 전쟁에서 지휘를 맡았던 사람은?_____________'제 1차 바르바리 전쟁에서 지휘를 맡았던 인물은 누구였습니까?'\n", + "Processing question 188/3952 : 아다케부네가 제작 된 시대는?_____________'아다케부네가 만들어진 시대는 언제인가요?'\n", + "Processing question 189/3952 : 《가우스전자》의 원래 제목은 무엇이었나?_____________《가우스전자》의 원래 명칭은 무엇이었습니까?\n", + "Processing question 190/3952 : 벼농사와 관련된 이팝나무 전설의 관찰 대상은?_____________이팝나무 전설의 관찰 대상은 무엇인가요?\n", + "Processing question 191/3952 : 중국은 무엇을 통해 리덩후이의 총통 선거를 방해하려 했는가?_____________중국이 리덩후이의 대통령 선거를 방해하기 위해 무엇을 사용했습니까?\n", + "Processing question 192/3952 : 노선이 확대되기 전 열차의 객차는 몇 개였나?_____________열차가 노선이 확장되기 전에 몇 개의 객차를 가지고 있었습니까?\n", + "Processing question 193/3952 : 파네 티치네세가 1킬로그램 가량의 무게였던 연대는?_____________파네 티치네세가 1킬로그램 정도의 무게를 가졌던 연대는 언제였습니까?\n", + "Processing question 194/3952 : 혜주의 운전교습을 잠시 맡게된 인물의 형은?_____________혜주의 운전 수업을 잠시 맡게된 사람의 형제는 누구인가요?\n", + "Processing question 195/3952 : 오다 노부타다는 누구에게 살해당했나?_____________오다 노부타다는 누구에게 사살당했나?\n", + "Processing question 196/3952 : 위미르가 길들을 관할하는 곳은 어디인가?_____________위미르가 길들을 통제하는 장소는 어디에 있습니까?\n", + "Processing question 197/3952 : 《하느님이시요 사람이신 그리스도의 시》는 누구의 생애를 다루고 있나요?_____________《하느님이시요 사람이신 그리스도의 시》는 누구의 삶을 다루고 있습니까?\n", + "Processing question 198/3952 : 왕장이 성제에게 해임을 요청했던 인물은?_____________'왕장이 성제에게 해임을 청구했던 인물은 누구인가요?'\n", + "Processing question 199/3952 : 여운형이 여러 소일을 하기전에 일했던 곳은?_____________여운형이 다른 직장에서 근무한 적이 있는가요?\n", + "Processing question 200/3952 : 야기 바스티의 시라즈 침략을 도운 사람은?_____________야기 바스티의 시라즈 침략을 돕은 사람은 누구인가요?\n", + "Processing question 201/3952 : 만덕사는 언제 설립되었나?_____________만덕사는 언제 창건되었습니까?\n", + "Processing question 202/3952 : 평상시 기독교선교사들로부터 차별적 대우를 받은 윤치호가 생각한 미국의 중대한 속성은?_____________윤치호가 생각한 미국의 중요한 특성은 무엇인가요?\n", + "Processing question 203/3952 : 국무총리실에서 법에 어긋나게 조사했던 사람은 누구인가?_____________국무총리실에서 불법으로 조사한 사람은 누구인가요?\n", + "Processing question 204/3952 : 창문을 치며 희민에게 자신의 위치를 알리려고 했던 인물은 누구인가요?_____________희민에게 자신의 위치를 알리려고 했던 인물은 누구인가요?\n", + "Processing question 205/3952 : 헤레로인이 독일기업이 예전에 나미비아에 큰 피해를 입힌 것에 대해 소송을 제기한 곳은?_____________나미비아에서 피해를 입힌 독일 기업에 대한 소송을 제기한 곳은 어디인가요?\n", + "Processing question 206/3952 : 닥터와 함께 원형 판을 열었던 인물은?_____________누가 닥터와 함께 원형 판을 열었나요?\n", + "Processing question 207/3952 : 보니파시오 4세는 로마의 무엇을 기독교 성당으로 중건하도록 명령했나요?_____________로마의 무엇을 보니파시오 4세가 기독교 성당으로 중건하도록 명령했나요?\n", + "Processing question 208/3952 : 주교좌직 중 상위라고 주장된 주교는?_____________어떤 주교가 주교좌직 중에서 상위로 주장되었나요?\n", + "Processing question 209/3952 : 설문지 질문을 작성할 때 질문에 꼭 포함시켜야 하는 것은?_____________설문 조사를 할 때 질문에 꼭 넣어야 하는 것은 무엇인가요?\n", + "Processing question 210/3952 : 아달랴가 왕비가 된 것은 누구를 남편으로 맞아서인가?_____________누구와 결혼하여 아달랴가 왕비가 되었나요?\n", + "Processing question 211/3952 : 마충의 상사는 누구인가?_____________마충의 상사는 누구입니까?\n", + "Processing question 212/3952 : 보니파시오 3세가 받은 칙령으로 피해를 입은 자는 누구인가?_____________보니파시오 3세가 받은 칙령으로 고통을 겪은 사람은 누구입니까?\n", + "Processing question 213/3952 : 주인공 노바는 어떤 느낌을 지닌 캐릭터로 바뀌었나요?_____________'주인공 노바는 어떤 감정을 갖고 있는 캐릭터로 변모하였습니까?'\n", + "Processing question 214/3952 : 프로이트가 건강한 여성이 사춘기 이후부터 느껴야하는 오르가즘으로 주장한 것은?_____________프로이트가 건강한 여성이 사춘기 이후부터 느껴야하는 오르가즘으로 주장한 것은 무엇인가요?\n", + "Processing question 215/3952 : 간의 약물대사에서 핵심적인 역할을 하는 효소는?_____________간의 약물대사에서 중요한 기능을 하는 효소는 무엇입니까?\n", + "Processing question 216/3952 : 태양 자전 속도의 약 60배 가량 속력을 낼 수 있는 항성은?_____________어떤 별이 태양 자전 속도의 약 60배 가량 속력을 낼 수 있나요?\n", + "Processing question 217/3952 : 슈타우펜베르크가 패전을 확신한 것은 몇 년인가?_____________슈타우펜베르크가 패배를 확신한 년도는 몇 년인가요?\n", + "Processing question 218/3952 : 중국에서 쿨리가 공식적으로 해외에 나갈 수 있게 되었던 시점은 언제부터인가?_____________쿨리가 중국을 벗어나는 것이 공식적으로 허용되었던 시점은 어느 때부터였나요?\n", + "Processing question 219/3952 : 가나자와 성의 해자 중 현재는 소실되었지만 부속품이 남아 활용되는 것은?_____________가나자와 성의 해자 중 현재는 소실되었지만 부속품이 남아 활용되는 것은 무엇인가요?\n", + "Processing question 220/3952 : 일반고 슬럼화 문제를 해결하기 위해 교육청에서 내세운 정책 슬로건은?_____________교육청이 제시한 정책 슬로건은 무엇인가요?\n", + "Processing question 221/3952 : <가톨릭 청년>에서 참여를 촉구하는 발언은 누구의 말을 인용한 것인가요?_____________'<가톨릭 청년>에서 참여를 촉구하는 발언은 누구의 언급을 인용한 것인가요?'\n", + "Processing question 222/3952 : 킴푹은 무엇 때문에 3도 화상을 입었는가?_____________'킴푹이 3도 화상을 입은 이유는 무엇인가?'\n", + "Processing question 223/3952 : 아스가르드에서 볼바와 같은 역할을 하는 인물의 가장 탁월한 점은?_____________'아스가르드에서 볼바와 같은 역할을 하는 인물의 주요 장점은 무엇인가요?'\n", + "Processing question 224/3952 : 해리엇은 어떤 업적으로 전 세계적인 이슈가 됐었나?_____________해리엇은 어떤 성과로 국제적인 주목을 받았나요?\n", + "Processing question 225/3952 : 사다트를 죽인 집단은 어느 국가와의 평화를 거부했나요?_____________사다트를 살해한 집단은 어떤 국가와의 평화를 거부했습니까?\n", + "Processing question 226/3952 : 부르고뉴 공국의 영토가 프랑스 왕실에 반환된 법적 근거는?_____________부르고뉴 공국의 영토가 프랑스 왕실에 반환된 법적 근거는 무엇입니까?\n", + "Processing question 227/3952 : 군 정부가 함부로 행사했던 연방 정부의 독자적 권리는 무엇인가?_____________군 정부가 자유롭게 행사했던 연방 정부의 독자적 권리는 무엇입니까?\n", + "Processing question 228/3952 : 과도하게 공간을 점유한 주택의 철거를 자유화한 연도는?_____________주택의 철거를 허용한 연도는 언제인가요?\n", + "Processing question 229/3952 : 진주만 작전에서 제3차 공격강행을 반대한 인물은?_____________'진주만 작전에서 제3차 공격강행을 반대한 사람은 누구인가?'\n", + "Processing question 230/3952 : 고구려의 역사를 중국에게서 알아와 작성한 사서는?_____________고구려의 역사를 중국에게서 알아와 작성한 사서는 누구인가요?\n", + "Processing question 231/3952 : 비트겐슈타인의 의견을 잘 수용하지 못한 국가는?_____________비트겐슈타인이 주장한 견해를 잘 받아들이지 못하는 국가는 어디인가요?\n", + "Processing question 232/3952 : 고대 올림픽에 참가한 사람은?_____________고대 올림픽에 참가한 선수들은 누구인가요?\n", + "Processing question 233/3952 : 맥킨타이어가 일관성 있는 도덕이 아니라며 비난했던 것은?_____________맥킨타이어가 일관성 있는 윤리적 행동이 아니라고 비판한 것은 무엇입니까?\n", + "Processing question 234/3952 : 포브스에 의하면 1985년 자이르의 국채 규모는?_____________자이르의 1985년 국채 규모는 포브스에 따르면 어느 정도였습니까?\n", + "Processing question 235/3952 : 회의주의 운동의 일부 주도자와 관련있는 사상은?_____________회의주의 운동의 일부 주도자와 관련있는 사상은 무엇입니까?\n", + "Processing question 236/3952 : 허셜이 관측한 이중성 중 쌍성으로 예측된 것은 몇 개인가?_____________허셜이 관찰한 쌍성 중 예상된 쌍성의 수는 몇 개입니까?\n", + "Processing question 237/3952 : 금고를 걸어두기 위해 만들어진 것은 무슨 모양인가요?_____________금고를 보관하는데 사용되는 것은 어떤 형태인가요?\n", + "Processing question 238/3952 : 카스파는 어떤 역할을 담당해 베토밴을 도와주었나?_____________카스파가 베토밴을 도와주기 위해 맡은 역할은 무엇이었나요?\n", + "Processing question 239/3952 : 이탈리아 동맹 결성에 가장 큰 영향을 준 나라는 어디인가?_____________어떤 국가가 이탈리아 동맹 형성에 가장 큰 영향을 미쳤습니까?\n", + "Processing question 240/3952 : 아킬레우스의 무구를 받고 아이아스가 장례식을 치를 수 있게 설득한 인물은?_____________아킬레우스의 무구를 받고 아이아스가 장례식을 치를 수 있게 설득한 인물은 누구인가요?\n", + "Processing question 241/3952 : 1757년 루이스버그 원정을 저지한 나라는?_____________1757년 루이스버그 원정을 방해한 국가는 무엇입니까?\n", + "Processing question 242/3952 : 콩은 옥수수와 달리 어떤 용도로도 쓰이는가?_____________콩은 옥수수와 달리 어떤 목적을 위해 사용되나요?\n", + "Processing question 243/3952 : 여운형과 함께 상하이에서 독립 운동에 전념한 사람은?_____________'상하이에서 독립 운동에 전념한 사람은 누구인가요?'\n", + "Processing question 244/3952 : 로베스피에르가 처형된 쿠데타는 무엇인가?_____________로베스피에르가 처형된 쿠데타는 무엇입니까?\n", + "Processing question 245/3952 : 분추류중 제일 컸다고 알려진 종류는?_____________가장 큰 분추류 종은 무엇인가요?\n", + "Processing question 246/3952 : 공성훈 작가는<낚시>와 <담배 피우는 남자(폭포)>에서 공통적으로 자연과 누구를 비교하는가?_____________공성훈 작가는 <낚시>와 <담배 피우는 남자(폭포)>에서 자연과 누군가를 비교하는가?\n", + "Processing question 247/3952 : 알렉산드로스 대왕이 창의 길이를 늘려 만든 것은 무엇인가요?_____________알렉산더 대왕이 창의 길이를 늘려 만든 것은 무엇입니까?\n", + "Processing question 248/3952 : 아난 준로 감독이 감독으로 부임한 해에 리그 우승을 차지한 팀은?_____________아난 준로 감독이 이끄는 팀이 리그 우승을 차지한 해는 언제인가요?\n", + "Processing question 249/3952 : 무태장어 양식이 흔하게 이뤄지는 국가는?_____________어떤 국가에서는 무태장어 양식이 널리 이뤄지나요?\n", + "Processing question 250/3952 : 성서를 영어로 번역한 인물에게 영향을 받은 사람은?_____________성서를 영어로 번역한 인물에게 영향을 받은 사람은 누구인가요?\n", + "Processing question 251/3952 : 북한에서 다운로드 받아 플레이 할 수 있는 게임은?_____________북한에서 내려받아 플레이할 수 있는 게임은 무엇입니까?\n", + "Processing question 252/3952 : 무기를 개편하기 위해 플레이어가 가지고 있어야 하는 것은?_____________무기를 개선하기 위해 플레이어가 소유해야 하는 것은 무엇인가요?\n", + "Processing question 253/3952 : 델라웨어 식민지의 이전 소유국가는?_____________델라웨어 식민지의 이전 소유국가는 무엇이었나요?\n", + "Processing question 254/3952 : 카르타고 신성대가 활동했던 시대는 언제인가?_____________카르타고 신성대가 활동했던 시대는 언제인가?\n", + "Processing question 255/3952 : 섬의 꼭대기 부근에서 노랑부리백로와 공존하는 새는?_____________'섬의 정상 부근에서 노랑부리백로와 공존하는 새는 무엇인가요?'\n", + "Processing question 256/3952 : 한보철강의 부실대출 책임자 중 제일은행장이었던 사람은?_____________'한보철강의 부실대출 책임자 중 최고경영자는 누구였습니까?'\n", + "Processing question 257/3952 : 신여성 세력 중 한 인물이 대표를 맡았던 단체는?_____________어떤 단체에서 한 여성이 대표를 맡았던 단체는 무엇입니까?\n", + "Processing question 258/3952 : 봉기군을 누르는데 앞장선 단체는?_____________봉기군을 억누르는데 선봉대는 무엇인가요?\n", + "Processing question 259/3952 : 방사성 물질 운송에 비스무트를 사용할 수 있는 이유는?_____________비스무트를 사용하여 방사성 물질을 운송하는 이유는 무엇인가요?\n", + "Processing question 260/3952 : 알렉산드로스가 속한 군대는?_____________알렉산드로스가 속한 군대는 무엇인가요?\n", + "Processing question 261/3952 : 후난 지역과 장시 지역에서 농민봉기를 선동한 사람은?_____________농민봉기를 선동한 사람은 후난 지역과 장시 지역에서 누구였습니까?\n", + "Processing question 262/3952 : 루터가 보름스 청문회에 참여한 해는 언제인가요?_____________루터가 보름스 청문회에 참여한 연도는 언제인가요?\n", + "Processing question 263/3952 : 인천에 이발소가 처음 생긴 해에 장면의 나이는?_____________장면이 이발소가 처음 생긴 해에 몇 살이었습니까?\n", + "Processing question 264/3952 : 여운형에 대한 생각이 적대적이였다가 긍정적으로 바뀐 조직은?_____________어떤 기관이 여운형에 대한 부정적인 태도를 긍정적인 태도로 바꿨습니까?\n", + "Processing question 265/3952 : 데릭 쇼빈이 플로이드를 살해할 의도 없이 죽음에 이르게 하였기에 받은 혐의는?_____________데릭 쇼빈이 플로이드를 살해할 의도 없이 죽음에 이르게 하였기에 받은 혐의는 무엇입니까?\n", + "Processing question 266/3952 : 바실리 박이 안전을 위해 만나러 간 사람은?_____________'바실리 박이 안전을 위해 만나러 간 사람은 누구인가요?'\n", + "Processing question 267/3952 : 영토를 넓히기 위해 대외정복사업을 추진한 백제의 왕은?_____________백제의 왕 중에서 대외정복사업을 추진하여 영토를 넓힌 왕은 누구였나요?\n", + "Processing question 268/3952 : 다나베가 구시로로 가기 위해 완공된 열차에 타고 있었던 시간은?_____________다나베가 구시로로 가기 위해 완공된 열차에 타고 있었던 시간은 얼마였습니까?\n", + "Processing question 269/3952 : 보주에서 반란이 빈발한 시기는 언제부터인가?_____________보주에서 반란이 빈발한 시기는 언제부터인가?\n", + "Processing question 270/3952 : 일반 사람들은 단종의 묘소를 뭐라고 부르곤 했나요?_____________단종의 묘소를 뭐라고 불렀습니까?\n", + "Processing question 271/3952 : 여러 음반을 EMI에서 발매한 인물의 전임자는 누구인가?_____________EMI에서 여러 음반을 발매한 사람의 이전 대행자는 누구입니까?\n", + "Processing question 272/3952 : 가내작업반에 대한 법률의 안건이 사회주의 상업법에 기록된 해는?_____________가내작업반에 대한 법률의 안건이 사회주의 상업법에 기록된 해는 언제인가요?\n", + "Processing question 273/3952 : 교황 회칙 중 유일하게 독일어로 만들어진 것은?_____________교황 회칙 중 유일한 독일어 버전은 무엇인가요?\n", + "Processing question 274/3952 : 터키가 해외자본을 통해 철도를 깔기 시작한 년도는?_____________터키가 외국 투자를 통해 철도 건설을 시작한 연도는 언제였습니까?\n", + "Processing question 275/3952 : 이인영 의원이 밝힌 금액 중 월세와 함께 논란이 되는 것은?_____________이인영 의원이 공개한 금액 중 월세를 포함한 부분으로 논란이 되는 것은 무엇입니까?\n", + "Processing question 276/3952 : 9월 23일 세이부 돔에서 진행된 경기에서 긴테쓰의 상대팀은 어디였나?_____________9월 23일 세이부 돔에서 진행된 경기에서 긴테쓰의 상대팀은 어디였나?\n", + "Processing question 277/3952 : 스탈린이 철거한 계단이 복구된 것은 몇 년도인가?_____________스탈린이 파괴한 계단이 복원된 연도는 언제인가요?\n", + "Processing question 278/3952 : 후크고지 최전선으로부터 500야드 거리에서 중공군을 발견한 부대는 어디인가?_____________'후크고지 최전선으로부터 500야드 거리에서 중공군을 발견한 부대는 어디에서 발견했습니까?'\n", + "Processing question 279/3952 : 시위 당시 라디오 간토의 기자가 부상을 입은 날짜는 몇 월 며칠인가?_____________라디오 간토의 기자가 다친 날짜는 몇 월 며칠인가?\n", + "Processing question 280/3952 : 마윈은 누구의 도움을 받아 알리바바를 세웠나요?_____________마윈은 누구로부터 지원을 받아 알리바바를 설립했나요?\n", + "Processing question 281/3952 : 헤처의 내부가 좁고 가시성이 좋지 않은 원인은?_____________헤처의 내부가 협소하고 가시성이 좋지 않은 이유는 무엇인가요?\n", + "Processing question 282/3952 : 58군 사령부가 최후의 유격전을 준비한 것은 누구를 염두에 둔 것인가?_____________58군 사령부가 최후의 유격전을 준비한 것은 어떤 사람을 고려했나요?\n", + "Processing question 283/3952 : 다수의 토착언어로 서로 다른 이야기로 표현된 시는 어느 나라의 것인가요?_____________여러 토착 언어로 다른 이야기로 표현된 시는 어느 국가의 것입니까?\n", + "Processing question 284/3952 : 트락티옹 아방을 생산한 회사가 위치한 나라는?_____________트락티옹 아방을 제작한 기업이 위치한 국가는 어디인가요?\n", + "Processing question 285/3952 : 2015년에 개최되는 다른 대회 일정 때문에 피에가 참가하지 못했던 콘테스트는 무엇인가?_____________어떤 이유로 인해 피에가 참가하지 못했던 이벤트는 무엇입니까?\n", + "Processing question 286/3952 : 요한 3세가 선종한 후 교황이 된 인물의 부모는?_____________요한 3세가 선종한 후 교황이 된 인물의 부모는 누구입니까?\n", + "Processing question 287/3952 : 다스트가흐의 선율에서 고음을 내는 현과 함께 음을 조율하는 현은?_____________댓글을 남기는 것을 도와드리겠습니다. \n", + "\n", + "\"다스트가흐의 선율에서 고음을 내는 현과 함께 음을 조율하는 현은?\" -> \"다스트가흐의 선율에서 고음을 내는 현과 함께 음을 조율하는 현은 무엇인\n", + "Processing question 288/3952 : 의회로부터 받은 페린의 땅은 어느 정도인가?_____________페린의 땅에 대해 의회로부터 받은 지원은 어느 정도인가요?\n", + "Processing question 289/3952 : 사회주의 운동을 지지하며 전개해나간 계층은 누구인가?_____________사회주의 운동을 지지하며 전개해나간 집단은 누구인가?\n", + "Processing question 290/3952 : 이다혜의 아버지는 무슨 종목을 하던 사람이었나?_____________이다혜의 아버지는 어떤 분야에서 일하셨나요?\n", + "Processing question 291/3952 : 프롱트낵 요새를 공격한 영국군의 지휘자는?_____________프롱트낵 요새를 침공한 영국군의 지휘자는 누구였나요?\n", + "Processing question 292/3952 : 키카이다와 권투사 군단이 결투를 벌였던 장소는?_____________어디에서 키카이다와 권투사 군단이 대결을 벌였나요?\n", + "Processing question 293/3952 : 마리아는 어느 나라에 계속 머물러 있었나요?_____________마리아는 어느 국가에서 계속 체류했습니까?\n", + "Processing question 294/3952 : 연여를 지키기 위해 조사에게 장수 역할을 맡긴 인물은?_____________누가 연여를 보호하기 위해 조사에게 장수 역할을 맡겼습니까?\n", + "Processing question 295/3952 : 서재필은 어디에서 공부하는 학생들을 독립협회로 모이게 했나요?_____________서재필은 학생들을 독립협회로 모이게 한 곳은 어디인가요?\n", + "Processing question 296/3952 : 피아니스트이자 출판업을 하는 베토벤의 친구는_____________베토벤의 친구 중 피아니스트이자 출판업을 하는 사람은 누구인가요?\n", + "Processing question 297/3952 : 후쿠모리 복귀 시 라쿠텐 구단의 감독은?_____________라쿠텐 구단의 감독은 후쿠모리가 복귀할 때 누구인가요?\n", + "Processing question 298/3952 : 스콜로펜드라신1은 무엇의 치료제로 사용되는가?_____________'Scolopendrin 1은 어떤 질병의 치료에 사용되는가?'\n", + "Processing question 299/3952 : 지르가랑과 함께 부관직 지위를 맡은 인물은?_____________지르가랑과 함께 부관직 지위를 맡은 인물은 누구인가요?\n", + "Processing question 300/3952 : 짱구는 못말려 극장판: 초시공! 태풍을 부르는 나의 신부편'에서 알 수 있는 훈이의 장래희망은 무엇인가?_____________'짱구는 못말려 극장판: 초시공! 태풍을 부르는 나의 신부편'에서 훈이의 미래 희망은 무엇인가요?\n", + "Processing question 301/3952 : 역사 2층에 있는 역점을 전부 임대했던 곳은 어디인가?_____________어떤 장소가 역사 2층에 위치한 역점을 전부 임대했었나요?\n", + "Processing question 302/3952 : 2002년 이후 대한민국이 동계 올림픽 아이스댄싱에 나간 것은 얼마만인가?_____________대한민국이 2002년 이후 동계 올림픽 아이스댄싱에 참가한 횟수는 몇 번인가요?\n", + "Processing question 303/3952 : 베토벤이 병을 앓고 있는 신체 부위는?_____________베토벤이 건강에 문제가 있는 부위는 어디인가요?\n", + "Processing question 304/3952 : 콘늘라의 어머니는 누구인가?_____________콘늘라의 어머니는 누구입니까?\n", + "Processing question 305/3952 : 창조신화는 누구에 의해 계획하고 실행된 것으로 그려지나?_____________누구가 창조신화를 계획하고 실행했을까요?\n", + "Processing question 306/3952 : <신중현의 라스트 콘서트>가 초청된 곳은?_____________'<신중현의 마지막 공연>이 열리는 장소는 어디인가요?'\n", + "Processing question 307/3952 : 성우는 본래에 어떤 계열의 직업인가요?_____________성우는 일러스트레이터는 무슨 계열의 직업인가요?\n", + "Processing question 308/3952 : 남은 뉴잉글랜드초원멧닭들을 떼죽음으로 몰고 간 병은?_____________남은 뉴잉글랜드 초원의 멧닭들을 대량학살한 병은 무엇인가요?\n", + "Processing question 309/3952 : 구매와 저장을 위한 비용을 최소화하는 것을 우선으로 하는 물품 종류는?_____________어떤 물품 종류가 구매 및 보관 비용을 최소화하는 것을 우선시하는가?\n", + "Processing question 310/3952 : 단청에 사용되는 기본 색은 몇 종류인가?_____________단청에 사용되는 기본 색상은 몇 가지인가요?\n", + "Processing question 311/3952 : 시모시마 동부가 위치한 층은?_____________'시모시마 동부가 위치한 층은 어디에 있나요?'\n", + "Processing question 312/3952 : 초창기 EBS온라인클래스의 문제들 중 빠른 속도로 시스템이 안정되면서 해결된 문제점은?_____________초기 EBS 온라인 수업의 문제 중 빠르게 시스템 안정화 및 문제 해결이 이루어진 사례는 무엇인가요?\n", + "Processing question 313/3952 : 도미니크 드빌팽이 제안한 최초고용계약에서, 고용인이 고용자를 쉽게 해고할 수 있는 기간은?_____________도미니크 드빌팽이 제안한 최초고용계약에서, 고용인이 고용자를 쉽게 해고할 수 있는 기간은 얼마인가요?\n", + "Processing question 314/3952 : 모모는 무슨 음식인가?_____________'모모는 어떤 식품인가요?'\n", + "Processing question 315/3952 : 기록상 여권을 가장 오래전에 사용한 인물은?_____________어떤 사람이 가장 오래된 여권을 사용했는지 알고 싶으세요?\n", + "Processing question 316/3952 : 전문대학원 방식을 처음 도입한 곳은 보통 몇 년을 다니나요?_____________전문 대학원 방식을 처음 도입한 곳에서 일반적으로 몇 년 동안 공부하나요?\n", + "Processing question 317/3952 : 호남선은 언제 생겼나?_____________호남선이 언제 건설되었습니까?\n", + "Processing question 318/3952 : 인종을 나눠 다니게한 학교는 언제 아예 없어졌나요?_____________인종을 분리하는 학교는 언제 완전히 없어졌습니까?\n", + "Processing question 319/3952 : 지붕 타일 전부를 보수하기 전 마지막으로 교체했던 시기는?_____________언제 지붕 타일을 마지막으로 교체했나요?\n", + "Processing question 320/3952 : 망코 잉카가 승전 후 이동했으나 스페인에게 함락당한 곳은?_____________망코 잉카가 승전 후 이동했지만 스페인에게 함락당한 장소는 어디인가요?\n", + "Processing question 321/3952 : 연병호의 형제가 사망한 날짜는?_____________연병호의 동생이 사망한 날짜는 언제였나요?\n", + "Processing question 322/3952 : 갈릴레이가 이오와 유로파를 하나의 천체로 관측한 것은 몇 년도였나요?_____________갈릴레이가 이오와 유로파를 하나로 관측한 연도는 언제였나요?\n", + "Processing question 323/3952 : 문정왕후 윤씨의 아들이었던 인물은 누구인가?_____________문정왕후 윤씨의 아들이었던 인물은 누구인가요?\n", + "Processing question 324/3952 : 아게실라오스가 추격대를 마련한 까닭은?_____________아게실라오스가 추격대를 조직한 이유는 무엇인가요?\n", + "Processing question 325/3952 : 오래된 돈을 주기적으로 없애는 기관은?_____________어떤 기관이 오래된 화폐를 주기적으로 파기하는가?\n", + "Processing question 326/3952 : 세상의 평화와 질서 유지를 위한 교육의 장은?_____________교육이 세계 평화와 질서를 유지하는 데 어떤 역할을 하는가요?\n", + "Processing question 327/3952 : 중공군이 예성강 입구에 잠복한 날짜는 언제인가요?_____________예성강 입구에 중공군이 잠복한 날짜는 언제인가요?\n", + "Processing question 328/3952 : 논리형, 제한형 프로그래밍 언어와 대조되는 것은?_____________어떤 것이 논리형, 제한형 프로그래밍 언어와 대조되는가?\n", + "Processing question 329/3952 : 어머니가 사망했던 시점에 형국이는 무엇을 하고 있었나?_____________형국이가 어머니가 사망했을 때 무슨 일을 하고 있었습니까?\n", + "Processing question 330/3952 : 호한야 군이 우록리왕의 침입을 받은 시기는 언제인가?_____________호한야 군이 우록리왕의 침입을 받은 시기는 언제인가?\n", + "Processing question 331/3952 : 샤를이 프랑크의 왕으로 선언된 해는?_____________프랑크 왕으로 선언된 해는 몇 년인가요?\n", + "Processing question 332/3952 : 오피온을 에덴 동산의 뱀과 동일한 존재라고 믿은 집단은?_____________에덴 동산의 뱀과 동일한 존재로 여겨진 존재는 무엇인가요?\n", + "Processing question 333/3952 : 분화된 세포의 특징을 관찰하기 위해 필요한 것은?_____________분열된 세포의 특징을 관찰하기 위해 필요한 것은 무엇인가요?\n", + "Processing question 334/3952 : 카예스 대통령에 대한 가톨릭 교회의 저항은 몇 년에 일어났는가?_____________카예스 대통령에 대한 가톨릭 교회의 반대는 몇 년에 발생했습니까?\n", + "Processing question 335/3952 : 클린턴이 연루 혐의를 받은 스캔들은?_____________클린턴이 연루 혐의를 받은 사건은 무엇인가요?\n", + "Processing question 336/3952 : 언소주가 괴롭혔다고 알려진 중견기업은?_____________어떤 중간 규모의 기업이 소문에 의하면 언소주에 시달렸나요?\n", + "Processing question 337/3952 : 스즈키 다키히로한테 우측 타석에 서라고 지시한 감독은?_____________스즈키 다키히로에게 오른쪽 타석에 서라고 시킨 감독은 누구인가요?\n", + "Processing question 338/3952 : 조선미술가동맹 조선화분과에서 김용준이 맡은 직책은?_____________김용준이 조선미술가동맹 조선화분과에서 맡은 역할은 무엇입니까?\n", + "Processing question 339/3952 : 도비가 첫 감독을 맡게 된 팀은?_____________도비가 처음으로 감독을 맡은 팀은 어디입니까?\n", + "Processing question 340/3952 : 임영관 건물이 학교로 사용된 것은 언제인가?_____________임영관 건물이 학교로 사용된 날짜는 언제였나요?\n", + "Processing question 341/3952 : 벤자민 홉킨스는 누구에 의해 플로리다 민병대 지휘관이 되었는가?_____________벤자민 홉킨스는 누구에 의해 플로리다 민병대 지휘관이 되었습니까?\n", + "Processing question 342/3952 : 아카이아 동맹의 리더 일부를 인질로 삼은 국가는?_____________어떤 국가가 아카이아 동맹의 리더 일부를 인질로 삼았습니까?\n", + "Processing question 343/3952 : 카일의 입과 항문이 연결된 사람은 어느 나라 사람인가?_____________카일의 입과 항문이 연결된 사람은 어느 국적을 가진 사람인가?\n", + "Processing question 344/3952 : 미국 민주주의의 기원으로 여겨지는 것은?_____________미국 민주주의의 기원으로 간주되는 것은 무엇입니까?\n", + "Processing question 345/3952 : 연수취업제도에서 연수기간이 줄어든 해는?_____________연수취업제도에서 연수기간이 감소한 해는?\n", + "Processing question 346/3952 : 선원들을 선동하여 에스파니아 군함을 빼앗은 사람은?_____________누가 선원들을 권유하여 에스파니아 군함을 탈취했습니까?\n", + "Processing question 347/3952 : DNA가 이중가닥을 형성할때 요구되는 상보성을 조절하는 방법은?_____________DNA가 이중가닥을 형성할 때 상보성을 유지하기 위한 메커니즘은 무엇인가요?\n", + "Processing question 348/3952 : 라틴 음악의 기본 3요소 중 아르헨티나의 음악에서 찾아볼 수 없는 하나는?_____________아르헨티나 음악에서 찾을 수 없는 라틴 음악의 기본 3요소 중 하나는 무엇인가요?\n", + "Processing question 349/3952 : 부모를 내다버리기 위해 아들을 설득한 인물은?_____________'아들을 설득하여 부모를 내다버리게 한 인물은 누구인가요?'\n", + "Processing question 350/3952 : 산사태가 일어난 당시 펑시 현의 3층 아파트 안에 있었던 사람은 모두 몇 명인가?_____________펑시 현의 3층 아파트 내에 있던 사람 수를 알고 싶다면 어떻게 해야 하나요?\n", + "Processing question 351/3952 : 흥왕사명 청동은입사향완에서 갈대가 새겨진 부분은?_____________'흥왕사명 청동은입사향완에서 갈대가 새겨진 부분은 무엇인가요?'\n", + "Processing question 352/3952 : 바이러스 복제의 장소로 쓰이는 물질은 어떤 검사에서 쉽게 확인되나요?_____________바이러스 복제의 장소로 사용되는 물질은 어떤 시험에서 간단히 확인할 수 있나요?\n", + "Processing question 353/3952 : 다수의 미국 영화들이 최초로 상영될 뿐만 아니라 아카데미 시상식도 개최되는 곳은?_____________어떤 장소에서는 다수의 미국 영화가 최초로 상영되며 아카데미 시상식도 개최되나요?\n", + "Processing question 354/3952 : 마그누스 효과가 발표되기 전, 이 효과를 이용해 궤적의 편차를 설명한 인물은?_____________'마그누스 효과가 공식적으로 발표되기 전, 궤적 편차를 설명한 인물은 누구였나요?'\n", + "Processing question 355/3952 : 제도용 샤프가 아님에도 불구하고 스매쉬가 가지고 있는 것은 무엇인가요?_____________스매쉬가 가지고 있는 것은 무엇입니까?\n", + "Processing question 356/3952 : 이스라엘의 우파 정당이 동성 커플을 위해 제도적으로 혜택을 주고자 하는 부분은?_____________이스라엘의 우파 정당이 동성 커플을 위해 제도적으로 혜택을 주고자 하는 부분은 무엇인가요?\n", + "Processing question 357/3952 : 해리에게 생일 편지를 보낸 곳은 어디인가요?_____________해리에게 생일 카드를 보낸 곳은 어딘가요?\n", + "Processing question 358/3952 : 러시아의 막강한 군대는 핀란드의 어디로 침투하였나?_____________러시아의 강력한 군대가 핀란드의 어디로 침투했습니까?\n", + "Processing question 359/3952 : 중국 정교회를 소생시키려는 조치는 어떤 나라에 대처하기 위한 것인가요?_____________'중국 정교회를 부활시키려는 노력은 어떤 국가에 대응하기 위한 것인가요?'\n", + "Processing question 360/3952 : 2016년에 화천군은 무엇때문에 통폐합 대상으로 선정되었나요?_____________화천군이 2016년에 통폐합 대상으로 선정된 이유는 무엇이었나요?\n", + "Processing question 361/3952 : 근래 몇 년동안 식물원이 눈에 띄게 번영하고 있는 국가는?_____________어떤 국가가 최근 몇 년 동안 식물원이 현저히 번창하고 있는가요?\n", + "Processing question 362/3952 : 배곯는 아이들에게 도움이 된 식량 보급 제도는?_____________어린이들에게 도움이 되는 식량 지원 제도는 무엇입니까?\n", + "Processing question 363/3952 : 북반구의 계절이 겨울로 변화되는 것은 지구가 어디에 가까워지기 때문인가?_____________북반구의 겨울이 시작되는 이유는 지구가 어디로 가까워지기 때문인가?\n", + "Processing question 364/3952 : 십자형의 무늬가 있는 돌은 탑의 어디에 위치하고 있나요?_____________어떤 위치에 십자형 패턴이 있는 돌이 있는가요?\n", + "Processing question 365/3952 : 박희옥이 국악의 발전에 도움을 주었음에도 불구하고 지원했다는 기록이 없는 이유는?_____________'박희옥이 국악의 진흥에 기여했음에도 불구하고 지원한 증거가 없는 이유는 무엇인가요?'\n", + "Processing question 366/3952 : 홈즈는 어떤 전제 하에 싱클레어씨의 비밀을 발설하지 않기로 하였나?_____________어떤 이론 하에 홈즈는 싱클레어씨의 비밀을 폭로하지 않기로 했나요?\n", + "Processing question 367/3952 : 탁바 호수내에 있는 섬의 갯수는?_____________탁바 호수에 있는 섬의 수는 몇 개인가요?\n", + "Processing question 368/3952 : 갈티에르가 첫 리옹 감독으로 상대한 팀은?_____________갈티에르가 첫 리옹 감독으로 맞붙인 상대팀은 무엇인가요?\n", + "Processing question 369/3952 : 틸이 시체로 발견된 것은 실종 후 얼마 뒤였나요?_____________틸이 실종된 후 몇 시간 뒤에 시체로 발견되었나요?\n", + "Processing question 370/3952 : 세카이와 코토노하가 마코토에게 줄 선물은 언제를 위한 것인가?_____________'마코토에게 주는 선물은 어떤 목적을 위한 것인가?'\n", + "Processing question 371/3952 : 아내가 부자를 괴롭히기 위해 사용한 것은?_____________어떤 수단을 사용하여 아내가 부자를 괴롭혔나요?\n", + "Processing question 372/3952 : 새터가을굿의 이전 명칭은?_____________새터가을굿의 이전 명칭은 뭐야?\n", + "Processing question 373/3952 : 사우스캐롤라이나의 수익성 작물 이름은?_____________사우스캐롤라이나에서 가장 이윤이 많이 나는 작물은 무엇인가요?\n", + "Processing question 374/3952 : 제1차 세계 대전 당시 이집트를 지배하고 있던 나라는?_____________이집트를 지배하고 있던 나라는 무엇입니까?\n", + "Processing question 375/3952 : 소크라테스가 나오기 전의 고대 그리스 철학자를 총칭하는 영어 단어는?_____________고대 그리스 철학자를 총칭하는 영어 단어는 무엇입니까?\n", + "Processing question 376/3952 : 가일의 부대의 유일한 생존자는?_____________가일의 부대의 유일한 살아남은 사람은 누구인가요?\n", + "Processing question 377/3952 : 인도 정부가 반경 3마일 이내 접근을 금지하고 있는 곳은?_____________어떤 장소가 인도 정부에 의해 3마일 이내 접근이 제한되고 있는가요?\n", + "Processing question 378/3952 : 선선을 노리고 자주 공격한 집단은?_____________어떤 집단이 선선을 노리고 자주 공격하나요?\n", + "Processing question 379/3952 : 양측에 올라가는 생김새의 쥐모양이 새겨져 있는 석조는?_____________'양측에 올라가는 생김새의 쥐모양이 새겨져 있는 석조는 무엇인가요?'\n", + "Processing question 380/3952 : 피핀2세가 가장 먼저 되찾은 땅은?_____________피핀2세가 처음으로 회복한 땅은 어디인가요?\n", + "Processing question 381/3952 : 비행기가 추락할 때 첫 번째로 떨어진 것은?_____________비행기가 추락할 때 가장 먼저 떨어지는 것은 무엇인가요?\n", + "Processing question 382/3952 : 백인들이 핸콕 추장을 살해한 이유는?_____________왜 백인들이 핸콕 추장을 살해했나요?\n", + "Processing question 383/3952 : 전투, 세계, 음악에는 높은 점수를 부여한 반면, 비주얼에서 부정적 평가를 내린 인물은?_____________어떤 인물이 전투, 세계, 음악에 대해 높은 평가를 받았지만 비주얼에 대해서는 부정적인 평가를 받은가요?\n", + "Processing question 384/3952 : 독립운동의 구심점이 김구와 이승만 둘 다 아니라고 주장했던 인물은?_____________독립운동의 중심 인물이 김구나 이승만이 아닌 누구였습니까?\n", + "Processing question 385/3952 : 1712년에 남부 투스카로라 족은 누가 이끄는 부대로부터 공격을 받았는가?_____________1712년에 남부 투스카로라 족은 누가 이끄는 군대로부터 공격을 받았나요?\n", + "Processing question 386/3952 : 표현주의 화가 모임 다리파가 만들어진 곳은 어디인가?_____________다리파가 모임을 개최한 장소는 어디인가요?\n", + "Processing question 387/3952 : 혜화동에 살 당시 장면의 직책은 무엇이었는가?_____________당시 혜화동에서 거주하고 계셨을 때, 혜화동에 사시던 당시의 업무는 무엇이었습니까?\n", + "Processing question 388/3952 : 제노비아는 본인을 누구와 비교하여 '이집트의 여왕'이라고 하였나?_____________제노비아는 자신을 누구와 비교하여 '이집트의 여왕'이라고 하였나?\n", + "Processing question 389/3952 : 흑표당은 몇년도에 설립되었는가?_____________흑표당은 언제 창립되었습니까?\n", + "Processing question 390/3952 : 남군의 소장들 중 힐이 가장 뛰어난 사람이라고 언급한 인물은?_____________남군의 소장들 중 뛰어난 치유 능력을 갖춘 사람으로 언급된 인물은 누구인가요?\n", + "Processing question 391/3952 : 아이톨리아 동맹이 로마의 통치를 받기 전 지지했던 인물은?_____________아이톨리아 동맹이 로마의 지배를 받기 전 지지했던 인물은 누구였나요?\n", + "Processing question 392/3952 : 박홍근이 이영주를 교살한 장소는?_____________'박홍근이 이영주를 살해한 장소는 어디인가요?'\n", + "Processing question 393/3952 : 10세기 압바스 왕조의 칼리파가 실세에서 물러난 것은 누구에게 정치권력을 넘기면서인가?_____________알라흐가 대신을 어떤 사람에게 넘겼습니까?\n", + "Processing question 394/3952 : 앨런의 각본의 기존 배경은 어디인가?_____________앨런의 대본의 원래 배경은 어디에 있습니까?\n", + "Processing question 395/3952 : 뮈라가 나폴리의 왕으로 부임하기 전 직위는?_____________뮈라가 나폴리의 왕으로 즉위하기 전 직위는 무엇이었습니까?\n", + "Processing question 396/3952 : 블루어 연선의 손님이 빠르게 증가한 시기의 사건은 무엇인가?_____________블루어 연선의 손님이 급증한 시기의 사건은 무엇입니까?\n", + "Processing question 397/3952 : 도로 관계 4공단 민영화 이후로 니가타추오 분기점에서 아사히 나들목까지는 누가 관할하는가?_____________니가타추오 분기점에서 아사히 나들목까지는 누가 관리하나요?\n", + "Processing question 398/3952 : 오라시오 엘리손도가 데뷔한 년도는?_____________오라시오 엘리손도의 데뷔 연도는 언제인가요?\n", + "Processing question 399/3952 : 사사고 터널 내 환기는 어떤 방식으로 바뀌었나요?_____________사사고 터널 내 환기 시스템이 어떻게 변경되었나요?\n", + "Processing question 400/3952 : 조상이 나라를 장악하기 위해 고립시킨 사람은?_____________'조상이 국가를 통치하기 위해 격리시킨 사람은?'\n", + "Processing question 401/3952 : 신이 상황을 생각하기 전에 의견을 말하는 인간으로 비친것은 후쿠다가 신을 무엇으로 그렸기 때문인가?_____________후쿠다가 신을 무엇으로 그린 이유가 무엇인가?\n", + "Processing question 402/3952 : 중형일개미는 잎을 나를 때 무엇의 위협을 받을 수 있나?_____________중형일개미가 잎을 뜯을 때 어떤 위험에 노출될 수 있나요?\n", + "Processing question 403/3952 : 흑인들이 운행하던 물자 운송 부대를 타겟으로 삼던 것은 누구인가?_____________누구가 흑인들이 조종하는 물자 운송 부대를 공격했나요?\n", + "Processing question 404/3952 : 휘석과 달리 각섬석이 보유하고 있는 것은 무엇인가?_____________각섬석이 가지고 있는 것은 무엇인가?\n", + "Processing question 405/3952 : 중앙동·중거리·하거리 할아버지당 중 가장 높은 당산은?_____________가장 높은 당산은 중앙동 할아버지당 중 어디에 있나요?\n", + "Processing question 406/3952 : 네드 핸런 감독은 맥그로를 어떤 포지션에 배치시켰는가?_____________네드 핸런 감독이 맥그로를 어떤 위치에 배치했습니까?\n", + "Processing question 407/3952 : 피사인들은 카스틸리오네를 무엇을 수비하는데 이용했는가?_____________피사인들이 카스틸리오네를 방어하는 데 사용한 것은 무엇인가요?\n", + "Processing question 408/3952 : 포겐도르프가 <물리학사>를 출간한 년도는?_____________포겐도르프가 <물리학사>를 출간한 연도는 언제인가요?\n", + "Processing question 409/3952 : 집단 극화 현상은 주로 어떤 상황에서 흔히 일어날 수 있나요?_____________집단 극화 현상은 주로 어떤 상황에서 발생할 수 있는가?\n", + "Processing question 410/3952 : 캐나다 국경 근처 요새를 차지한 혁명군이 잠시동안 지배했던 곳은 어디인가요?_____________어떤 장소가 혁명군에 의해 일시적으로 점령되었습니까?\n", + "Processing question 411/3952 : 돈 집단군에서 가장 크고 강력한 부대는 어디인가?_____________어떤 부대가 돈 군단에서 가장 강력한 부대인가요?\n", + "Processing question 412/3952 : 저상 트램 차량이 휠체어 높이 조절을 위해 조정하는 장치는?_____________저상 트램 차량이 휠체어 높이 조절을 위해 조정하는 장치는 무엇인가요?\n", + "Processing question 413/3952 : 오스트리아 황태자 부부가 세르비아인에게 총살당한 사건은?_____________오스트리아 황태자 부부가 세르비아인에게 암살당한 사건은 무엇인가요?\n", + "Processing question 414/3952 : 2개 이상의 폴리펩타이드 사슬로 구성된 단백질 구조는 무엇인가?_____________단백질 구조는 무엇으로 이루어져 있나요?\n", + "Processing question 415/3952 : 제조업에서 직접투자의 대표적인 예는?_____________제조업에서 직접투자의 대표적인 예는 무엇인가요?\n", + "Processing question 416/3952 : 윤치호가 아버지 윤웅렬을 설득해 교회와 학교를 지을 땅을 제공했던 선교사의 이름은?_____________윤치호가 아버지 윤웅렬을 설득해 교회와 학교를 지을 땅을 제공했던 선교사의 이름은 무엇인가요?\n", + "Processing question 417/3952 : 프린치프의 활동에 걸림돌이 되었던 그의 신체적 조건은?_____________프린치프가 활동을 방해하는데 어려움을 겪은 그의 신체적 제약은 무엇이었나요?\n", + "Processing question 418/3952 : #BackOffIndia 해쉬태그 운동의 직접적인 계기가 된 언론사는?_____________'#BackOffIndia 해시태그 운동을 촉발시킨 언론사는 무엇입니까?'\n", + "Processing question 419/3952 : 몇 년 전까지만 해도 한국의 삼포세대와 전혀 다른 모습이었으나 현재는 아닌 미국의 세대는?_____________미국의 어떤 세대가 한국의 삼포세대와 전혀 다른 모습을 보이고 있나요?\n", + "Processing question 420/3952 : 링컨빌에 차량 기지를 추가로 만든 이유는 무엇이 필요했기 때문인가?_____________링컨빌에 차량 기지를 추가로 건설한 이유는 무엇이었습니까?\n", + "Processing question 421/3952 : 윌리엄 피트의 명령서를 받은 사람은?_____________누가 윌리엄 피트의 지시를 받았습니까?\n", + "Processing question 422/3952 : 비어가르텐을 이용해 세력을 불린 단체 중 SA가 소속된 단체는 어디인가?_____________SA가 속한 조직은 어디인가?\n", + "Processing question 423/3952 : 마리아 발토르타의 형제, 자매 관계는 어떻게 되나?_____________마리아 발토르타의 형제, 자매 관계는 어떤가요?\n", + "Processing question 424/3952 : 게오르크 프리드리히가 충성을 맹세한 국왕의 이름은 무엇인가?_____________게오르크 프리드리히가 충성을 맹세한 국왕의 이름은 무엇입니까?\n", + "Processing question 425/3952 : 북아일랜드에 있는 평화선은 신교도와 무엇의 마찰을 막기 위해 만들어졌는가?_____________북아일랜드에 있는 평화의 벽은 무엇의 갈등을 막기 위해 만들어졌나요?\n", + "Processing question 426/3952 : 중동신도시 개발에 기관 몇 곳이 적극적으로 뛰어들었나?_____________중동신도시 개발에 몇 개의 기관이 적극 참여했나요?\n", + "Processing question 427/3952 : 탑에 시멘트를 바른 것은 언제인가?_____________언제 시멘트가 탑에 적용되었습니까?\n", + "Processing question 428/3952 : 1801년 상산군부인 송마리아와 평산군부인 신마리아가 죽임을 당한 일과 관련있는 종교는?_____________1801년 상산군부인 송마리아와 평산군부인 신마리아가 죽임을 당한 일과 관련된 종교는 무엇인가요?\n", + "Processing question 429/3952 : 찰스 1세는 누구의 저항을 막기 위해 자금을 모으려 했나요?_____________찰스 1세는 누구의 반발을 억제하기 위해 자금을 조달하려고 했나요?\n", + "Processing question 430/3952 : 거대 마젤란망원경에 사용되는 첫 번째 반사경이 만들어진 해는?_____________거대 마젤란망원경에 사용되는 첫 번째 반사경이 제작된 연도는 무엇인가요?\n", + "Processing question 431/3952 : 노르망디 상륙 이후 등장한 보급대는?_____________노르망디 상륙 이후 나타난 보급 부대는 무엇입니까?\n", + "Processing question 432/3952 : 세미놀과 협상을 시도했던 인물은?_____________세미놀과 협상을 시도했던 사람은 누구였습니까?\n", + "Processing question 433/3952 : 홍콩에서 영어학과 학위가 없는 교사들은 무엇을 통과해야 하는가?_____________홍콩에서 영어학과 학위가 없는 교사들은 어떤 자격 시험을 통과해야 하나요?\n", + "Processing question 434/3952 : 하인리히 4세를 이용하여 모후를 섭정에서 물러나도록 요구한 인물은?_____________하인리히 4세를 이용하여 모후를 섭정에서 물러나도록 요구한 인물은 누구였나요?\n", + "Processing question 435/3952 : 꿀풀목 가운데 가장 큰 과와 생김새가 비슷한 과는?_____________어떤 과가 꿀풀목 가운데 가장 큰 과와 생김새가 유사한가요?\n", + "Processing question 436/3952 : 사망자들을 위한 합동위령제는 어디에서 진행되었나요?_____________사망자들을 위한 공동 추모식은 어디에서 열렸습니까?\n", + "Processing question 437/3952 : 2008년 베이징 올림픽의 준결승전에서 리네르를 꺾었던 사람은?_____________2008년 베이징 올림픽의 준결승전에서 리네르를 이긴 사람은 누구였습니까?\n", + "Processing question 438/3952 : 장미의 붉은 색의 유래는 누구와 관련되어 있나?_____________장미의 빨간 색은 누구와 연관이 있습니까?\n", + "Processing question 439/3952 : 튀코가 놋쇠로 된 보형물을 사용했다는 사실은 언제 알려졌는가?_____________언제 튀코가 구리로 만든 보형물을 사용했다는 사실이 밝혀졌나요?\n", + "Processing question 440/3952 : 문명호의 녕원군 이전 근무지는?_____________문명호의 전 근무지는 어디였습니까?\n", + "Processing question 441/3952 : 정치 관련 책에서 전체주의와 전제 정치를 비교 서술한 학자는?_____________'정치 관련 서적에서 토탈리티니즘과 전제정치를 비교한 학자는 누구인가요?'\n", + "Processing question 442/3952 : 경성제국대학에서 학생들이 처음으로 수업을 받은 날짜는?_____________경성제국대학에서 학생들이 처음으로 강의를 받은 날짜는 언제인가요?\n", + "Processing question 443/3952 : 스타필드 고양점이 개업한 날은?_____________'스타필드 고양점이 오픈한 날짜는?'\n", + "Processing question 444/3952 : 나가이 겐지가 사망할 당시 가지고 있던 물건은?_____________나가이 겐지가 사망할 당시 소유했던 물건은 무엇이었나요?\n", + "Processing question 445/3952 : 임팔 작전을 지휘한 사령관의 이름은?_____________임팔 작전을 지휘한 사령관의 명칭은 무엇인가요?\n", + "Processing question 446/3952 : 소순이 입관하는데 도움을 준 사람은?_____________소순이의 입관을 돕은 사람은 누구인가요?\n", + "Processing question 447/3952 : 통도사는 신라시대의 누구에 의하여 설립되었나요?_____________통도사는 신라시대의 어떤 인물에 의해 창건되었나요?\n", + "Processing question 448/3952 : 센트럴 리그 올스타팀을 이끌었던 인물의 이름은 무엇인가요?_____________'센트럴 리그 올스타팀을 주장한 사람의 이름은 무엇입니까?'\n", + "Processing question 449/3952 : 국문과 역사를 가르치던 곳에서 민족의지의 격려를 위해 불렀던 노래는 무엇인가?_____________어떤 곳에서 민족주의를 독려하기 위해 불린 노래는 무엇인가요?\n", + "Processing question 450/3952 : 한국거래소와 한국예탁결제원이 여의도에서 옮겨간 도시는?_____________한국거래소와 한국예탁결제원이 여의도에서 이전한 도시는 어디인가요?\n", + "Processing question 451/3952 : 지석묘는 어떤 단어로도 불리나요?_____________'지석묘는 다른 말로 무엇이라고도 불리나요?'\n", + "Processing question 452/3952 : 담윤현에게 다양한 의술을 가르쳐 준 사람은?_____________담윤현에게 다양한 의술을 가르쳐 준 사람은 누구인가요?\n", + "Processing question 453/3952 : 키에스콤파스에 따르면 동성결혼 분야에서 리쿠드당, 베이테이누당과 정반대 성향을 보이는 이스라엘 정당은?_____________이스라엘 정당 중에서 동성결혼 분야에서 리쿠드당과 정반대 성향을 보이는 정당은 무엇인가요?\n", + "Processing question 454/3952 : 애플의 AS제도를 이용할 수 있는 기간은?_____________애플의 AS제도를 이용할 수 있는 기간은 얼마인가요?\n", + "Processing question 455/3952 : 링컨이 조지 워싱턴 장군에 합세하여 우익을 통솔했던 전투는?_____________링컨이 조지 워싱턴 장군과 함께 우익을 이끈 전투는 무엇입니까?\n", + "Processing question 456/3952 : 펠레폰네소스 전쟁 당시 타사페르네스가 아테네와 동맹을 맺게 한 사람은?_____________타사페르네스가 아테네와 동맹을 맺게 한 사람은 누구였습니까?\n", + "Processing question 457/3952 : 최근에 남편을 잃은 여자는?_____________'최근에 남편을 잃은 여성은 누구인가요?'\n", + "Processing question 458/3952 : 모투부가 참여한 원탁 회의는 어디에서 열렸나요?_____________'모투부가 참여한 라운드 테이블 회의는 어디에서 열렸나요?'\n", + "Processing question 459/3952 : 강희제가 자식을 여러 명 낳는 데 영향을 준 자는?_____________강희제가 자녀를 많이 낳게 된 이유는 무엇인가요?\n", + "Processing question 460/3952 : 부여석조가 만들어진 시기는 언제인가?_____________부여석조가 건립된 시기는 어느 때입니까?\n", + "Processing question 461/3952 : 야당 의원들이 장면을 대통령직에 올리기 위해 시도할 당시, 장면의 직책은 무엇이었나?_____________장면이 대통령직에 올라가려고 시도할 당시, 그의 직책은 무엇이었나요?\n", + "Processing question 462/3952 : 호노리오 1세는 무엇을 이용해 단의설에 대한 주장을 내보여 문제를 피하였는가?_____________호노리우스 1세는 무엇을 이용해 단의설에 대한 주장을 내보여 문제를 피하였나요?\n", + "Processing question 463/3952 : 김성태 원내대표에 의하면 대한민국과의 외교 관계를 끊는다고 언급했던 인물은 누구인가?_____________김성태 원내수석에 따르면 한국과의 외교 관계를 끊는다고 밝힌 인물은 누구인가요?\n", + "Processing question 464/3952 : 네르친스크 조약의 청나라 대표는 누구인가?_____________네르친스크 조약의 청나라 대표는 누구인가?\n", + "Processing question 465/3952 : 카드모스는 누구의 시중을 드는 형을 받았나?_____________카드모스는 누구에게 시중을 드는 형을 받았나요?\n", + "Processing question 466/3952 : 블라미디르 푸틴이 보고 놀란 까마귀의 이름은?_____________까마귀가 블라미디르 푸틴을 놀라게 한 이름은 무엇입니까?\n", + "Processing question 467/3952 : 리비아의 국기에 이슬람 국가라는 의미로 사용한 색깔은?_____________리비아의 국기에 이슬람 국가라는 의미로 사용한 색깔은 무엇인가요?\n", + "Processing question 468/3952 : 제26회 사법시험과 16기 사법연수원 모두 수석이였던 사람은?_____________두 번째 사법시험과 16기 사법연수원에서 최우수 성적을 거둔 사람은 누구인가요?\n", + "Processing question 469/3952 : 마하지의 공격을 받은 영국 군대가 후퇴한 곳은?_____________어떤 지역으로 영국 군대가 후퇴했습니까?\n", + "Processing question 470/3952 : 비잔티움 제국 이전에 폰토스에 영향력을 행세한 국가는?_____________폰토스에 영향을 끼친 나라는 무엇입니까?\n", + "Processing question 471/3952 : 국제 축구 및 우정의 날이 여러 국가에서 공휴일로 지정된 해는?_____________어떤 해가 국제 축구 및 우정의 날로 여러 국가에서 공휴일로 지정되었습니까?\n", + "Processing question 472/3952 : 천왕성과 해왕성에서 수소와 헬륨이 이루는 층은?_____________천왕성과 해왕성에서 수소와 헬륨이 이루는 층은 무엇인가요?\n", + "Processing question 473/3952 : 우생학 용어를 만들어낸 인물이 처음으로 우생학적 전망을 드러냈던 시기는?_____________처음으로 우생학적 관점을 소개한 사람이 처음으로 우생학 용어를 만들었던 시기는?\n", + "Processing question 474/3952 : 유숙열의 두 번째 근무지는?_____________유숙열의 두 번째 일하는 곳은 어디인가요?\n", + "Processing question 475/3952 : 헛소동의 배경이 되는 국가는?_____________헛소동의 근원이 되는 국가는 어디인가요?\n", + "Processing question 476/3952 : 개신교회가 만든 대학교는 몇년을 수료해야 졸업할 수 있는가?_____________개신교회 출신 대학교는 졸업을 위해 몇 년을 공부해야 하나요?\n", + "Processing question 477/3952 : 동양의 문화적 요소를 가장 잘 활용한 타란티노의 작품은?_____________타란티노의 작품 중에서 동양 문화적 영향을 가장 잘 반영한 것은 무엇인가요?\n", + "Processing question 478/3952 : 연방 긴급 구조 법령을 통해 도움 받은 사람들은?_____________연방 긴급 구조 법령을 통해 지원받은 사람들은 누구인가요?\n", + "Processing question 479/3952 : 장미십자회가 여러 곳에서 활동하기 위해 본거지로 삼았던 비밀스러운 곳은?_____________장미십자회가 다양한 장소에서 활동하기 위해 사용했던 기밀 장소는 어디였나요?\n", + "Processing question 480/3952 : 퀴리니우스는 인구조사를 언제 했는가?_____________'퀴리니우스가 인구조사를 언제 실시했습니까?'\n", + "Processing question 481/3952 : 모린이 여자 유령의 형체를 처음 본 장소는?_____________어떤 장소에서 모린이 여자 유령의 형체를 처음 봤나요?\n", + "Processing question 482/3952 : 브라운이 플레이오프에 출전하기 위해 아이버슨에게 준 포지션은?_____________브라운이 플레이오프에 출전하기 위해 아이버슨에게 준 역할은 무엇입니까?\n", + "Processing question 483/3952 : 전쟁이 끝난 후 스코틀랜드 서약파가 찰스 1세를 지지하는 조건으로 인정받은 것은?_____________'전쟁이 종결된 이후, 스코틀랜드 서약파가 찰스 1세를 지지하고 인정받은 조건은 무엇입니까?'\n", + "Processing question 484/3952 : 하버드대학교의 설립연도는?_____________하버드 대학교가 설립된 연도는 언제인가요?\n", + "Processing question 485/3952 : 당이 통일되던 해에 낭비성은 어느 국가의 영토였나?_____________어느 국가의 영토였나 낭비성이 통일되던 해에?\n", + "Processing question 486/3952 : 김준연에게 정부가 사전자금을 수수했다는 정보를 제공한 사람은?_____________'김준연에게 정부가 사전자금을 제공한 사람은 누구인가요?'\n", + "Processing question 487/3952 : 1897년에 르베르디 아버지는 어디에서 일하고 있었나?_____________르베르디 아버지가 1897년에 근무하고 있던 장소는 어디였습니까?\n", + "Processing question 488/3952 : 제 4대 칼리프의 사촌형은 누구인가?_____________제 4대 칼리프의 사촌형은 누구인가?\n", + "Processing question 489/3952 : 9세기 후반 석탑에서 안상이 새겨진 부분은?_____________석탑의 9세기 후반 안상이 새겨진 부분은 어디인가요?\n", + "Processing question 490/3952 : 가르보치가 1992년 세계 아이스하키 선수권 대회에서 출전한 경기 수는?_____________가르보치가 1992년 세계 아이스하키 선수권 대회에서 참가한 경기 횟수는 몇 회인가요?\n", + "Processing question 491/3952 : 최종훈이 음주운전으로 검거되었을 때 얼마를 주고 경찰관을 매수하려 했나?_____________최종훈이 음주운전으로 검거되었을 때 얼마를 지불하여 경찰관을 뇌물을 주려 했나요?\n", + "Processing question 492/3952 : 술탄이라는 이름의 아이디어를 제공한 사람은?_____________'술탄이라는 명칭을 제안한 사람은 누구인가요?'\n", + "Processing question 493/3952 : 코시안 어린이들이 자주 차별을 받는 사유는?_____________코시안 아동들이 자주 차별을 받는 이유는 무엇인가요?\n", + "Processing question 494/3952 : X선과 적외선의 효과가 미치지 못하도록 시멘트에 첨가하는 성분은?_____________시멘트에 첨가하여 X선과 적외선의 효과를 차단하는 성분은 무엇인가요?\n", + "Processing question 495/3952 : 성화상 원본이 후스파의 공격으로 크게 상한 해는?_____________성화상 원본이 후스파의 공격으로 크게 손상된 해는?\n", + "Processing question 496/3952 : 1616년 만주를 통합하고 후금국을 건국한 인물은?_____________1616년 만주를 통합하고 후금국을 건국한 인물은 누구였나요?\n", + "Processing question 497/3952 : 하나님이 생각하는 그리스도인과 유대인이 상이하다고 생각한 인물은?_____________하나님이 생각하는 그리스도인과 유대인이 상이하다고 생각한 인물은 누구인가요?\n", + "Processing question 498/3952 : 남한군의 도주를 막기위해 설치되었던 것은?_____________'남한군의 도주를 막기위해 설치되었던 것은 무엇인가요?'\n", + "Processing question 499/3952 : 웃는 감정을 그대로 표현한다는 뉘앙스를 갖는 ㅋ의 용법은?_____________'ㅋ의 사용은 웃음을 나타내는 뉘앙스를 가지고 있나요?'\n", + "Processing question 500/3952 : 김은환이 졸업한 대학의 소재지는?_____________김은환이 졸업한 대학이 위치한 지역은 어디인가요?\n", + "Processing question 501/3952 : 게를리히는 누구의 제보를 기사화했다가 히틀러에게 쫓기게 되는가?_____________게를리히는 누구의 정보를 이용하여 기사를 쓰다가 히틀러에게 추방당하는가?\n", + "Processing question 502/3952 : 해왕성 위성계에서 가장 많은 질량을 차지한 위성은?_____________가장 많은 질량을 갖는 해왕성 위성은 무엇인가요?\n", + "Processing question 503/3952 : 법정에서 '피고인'이라는 용어와 같이 쓰이는 용어는?_____________피의자라는 용어와 같이 쓰이는 용어는 무엇입니까?\n", + "Processing question 504/3952 : 병변이 심각한 경우에는 무엇까지 발생할 수 있나요?_____________병변이 심각한 경우에는 어떤 합병증이 발생할 수 있나요?\n", + "Processing question 505/3952 : 천지 괴물에 대한 목격담은 어느 시기에서부터 시작되었나요?_____________천지 괴물에 대한 관찰이 언제부터 시작되었나요?\n", + "Processing question 506/3952 : 대한민국의 일부 로맨스 드라마에서, 여성 주인공은 높은 지위의 남자를 만나 어떤 결과를 맞이하는가?_____________로맨스 드라마에서, 대한민국의 여자 주인공이 높은 사회적 지위의 남성과 만났을 때 어떤 일이 벌어지나요?\n", + "Processing question 507/3952 : 소남 갸초는 언제 달라이 라마로 즉위하였는가?_____________갸초가 언제 달라이 라마로 즉위되었습니까?\n", + "Processing question 508/3952 : 보닌과 마일리가 가고자 한 도시는?_____________보닌과 마일리가 방문하려는 도시는 어디인가요?\n", + "Processing question 509/3952 : 베링이 독일 말을 쉽게 구할 수 없었던 이유는 무엇 때문인가?_____________베링이 독일어를 쉽게 이해하지 못했던 이유는 무엇인가요?\n", + "Processing question 510/3952 : 1968년 대선 당시 후보로 출마된 수퇘지의 이름은?_____________수퇘지가 1968년 대선 당시 후보로 출마했던 이름은 무엇입니까?\n", + "Processing question 511/3952 : 데니소바 동굴에서 처음으로 인류의 화석이 발견된 년도는?_____________데니소바 동굴에서 최초로 인류의 화석이 발견된 연도는 언제였습니까?\n", + "Processing question 512/3952 : 곡면구조의 액정은 어디에 약한가요?_____________액정의 곡면구조는 어디에서 취약한가요?\n", + "Processing question 513/3952 : 쿠셸이 신분을 숨기며 매춘부 일을 한 것은 누구를 피하기 위해서였나?_____________쿠셸이 신분을 감추고 성매매를 한 이유는 누구를 피하기 위한 것이었나요?\n", + "Processing question 514/3952 : 독립채산제를 적용한 경제 관리 방법을 공표한 인물은?_____________독립채산제를 도입한 경제 관리 방법을 소개한 사람은 누구인가요?\n", + "Processing question 515/3952 : 강을 수호하면서 죽은자들을 강 쪽으로 보내는 직책을 맡고 있는 자는?_____________물을 지키는 자이면서 죽은 자들을 물가로 보내는 역할을 맡은 자는 누구인가요?\n", + "Processing question 516/3952 : 미국 기업이 선호하는 나라는 어떤 것이 저조한가요?_____________미국 기업이 선호하지 않는 국가는 어떤 것인가요?\n", + "Processing question 517/3952 : 데스볼트는 무엇이 결여되어있나?_____________데스볼트는 어떤 것이 부족한가?\n", + "Processing question 518/3952 : 할머니가 노이에 대한 걱정을 이야기했던 인물은?_____________할머니가 노이에 대한 걱정을 이야기했던 인물은 누구였습니까?\n", + "Processing question 519/3952 : 갈릴레오가 화산 필란 파테라의 폭발을 관측해서 얻어낸 것은?_____________갈릴레오가 화산 필란 파테라의 폭발을 관측하여 얻어낸 것은 무엇인가요?\n", + "Processing question 520/3952 : \"잃어버린 세대를 위한 희망\"의 한 부분을 제시했으며 아일랜드 경제를 신자유주의적 관점에서 바라본 사람은?_____________\"'잃어버린 세대를 위한 희망'의 일부를 제시한 사람은 누구인가?\"\n", + "Processing question 521/3952 : 판스워스 교수가 이전 배달원에 대해 한 대사는?_____________판스워스 교수가 이전 배달원에 대해 한 대사는 무엇인가요?\n", + "Processing question 522/3952 : 무변론판결에서 소송 당한 사람이 법원에 내야하는 서류는 무엇인가요?_____________무변론 판결에서 피고인이 법원에 제출해야 하는 문서는 무엇입니까?\n", + "Processing question 523/3952 : 관여도 수준은 어느 분야에서 적절한 요소로 쓰일 수 있나요?_____________어느 분야에서 관여 정도는 적절한 변수로 활용될 수 있나요?\n", + "Processing question 524/3952 : 미슈텍어파 언어들의 확산의 시발점이 된 곳은?_____________미슈텍어파 언어들의 확산의 시발점이 된 곳은 어디인가요?\n", + "Processing question 525/3952 : 김홍일은 자신이 살인한 자매 중 언니와 언제부터 사귀었다고 했나?_____________김홍일은 자신이 살해한 자매 중 언니와 언제부터 연애를 시작했다고 주장했나요?\n", + "Processing question 526/3952 : 샴쉬르나 시마타와 유사한 칼은?_____________샴쉬르나 시마타와 비슷한 칼은 무엇인가요?\n", + "Processing question 527/3952 : 카르타고 시민 보병대가 역사 기록에서 없어진 시기는?_____________카르타고의 시민 보병대가 사라진 시기는 언제입니까?\n", + "Processing question 528/3952 : 리싸 해전의 패전국은?_____________리싸 해전에서 패배한 나라는 무엇인가요?\n", + "Processing question 529/3952 : 파울이 포로 생활을 한 나라는?_____________파울이 감금 생활을 한 국가는 어디인가요?\n", + "Processing question 530/3952 : 사람들은 무엇으로 가득한 기억을 쉽게 떠올리지 못하나?_____________무엇이 사람들이 기억을 쉽게 떠올리지 못하게 하는가?\n", + "Processing question 531/3952 : 인도 정부는 어느 기관의 지시에 따라 '래깅 방지 헬프콜'을 시행했나요?_____________인도 정부가 어느 조직의 지시에 따라 '래깅 방지 핫라인'을 운영했습니까?\n", + "Processing question 532/3952 : 바냐가 신발명품인 번개 지팡이에 관한 이야기로 위로하려 했던 인물은?_____________바냐가 신발 브랜드인 번개 지팡이에 관한 이야기로 위로하려 했던 인물은 누구였나요?\n", + "Processing question 533/3952 : 영남 지방은 소백산맥의 어디에 위치해있나요?_____________영남 지방은 소백산맥의 어디에 자리하고 있나요?\n", + "Processing question 534/3952 : 향토문화축제의 개최지는?_____________향토문화축제가 열리는 장소는 어디인가요?\n", + "Processing question 535/3952 : 라지야팔라의 통솔 기간은?_____________라지야팔라의 지배 시기는 얼마나 계속되었나요?\n", + "Processing question 536/3952 : \"콘술 이전\"이라는 의미를 생각해낸 사람은?_____________'콘술 이전'이라는 의미를 처음으로 제안한 사람은 누구인가요?\n", + "Processing question 537/3952 : 케네디 대통령의 동생이 연방 상원 선서를 시행한 것은 몇년도인가?_____________케네디 대통령의 동생이 연방 상원 선서를 선서한 연도는 언제인가요?\n", + "Processing question 538/3952 : 트위터 내에서 외부 광고가 가능한 사람은?_____________트위터 내에서 외부 광고를 할 수 있는 사용자는 누구인가요?\n", + "Processing question 539/3952 : 여운형으로 하여금 신분차별을 반대하게 만든 인물은?_____________여운형을 설득하여 신분차별을 반대하게 만든 사람은 누구인가요?\n", + "Processing question 540/3952 : 동국전자초급대학이 창립된 해는?_____________동국전자초급대학이 설립된 연도는?\n", + "Processing question 541/3952 : 1497년 초 코페르니쿠스 집주인의 전공은?_____________1497년 초 코페르니쿠스의 집주인이 전문화한 분야는 무엇입니까?\n", + "Processing question 542/3952 : 조선로동당에서 곡물 소득량을 늘릴 수 있게 농장 간부들에게 자체적으로 시행하도록 허가한 제도는?_____________'조선로동당에서 곡물 생산량을 증가시키기 위해 농장 간부들에게 자율적으로 시행하도록 허용한 제도는 무엇인가요?'\n", + "Processing question 543/3952 : 펠로피다스가 추방당한 것은 몇 년인가?_____________펠로피다스가 추방당한 시기는 언제인가요?\n", + "Processing question 544/3952 : 부산광역시에서 비가 가장 많이 온 곳은?_____________부산에서 가장 많은 강우량이 측정된 지역은 어디인가요?\n", + "Processing question 545/3952 : 강중인이 경제사범을 비판하며 국민의 일대수치라 표현한 글은?_____________강중인이 경제사범을 비판하며 국민의 일대수치라 표현한 글은 무엇인가요?\n", + "Processing question 546/3952 : 경험주의를 배운 작가들을 부르는 명칭은 무엇인가요?_____________경험주의를 배운 작가들을 부르는 명칭은 무엇입니까?\n", + "Processing question 547/3952 : 게바라가 7월 23일 오후에 간 곳은 어디인가?_____________게바라가 7월 23일 오후에 방문한 장소는 어디인가요?\n", + "Processing question 548/3952 : 세형동검의 등날은 어디까지 이어지나?_____________세형동검의 등날은 어디까지 뻗어나가나요?\n", + "Processing question 549/3952 : 정하상 바오로는 누구를 위해 돈을 장만했나?_____________정하상 바오로가 누구를 위해 자금을 조달했습니까?\n", + "Processing question 550/3952 : 사이판의 전선과 하수구 파이프는 언제 수리하기 시작했는가?_____________사이판의 전선과 하수관은 언제 수선 작업을 시작했습니까?\n", + "Processing question 551/3952 : 한일어업협정에서 분쟁의 씨앗으로 남긴 곳은?_____________한일어업협정에서 갈등의 원인으로 남긴 곳은 어디인가요?\n", + "Processing question 552/3952 : 스웨덴이 왕국으로 건립 된 시기는?_____________스웨덴이 왕국으로 설립된 시기는 언제입니까?\n", + "Processing question 553/3952 : 줄리와 함께 식사한 사람은?_____________'줄리와 함께 식사한 사람은 누구였나요?'\n", + "Processing question 554/3952 : 카도쿠라 켄이 7이닝 퍼펙트게임을 달성할 때 있던 팀은?_____________카도쿠라 켄이 7이닝 퍼펙트게임을 이룰 때 소속된 팀은 무엇이었나요?\n", + "Processing question 555/3952 : 갓난아기의 딸국질을 멎게 하려면 아기한테 무엇을 주는 것이 좋은가?_____________갓난아기가 딸국질을 멈추도록 하는 방법은 무엇인가요?\n", + "Processing question 556/3952 : 1646년 요절한 인물의 부친은?_____________어떤 사람이 1646년에 사망한 사람의 아버지는 누구입니까?\n", + "Processing question 557/3952 : 신자유' 모형을 제시한 집단은?_____________'신경자유' 모형을 제시한 집단은?\n", + "Processing question 558/3952 : 자리돔이 암컷을 산란소로 유인하는 시기는 언제인가?_____________자리돔이 암컷을 산란소로 유인하는 시기는 언제입니까?\n", + "Processing question 559/3952 : 나탄이 젊은 부부에게 기꺼이 주려고 했던 것은 무엇인가?_____________나탄이 젊은 부부에게 기꺼이 주려고 했던 것은 무엇이었습니까?\n", + "Processing question 560/3952 : 땅 속에서부터 만드는 고인돌 방식은?_____________고인돌을 만드는 방식은 무엇인가요?\n", + "Processing question 561/3952 : 노태우는 몇 대 대통령인가?_____________노태우는 몇 번째 대통령인가요?\n", + "Processing question 562/3952 : 광고에 관련하여 불매운동이 일어난 회사는?_____________어떤 회사가 광고와 관련하여 불매운동을 당했나요?\n", + "Processing question 563/3952 : 돔 모양의 천막 지붕은 무엇을 모티브로 한 디자인인가요?_____________돔 모양의 천막 지붕은 어떤 소스에서 영감을 받아 디자인되었나요?\n", + "Processing question 564/3952 : 스태튼아일랜드 철도를 처음 운영한 것은 어디인가?_____________스태튼아일랜드 철도를 처음 운행한 장소는 어디인가요?\n", + "Processing question 565/3952 : 복단 만딕은 자신의 부모님의 몇 번째 남자아이였나?_____________복단 만딕은 부모님의 몇 번째 아들이었나요?\n", + "Processing question 566/3952 : 이경언의 선조는 누구인가?_____________이경언의 조상은 누구입니까?\n", + "Processing question 567/3952 : 그림형제가 민담을 모으기 시작한 년도는?_____________'그림형제가 민담을 수집하기 시작한 해는 언제인가요?'\n", + "Processing question 568/3952 : 춘향전을 관람할 수 있었던 극장은 언제 열었나요?_____________춘향전을 관람할 수 있었던 극장이 언제 개장되었습니까?\n", + "Processing question 569/3952 : 삼매봉 도서관은 원래 뭐라 불렸는가?_____________삼매봉 도서관은 처음에 어떤 이름으로 알려졌나요?\n", + "Processing question 570/3952 : 황남대총은 어느 시대의 릉인가?_____________황남대총은 어느 시대의 지도자인가?\n", + "Processing question 571/3952 : 아트페어에서 컬렉터나 미술관계자들은 무엇을 하는가?_____________아트페어에서 수집가나 미술관 관계자들은 어떤 역할을 수행하나요?\n", + "Processing question 572/3952 : 김익영이 국립박물관에서 일하기 전에 공부했던 곳은?_____________'김익영이 국립박물관에서 일하기 전에 학문을 공부했던 곳은 어디였나요?'\n", + "Processing question 573/3952 : 항마촉지인의 손모양이 그려진 불화의 명칭은?_____________항마촉지인의 손모양이 그려진 불화의 명칭은 무엇인가요?\n", + "Processing question 574/3952 : 여신의 전투와 군사적 관계를 중요시 한 사람들은?_____________누가 여신의 싸움과 군사적인 연관을 중요하게 생각하나요?\n", + "Processing question 575/3952 : 도스토옙스키의 시력이 망가졌을 때 그는 어떤 방식으로 작품을 완성할 수 있었나?_____________도스토옙스키가 시력을 잃었을 때 그는 어떤 방식으로 작품을 완성할 수 있었나요?\n", + "Processing question 576/3952 : 호 왕조는 멸망은 누구의 죽음에서 비롯됐는가?_____________호 왕조가 멸망한 것은 누구의 사망으로 인해 발생했습니까?\n", + "Processing question 577/3952 : 담양 연동사지 지장보살입상이 만들어졌을것으로 추정되는 시기는?_____________담양 연동사지 지장보살입상이 제작된 시기는 언제로 예상되나요?\n", + "Processing question 578/3952 : 리가 직접 문화를 경험하며 연구했던 대상은?_____________리가가 직접 체험하며 연구했던 대상은 무엇이었나요?\n", + "Processing question 579/3952 : 블라디미르 레닌이 자본주의 방식의 농업 구조가 과거 봉건적 농업 구조에서 발전된 모습이라는 것을 참고한 개념은?_____________레닌이 자본주의 방식의 농업 구조가 과거 봉건적 농업 구조에서 발전된 모습이라는 것을 참고한 개념은 무엇인가요?\n", + "Processing question 580/3952 : 『성련선』 내용에 따르면, 대전시에서 UFO로 인식되어지는 물체는?_____________대전시에서 UFO로 인식되는 물체는 무엇인가요?\n", + "Processing question 581/3952 : 이리퍼블릭의 시민들을 강화시키며 국가의 역량에 필요한 것은?_____________\"이리퍼블릭의 시민들을 강화시키며 국가의 역량에 필요한 것은 무엇인가요?\"\n", + "Processing question 582/3952 : 감각 뉴런이 감정을 격렬하게 느낄 때 이 뉴런은 어떻게 반응하는가?_____________감각 뉴런이 감정을 강하게 느낄 때 이 뉴런은 어떻게 반응합니까?\n", + "Processing question 583/3952 : 영어로 Presocratics란 뜻을 가진 낱말의 기원은?_____________Presocratic의 영어 동의어는 'Presocratic philosophers'입니다. 그 낱말의 기원은 무엇인가요?\n", + "Processing question 584/3952 : 이정무의 아들이 이화여전의 이사에 앉은 것은 몇년도인가?_____________이정무의 자녀가 이화여대 이사회에 참여한 연도는 언제인가요?\n", + "Processing question 585/3952 : 에오독소스 아버지가 태어난 곳은 어디인가?_____________에오독소스 아버지의 출생지는 어디입니까?\n", + "Processing question 586/3952 : 죽음에 대한 두려움을 이기고자 세르게이가 선택한 방법은?_____________세르게이가 죽음에 대한 두려움을 극복하기 위해 선택한 방법은 무엇인가요?\n", + "Processing question 587/3952 : 선발 투수로서 첫 해에 젱킨스의 삼진 갯수는?_____________젱킨스의 첫 해 선발 투수로서 기록한 삼진 수는 몇 개인가요?\n", + "Processing question 588/3952 : 양옥환이 태진궁의 여관이 되었을 당시 그녀의 나이는?_____________양옥환이 태진궁의 여관이 되었을 당시 그녀가 몇 살이었나요?\n", + "Processing question 589/3952 : 게오르크 프리드리히의 아내는 언제 죽었는가?_____________게오르크 프리드리히의 부인이 언제 사망했습니까?\n", + "Processing question 590/3952 : 브랜던 슬레이가 세계 주니어 레슬링 선수권에 참가하여 5위의 성적을 거둔 해는?_____________브랜던 슬레이가 세계 주니어 레슬링 선수권에 참가하여 5위의 성적을 걑은 연도는?\n", + "Processing question 591/3952 : 조선시대 최초로 신하들에게 공신녹권을 주었던 인물은?_____________조선시대 최초로 신하들에게 공신녹권을 부여한 사람은 누구였나요?\n", + "Processing question 592/3952 : 브나스크 백작령이 시칠리아의 토지였던 연도는?_____________브나스크 백작령이 시칠리아의 토지였던 연도는 언제였습니까?\n", + "Processing question 593/3952 : 도쿠가와 요시노부는 통치권 반환을 몇 월에 신청했는가?_____________도쿠가와 요시노부가 통치권 반환을 신청한 날짜는 언제였나요?\n", + "Processing question 594/3952 : 장군버거가 처음 출시된 해는?_____________장군버거가 처음 판매된 해는 언제인가요?\n", + "Processing question 595/3952 : 성하 마을과 주요 도로를 정비한 연도는?_____________성하 마을과 중요 도로를 개선한 해는 언제인가요?\n", + "Processing question 596/3952 : 마틸데의 첫째 언니가 사망한 년도는?_____________마틸데의 첫째 언니가 사망한 해는 언제인가요?\n", + "Processing question 597/3952 : 나폴레옹 전쟁 기간 중 프랑스보다 더 많은 무기를 생산한 나라는?_____________어떤 국가가 프랑스보다 더 많은 무기를 생산했는가?\n", + "Processing question 598/3952 : 마호라바에게 정신적 장애와 관련해 비난했던 국가는?_____________어떤 국가가 마호라바의 정신적 장애에 대해 비난을 받았나요?\n", + "Processing question 599/3952 : 감무를 진나라로 보내지 말라고 초 회왕에게 말한 사람은?_____________'감무를 진나라로 보내지 않도록 초 회왕에게 경고한 사람은 누구였나요?'\n", + "Processing question 600/3952 : 높이 5m의 장륙불상의 개수는?_____________'5미터 높이의 장륙불상은 몇 개 있나요?'\n", + "Processing question 601/3952 : 창호지의 소재를 사용해서 만든 예술품은 무엇인가?_____________창호지 소재를 활용하여 제작된 미술품은 무엇인가요?\n", + "Processing question 602/3952 : 14처가 있는 장소에서 기도를 할 수 없는 사람들은 어떤 방법으로 대사를 받을 수 있나?_____________14처가 있는 장소에서 기도를 할 수 없는 사람들은 어떻게 대신 대사를 받을 수 있나?\n", + "Processing question 603/3952 : 농촌진흥운동은 누가 주도한 것인가?_____________'농촌진흥운동은 누가 주도했습니까?'\n", + "Processing question 604/3952 : 중공군은 한국군 1개 대대가 오마치 고개에서 물러난 뒤 얼마 후에 공격을 퍼부었는가?_____________한국군 1개 대대가 오마치 고개에서 철수한 후 중공군이 얼마 후에 공격을 시작했습니까?\n", + "Processing question 605/3952 : 향교에 들어갈 수 있는 가장 낮은 신분은?_____________향교에 들어갈 수 있는 최하위 계급은 무엇인가요?\n", + "Processing question 606/3952 : 해마다 식중독으로 목숨을 잃는 인구는?_____________몇 명이 매년 식중독으로 사망하나요?\n", + "Processing question 607/3952 : 여찬은 누구에게 죽임을 당하나?_____________여찬은 누구에게 사망했나요?\n", + "Processing question 608/3952 : 도쿄 도지사가 리우데자네이루의 시장에게서 건네 받은 것은?_____________도쿄 도지사가 리우데자네이루의 시장으로부터 받은 것은 무엇입니까?\n", + "Processing question 609/3952 : 네덜란드 작가들이 자국의 황금기를 비유한 말은?_____________네덜란드 작가들이 자국의 황금기를 비유한 말은 무엇인가요?\n", + "Processing question 610/3952 : 방아깨비 수컷은 날면서 초당 약 몇 회의 날개짓을 하나?_____________방아깨비 수컷이 날면서 초당 약 몇 번의 날개짓을 하나요?\n", + "Processing question 611/3952 : 조선무선강습소의 시초가 된 사람은?_____________조선무선강습소의 창시자는 누구였나요?\n", + "Processing question 612/3952 : 사슴 동상이 위치한 동은?_____________사슴 동상이 있는 동은 어디에 위치하나요?\n", + "Processing question 613/3952 : 윌리엄 주니어가 윌리엄 대비슨을 위해 일하기 전에 학업에 열중한 곳은?_____________윌리엄 주니어가 윌리엄 대비슨을 위해 일하기 전에 전념한 학문적 활동이 집중된 장소는 어디였습니까?\n", + "Processing question 614/3952 : 히스파니아 타라코넨시스가 세 개 속주로 나누어진 연도는?_____________히스파니아 타라코넨시스가 세 개 지방으로 나누어진 연도는 언제입니까?\n", + "Processing question 615/3952 : 폴이 어릴 적 성적으로 흥분을 느꼈던 대상은?_____________폴이 어릴 때 성적으로 흥분을 느꼈던 사람은 누구였나요?\n", + "Processing question 616/3952 : 완전히 고립된 물리적 계가 존재할 수 있는 곳은?_____________어떤 장소에서 완전히 고립된 물리적 계가 존재할 수 있나요?\n", + "Processing question 617/3952 : 우왕은 어디서 태어났는가?_____________우왕의 출생지는 어디인가요?\n", + "Processing question 618/3952 : 로마, 밀라노 관계 발전을 위해 여러 주교들이 참여한 회의는 어디에서 열렸나요?_____________로마, 밀라노 관계 발전을 위해 여러 주교들이 참여한 회의는 어디에서 개최되었습니까?\n", + "Processing question 619/3952 : 한복의 속옷 중에서 가장 처음에 입는 것은?_____________한복의 속옷 중에서 처음에 입는 것은 무엇인가요?\n", + "Processing question 620/3952 : 망코 잉카는 어떤자들에 의해 살해 당하나?_____________망코 잉카는 누구에 의해 살해당했나요?\n", + "Processing question 621/3952 : 왕망에 대한 계략을 꾸민 이들 중 주살되지 않은 이는 누구인가?_____________누구가 왕위를 노리며 계략을 꾸미던 사람 중 살아남은 사람은 누구인가요?\n", + "Processing question 622/3952 : 예르지 네이만, 이건 피어슨과 함께 일했던 사람은?_____________예르지 네이만, 이 사람은 피어슨과 함께 일한 사람이었나요?\n", + "Processing question 623/3952 : 황방촌 영정의 원본은 어디에 보관되어 있었나?_____________황방촌 영정의 원본은 어디에 저장되어 있었습니까?\n", + "Processing question 624/3952 : 아픈 어머니를 위해 효자에게 고승이 처방해준 버섯은?_____________어머니가 아프신데 효자가 고승에게 처방받은 버섯은 무엇인가요?\n", + "Processing question 625/3952 : <거기 있나요>에서 인류진화과정을 나타내는 공간은?_____________'인류진화과정을 보여주는 전시물은 어디에 있나요?'\n", + "Processing question 626/3952 : 에가와와 요미우리는 언제 계약을 파기했나?_____________'에가와와 요미우리는 언제 계약을 해지했나?'\n", + "Processing question 627/3952 : 2005년까지 히페리온에 가장 근접해 사진을 찍은 탐사선은 무엇인가?_____________어떤 탐사선이 2005년까지 히페리온에 가장 가까이 다가가 사진을 찍었습니까?\n", + "Processing question 628/3952 : 마르텔리노를 죽이겠다고 협박한 시장의 국적은?_____________시장이 마르텔리노를 죽이겠다고 협박한 국적은 무엇인가요?\n", + "Processing question 629/3952 : 당사자는 항소심에 있어서 새로운 사실자료를 제출할 수 있다는 의미의 용어는?_____________항소심에 있어서 새로운 증거를 제출할 수 있다는 용어는 무엇입니까?\n", + "Processing question 630/3952 : 제닝스가 58살에 겪고 있던 질환은 무엇인가요?_____________제닝스가 58살 때 겪고 있는 질병은 무엇입니까?\n", + "Processing question 631/3952 : 예수가 하나님을 아버지라고 부른 것은 무엇으로 인해 잉태되었기 때문인가?_____________예수가 하나님을 아버지라고 칭한 것은 어떤 이유로 그렇게 했을까요?\n", + "Processing question 632/3952 : 자유민주주의에서 사람들 모두가 보장받아야 하는 것은?_____________'자유민주주의에서 사람들 모두가 확보해야 하는 것은 무엇인가요?'\n", + "Processing question 633/3952 : 박희양의 고조할아버지는 누구인가?_____________박희양의 조부는 누구인가요?\n", + "Processing question 634/3952 : 25년 미만 복무한 군단병이 받았던 제일 큰 연봉은 얼마인가?_____________군대에서 25년 미만 복무한 군단병이 받았던 최고 연봉은 얼마이었나요?\n", + "Processing question 635/3952 : 모부투가 다당제의 허용을 공표한 연도는?_____________'모부투가 다당제의 허용을 공표한 해는 언제인가요?'\n", + "Processing question 636/3952 : 하스타티들이 사용하지 않은 무기는?_____________하스타티들이 사용하지 않은 무기는 무엇인가요?\n", + "Processing question 637/3952 : 때때로 연극이 관객에게 무엇을 호소할려는지 알수 없는 이유는?_____________연극이 관객에게 무엇을 전하려는지 알기 어려운 이유는 무엇인가요?\n", + "Processing question 638/3952 : 도쿄와 오사카를 연결하는 간설 철도로 주로 실어 나른 것은?_____________도쿄와 오사카를 연결하는 간설 철도로 주로 운송되는 것은 무엇인가요?\n", + "Processing question 639/3952 : 버몬트 공화국 헌법에 삼권 분립 원칙이 더해진 해는?_____________'버몬트 공화국 헌법에 삼권 분립 원칙이 더해진 해는?'\n", + "Processing question 640/3952 : 튀르크인을 아나톨리아로 쫓아낸 병사들은 어느 지역에서 온 것인가?_____________어떤 지역에서 온 병사들이 튀르크인을 아나톨리아로 쫓아냈습니까?\n", + "Processing question 641/3952 : 아사이 쇼헤이가 친구들과 모이는 장소는?_____________아사이 쇼헤이가 친구들과 만나는 장소는 어디인가요?\n", + "Processing question 642/3952 : 교황의 조정 하에 페라라에서 체결된 조약은 어느 해에 이루어졌는가?_____________페라라에서 교황의 관리 하에 체결된 조약은 몇 년에 이루어졌습니까?\n", + "Processing question 643/3952 : 러블리스가 맥그래스를 공격한 이유는?_____________러블리스가 맥그래스를 공격한 이유가 무엇이었습니까?\n", + "Processing question 644/3952 : 파이완족이 일본 식민 통치 시기에 탄압받은 풍속은?_____________일본 식민 통치 시기에 파이완족이 탄압받은 풍속은 무엇이었나요?\n", + "Processing question 645/3952 : 믹 테일러는 어떤 밴드에서 기타를 연주하였나?_____________믹 테일러는 어떤 그룹에서 기타를 연주했습니까?\n", + "Processing question 646/3952 : 399년에 여광을 부르던 말은 무엇인가요?_____________399년에 유명했던 말은 무엇이었나요?\n", + "Processing question 647/3952 : 여운형의 노비들이 자유를 찾았던 해는?_____________여운형의 노비들이 해방을 했던 해는 언제인가요?\n", + "Processing question 648/3952 : 이동성이 만주로 이동한 해는?_____________만주로 이동한 해는 무슨 해인가요?\n", + "Processing question 649/3952 : 김정희가 청나라에 간 해는?_____________김정희가 청나라에 간 연도는?\n", + "Processing question 650/3952 : 아메데오가 비스콘티 가와 맺은 조약에 포함된 항목은?_____________아메데오가 비스콘티 가와 맺은 조약에 포함된 내용은 무엇인가요?\n", + "Processing question 651/3952 : 오리너구리와 눈 구조가 가장 비슷한 어류는 무엇인가요?_____________어떤 어류가 오리너구리와 눈 구조가 가장 유사한가요?\n", + "Processing question 652/3952 : 구급차로 부상자가 이동하는 것을 막은 것은?_____________누군가가 구급차로 부상자 이동을 방해한 것은 무엇인가요?\n", + "Processing question 653/3952 : 칼스 보이스와 수잔 스토크스는 경제가 나아질수록 평화를 무너뜨릴 존재를 누구로 봤나?_____________칼스 보이스와 수잔 스토크스는 경제가 나아질 때 무너질 수 있는 평화를 어떤 존재로 보았나요?\n", + "Processing question 654/3952 : 생도대의 2대대가 화랑리더스리그에 참여하는 요일은?_____________생도대의 2대대가 화랑리더스리그에 참여하는 날짜는 무엇인가요?\n", + "Processing question 655/3952 : 19세기 말 러시아의 농민과 진보 귀족이 거부했던 농업 구조는 무엇인가?_____________19세기 말 러시아의 농민과 진보 귀족이 반대했던 농업 구조는 무엇입니까?\n", + "Processing question 656/3952 : 보은 상무의 드래프트를 거절함으로써 군복무를 선택할 수 있도록 만든 사람은?_____________보은 상무의 드래프트를 거절함으로써 군복무를 선택할 수 있도록 만든 사람은 누구입니까?\n", + "Processing question 657/3952 : 웰링턴 부대는 살라망카 전투에서 승리한 후 어디로 진출하였나요?_____________웰링턴 부대가 살라망카 전투 이후 어디로 전진했습니까?\n", + "Processing question 658/3952 : 양명이 56세가 되기 전까지 열중했던 것은?_____________양명이 56세가 되기 전까지 열중했던 것은 무엇이었나요?\n", + "Processing question 659/3952 : 히포드롬에 남아있는 4개의 건축물 중 독일에서 가져온 것은?_____________4개의 건축물 중 독일에서 가져온 것은 무엇인가요?\n", + "Processing question 660/3952 : 피커링이 최초로 업무를 시키기 위해 뽑은 여성의 이전 직업은?_____________피커링이 최초로 업무를 시키기 위해 뽑은 여성의 전 직업은 무엇이었습니까?\n", + "Processing question 661/3952 : 네이든이 몰래 좋아하고 있었던 인물은 누구인가요?_____________네이든이 비밀리에 호감을 가지고 있던 사람은 누구인가요?\n", + "Processing question 662/3952 : 안성 정무공오정방고택에서 현재 남아있고 사랑채와 연결되어 있는 부분은?_____________안성 정무공오정방고택에서 현재 남아있는 부분은 무엇이며, 그것은 사랑채와 어떻게 연결되어 있나요?\n", + "Processing question 663/3952 : 1984년 올스타전에서 에가와 스구루의 8연속 탈삼진의 행진을 막은 사람은?_____________누가 1984년 올스타전에서 에가와 스구루의 8연속 탈삼진을 막았나요?\n", + "Processing question 664/3952 : 박영효와 이규완의 나이 차이는?_____________'박영효와 이규완의 연령 차이는 얼마인가요?'\n", + "Processing question 665/3952 : 공식 발표를 참고하면, 조선철도국 축구단이 새로이 만들어졌던 년도는 언제인가?_____________조선철도국 축구단이 새롭게 창설된 연도는 언제인가요?\n", + "Processing question 666/3952 : 《내 어머니 사는 나라》에 등장하는 할아버지의 출신은?_____________할아버지의 출신지는 어디인가요?\n", + "Processing question 667/3952 : 가야파가 소집한 산헤드린 의회의 주요 의제는?_____________산헤드린 의회의 핵심 안건은 무엇인가요?\n", + "Processing question 668/3952 : 라호르 조약은 제 1차 시크 전쟁에서 누가 패배한 후 체결되었나요?_____________라호르 조약은 제 1차 시크 전쟁에서 누가 패배한 후 체결되었나요?\n", + "Processing question 669/3952 : 전쟁 이후 노예인원의 변화에 따라 라티푼디움의 운영 구조는 어떤 방식으로 변화하였는가?_____________라티푼디움의 운영 구조가 전쟁 이후 노예인원의 변화에 의해 어떻게 변화했습니까?\n", + "Processing question 670/3952 : 유재홍 군단장에게 오마치 고개에서 철수할 것을 요청한 자는?_____________누가 유재홍 군단장에게 오마치 고개에서 철수할 것을 요청했습니까?\n", + "Processing question 671/3952 : 하라이 가즈야는 어디에서 셰이크를 활용해 포수를 플라이 아웃시켰나?_____________하라이 가즈야는 어떤 장소에서 셰이크를 이용하여 포수를 플라이 아웃시켰습니까?\n", + "Processing question 672/3952 : 민간인을 상대로 무차별 공격을 벌인 군대는?_____________어떤 군대가 민간인을 대상으로 무차별 폭격을 실시했습니까?\n", + "Processing question 673/3952 : 아이톨리아 동맹 도시가 제2차 마케도니아 전쟁이 일어나자 옹호한 쪽은?_____________아이톨리아 동맹 도시가 제2차 마케도니아 전쟁이 발발하자 지지한 쪽은 누구인가요?\n", + "Processing question 674/3952 : 소화관과 이어져있으며 허파의 역할을 맡는 장기는 무엇인가?_____________어떤 기관이 소화기관과 연결되어 있으며 호흡기 기관을 대신하는 장기가 무엇인가요?\n", + "Processing question 675/3952 : 수잔 케인이 대만 고관을 소개해준 사람은?_____________수잔 케인이 대만 고관을 소개해준 사람은 누구였나요?\n", + "Processing question 676/3952 : 카카포 보호를 위한 회복 계획을 추진한 해는?_____________카카포 보호를 위한 회복 계획을 추진한 해는 언제인가요?\n", + "Processing question 677/3952 : 발리송이 미국에 알려진 시기는 언제인가?_____________발리송이 미국에서 유명해진 시기는 언제인가요?\n", + "Processing question 678/3952 : 육군본부에서 국군에게 증원 부대를 투입해준 날짜는?_____________육군본부가 국군에게 추가 부대를 파견한 날짜는 언제인가요?\n", + "Processing question 679/3952 : 보헤미아 귀족들이 루돌프2세에게 받아낸 칙서를 통해 얻어낸 것은?_____________보헤미아 귀족들이 루돌프 2세에게 받아낸 칙서를 통해 획득한 것은 무엇인가요?\n", + "Processing question 680/3952 : 이에몬에게 암살을 당한 인물의 딸 이름은 무엇인가요?_____________이에몬에게 암살을 당한 인물의 딸의 이름은 무엇입니까?\n", + "Processing question 681/3952 : 허형이 장균의 소송을 담당할 당시 그의 관직은 무엇이었나?_____________허형이 장균의 소송을 맡은 당시 그의 직위는 무엇이었습니까?\n", + "Processing question 682/3952 : 제2차 세계대전 이후 잉글랜드어의 세계화에 큰 기여를 한 나라는?_____________잉글랜드어의 세계화에 큰 영향을 끼친 나라는 무엇인가요?\n", + "Processing question 683/3952 : 불교사범학교의 원래 이름은 무엇이었나요?_____________불교사범학교의 본래 명칭은 무엇이었습니까?\n", + "Processing question 684/3952 : 충주 조동리유적의 신석기시대 문화층에서 다량 출토된 것은?_____________충주 조동리유적의 신석기시대 문화층에서 대량으로 발견된 것은 무엇인가요?\n", + "Processing question 685/3952 : 자유한국당이 크게 패배한 뒤 대표직을 내려놓은 인물은?_____________'자유한국당이 대선 패배 후 사퇴한 인물은?'\n", + "Processing question 686/3952 : 어머니가 나가서 구하려한 것은?_____________어머니가 찾으려고 했던 것은 무엇인가요?\n", + "Processing question 687/3952 : 기존 한중 방면 사령관을 전사시킨 인물은?_____________한중 방면 사령관을 전사시킨 인물은 누구인가요?\n", + "Processing question 688/3952 : 스타일과 여러가지 방면에서 성숙한 특징을 가진 소나타의 작곡가는?_____________소나타의 작곡가는 스타일과 여러가지 측면에서 성숙한 특징을 가지고 있습니까?\n", + "Processing question 689/3952 : 화이트베이스에게 직접 복수를 감행한 인물은?_____________화이트베이스를 공격한 사람은 누구인가요?\n", + "Processing question 690/3952 : 유리 로디긴은 누구에게 골키퍼의 요령을 전수해주었나요?_____________유리 로디긴은 어떤 사람에게 골키퍼의 기술을 가르쳤나요?\n", + "Processing question 691/3952 : 몇몇 금고를 제외하고는 어디에서나 만들 수 있는 새마을금고의 상품은 무엇인가?_____________새마을금고의 상품을 만들지 않는 몇몇 금고를 제외하고는 어디에서나 만들 수 있는 상품은 무엇인가요?\n", + "Processing question 692/3952 : 예측할 수 없는 대류의 움직임 때문에 발생하게 되는 것은?_____________불확실한 기상 조건으로 인해 발생하는 것은 무엇인가요?\n", + "Processing question 693/3952 : 고엽제 후유증 2세 환자로 최초 인정 판결을 받은 사람은?_____________'고엽제 후유증 2세 환자로 최초 인정된 판결을 받은 사람은 누구인가요?'\n", + "Processing question 694/3952 : 갈릴레이가 금성의 위상 변화와 같은 과학적 증거를 기반으로 설파했던 이론은?_____________갈릴레이가 금성의 위상 변화와 같은 과학적 증거를 바탕으로 주장했던 이론은 무엇인가요?\n", + "Processing question 695/3952 : 주교가 주케토를 벗는 것은 무엇을 할 때인가?_____________주교가 주케토를 벗는 시점은 언제인가요?\n", + "Processing question 696/3952 : 헬기의 말을 듣고 시그룬에게 무덤에 가 헬기를 만나라 한 인물은?_____________무덤에 가 헬기를 만나라 한 인물은 시그룬에게 누구인가요?\n", + "Processing question 697/3952 : 동남 36개의 섬들을 지배하고 있었던 인물은?_____________'동남 36개의 섬들을 통치했던 인물은 누구였나요?'\n", + "Processing question 698/3952 : 입구'에서 하차하는 승객에게 운송비를 받는 사람은 누구인가?_____________'출입구'에서 하차하는 승객에게 운송비를 받는 사람은 누구인가?\n", + "Processing question 699/3952 : 간토 대지진 외에 사가미 해곡 지진에 해당되는 지진은?_____________사가미 해곡 지진 외에 어떤 지진이 간토 대지진과 관련이 있습니까?\n", + "Processing question 700/3952 : 스칼라 레지아의 재건축이 시작된 해는?_____________스칼라 레지아의 재건축이 시작된 연도는 언제인가요?\n", + "Processing question 701/3952 : 금산의 격전에서 상황을 반전시킨 인물은?_____________금산의 격전에서 상황을 뒤집은 인물은 누구인가요?\n", + "Processing question 702/3952 : 버드 슈거맨 기념판은 어느 건물 쪽에 세워졌는가?_____________'버드 슈거맨 기념판은 어느 건물 쪽에 세워졌는가?' -> '어느 건물 측면에 버드 슈거맨 기념판이 위치하고 있나요?'\n", + "Processing question 703/3952 : 세포에서 핵, 엽록체 등을 포괄해 일컫는 말은?_____________세포에서 핵, 엽록체 등을 포괄해 일컫는 말은 무엇인가요?\n", + "Processing question 704/3952 : 명륜당과 제사공간의 위치로 알 수 있는 배치 방식은?_____________명륜당과 제사공간이 어떻게 배치되어 있는지를 알 수 있는 방식은 무엇인가요?\n", + "Processing question 705/3952 : 광전지는 무엇에 민감하게 반응하는 성질을 이용한 것인가?_____________광전지는 어떤 특성을 활용하여 작동하나요?\n", + "Processing question 706/3952 : 수능에서 가장 많은 오류가 발생한 연도는?_____________어떤 해가 수능에서 가장 많은 잘못이 발생한 해는 무엇입니까?\n", + "Processing question 707/3952 : 에런 크루거는 위미르를 무엇이라 주장했나?_____________에런 크루거는 위미르를 무엇이라 주장했습니까?\n", + "Processing question 708/3952 : 원주군은 전국 8도 중 어느 곳에 속해 있는 지역인가?_____________'원주군은 한반도의 8도 중 어디에 위치한 지역입니까?'\n", + "Processing question 709/3952 : 위층 기단에서는 어떤 모양의 8부중상을 볼 수 있는가?_____________어떤 형태의 8부상을 위층 기단에서 볼 수 있나요?\n", + "Processing question 710/3952 : 진시황의 분서나 한자 변화로 잃어버린 유교 경전을 다시 구성하는데 사용된 학문은?_____________어떤 학문이 진시황의 분서나 한자 변화로 잃어버린 유교 경전을 다시 구성하는데 사용되었나요?\n", + "Processing question 711/3952 : 북한이 디지털 통신망 구축을 위해 계약을 맺은 곳은 어느 나라 회사인가?_____________북한이 디지털 통신망 구축을 위해 계약을 맺은 곳은 어떤 국적의 회사인가요?\n", + "Processing question 712/3952 : 중국에서 미풍양속으로 여겨졌던 거주 풍습은?_____________중국에서 존경받는 거주 풍습은 무엇인가요?\n", + "Processing question 713/3952 : 브레슬라우 전투 이후에 벌어진 전투는 무엇인가?_____________브레슬라우 전투 이후에 벌어진 전투는 무엇인가?\n", + "Processing question 714/3952 : 존슨이 부상 이후 다시 경기에 참가할 때의 장타율은?_____________존슨이 다시 경기에 참가한 후의 타율은 어떻게 되나요?\n", + "Processing question 715/3952 : 모란이 수놓아진 부분 중 녹색 연화문단으로 만들어진 것은 유물의 어느 부분인가?_____________모란이 수놓아진 부분 중 초록색 연화문단으로 만들어진 것은 유물의 어떤 부분입니까?\n", + "Processing question 716/3952 : 조선민주주의인민공화국에서 현재 사용하고 있는 무역법의 마지막 수정 연도는?_____________'조선민주주의인민공화국에서 현재 사용 중인 무역법의 최근 수정 연도는 언제인가요?'\n", + "Processing question 717/3952 : 기갑 세력을 이용하여 호르티에게 항복을 받아낸 사람은 누구인가?_____________누가 호르티에게 항복을 받아낸 사람인가?\n", + "Processing question 718/3952 : 잘못을 인정하지 않고 반발한 인물은 누구인가?_____________누가 잘못을 인정하지 않고 반발했나요?\n", + "Processing question 719/3952 : 올림픽 태권도에서 최초의 승리번복이 일어난 연도는?_____________태권도가 처음으로 올림픽에서 승리를 거둔 연도는 언제인가요?\n", + "Processing question 720/3952 : 사이리 투팍의 부친을 왕좌에 앉힌 장본인은 누구인가?_____________사이리 투팍의 부친을 왕좌에 앉힌 주요 인물은 누구입니까?\n", + "Processing question 721/3952 : 요한 바오로 2세의 아들을 죽인 악마 이름은?_____________요한 바오로 2세의 아들을 죽인 사람의 이름은?\n", + "Processing question 722/3952 : 퍼거슨 시의 시위대가 무력을 행사할만큼 격노한 이유는 무엇인가?_____________퍼거슨 시의 시위대가 격노한 이유는 무엇인가?\n", + "Processing question 723/3952 : 재정위기를 타개하고자 루이 16세가 두번에 걸쳐 기용한 인물은?_____________두 대의 컨트롤러를 임명하여 재정위기를 해결하려고 한 루이 16세가 기용한 인물은 누구인가요?\n", + "Processing question 724/3952 : 피아노 협주곡 5번의 연주와 출판이 모두 이루어진 도시는 어디인가?_____________'피아노 협주곡 5번이 연주되고 출판된 도시는 어디에 위치하나요?'\n", + "Processing question 725/3952 : 탕헤르의 시가지에서 신시가를 조성하던 문화는?_____________탕헤르의 시가지에서 신시가를 조성하던 문화는 무엇인가요?\n", + "Processing question 726/3952 : 초기 근대학교에서 국가주축으로 인격을 기르고자 체조시간에 시행한 것은?_____________근대 시대의 학교에서 국가주의 정신을 강조하기 위해 실시한 체조 시간은 무엇인가요?\n", + "Processing question 727/3952 : 문천상의 사형 집행을 즉각 멈추라고 얘기한 인물은?_____________누가 문천상의 사형 집행을 즉각 중단하라고 요청했습니까?\n", + "Processing question 728/3952 : EF13형 기관차는 전형적인 무슨 설계의 예시인가?_____________EF13형 기관차는 전형적인 어떤 설계의 예시인가?\n", + "Processing question 729/3952 : 고티에가 영국으로 도망가기 전 머물렀던 곳은?_____________고티에가 영국으로 도망가기 전 머물렀던 장소는 어디였습니까?\n", + "Processing question 730/3952 : 2013년에 이진한 서울중앙지검 제2차장검사가 받은 혐의는?_____________2013년에 서울중앙지검 제2차장검사가 받은 혐의는 무엇이었습니까?\n", + "Processing question 731/3952 : 맥거번이 시카고에서 개최된 민주당 전당 대회에 참여하려 하기 전에 살해당한 인물은?_____________맥거번이 시카고에서 열린 민주당 대회에 참석하기 전에 죽임을 당한 사람은 누구인가요?\n", + "Processing question 732/3952 : 재야 및 운동권자들이 늦봄, 초여름 즈음에 벌인 시위장소에서 개최 예정이었던 행사는?_____________어떤 공공시설에서 열리는 행사는?\n", + "Processing question 733/3952 : 워터게이트 당시 특별검사를 면직시킨 인물은 어떤 결과를 맞이하였나?_____________'워터게이트 사건 당시 특별겴사를 해고한 사람은 어떤 결론에 이르렀나요?'\n", + "Processing question 734/3952 : 진우량의 자녀 이름은?_____________진우량의 자녀 이름은 무엇인가요?\n", + "Processing question 735/3952 : 박근혜 대통령이 남북교류협력사무소 설치를 제의한 것은 몇 월인가?_____________박근혜 대통령이 남북교류협력사무소 설치를 제의한 것은 어느 달이었나요?\n", + "Processing question 736/3952 : 세르비아 몬테네그로의 전 국호는?_____________세르비아 몬테네그로의 전 국호는 무엇입니까?\n", + "Processing question 737/3952 : \"텍사스의 아버지\"로 불리던 엠프레사리오의 아버지 이름은 무엇인가요?_____________엠프레사리오의 아버지 이름은 무엇인가요?\n", + "Processing question 738/3952 : 일반인은 앉을 수 없는 벤치가 있는 공간은?_____________어떤 장소에는 일반인이 앉을 수 없는 벤치가 있나요?\n", + "Processing question 739/3952 : 나치가 본인의 정책 중 경제 분야를 맡긴 사람은?_____________나치가 본인의 정책 중 경제 분야를 맡긴 인물은 누구인가요?\n", + "Processing question 740/3952 : 공박에서 2008년 4월에 새로 선보인 캐릭터가 수행하기에 적절한 포지션은?_____________어떤 역할이 적합한가요?\n", + "Processing question 741/3952 : 한국에서는 관심을 받지 못했지만 일본에서 붐을 일으킨 음악의 장르는?_____________한국에서는 주목받지 않았지만 일본에서 인기를 끌었던 음악 장르는 무엇인가요?\n", + "Processing question 742/3952 : 릭단이 1620년 무력으로 중국 명나라로 부터 받아낸 조공의 금액은 얼마인가?_____________릭단이 1620년 중국 명나라로부터 받은 조공의 금액은 얼마였습니까?\n", + "Processing question 743/3952 : 정치가 이전에 로마 축제를 담당했던 사람은?_____________로마 축제를 주관했던 사람은 누구였습니까?\n", + "Processing question 744/3952 : 댓글에 의해 스레드 위치가 바뀌는 게시판이 시작되었던 날짜는?_____________게시판에서 댓글에 의해 스레드 위치가 변경되기 시작한 날짜는 언제였나요?\n", + "Processing question 745/3952 : 난방 에너지원을 전기로 통합하는 것을 무엇이라고 부르나요?_____________난방 에너지원을 전기로 통합하는 것을 무엇이라고 합니까?\n", + "Processing question 746/3952 : “마님이 된 하녀”가 나머지 부분과 분리되기전 작품의 이름은?_____________\"마님이 된 하녀\"가 분리되기 전 작품의 이름은 무엇인가요?\n", + "Processing question 747/3952 : 외계인들로 이루어진 제국을 이끄는 사람은?_____________'외계 생명체들로 이뤄진 제국을 지배하는 인물은 누구인가요?'\n", + "Processing question 748/3952 : 인터랙션 디자인은 무엇의 등장으로 빠르게 발전되었나요?_____________인터랙션 디자인이 빠르게 발전된 이유는 무엇인가요?\n", + "Processing question 749/3952 : 캐니언이 발견한 버킷리스트는 누가 쓴 것이었나요?_____________'캐니언이 찾아낸 버킷 리스트는 누가 작성했습니까?'\n", + "Processing question 750/3952 : 한국에서 처음으로 여자 피겨 선수권 대회 1등을 배출한 해는?_____________한국에서 처음으로 여자 피겨 선수권 대회 1등을 획득한 해는 언제인가요?\n", + "Processing question 751/3952 : 우르바노 5세는 1370년에 어디로 가기 위해 코르네토에서 배를 탔나요?_____________우르바노 5세는 1370년에 어디로 가기 위해 코르네토에서 배를 탔습니까?\n", + "Processing question 752/3952 : 짐보의 이야기 중 베트콩과의 전쟁에 같이 참여한 인물은?_____________베트콩과의 전쟁에 함께 참가한 인물은 누구인가요?\n", + "Processing question 753/3952 : 《제일하우스 록》은 어느 나라의 영화인가요?_____________《제일하우스 록》은 어느 국가의 영화입니까?\n", + "Processing question 754/3952 : 글리세린과 프탈산의 화합물은?_____________'글리세린과 프탈산이 반응하여 생성되는 화합물은?'\n", + "Processing question 755/3952 : 트램펄린의 개발은 누구의 행위에서 아이디어를 얻었는가?_____________트램펄린의 개발은 누구로부터 영감을 받았나요?\n", + "Processing question 756/3952 : 유일하게 병동 현장을 본 사람은?_____________누가 유일하게 병동 현장을 목격했습니까?\n", + "Processing question 757/3952 : 빌의 새아버지의 이름은?_____________빌의 새아버지의 이름은 무엇인가요?\n", + "Processing question 758/3952 : 손환을 구하려다가 적의 기습을 당하는 장수는?_____________손환이 적의 기습을 받는 장수는 누구인가요?\n", + "Processing question 759/3952 : 이집트를 구원하기 위해 로마에서 보낸 사람은?_____________\"로마가 이집트를 구원하기 위해 파견한 사람은 누구인가요?\"\n", + "Processing question 760/3952 : 리튬 전지가 여러 분야에서 무엇을 대체하여 쓰일 수 있는가?_____________리튬 전지가 다양한 분야에서 어떤 것을 대체하여 사용될 수 있습니까?\n", + "Processing question 761/3952 : 페가수스 다리 공격 시 이동수단은?_____________페가수스 다리 공격 시 어떤 이동 방식을 사용하나요?\n", + "Processing question 762/3952 : 오리너구리가 전기를 가장 잘 느끼는 부위는?_____________오리너구리가 전기를 가장 잘 느끼는 부위는 어디인가요?\n", + "Processing question 763/3952 : 브라질의 일반 시민들은 대체로 어떤 직업을 가지고 있나?_____________브라질의 보통 시민들은 대체로 어떤 직업을 가지고 있습니까?\n", + "Processing question 764/3952 : 해먼드 부자 구금의 계기가 된 사건은 언제 일어났나요?_____________해먼드 부자가 체포된 계기가 된 사건이 언제 발생했습니까?\n", + "Processing question 765/3952 : 온센타마고에서 굳는 부분은 어떤 성분을 지니고 있는가?_____________온센타마고에서 굳는 부분은 어떤 성분으로 이루어져 있나요?\n", + "Processing question 766/3952 : 1944년에 소드 해변은 누가 차지하고 있었나요?_____________소드 해변은 1944년에 누가 점령하고 있었습니까?\n", + "Processing question 767/3952 : 선수와 관중 사이에 다툼이 벌어졌던 경기 날짜는?_____________선수와 관중 사이에 갈등이 발생한 경기 일자는 언제였습니까?\n", + "Processing question 768/3952 : 존스가 최정예 대대를 파견해서 돕고자 한 부대는?_____________존스가 파견한 최정예 대대를 돕기 위한 부대는 무엇입니까?\n", + "Processing question 769/3952 : 복할배는 누구의 배반으로 인해 사망하게 되나요?_____________누가 복할배를 배반하여 살해하게 되나요?\n", + "Processing question 770/3952 : 조선인민당이 보수층을 위해 사용한 문양은?_____________조선인민당이 보수층을 위해 사용한 문양은 무엇입니까?\n", + "Processing question 771/3952 : 1560년 이전 스코틀랜드 교회의 소속은?_____________1560년 전 스코틀랜드 교회의 소속은 무엇이었습니까?\n", + "Processing question 772/3952 : 그림에서 귀걸이와 팔찌가 장식된 인물은?_____________인물이 귀고리와 팔찌로 장식된 사람은 누구인가요?\n", + "Processing question 773/3952 : 피렌체 화파에 영향을 끼친 사람은?_____________'피렌체 화가파에 영향을 미친 인물은 누구인가요?'\n", + "Processing question 774/3952 : 일본공산당에 불만을 품은 과격파 학생당원들이 차후에 만든 단체는?_____________일본공산당에 불만을 품은 과격파 학생당원들이 차후에 만든 단체는 무엇인가요?\n", + "Processing question 775/3952 : 비오 11세의 선임자는?_____________'비오 11세의 선임자는?' -> '비오 11세의 선임은 누구인가요?'\n", + "Processing question 776/3952 : 이자나미의 죽음이 나와있는 책은?_____________'이자나미의 사망이 기록된 책은 무엇인가요?'\n", + "Processing question 777/3952 : 갈라티 수도원이 세계 문화 유산으로 선정된 해는?_____________갈라티 수도원이 세계 문화 유산으로 지정된 연도는 언제인가요?\n", + "Processing question 778/3952 : 중학부 종목에서 3:2로 패배하여 우승하지 못한 학교는?_____________어떤 학교가 중학부 종목에서 2:3으로 패배하여 우승하지 못했나요?\n", + "Processing question 779/3952 : 아비코 역 안내 표기가 히라가나인 것은 누구를 배려함인가?_____________아비코 역 안내 표기가 히라가나로 된 이유는 누구를 고려한 것인가요?\n", + "Processing question 780/3952 : 튀코와 결투하면서 그의 코 일부를 잘랐던 인물은?_____________튀코와 결투하면서 그의 코 일부를 잘랐던 인물은 누구였나요?\n", + "Processing question 781/3952 : 상습적으로 윤락행위를 저지르는 자를 부르는 말은 무엇인가요?_____________상습적으로 윤락행위를 저지르는 자를 부르는 말은 무엇인가요?\n", + "Processing question 782/3952 : 튜더 왕가의 정통성에 해를 가했던 사람들은 언제 죽음을 당하였나요?_____________튜더 왕가의 합법성에 해를 끼친 사람들은 언제 사망했습니까?\n", + "Processing question 783/3952 : 보통 긴팔원숭이들의 암수 구분은 무엇으로 알 수 있나요?_____________긴팔원숭이들의 암수를 구분하는 방법은 무엇인가요?\n", + "Processing question 784/3952 : 조지아인과 오세트인이 화합을 이루웠던 때는 언제인가?_____________언제 조지아인과 오세트인이 합의를 이루었습니까?\n", + "Processing question 785/3952 : 송일국의 매니저가 김을동의 의원실 인턴 업무를 병행했던 연도는?_____________송일국의 매니저가 김을동의 의원실 인턴 업무를 함께 했던 해는 언제였나요?\n", + "Processing question 786/3952 : 크르팔레크가 세계 선수권에서 5위를 한 년도는?_____________크르팔레크가 세계 선수권에서 5위를 한 해는 언제인가요?\n", + "Processing question 787/3952 : 1990년 대통령표창 애족장을 추서받은 사람의 본관은?_____________애족장을 받은 사람의 본관은 무엇입니까?\n", + "Processing question 788/3952 : 2005년의 조사에서 밝힌 아루바에서 살고 있는 민족의 수는?_____________아루바에 거주하는 민족 수에 대한 2005년 조사 결과는 얼마였나요?\n", + "Processing question 789/3952 : 필리포스 2세의 통치 기간에 이익을 위해 만든 것은?_____________필리포스 2세의 통치 시기에 이익을 위해 만들어진 것은 무엇이었습니까?\n", + "Processing question 790/3952 : 두 개의 지역으로 줄어든 후에 킬리키아의 명칭은 무엇으로 변경되었나?_____________킬리키아가 두 개의 지역으로 분할된 후에 어떤 이름으로 변경되었나요?\n", + "Processing question 791/3952 : 제2차 야마모토 내각이 국가가 직접 조선인을 감찰할 것이니 개인이 사적 제재를 하지 말라고 공표한 것은?_____________'제2차 야마모토 내각이 국가가 직접 조선인을 감찰할 것이니 개인이 사적 제재를 하지 말라고 공표한 것은 무엇인가요?'\n", + "Processing question 792/3952 : 장면이 총리가 되는 것을 반대한 인물은?_____________누가 장면이 총리가 되는 것을 반대했나요?\n", + "Processing question 793/3952 : 블룸필드가 타갈로그어를 연구할 당시 다니고 있던 직장은?_____________블룸필드가 타갈로그어를 연구할 당시 다니고 있던 직장은 어디였습니까?\n", + "Processing question 794/3952 : 로디니아가 갈라지기 시작한 시기는?_____________로디니아가 분열하기 시작한 시기는 언제였습니까?\n", + "Processing question 795/3952 : 벨라루스 공화국은 몇 년도부터 특별 참가국 자격으로 유럽 평의회 의원 회의에 참석하였나?_____________벨라루스는 언제부터 유럽 평의회 의원 회의에 특별 참가국 자격으로 참석했나요?\n", + "Processing question 796/3952 : 4·19 혁명이 성공한 이후, 김영훈이 사직한 직분은?_____________김영훈이 4·19 혁명 이후에 사직한 직분은 무엇입니까?\n", + "Processing question 797/3952 : 튀코가 출판한 항성목록의 갯수는 이후에 몇 개가 되었나요?_____________투코가 출판한 항성목록의 수량이 이후에 몇 개가 되었습니까?\n", + "Processing question 798/3952 : 미에빌의 작품속에서 보이는 등장인물이나 작품경향에 영향을 준 게임의 종류는?_____________미에빌의 작품속에서 보이는 등장인물이나 작품경향에 영향을 준 비디오 게임의 종류는 무엇인가요?\n", + "Processing question 799/3952 : 《닥터 후》에서 정기 배역으로 출연을 맡은 인물은?_____________'《닥터 후》에서 주요 역할로 등장한 인물은 누구인가요?'\n", + "Processing question 800/3952 : 남상철의 아버지는 언제 살아남았나요?_____________'남상철의 아버지는 언제 생존했습니까?'\n", + "Processing question 801/3952 : 양성 통제는 무엇을 판가름 하기 위해 흔하게 쓰이는가?_____________'양성 통제는 무엇을 결정하기 위해 주로 사용되는가?'\n", + "Processing question 802/3952 : 빔비사라의 아들이며 앙가를 다스린 사람은 누구인가?_____________앙가를 다스리는 사람은 누구인가?\n", + "Processing question 803/3952 : 임진왜란 당시, 황석산성에서 두 아들과 함께 죽음을 맞이한 인물은?_____________임진왜란 당시, 황석산성에서 두 아들과 함께 죽음을 맞이한 인물은 누구였나요?\n", + "Processing question 804/3952 : 콜레라의 원인을 오염된 물이라고 하는 주장을 일축한 것은 누구인가?_____________콜레라의 원인을 오염된 물이라고 하는 주장을 부인한 사람은 누구인가?\n", + "Processing question 805/3952 : 방송통신심의위원회와 인터넷 방송국에게 방송인 관리를 더 철저히 해야한다고 말한 사람은 누구인가?_____________'방송통신심의위원회와 인터넷 방송국에게 방송인 관리를 강화해야 한다고 주장한 사람은 누구인가?'\n", + "Processing question 806/3952 : 마르첼로 1세가 로마 주교 자리에 앉게 된 해는?_____________마르술루스 1세가 로마 주교 자리에 앉게 된 해는 언제였나요?\n", + "Processing question 807/3952 : 하워드 마셜의 재산 상속을 위해 안나 니콜 스미스가 법정 소송을 벌인 기간은?_____________안나 니콜 스미스가 하워드 마셜의 재산 상속을 위해 법정 소송을 제기한 기간은 언제였나요?\n", + "Processing question 808/3952 : 1992년에 수립된 알바니아 민주당 정권의 리더는 누구였나요?_____________알바니아 민주당 정권의 리더가 누구였습니까?\n", + "Processing question 809/3952 : 셰익스피어가 창작한 실수 연발에서 다뤄지고 있는 이야기의 소재는?_____________셰익스피어가 창작한 실수 연발에서 다뤄지고 있는 이야기의 소재는 무엇인가요?\n", + "Processing question 810/3952 : 반클리프 아펠의 회고전은 어느 계절에 열렸나요?_____________반클리프 아펠의 회고전은 무슨 계절에 열렸나요?\n", + "Processing question 811/3952 : 광무개혁은 어떤 산업의 진흥을 위해 실시된 정책이었나요?_____________'광무개혁은 어떤 산업의 발전을 위해 시행된 정책이었나요?'\n", + "Processing question 812/3952 : 조선후기 불상들에게서 흔이 볼 수 있는 의복의 종류은?_____________조선 후기 불상들의 의복에는 어떤 종류의 옷이 자주 나타날까요?\n", + "Processing question 813/3952 : 그리폰이 반란을 일으켰던 인물은 아버지가 죽기 전 무엇을 받았나요?_____________그리폰이 반란을 일으켰던 인물은 아버지가 죽기 전 받은 것은 무엇이었나요?\n", + "Processing question 814/3952 : 과실인 경우에도 처벌받을 수 있음이 명시된 규칙은?_____________과실로 인해 처벌받을 수 있는 규정이 어디에 명시되어 있습니까?\n", + "Processing question 815/3952 : 바그라트의 아버지가 타오와 파시아네를 점령한 년도는?_____________바그라트의 아버지가 타오와 파시아네를 젠오한 년도는 언제입니까?\n", + "Processing question 816/3952 : 알바왕국의 계보가 있는 부록에서 가장 마지막에 죽은 인물은?_____________알바왕국의 계보가 있는 부록에서 가장 최후에 사망한 인물은 누구인가요?\n", + "Processing question 817/3952 : 실제로 중화민국 국민임을 입증하려면 어느 지역에 살아야하나요?_____________\"대만 국민임을 확인하려면 어느 지역에 거주해야 하나요?\"\n", + "Processing question 818/3952 : 요한 1세에 대해 의심을 품고 그를 라벤나로 부른 사람은?_____________'요한 1세에 대해 의심을 품고 그를 라벤나로 부른 사람은 누구인가요?'\n", + "Processing question 819/3952 : 갑관요가 상서에게 잘못을 고한 대상은?_____________누구가 상서에게 잘못을 저질렀나요?\n", + "Processing question 820/3952 : 강유가 진태와 곽회에 의해 도주하게 되는 회차는?_____________강유가 어떤 이유로 인해 도주해야 하는 시기는 언제인가요?\n", + "Processing question 821/3952 : 기관, 기업소 협동단체에서 팔아줄 수 있는 8.3 인민소비품의 양은 어느 정도인가?_____________8.3 인민소비품의 양은 어느 정도인가?\n", + "Processing question 822/3952 : 창녕 포교당 법당의 목조석가여래좌상이 처음 봉안된 곳은?_____________창녕 포교당 법당의 목조석가여래좌상이 처음 봉안된 장소는 어디였나요?\n", + "Processing question 823/3952 : 기영재를 살해한 인물은 누구인가?_____________누가 기영재를 살해했습니까?\n", + "Processing question 824/3952 : 곽상훈이 내각 책임제 개헌을 제안했다가 무시 당할 당시의 대통령은 누구인가?_____________곽상훈이 내각 책임제 개헌을 제안했다가 무시 당할 당시의 대통령은 누구였습니까?\n", + "Processing question 825/3952 : 대류권에서 바람의 세기가 가장 큰 부분은 어디인가?_____________대류권에서 바람의 세기가 가장 강한 지역은 어디에 위치하나요?\n", + "Processing question 826/3952 : 망각의 지팡이를 만든 사람은 지금 어디 살고 있나?_____________망각의 지팡이를 창조한 사람의 현재 거주지는 어디인가요?\n", + "Processing question 827/3952 : 20세기 초반에 미치류의 척추뼈를 크기와 모양으로 구분했던 방식을 무엇이라고 하는가?_____________미치류의 척추뼈를 크기와 모양으로 구분했던 방식을 무엇이라고 합니까?\n", + "Processing question 828/3952 : 마이크로키니의 제작 계기가 된 해변은?_____________마이크로키니를 만드는 데 영감을 준 해변은 어디인가요?\n", + "Processing question 829/3952 : 오현주의 횡령을 주장한 사람은?_____________'오현주의 배임을 주장한 사람은?'\n", + "Processing question 830/3952 : 트레혼데아르도스 공군기지의 전투기를 볼 수 있는 곳은?_____________트레혼데아르도스 공군기지의 전투기를 관람할 수 있는 장소는 어디에 있습니까?\n", + "Processing question 831/3952 : 투스카라 족은 어떤 사건을 계기로 펜실베니아 또는 뉴욕으로 거처를 옮겼나?_____________투스카라 족이 펜실베니아 또는 뉴욕으로 거처를 옮긴 계기는 무엇이었나요?\n", + "Processing question 832/3952 : 코르부트가 선수들 중 처음이자 마지막으로 평균대 경연에서 선보인 기술은?_____________코르부트가 선수들 중 처음이자 마지막으로 평균대 경연에서 선보인 기술은 무엇인가요?\n", + "Processing question 833/3952 : 비가 내린 뒤 밤에 결혼비행을 하는 개체는 무엇인가?_____________어떤 동물이 비가 내린 뒤 밤에 날아다니는가?\n", + "Processing question 834/3952 : 레오폴도가 사제가 된 연령은?_____________레오폴도가 사제가 된 나이는 얼마인가요?\n", + "Processing question 835/3952 : 충실하지 않은 선거인을 2008년까지 구별해낼 수 없었던 지역은?_____________어떤 지역에서 2008년까지 충실하지 않은 선거인을 식별할 수 없었습니까?\n", + "Processing question 836/3952 : 건반을 누를 때 잭의 움직임에 따라 현에 닿는 것은?_____________건반을 누를 때 햄머의 움직임에 따라 현에 닿는 것은 무엇인가요?\n", + "Processing question 837/3952 : 새누리당이 집정 여당으로 자리매김 할 수 있는 발판이 되었던 인물은?_____________새누리당이 정권 여당으로 자리잡을 수 있는 발판이 된 인물은 누구였나요?\n", + "Processing question 838/3952 : 호꾸이리의 아들 이름은?_____________호빠이리의 자식 이름은 무엇입니까?\n", + "Processing question 839/3952 : 펠라지오는 누구와 함께 콘스탄티노폴리스로 갔나요?_____________'펠라지오는 누구와 함께 이스탄불로 갔나요?'\n", + "Processing question 840/3952 : 샤 슈자가 자신의 왕위를 물려줄 사람은?_____________샤 슈자가 자신의 왕위를 물려줄 후계자는 누구인가요?\n", + "Processing question 841/3952 : 디트릭슨은 네프와 무슨 보험을 계약 중이었나?_____________\"디트릭슨은 네프와 어떤 보험 계약을 맺었나요?\"\n", + "Processing question 842/3952 : 12월 14일 전쟁에서 프랑스 장교는 몇명이 죽음을 당하였나요?_____________12월 14일 전투에서 프랑스 장교가 몇 명 사망했습니까?\n", + "Processing question 843/3952 : 크릭이 과학과 종교의 연결성을 언급했던 도서는?_____________'크릭이 과학과 종교의 연결성을 언급한 책은 무엇인가요?'\n", + "Processing question 844/3952 : 뮤 중간자를 일컫는 또 다른 명칭은?_____________'뮤 중간자를 가리키는 다른 말은 무엇인가요?'\n", + "Processing question 845/3952 : 카이사리온이 옥타비아누스를 피해 도망친 곳은?_____________카이사리온이 옥타비아누스를 피해 도망친 장소는 어디인가요?\n", + "Processing question 846/3952 : 풍부한 식감으로 인해 부첼라토가 지니게 된 전통적인 의미는 무엇인가?_____________부첼라토가 지닌 전통적인 의미는 무엇인가?\n", + "Processing question 847/3952 : 코핀을 볼 수 있는 동굴은?_____________어떤 동굴에서 코핀을 발견할 수 있나요?\n", + "Processing question 848/3952 : 해왕성 동기 궤도 안쪽에 있는 위성들을 무엇이라고 부르는가?_____________해왕성 내부에 위치한 위성들을 무엇이라고 불러요?\n", + "Processing question 849/3952 : 자유 경쟁과 상호 의존을 함께 유발하는 이념은?_____________어떤 이념은 자유 경쟁과 상호 의존을 동시에 촉진하는가?\n", + "Processing question 850/3952 : 유럽과 아메리카 사회가 제국주의로 가는 과정에 있다는 주장에 이이를 제기한 집단은?_____________어떤 집단이 유럽과 아메리카 사회가 제국주의로 가는 과정에 있다는 주장에 이의를 제기했습니까?\n", + "Processing question 851/3952 : 조선공업은 어떤 공업으로 분류되는가?_____________'조선공업은 어떤 산업으로 구분되는가?'\n", + "Processing question 852/3952 : 샤푸르 2세가 죽은 뒤 조로아스터교의 사제들과 협력하여 왕권을 약화시킨 계급은?_____________샤푸르 2세가 죽은 뒤 조로아스터교의 사제들과 협력하여 왕권을 약화시킨 계급은 무엇입니까?\n", + "Processing question 853/3952 : 자유 연상을 창시한 인물이 그만둔 치료 방법은?_____________'자유 연상을 개척한 사람이 그만둔 치료 방식은?'\n", + "Processing question 854/3952 : 경찰이 병력 배치등을 이유로 참여 인원을 추정하는데 근거로 삼는 것은?_____________경찰이 병력 배치 등을 이유로 참여 인원을 추정하는데 근거로 삼는 것은 무엇인가요?\n", + "Processing question 855/3952 : 대한민국이 5개국을 꺾고 디비전 1A로 승급될 수 있었던 해는?_____________대한민국이 5개국을 이겼을 때 승급할 수 있었던 해는 언제였습니까?\n", + "Processing question 856/3952 : 전국의 사원이나 향교를 탐방할 수 있는 1박 2일 여행 프로그램은?_____________사원이나 향교를 탐방할 수 있는 1박 2일 여행 패키지가 있나요?\n", + "Processing question 857/3952 : 예르지 네이만과 피어슨의 직장은 어디였나?_____________예르지 네이만과 피어슨이 일했던 장소는 어디였나요?\n", + "Processing question 858/3952 : 마드리드 시가 관리하기 전에 10호선을 관리하던 것은 어디인가?_____________어디에서 10호선을 운영하기 전에 마드리드 지하철을 운영하던 곳은 어디였습니까?\n", + "Processing question 859/3952 : 사마귀가 사냥감을 공격하는 모습을 참고하여 만든 중국의 놀이는 무엇인가?_____________사마귀가 사냥감을 공격하는 모습을 참고하여 만든 중국의 놀이는 무엇입니까?\n", + "Processing question 860/3952 : 프레몽트레회에 들어오길 원했으나 노르베르토가 평신도로 있을 것을 권한 사람은?_____________프레몽트레회에 들어가려고 했지만 노르베르토가 평신도인 것을 알고 있는 사람은 누구인가요?\n", + "Processing question 861/3952 : 마가다와 다이아몬드 채굴권을 협상한 나라는 어디인가요?_____________마가다와 다이아몬드 채굴권을 협상한 국가는 어디인가요?\n", + "Processing question 862/3952 : 성매매법이 실시된 연도는?_____________성매매법이 처음 시행된 연도는 언제인가요?\n", + "Processing question 863/3952 : 트램펄린 회사를 설립한 사람은?_____________트램폴린 제작업체를 설립한 사람은 누구인가요?\n", + "Processing question 864/3952 : 라틴 아메리카나 스페인에서 식전주와 곁들여져 나오는 요리는?_____________라틴 아메리카와 스페인에서 식전주로 함께 나오는 요리는 무엇인가요?\n", + "Processing question 865/3952 : 경찰이 원영의 시신을 찾기 위해 수색 작업을 실시한 날짜는 언제인가요?_____________언제 경찰이 원영의 시신을 찾기 위해 수색 작업을 실시했나요?\n", + "Processing question 866/3952 : 비자연적으로 면역을 얻는 경우에 해당하는 방법은?_____________면역을 획득하는 데 있어 비자연적인 방법은 무엇입니까?\n", + "Processing question 867/3952 : 카롤의 결혼 결정에 입김을 불어넣은 사람은?_____________카롤의 결혼 선택을 영향을 끼친 사람은 누구인가요?\n", + "Processing question 868/3952 : 작문시험과 성적을 통해 로리뷰 편집 위원을 뽑는 때는 언제인가?_____________언제 작문시험 성적을 고려하여 로리뷰 편집 위원을 고용하나요?\n", + "Processing question 869/3952 : 《트래버스 드 수 조약》과 《멘도타 조약》을 체결하고 사냥터를 미국에 양도한 계약 당사자는?_____________《트래버스 드 수 조약》과 《멘도타 조약》을 체결하고 사냥터를 미국에 양도한 계약 당사자는 누구인가요?\n", + "Processing question 870/3952 : 아이라 시와 가고시마 시가 구분되는 곳에 있는 것은?_____________'아이라 시와 가고시마 시가 구분되는 지역에 있는 것은 무엇인가요?'\n", + "Processing question 871/3952 : 아폴론에게 예언을 주관하는 힘을 준 이는?_____________아폴론에게 예언을 주관하는 힘을 준 이는 누구인가요?\n", + "Processing question 872/3952 : 피실험자들의 공통적인 특성은?_____________피실험자들의 공통된 속성은 무엇인가요?\n", + "Processing question 873/3952 : 오생원의 아들이 정사를 나누던 사람은 누구인가?_____________오생원의 자식이 성행을 나누던 사람은 누구인가?\n", + "Processing question 874/3952 : 피터와 함께 하이든의 무덤을 도굴한 인물은?_____________하이든의 무덤을 파헤친 사람은 누구인가요?\n", + "Processing question 875/3952 : 오다 도시히로가 슈고다이가 된 후 다스린 지역은?_____________도시히로 오다가 슈고다이가 된 후 다스린 지역은 어디인가요?\n", + "Processing question 876/3952 : 독일인으로서 최초로 교황이 된 자의 사망일은?_____________독일 출신 최초의 교황이었던 사람의 사망일은 언제인가요?\n", + "Processing question 877/3952 : 로페스 데 레가스미는 비사야 제도의 북쪽 지역을 조사하라고 몇 사람을 보냈나?_____________로페스 데 레가스미는 비사야 제도의 북쪽 지역을 조사하기 위해 몇 명의 사람을 파견했나요?\n", + "Processing question 878/3952 : 집권 후 지구 과학 분야의 지원에 몹시 부정적 태도를 취한 사람은?_____________누가 지구 과학 분야의 지원을 반대했나요?\n", + "Processing question 879/3952 : 아트 앤드 크래프트 운동을 이끈 사람은?_____________'아트 앤드 크래프트 운동을 주도한 사람은 누구인가요?'\n", + "Processing question 880/3952 : 《로마제국 쇠망사》의 시기 구분 중 서로마제국이 첫번째로 존속했던 시기는 언제인가?_____________로마제국의 쇠망 시대 중 서로마제국이 처음으로 존속했던 시기는 언제인가?\n", + "Processing question 881/3952 : 타지마할은 산성비로 어떤 피해를 입었는가?_____________타지마할이 산성비로 어떤 손상을 입었습니까?\n", + "Processing question 882/3952 : 3회에서 히코노에게 홈런을 허용한 상대팀 투수는?_____________상대팀 투수 중에서 3번째 이닝에서 히코노에게 홈런을 허용한 선발 투수는 누구인가요?\n", + "Processing question 883/3952 : 루빈시테인의 스승은 누구인가요?_____________'루빈시테인의 선생님은 누구입니까?'\n", + "Processing question 884/3952 : <아바타>는 언제 처음으로 상영되었나?_____________'언제 <아바타>가 최초로 공개되었나요?'\n", + "Processing question 885/3952 : 신라가 불을 일으킬 수 있는 신체 부위는?_____________신라가 불을 일으킬 수 있는 신체 부위는 어디인가요?\n", + "Processing question 886/3952 : 돈 칭자오를 때렸으며, 그가 원한을 품게 한 인물은?_____________'돈 칭자오를 때렸으며, 그가 원한을 품게 한 인물은?'\n", + "Processing question 887/3952 : 콘늘라를 강제로 돌려 보내려 한 사람은?_____________누가 콘늘라를 강제로 송환하려고 했나요?\n", + "Processing question 888/3952 : 핀과 함께 사막에서 오토바이를 탄 인물은?_____________누가 핀과 함께 사막에서 오토바이를 탔나요?\n", + "Processing question 889/3952 : 베토벤은 어떤 곡을 피아노로 편곡하였는가?_____________베토벤이 어떤 곡을 피아노로 재편곡했습니까?\n", + "Processing question 890/3952 : 루티프 아피푸가 소속된 집단은?_____________루티프 아피푸가 소속된 집단은 무엇인가요?\n", + "Processing question 891/3952 : 알프레드가 아버지를 여읜 것은 몇 년도인가?_____________알프레드가 아버지를 상속 받은 연도는 언제인가요?\n", + "Processing question 892/3952 : 단일불포화 지방 위주의 식단일 경우 인슐린 자항성의 발생률이 어떻게 되는가?_____________단일지방고 식단을 섭취할 때 인슐린 저항성이 어떻게 변화하나요?\n", + "Processing question 893/3952 : 말레이시아어와 매우 유사하며 말레이어라고 칭하는 게 맞다는 주장이 있는 언어는?_____________어떤 언어가 말레이시아어와 매우 유사하며 말레이어라고 불리는 것에 대한 주장이 있나요?\n", + "Processing question 894/3952 : 용수당을 만들기 위해서는 엿당 포화용액을 끓인 후 몇 분 정도 식혀야 하는가?_____________엿당 포화용액을 끓인 후 얼마나 시간을 식혀야 하는가?\n", + "Processing question 895/3952 : 점토로 제작된 원통형 화덕에 숯불을 놔두어 고온으로 가열하는 오븐은?_____________어떤 요리 방법으로 익히는 걸까요?\n", + "Processing question 896/3952 : 승강장이 지하 2층에 있는 지하철역은?_____________어떤 지하 2층에 위치한 지하철역에 승강장이 있나요?\n", + "Processing question 897/3952 : 텔레비전 음악회에서 가수 김연자가 부른 노래는?_____________김연자가 부른 노래는 텔레비전 음악회에서 무엇인가요?\n", + "Processing question 898/3952 : 바로 가기 아이콘을 실행할 수 있게 하는 프로그램은 무엇인가?_____________어떤 프로그램이 바로 가기 아이콘을 실행할 수 있게 해주나요?\n", + "Processing question 899/3952 : 사르트르는 개인이 어떤 존재라고 생각했는가?_____________사르트르는 개인이 어떤 존재라고 생각했습니까?\n", + "Processing question 900/3952 : 대한민국 행정심판법 제3조 제 1항의 근간이 되는 방침은 무엇인가?_____________'한국의 행정심판법 제3조 1항의 근간이 되는 원칙은 무엇입니까?'\n", + "Processing question 901/3952 : 케플러는 누구의 화성 관측 자료를 통해 행성 운행표를 만들었나요?_____________케플러는 누구의 화성 관측 자료를 활용하여 행성 운행표를 만들었나요?\n", + "Processing question 902/3952 : 태양계 거대 기체 행성의 주요 구성 요소들은 무엇인가요?_____________태양계 거대 가스 행성의 핵심 성분은 무엇입니까?\n", + "Processing question 903/3952 : 뉴욕주의 주지사로서 톰킨스가 폐지하고자 노력한 제도는?_____________톰킨스가 폐지하고자 노력한 제도는 무엇입니까?\n", + "Processing question 904/3952 : 다카기 모리미치가 주니치의 감독직에서 사임한 해는?_____________다카기 모리미치가 주니치의 감독직에서 사임한 해는 언제인가요?\n", + "Processing question 905/3952 : 익명조합원은 어떠한 상황에 익명조합을 활용하여 돈을 벌 수 있는가?_____________익명인들은 어떤 상황에서 익명인들을 이용하여 수익을 창출할 수 있나요?\n", + "Processing question 906/3952 : 아델리펭귄 새끼들이 먹이를 달라고 칭얼거릴 때 무엇과 유사한 소리를 내는가?_____________아델리펭귄 새끼들이 먹이를 달라고 요구할 때 어떤 소리를 내나요?\n", + "Processing question 907/3952 : 2007년 IAU에서 외계 행성과 갈색왜성을 구분하는 척도로 삼자고 제시한 것은?_____________외계 행성과 갈색 왜성을 구분하는 척도로 2007년 IAU에서 제시한 것은 무엇입니까?\n", + "Processing question 908/3952 : 양운에 의해 역모 계획이 들통난 사람은?_____________양운으로 인해 역모 계획이 폭로된 사람은 누구인가요?\n", + "Processing question 909/3952 : 쯔웨는 SM엔터테인먼트에 누구의 영화 출연을 요구했나요?_____________쯔웨는 SM엔터테인먼트에서 누구의 영화 출연을 요청했나요?\n", + "Processing question 910/3952 : 형사소송법 제361조의4 제1항에서 법적으로 보호하는 사람은?_____________'형사소송법 제361조의4 제1항에서 법적으로 지키는 사람은?'\n", + "Processing question 911/3952 : 이탈리아 AC 밀란에 의해 3년 연달아 컵위너스컵을 달성하지 못한 국가는?_____________어떤 국가가 3년 연속으로 UEFA 컵위너스컵을 획득하지 못했습니까?\n", + "Processing question 912/3952 : 헤위에르달이 실험을 한 이후에 이야기를 나눈 상대는?_____________헤위에르달이 실험을 한 이후에 대화한 상대는 누구인가요?\n", + "Processing question 913/3952 : 이용순이 서재필의 시신을 뒷수습할 당시 서명원이 머무르던 국가는?_____________서명원이 머무르던 국가는 어디였습니까?\n", + "Processing question 914/3952 : 코시모는 누구로부터 교육을 받았나?_____________코시모는 누구에게서 교육을 받았습니까?\n", + "Processing question 915/3952 : 이화곡 가루를 물과 쌀에 넣으면 무엇이 시작되나요?_____________이화곡 가루를 물과 쌀에 넣으면 어떤 과정이 시작되나요?\n", + "Processing question 916/3952 : 이사회에서는 회의를 한 해에 적어도 몇 개 진행하나?_____________이사회에서는 회의를 일 년에 적어도 몇 번이나 개최하나?\n", + "Processing question 917/3952 : 콘스탄티네 2세에 이어 왕위를 계승한 인물은 언제까지 군림하였나요?_____________언제까지 콘스탄티네 2세를 계승한 인물이 군림했나요?\n", + "Processing question 918/3952 : 견갑골의 움직임에 집중한 훈련의 효과를 본 구종은?_____________'견갑골 운동에 집중한 훈련의 결과를 확인한 구종은?'\n", + "Processing question 919/3952 : 호라티우스가 아테네로 공부하러 가게되었던 해는?_____________호라티우스가 아테네로 공부하러 가게되었던 해는 언제였습니까?\n", + "Processing question 920/3952 : 마이클 스펜스가 철학을 공부한 대학교는?_____________마이클 스펜스가 철학을 연구한 대학은 어디입니까?\n", + "Processing question 921/3952 : 조프루아가 여러 학자들이 발표한 동물 구조의 유사성 개념을 참고해 만든 논문은?_____________'조프루아가 여러 학자들이 제시한 동물 구조의 유사성 개념을 바탕으로 작성한 논문은 무엇인가요?'\n", + "Processing question 922/3952 : 1963년 제 5대 대통령 선거 후보로 확정된 인물은?_____________1963년 제 5대 대통령 선거 후보로 확정된 인물은 누구였습니까?\n", + "Processing question 923/3952 : 《애시스 투 애시스》에서 앨릭스 드레이크를 총으로 쏜 인물은?_____________앨릭스 드레이크를 총으로 쏜 인물은 누구인가요?\n", + "Processing question 924/3952 : 역의 동쪽 일부에서 토지 구획 정리 사업을 주관하는 도시는?_____________어떤 도시가 역의 동쪽 일부에서 토지 구획 정리 사업을 주관하고 있는지 알고 계신가요?\n", + "Processing question 925/3952 : 머리광배에 특이하게 불꽃무늬나 연꽃무늬를 각인하는 특징을 가진 나라는?_____________어떤 국가는 머리광배에 특이하게 불꽃무늬나 연꽃무늬를 각인하는 특징을 가지고 있나요?\n", + "Processing question 926/3952 : 인터넷과 휴대전화의 보급 전 주로 사용되던 물리적 매체는?_____________전자우편과 스마트폰의 보급 이전에 주로 사용되던 물리적 매체는 무엇입니까?\n", + "Processing question 927/3952 : 술을 계속 찾도록 유도하며 알코올의 영향을 받는 것은?_____________알코올 중독을 유발하는 것은 무엇인가요?\n", + "Processing question 928/3952 : 크로마토 그래피 카트리지가 한 번에 사용 가능한 샘플의 수는?_____________크로마토그래피 카트리지의 최대 수용 가능한 샘플 양은 얼마인가요?\n", + "Processing question 929/3952 : 학자들이 슬라브조어를 위해 사용한 외국의 언어는 무엇인가요?_____________어떤 외국어가 학자들에 의해 슬라브어를 연구하는 데 사용되었습니까?\n", + "Processing question 930/3952 : 아리스타르코스가 처음으로 지동설을 이야기했지만 이를 반박한 인물은?_____________아리스탄에스가 처음으로 지동설을 이야기했지만 이를 반박한 인물은 누구인가요?\n", + "Processing question 931/3952 : 1897년 민영환이 영국공사로 갔을 당시 영국은 누가 다스리고 있었나요?_____________영국이 민영환이 영국공사로 갔을 때 누가 통치하고 있었습니까?\n", + "Processing question 932/3952 : 타스만 호수에서 흐르는 물은 타스 강을 거쳐 어느 호수로 흘러가나?_____________타스만 호수에서 흐르는 물은 타스 강을 거쳐 어느 호수로 흘러가나?\n", + "Processing question 933/3952 : 경찰관은 김씨를 누구라고 생각했는가?_____________김씨를 어떤 이름으로 인식했습니까?\n", + "Processing question 934/3952 : 메데이아가 화가 난 이유는 무엇인가?_____________메데이아가 분노한 이유는 무엇입니까?\n", + "Processing question 935/3952 : 히키코모리에 대한 별 관심을 두지 않았던 때는?_____________히키코모리에 대해 전혀 신경 쓰지 않았던 때는?\n", + "Processing question 936/3952 : 포도주 블라인드 테스트를 소재로 만든 영화의 제목은?_____________'포도주 맛을 시험하는 영화의 제목은 무엇인가요?'\n", + "Processing question 937/3952 : 매니저가 사실이 아닌 내용이라며 해명서를 발표했던 방송은 무엇인가?_____________어떤 방송에서 매니저가 사실이 아닌 내용이라며 해명서를 발표했나요?\n", + "Processing question 938/3952 : 유럽 연합군 최고사령부가 출범한 것은 몇년도인가?_____________유럽 연합군 최고사령부가 설립된 연도는 언제인가요?\n", + "Processing question 939/3952 : 이반 T.굿맨 다음으로 샌피드로 산 미라를 보유한 사람은?_____________'이반 T.굿맨 다음으로 샌피드로 산 미라를 소유한 사람은 누구인가요?'\n", + "Processing question 940/3952 : 2002년 9월 22일에 시행된 독일 총선거에서 뽑고자 했던 연방의회 의원 수는?_____________독일 총선거에서 선출하려던 연방의회 의원 수는 2002년 9월 22일에 얼마였나요?\n", + "Processing question 941/3952 : 브루노와 부팔마코가 칼란드리노의 여정에 함께한 이유는?_____________'칼란드리노의 여정에 브루노와 부팔마코가 동반한 이유는 무엇인가요?'\n", + "Processing question 942/3952 : 경성일보에 담화문을 발표한 자는 종교계 사람들을 무엇이라고 나무랐는가?_____________경성일보에 담화문을 발표한 자는 종교계 사람들을 '무당'이라고 나무렸나요?\n", + "Processing question 943/3952 : 페르디난도 2세는 언제 사망했나?_____________페르디난도 2세는 언제 돌아가셨나요?\n", + "Processing question 944/3952 : 가미요시다의 국도 139호 인근에 많아진 것은 무엇인가?_____________가미요시다의 국도 139호 인근에 증가한 것은 무엇입니까?\n", + "Processing question 945/3952 : 제2대 주일 미국 공사가 일본에서 세운 가장 큰 업적은 무엇인가?_____________제2대 주일 미국 공사가 일본에서 세운 가장 큰 성취는 무엇입니까?\n", + "Processing question 946/3952 : 한국 대 멕시코 경기에서 선제골을 넣은 쪽은?_____________'한국 대 멕시코 경기에서 먼저 골을 넣은 팀은 누구인가요?'\n", + "Processing question 947/3952 : 시에라 네바다 산맥에서 할 수 있는 스포츠는?_____________시에라 네바다 산맥에서 수행할 수 있는 운동은 무엇입니까?\n", + "Processing question 948/3952 : 진화론을 다룬 학파 중 기형의 역할을 중시한 학파는?_____________어떤 학파가 진화론에서 기형의 역할을 강조했습니까?\n", + "Processing question 949/3952 : 오래된 족자는 어디에 진열되어 있었나?_____________\"오래된 족자는 어느 곳에 전시되어 있었습니까?\"\n", + "Processing question 950/3952 : 나기브에게 가택연금 처분을 내린 자는?_____________'나기브에게 가정연금 처분을 내린 사람은 누구인가요?'\n", + "Processing question 951/3952 : 저고리의 길이가 짧아진 시기는 언제부터인가?_____________언제부터 저고리의 길이가 줄어들기 시작했나요?\n", + "Processing question 952/3952 : 스페인의 기독교인들과 성관계를 하게 될 시 위험해지는 사람들은?_____________스페인의 기독교 신자들과 성관계를 가질 때 주의해야 하는 사람들은 누구인가요?\n", + "Processing question 953/3952 : 케냐를 부패하게 만들고 본인도 국가의 대지주로 만든 케냐타의 정책은?_____________케냐를 탐욕스럽게 만들고 자신도 국가의 지배자로 만든 케냐타의 정책은 무엇입니까?\n", + "Processing question 954/3952 : 맥다월의 군대가 후방에 남아서 방어해야 하는 도시는?_____________맥다월의 군대가 후방에 남아서 방어해야 하는 도시는 어디인가요?\n", + "Processing question 955/3952 : 몽칼름과 보드레이유가 지휘 문제로 서로 갈등하기 시작한 것은 몇 년인가?_____________몽칼름과 보드레이유가 지휘 문제로 서로 갈등하기 시작한 것은 몇 년동안 발생했나요?\n", + "Processing question 956/3952 : 1987년 일본 시리즈 우승팀을 지도한 감독은?_____________1987년 일본 시리즈에서 승리한 팀을 이끈 감독은 누구인가요?\n", + "Processing question 957/3952 : 매그니토가 나온 장면의 대부분을 연기한 배우는?_____________매그니토가 등장한 장면 대부분을 연기한 배우는 누구인가요?\n", + "Processing question 958/3952 : 록키에게 재시합을 신청한 사람은?_____________누가 록키에게 다시 대결을 신청했습니까?\n", + "Processing question 959/3952 : 카리용 전투에서 영국 육군이 조지 호수 해안에 상륙했을 때, 그곳에 방치되어 있던 물자와 무기는 어느 나라 군대의 것이었나?_____________카리용 전투에서 영국 육군이 조지 호수 해안에 상륙했을 때, 그곳에 방치되어 있던 물자와 무기는 어떤 국가의 군대의 것이었나요?\n", + "Processing question 960/3952 : 10월 3일까지 오키나와 방면에서 유일하게 공격받은 곳은?_____________10월 3일까지 오키나와 방면에서 유일하게 타격을 입은 곳은 어디인가요?\n", + "Processing question 961/3952 : 포켓몬 바크 경기가 진행되는 장소는?_____________포켓몬 바크 경기가 열리는 장소는 어디인가요?\n", + "Processing question 962/3952 : 거북산이라 불리는 산의 명칭은?_____________거북산이라 불리는 산의 다른 이름은 무엇인가요?\n", + "Processing question 963/3952 : 미주리 타협을 무효로 하는 법은?_____________미주리 타협을 무효로 하는 법은 무엇인가요?\n", + "Processing question 964/3952 : 랑페르 드 브르트니에르가 1858년에 다녔던 학교는?_____________랑페르 드 브르트니에르가 1858년에 다녔던 학교는 어디였습니까?\n", + "Processing question 965/3952 : 에우포르보스와 아폴론이 함께 공격했던 인물은?_____________에우포르보스와 아폴론이 함께 공격했던 인물은 누구였나요?\n", + "Processing question 966/3952 : 동탑은 탑신 몇 층으로 구성되어있나?_____________동탑은 몇 층으로 이루어져 있습니까?\n", + "Processing question 967/3952 : 2018년 당시 보이저호의 위치는?_____________보이저호는 2018년에 어디에 있었나요?\n", + "Processing question 968/3952 : 사수도의 해안선은 대부분 무엇으로 구성되어 있나요?_____________사수도의 해안선은 주로 어떤 것으로 이루어져 있나요?\n", + "Processing question 969/3952 : 장 전 총리가 한 행동을 두둔해준 사람의 이름은?_____________장 전 총리를 지지하는 사람의 이름은 무엇인가요?\n", + "Processing question 970/3952 : 냉전 이후 여러 분야에서 상대적 발전을 지속한 시대를 일컫는 용어는?_____________'냉전 이후 여러 분야에서 상대적 발전을 지속한 시대를 일컫는 다른 말은?'\n", + "Processing question 971/3952 : 동투르키스탄을 식민지로 삼아야 한다고 주장한 사람은?_____________누가 동투르키스탄을 식민지로 삼아야 한다고 주장했나요?\n", + "Processing question 972/3952 : 광해군이 나라를 통치할 당시에 주도권을 가지고 있던 파는?_____________'광해군이 나라를 다스릴 당시에 주도권을 소유하고 있던 인물은 누구인가요?'\n", + "Processing question 973/3952 : 이호민이 과거시험에 합격한 것은 몇년도인가?_____________이호민이 예전 시험에 통과한 해는 언제인가요?\n", + "Processing question 974/3952 : 주민들의 대피를 도왔던 사람의 이름은 무엇인가요?_____________어떤 사람이 주민들의 대피를 도왔던 사람의 이름은 무엇인가요?\n", + "Processing question 975/3952 : 알하킴이 후세인의 정치 권력을 없애기 위해 만든 조직의 이름은?_____________알하킴이 후세인의 정치 권력을 없애기 위해 만든 조직의 이름은 무엇인가요?\n", + "Processing question 976/3952 : 박재완이 금자탑을 세운 해는?_____________박재완이 금자탑을 세운 해는 언제인가요?\n", + "Processing question 977/3952 : 도스토옙스키는 젊었을 때 어떤 사상을 추구하는 정치 클럽에 참여하였나?_____________도스토옙스키는 젊었을 때 어떤 이념을 지지하는 정치 단체에 가입했나요?\n", + "Processing question 978/3952 : 순무 제도가 생긴 것은 언제인가?_____________순무 제도가 처음으로 도입된 시기는 언제였나요?\n", + "Processing question 979/3952 : 미국으로 이민 온 사람들은 누구로부터 돈을 차용할 수 있었나?_____________미국으로 이주한 사람들은 누구에게서 돈을 빌릴 수 있었나요?\n", + "Processing question 980/3952 : 종교적 목적으로 파리 대학교에 교황이 세운 교육 기관은?_____________파리 대학교에 교황이 세운 교육 기관은 어떤 것인가요?\n", + "Processing question 981/3952 : 신자가 편의점에서 잡은 남자는 몸 어디에 문신이 있나?_____________편의점에서 신자가 만난 남자는 몸 어디에 문신이 있습니까?\n", + "Processing question 982/3952 : 뮤지얼보다 더 높은 점수로 경기를 그만 둔 인물은?_____________어떤 사람이 뮤지컬보다 더 높은 점수로 경기를 그만 둔 적이 있나요?\n", + "Processing question 983/3952 : 《나니아 연대기》시리즈 중 시간 설정이 가장 먼저인 작품의 이름은?_____________'나니아 연대기' 시리즈 중 가장 초기 시간 설정을 갖춘 책은 무엇인가요?\n", + "Processing question 984/3952 : 삼손의 약혼녀였던 사람의 아버지 이름은?_____________삼손의 약혼녀의 아버지의 이름은 무엇인가요?\n", + "Processing question 985/3952 : 김원치 검사와 이흥구가 재회하여 이야기를 나누었던 시간은?_____________'김원치 검사와 이흥구가 만나서 대화를 나누었던 시간은 언제였습니까?'\n", + "Processing question 986/3952 : 일본인들에게 송도고보는 일본의 어느 학교보다 더 크다고 소문났나?_____________송도고보가 일본의 어떤 학교보다 크다고 소문났나요?\n", + "Processing question 987/3952 : 황국의용군의 지도자는?_____________황국의용군의 지도자는 누구입니까?\n", + "Processing question 988/3952 : 나라에서 군인들을 뽑아 만든 군대를 통솔하는 우두머리는 누구인가?_____________나라에서 군인들을 뽑아 만든 군대를 통솔하는 최고 지휘관은 누구입니까?\n", + "Processing question 989/3952 : 사이버펑크에 주로 등장하는 시간적 공간적 배경은?_____________사이버펑크에서 주로 나타나는 시간과 공간적 배경은 무엇인가요?\n", + "Processing question 990/3952 : 피부세포를 다른 조직으로 전환시키는 기술보다 안전성 측면이 취약한 기술은 무엇인가?_____________어떤 기술이 피부세포를 다른 조직으로 전환시키는 기술보다 안전성 측면에서 취약한가요?\n", + "Processing question 991/3952 : 미하일 무루초스는 태권도가 정식 종목이 된 올림픽에 참가하기 위해 어디에서 예선전을 치뤘는가?_____________미하일 무루초스가 태권도가 공식 종목으로 채택된 올림픽에 참가하기 위해 어디에서 예선을 실시했습니까?\n", + "Processing question 992/3952 : 인류의 발전에 있어, 인류의 머리가 커지기 전에 일어난 일은 무엇인가?_____________머리가 커지기 전에 인류의 발전에 영향을 끼친 사건은 무엇이 있었나요?\n", + "Processing question 993/3952 : 타란티노의 영화에서 자주 들을 수 있는 음악 장르는?_____________타란티노 영화에서 자주 들을 수 있는 음악 스타일은 무엇인가요?\n", + "Processing question 994/3952 : 훗날 나오마사가 된 인물이 당주가 되었을 당시 나이는?_____________당시 나이가 몇 살이었나요?\n", + "Processing question 995/3952 : 불경에 악평을 쏟아 궁예가 직접 살해한 승려는?_____________불경에 비판을 퍼붓고 궁예가 직접 살해한 승려는 누구인가요?\n", + "Processing question 996/3952 : 보살상의 최상단에는 무엇이 그려져있는가?_____________보살상의 정상에는 어떤 모습이 그려져 있나요?\n", + "Processing question 997/3952 : 윤치호가 일부 독립운동 지도자들로부터 비난 받았던 일기의 내용은?_____________윤치호가 몇몇 독립운동 지도자들로부터 비판을 받았던 일기의 내용은 무엇이었나요?\n", + "Processing question 998/3952 : 보좌관이 아닌데 보좌관으로 불리는 요원들의 별명은?_____________보좌관이 아닌데 보좌관으로 불리는 요원들의 별명은 무엇인가요?\n", + "Processing question 999/3952 : 오다와라의 다수의 건물이 붕괴된 원인은?_____________오다와라의 다수 건물이 붕괴된 이유는 무엇인가요?\n", + "Processing question 1000/3952 : 사회적으로 은둔하며 외톨이 생활을 하는 사람을 부르는 명칭은?_____________외톨이 생활을 하는 사람을 부르는 다른 말은 무엇인가요?\n", + "Processing question 1001/3952 : 닉슨 행정부가 베트남 전쟁에서 옹호했던 편은 어디인가?_____________닉슨 행정부가 지지했던 쪽은 어디였습니까?\n", + "Processing question 1002/3952 : 대부분의 마약은 멕시코를 거쳐 어디로 운반되었는가?_____________마약은 주로 멕시코를 통해 어디로 운반되나요?\n", + "Processing question 1003/3952 : 이민곤에게 유배령을 거둬들이고 벼슬과 영정을 내린 왕은?_____________이민곤에게 유배령을 내리고 벼슬과 영정을 박탈한 왕은 누구였나요?\n", + "Processing question 1004/3952 : 트리에르바일레르가 지속적으로 일을 해야 하는 이유는 무엇인가?_____________트리에르바일레르가 꾸준히 작업해야 하는 이유는 무엇입니까?\n", + "Processing question 1005/3952 : 마라도나는 어느 나라 선수인가?_____________마라도나는 어느 국적의 축구 선수인가요?\n", + "Processing question 1006/3952 : 미국이 베트남에서 철군한 이후 사이공을 장악한 세력은?_____________미국이 베트남에서 철군한 이후 사이공을 장악한 세력은 누구인가요?\n", + "Processing question 1007/3952 : 마리가 사망할 당시 그녀의 나이는?_____________마리가 사망할 때 몇 살이었나요?\n", + "Processing question 1008/3952 : 지방지 중 전국지와 크게 다를 것이 없는 것은?_____________전국지와 크게 다를 것이 없는 것은 무엇인가요?\n", + "Processing question 1009/3952 : 소영의 나이는 몇 살인가?_____________'소영은 몇 살이죠?'\n", + "Processing question 1010/3952 : 간결과의 토론 후 진중권은 누구로부터 토론을 제안받았는가?_____________진중권이 누구에게 토론을 제안받았습니까?\n", + "Processing question 1011/3952 : 천장욱이 귀국 후 처음으로 군수직을 맡은 곳은 어디인가?_____________천장욱이 귀국 후 처음으로 군수직을 맡은 장소는 어디였습니까?\n", + "Processing question 1012/3952 : 미국의 고용시장은 어느나라로 생산 라인이 크게 옮겨지며 감소하게 되었나?_____________미국의 고용시장은 어느 국가로 제조 공장이 주로 옮겨지며 축소되었나요?\n", + "Processing question 1013/3952 : 아타속이 먹는 균이 길러지는 곳은?_____________아타속이 섭취하는 미생물이 번식하는 장소는 어디인가요?\n", + "Processing question 1014/3952 : 민영익의 한쪽 눈을 찔러 기습공격을 감행한 인물은?_____________민영익의 한쪽 눈을 찔러 습격한 사람은 누구인가요?\n", + "Processing question 1015/3952 : 신식 전술 중 보병의 진군에 방해가 된 것은?_____________보병의 전진을 방해한 것 중에 어떤 것이 있었습니까?\n", + "Processing question 1016/3952 : 일 년전쟁에서 결과적으로 이긴 부대는?_____________누가 일 년전쟁에서 승리했습니까?\n", + "Processing question 1017/3952 : 해방 정국에서 각 정치세력이 유일하게 합의를 이룬 해는 언제인가?_____________해방 정국에서 모든 정치 세력이 동의한 날짜는 언제인가?\n", + "Processing question 1018/3952 : 중세시대에 가장 이름을 날렸던 타이빈성 출신 문학가는?_____________가장 이름을 날렸던 타이빈성 출신 문학가는 누구였습니까?\n", + "Processing question 1019/3952 : 시간과 공간이 서로 영향을 주고 받는다고 주장한 학자는?_____________'시간과 공간이 상호 영향을 주고 받는다고 주장한 학자는 누구인가요?'\n", + "Processing question 1020/3952 : 일반적인 성작은 무엇으로 만들어지나요?_____________어떤 재료로 일반적인 성작이 만들어지나요?\n", + "Processing question 1021/3952 : 형재 프랭크퍼트 지역에 처음 발을 딛은 백인은?_____________'프랭크퍼트 지역에 처음 도착한 유럽인은 누구인가요?'\n", + "Processing question 1022/3952 : 자유심증주의가 법관의 판단을 절대적으로 신뢰한다는 것이 드러나는 조항은?_____________'자유심증주의가 법관의 결정을 절대적으로 믿는다는 것을 나타내는 조항은 무엇인가요?'\n", + "Processing question 1023/3952 : 서복영의 남편이 태어난 도시는?_____________서복영의 남편이 출생한 도시는 어디인가요?\n", + "Processing question 1024/3952 : 치아표면을 상하게 하는 산은 세균이 무엇을 분해시키면서 발생하는가?_____________치아표면을 상하게 하는 산은 세균이 무엇을 부식시키면서 생성되는가?\n", + "Processing question 1025/3952 : 크렘린 궁 석벽의 현재 용도는?_____________크렘린 궁 석벽은 현재 어떤 목적으로 사용되고 있나요?\n", + "Processing question 1026/3952 : 댈러스 이전에 부통령직 지위를 제안받은 인물은 누구인가요?_____________'댈러스 이전에 부통령직 지위를 제안받은 사람은 누구입니까?'\n", + "Processing question 1027/3952 : 아일랜드 명칭의 유래가 된 사람의 아버지는?_____________아일랜드 명칭의 유래가 된 사람의 아버지는 누구였나요?\n", + "Processing question 1028/3952 : 어떤 성분을 많이 넣어야 도자기의 처음 성형했을 때와 구워 냈을때의 형태가 별로 달라지지 않는가?_____________도자기의 처음 성형했을 때와 구워 냈을 때의 형태가 크게 달라지지 않도록 하려면 어떤 성분을 많이 넣어야 하는가?\n", + "Processing question 1029/3952 : 유란시아의 원본은 어떤 언어를 사용하였나?_____________유란시아의 원본은 어떤 언어로 작성되었습니까?\n", + "Processing question 1030/3952 : 공장들이 방향을 수익 중심으로 잡게한 제도는?_____________공장들이 이익 중심으로 방향을 잡도록 하는 제도는 무엇인가요?\n", + "Processing question 1031/3952 : 청자 상감국화모란유로죽문 매병에서 꽃봉오리 같은 부분은 어떤 모양으로 다듬어져있나요?_____________꽃봉오리 같은 부분은 어떤 형태로 다듬어져 있습니까?\n", + "Processing question 1032/3952 : 한나라당이 댓글 관리를 처음 시작한 해는?_____________한나라당이 댓글 관리를 처음 시작한 해는 언제였나요?\n", + "Processing question 1033/3952 : 불암산 호랑이 유격대의 마지막 유격전은 어떤 군대의 수송대를 공격하는 작전이었나요?_____________불암산 호랑이 유격대의 최후 전투는 어떤 군대의 보급부대를 공격하는 전투였나요?\n", + "Processing question 1034/3952 : 일본 오야마 역과 신마에바시 역을 잇는 여객철도 노선의 개통 당시 본래의 기능은 무엇이었나?_____________일본 오야마 역과 신마에바시 역을 잇는 여객철도 노선의 개통 당시 본래의 목적은 무엇이었습니까?\n", + "Processing question 1035/3952 : 2011년 크리스마스에 열린 대부분의 축구 시합에서 내국 병사는 누구를 상대했는가?_____________2011년 크리스마스에 열린 대다수의 축구 경기에서 내국 군인은 누구와 경기를 했나요?\n", + "Processing question 1036/3952 : 임진왜란의 정전회담의 결렬로 다시 일어난 전쟁은?_____________임진왜란의 정전회담의 결렬로 다시 일어난 전쟁은 무엇인가요?\n", + "Processing question 1037/3952 : 성종이 왕위에 오르기 전 장순왕후의 신분은?_____________장순왕후가 성종이 왕위에 오르기 전에 어떤 신분이었습니까?\n", + "Processing question 1038/3952 : 탐색을 시작할 때, 제일 먼저 설치해야 하는 것은 무엇인가?_____________탐색을 시작할 때, 가장 먼저 설치해야 하는 것은 무엇입니까?\n", + "Processing question 1039/3952 : G급 순양전함에 쓰이는 대포의 둘레 길이는?_____________G급 순양전함에 사용되는 대포의 주변 길이는 얼마입니까?\n", + "Processing question 1040/3952 : 지드래곤은 \"One Of A Kind\"로 얼마만에 솔로로 무대에 복귀하는가?_____________지드래곤은 얼마만에 솔로로 무대에 컴백하는가?\n", + "Processing question 1041/3952 : 김순명은 무엇에 의해 사망했나요?_____________김순명은 어떤 이유로 사망했나요?\n", + "Processing question 1042/3952 : 알렉세이 나발니가 혼수상태였을 당시, 비행기는 어디로 향하고 있었나요?_____________알렉세이 나발니가 의식을 잃은 상태일 때, 비행기가 어느 방향으로 향하고 있었습니까?\n", + "Processing question 1043/3952 : 흉노를 공격하려는 계획에 상반된 의견을 가진 자는?_____________누가 흉노를 공격하지 않기를 원하는 사람은 누구인가요?\n", + "Processing question 1044/3952 : 마이크로소프트사 윈도우의 시장 점유율이 줄어들기 시작한 해는?_____________마이크로소프트사 윈도우의 시장 점유율이 감소하기 시작한 해는 언제인가요?\n", + "Processing question 1045/3952 : 이스트앵글리아 왕국의 초기역사에 대한 자료인 <교회사>의 저자는?_____________<교회사>의 저자는 누구인가요?\n", + "Processing question 1046/3952 : 땅꾼자리 제타의 최대 크기는 무엇보다 큰가?_____________제타의 최대 크기는 다른 어떤 것보다 큰가?\n", + "Processing question 1047/3952 : 루터가 교육의 장으로 가장 강조한 곳은 어디인가?_____________루터가 교육의 중요성을 강조한 장소는 어디인가?\n", + "Processing question 1048/3952 : 초기 출혈성 천연두의 주된 사망 원인은 무엇인가?_____________출혈성 천연두 초기에 주로 발생하는 사망 원인은 무엇입니까?\n", + "Processing question 1049/3952 : 도스토옙스키의 작품에 담긴 기독교 사상은 무엇에 기반한 것인가?_____________도스토옙스키의 작품에 담긴 기독교 사상은 어떤 근본적인 원칙을 바탕으로 하고 있는가?\n", + "Processing question 1050/3952 : 인정식이 입지를 넓히는데 걸림돌이 된 그의 사상은?_____________인정식이 입지를 확대하는 데 방해가 되는 그의 이념은 무엇입니까?\n", + "Processing question 1051/3952 : 윤치호는 서재필을 찾아간 후 어느 지역으로 갔나?_____________윤치호가 서재필을 만난 뒤 어떤 장소로 이동했습니까?\n", + "Processing question 1052/3952 : 국부가 담겨있는 항아리 뚜껑에는 무엇이 적혀있나?_____________항아리 뚜껑에 쓰여 있는 내용은 무엇인가요?\n", + "Processing question 1053/3952 : 남대문 전투의 시발점이 된 사건은?_____________'남대문 전투의 시작을 촉발시킨 사건은 무엇인가요?'\n", + "Processing question 1054/3952 : 카라만리는 누구에게 맘루크 칼을 하사했나요?_____________카라만리가 누구에게 맘루크 검을 주었습니까?\n", + "Processing question 1055/3952 : 의존성을 사용하려는 객체는 무엇을 호출할 수 없나요?_____________객체가 의존성을 사용하려면 어떤 메서드를 호출할 수 없습니까?\n", + "Processing question 1056/3952 : 2005년에 맨체스터 유나이티드의 구단 경영권을 얻은 인물은?_____________'2005년에 맨체스터 유나이티드의 소유권을 획득한 사람은 누구인가?'\n", + "Processing question 1057/3952 : 대내림'을 행한 뒤 다음 순서는?_____________'대내림'을 실행한 후에는 무엇을 해야 하나요?\n", + "Processing question 1058/3952 : 에포케의 이유를 제시한 책은?_____________에포케의 원인을 설명한 책은 무엇인가요?\n", + "Processing question 1059/3952 : 여성들이 입대할 수 있는 세력은?_____________여자들이 군대에 들어갈 수 있는 세력은 무엇인가요?\n", + "Processing question 1060/3952 : 가끔씩 북동부 지역에 살고있는 오리너구리들을 사냥하는 포식자는 누구인가?_____________북동부 지역에 사는 오리너구리들을 가끔씩 사냥하는 포식자는 누구인가요?\n", + "Processing question 1061/3952 : 정녀 7명 중 한 명을 모시고 간 집안은?_____________한 가정이 정녀 7명 중 한 명을 모시고 있는 집은 어디인가요?\n", + "Processing question 1062/3952 : 노르망디 침공이 시작된 년도는 언제인가요?_____________노르망디 침공이 시작된 연도는 몇 년인가요?\n", + "Processing question 1063/3952 : 아즈텍 문명을 침략한 나라는?_____________아즈텍 문명을 침략한 국가는 무엇인가요?\n", + "Processing question 1064/3952 : 인격이 달라질 때 그 전의 기억을 잊어버리는 질환은 무엇인가요?_____________어떤 상황에서 이전의 기억을 잊게 되는 질병은 무엇인가요?\n", + "Processing question 1065/3952 : 미이라를 활용해 많은 의학적 지식을 얻은 것은 누구인가?_____________'미이라를 활용하여 많은 의학적 지식을 획득한 사람은 누구입니까?'\n", + "Processing question 1066/3952 : 고속국도법이 철폐되어 어떤 법에 속하게 되었나?_____________'고속국도법이 폐지되어 어떤 법으로 대체되었나?'\n", + "Processing question 1067/3952 : 영화《제일하우스 록》을 연출한 사람은 누구인가요?_____________'제일하우스 록' 영화를 감독한 사람은 누구인가요?\n", + "Processing question 1068/3952 : 프랭크 베이커의 반환을 거부한 사람은 누구인가?_____________누가 프랭크 베이커의 복귀를 거부했습니까?\n", + "Processing question 1069/3952 : 임시발병규정에서 채택된 군사는 무엇에 능력이 뛰어난가?_____________임시발병규정에서 선발된 군사는 어떤 분야에서 뛰어난 능력을 가지고 있나요?\n", + "Processing question 1070/3952 : 피해자들의 탈출을 막기위해 보닌이 운전석 문을 제외한 다른 문에서 모두 없애버린 것은?_____________보닌이 운전석 문을 제외한 다른 문에서 모두 없애버린 것은 무엇입니까?\n", + "Processing question 1071/3952 : 아카풀코에 새로운 열대 요란이 일어난 날짜는 언제인가요?_____________'아카풀코에 새로운 열대 폭풍이 발생한 날짜는 언제인가요?'\n", + "Processing question 1072/3952 : 역사상 가장 오랫동안 이용된 용광로는?_____________가장 오랫동안 사용된 용광로는 무엇입니까?\n", + "Processing question 1073/3952 : 미국과 영국, 소련의 외교적 대표들의 논의가 이루어진 자리는 무엇인가?_____________어떤 장소에서 미국, 영국, 그리고 소련의 외교대표들이 회의를 진행했습니까?\n", + "Processing question 1074/3952 : 윤치호가 조지아주에서 재입학한 학교는?_____________윤치호가 조지아주에서 다시 등록한 학교는 어디인가요?\n", + "Processing question 1075/3952 : 리위안훙이 총통 자리에 있을 때 베이징에서 쿠데타를 일으킨 사람은 누구인가?_____________리위안훙이 중국 총통으로 있을 때 베이징에서 쿠데타를 일으킨 인물은 누구입니까?\n", + "Processing question 1076/3952 : 송세호를 극동을 관리했던 사업가로 기사를 냈던 곳은 어디인가?_____________송세호가 극동을 관리했던 사업가로 기사를 냈던 곳은 어디였습니까?\n", + "Processing question 1077/3952 : 제천시가 시내버스에 LED 행선지표지판을 설치하기 시작한 해는?_____________제천시가 시내버스에 LED 목적지 표시판을 처음으로 도입한 연도는 언제인가요?\n", + "Processing question 1078/3952 : 볼러의 능력을 판단할 수 있는 기준은?_____________볼러의 능력을 평가할 때 사용되는 요소는 무엇인가요?\n", + "Processing question 1079/3952 : 2007년 자유 지수 순위 참여 국가 중 꼴찌를 한 국가는?_____________어떤 국가가 2007년 자유 지수 순위에서 가장 낮은 순위를 차지했나요?\n", + "Processing question 1080/3952 : 밀본을 얕잡아 본 인물은 누구의 친구였나요?_____________누구의 벗이 밀본을 얕보았나요?\n", + "Processing question 1081/3952 : 태평양 전쟁 당시 필리핀에 진격하기로 한 사람은?_____________누가 태평양 전쟁 당시 필리핀으로 진격하기로 결정했나요?\n", + "Processing question 1082/3952 : 3년간 레논이 부인과 떨어져 지낸 시기를 뜻하는 말은?_____________3년간 레논이 부인과 떨어져 지낸 시기를 뜻하는 말은 무엇인가요?\n", + "Processing question 1083/3952 : 크리스마스 정전을 더이상 볼 수 없게 된 해는 언제인가?_____________'크리스마스 블랙아웃을 더 이상 볼 수 없게 된 해는 언제인가?'\n", + "Processing question 1084/3952 : 1816년에 구제동맹을 만든 사람들은?_____________구제동맹을 만든 사람들은 누구인가요?\n", + "Processing question 1085/3952 : 앙리의 부인은 누구의 후손인가?_____________앙리의 부인은 누구의 자손입니까?\n", + "Processing question 1086/3952 : 12월 8일 기습 공격을 행한 군대는?_____________어떤 군대가 12월 8일에 예기치 않은 공격을 실시했습니까?\n", + "Processing question 1087/3952 : 티타노케라톱스가 펜타케라톱스보다 더 유사한 종은?_____________티타노케라톱스가 펜타케라톱스보다 더 유사한 종은 무엇인가요?\n", + "Processing question 1088/3952 : 네메스는 보통 누가 사용하던 물건인가?_____________네메스는 일반적으로 누가 사용하는 물건입니까?\n", + "Processing question 1089/3952 : 더듬이의 곤봉의 분절이 2개인 개미는?_____________더듬이의 곤봉이 2개인 개미는 무엇입니까?\n", + "Processing question 1090/3952 : 포츠머스 조약에 따라 일본이 러시아로부터 받아낸 것은?_____________일본이 러시아로부터 받아낸 것은 무엇인가요?\n", + "Processing question 1091/3952 : 도차기현 남서부에서 군마현 남동부까지의 평야 도시들을 연결하는 노선은 현재 주로 어떤 역할을 하는가?_____________평야 도시들을 연결하는 노선은 주로 어떤 기능을 하는가?\n", + "Processing question 1092/3952 : 윤치오가 특파대사직에 고용된 것을 막으려한 나라는?_____________윤치오가 특파관으로 임명되는 것을 방해하려던 국가는 어디입니까?\n", + "Processing question 1093/3952 : 766부대의 본부는 북한의 어디에 있나요?_____________766부대의 본부가 북한의 어디에 위치하고 있습니까?\n", + "Processing question 1094/3952 : 수십 년 동안 아카디아 주민들에게 충성 맹세를 받기 위해 매진했던 국가는?_____________어떤 국가가 수십 년 동안 아카디아 주민들에게 충성 맹세를 받기 위해 노력했습니까?\n", + "Processing question 1095/3952 : 하나님을 대신해서 새 언약을 세운 주체는?_____________누가 하나님을 대신해서 새 언약을 세운 것인가?\n", + "Processing question 1096/3952 : 일본에서 환상게임 애니메이션 TV 시리즈를 약 1년간 방영했던 방송사의 이름은?_____________'일본에서 환상게임 애니메이션 TV 시리즈를 약 1년간 방영한 방송국은 무엇입니까?'\n", + "Processing question 1097/3952 : 6월 28일에 북한은 어디를 점거하였는가?_____________6월 28일에 북한이 어디를 점거했나요?\n", + "Processing question 1098/3952 : 티무르 다음으로 바그다드를 다스리게 된 사람은?_____________바그다드를 다스린 사람 중 티무르 다음으로 누가 있었나요?\n", + "Processing question 1099/3952 : 이규완은 고종 황제를 폐위시킨 이후에 누구를 올리려고 했나요?_____________이규완은 고종 황제를 폐위시킨 후에 누구를 즉위시키려고 했나요?\n", + "Processing question 1100/3952 : 포켓몬의 종은 총 몇 개인가?_____________'포켓몬의 종 수는 총 몇 가지인가?'\n", + "Processing question 1101/3952 : 한왕은 항우에게서 누구를 빼앗아 자기 편으로 만들려고 했나요?_____________한왕은 누구를 빼앗아 자기 편으로 만들려고 했습니까?\n", + "Processing question 1102/3952 : 헨리가 리처드를 언덕 아래로 유인하기 위해 타격에 쓴 무기는?_____________리처드를 언덕 아래로 유인하기 위해 헨리가 사용한 무기는 무엇이었습니까?\n", + "Processing question 1103/3952 : 스트라디바리우스 악기에 사용된 밀도 높은 단풍나무의 원산지는?_____________스트라디바리우스 악기에 사용된 밀도 높은 단풍나무의 출처는 어디인가요?\n", + "Processing question 1104/3952 : 육아 적응력이 떨어져 아이들을 방임한 인물은?_____________어린이를 방임한 사람은 육아 적응력이 떨어진 사람입니까?\n", + "Processing question 1105/3952 : 래드왈드 왕이 죽고난 뒤 그가 다스리던 지역은 어떤 왕국이 통치하게 되었나?_____________래드왈드 왕이 사망한 후 그가 다스리던 지역은 어떤 왕국에 의해 지배되었습니까?\n", + "Processing question 1106/3952 : 왕정이 끝난 뒤 네팔 공산당이 국회에서 차지한 자리의 개수는?_____________네팔 공산당이 왕정이 종결된 후 국회에서 차지한 자리의 수는 얼마입니까?\n", + "Processing question 1107/3952 : 함경 방언에 영향을 받은 말들은 어디에서도 쓰이나요?_____________함경 방언에 영향을 받은 말들은 어디서 사용되나요?\n", + "Processing question 1108/3952 : 식량이 부족한 시기를 어떻게 표현하는가?_____________식량 부족 시기를 어떻게 표현하나요?\n", + "Processing question 1109/3952 : 일본의 전투기법을 연구하며 중국 군사고문으로서의 역할을 수행한 사람은?_____________일본의 전투기법을 연구하며 중국 군사고문으로서의 역할을 수행한 사람은 누구인가요?\n", + "Processing question 1110/3952 : 고려 태조가 즉위한 곳은 이전에 누가 자리를 잡았던 곳인가요?_____________고려 태조가 즉위한 장소는 이전에 누가 통치했던 곳이었나요?\n", + "Processing question 1111/3952 : 맥헨리가 육군 장관 자리에 오른 해는?_____________맥헨리가 육군 장관 자리에 오른 해는 언제인가요?\n", + "Processing question 1112/3952 : 압델 파타 엘시시 이전 이집트 대통령은?_____________압델 파타 엘시시 이전 이집트 대통령은 누구였나요?\n", + "Processing question 1113/3952 : 로제르에게 안티오키아가 적으로부터 안전한 이유를 전한 사람은?_____________로제르에게 안티오키아를 적으로부터 안전하다고 전한 사람은 누구인가요?\n", + "Processing question 1114/3952 : 킹을 구하기 위해 그의 아버지가 사용한 기술은?_____________어떤 기술을 사용하여 왕을 찾았습니까?\n", + "Processing question 1115/3952 : 루돌프는 누구 다음으로 죽었는가?_____________누가 루돌프 다음으로 사망했습니까?\n", + "Processing question 1116/3952 : 방실이가 미군 부대에서 처음으로 활동하기 시작한 해는?_____________방실이가 미군 부대에서 처음으로 활동하기 시작한 년도는 언제인가요?\n", + "Processing question 1117/3952 : 미국이 베트남의 정부에 간섭할 수 있게 만든 사건은?_____________미국이 베트남의 정부에 간섭할 수 있게 만든 사건은 무엇입니까?\n", + "Processing question 1118/3952 : 밀월 관계로써 미국이 지속적으로 보급하고 있던 것은?_____________미국이 계속해서 보급하고 있는 것은 무엇인가요?\n", + "Processing question 1119/3952 : 17세기 식민지 정착민들이 메이플 시럽 대신 단 맛을 내는데 사용한 것은?_____________17세기 식민지 정착민들이 메이플 시럽 대신 단 맛을 내는데 사용한 것은 무엇이었나요?\n", + "Processing question 1120/3952 : 고려에 대성아악을 전파한 사람은?_____________누가 고려에 대성아악을 전파했나요?\n", + "Processing question 1121/3952 : 헥토르의 부인을 노예로 부렸던 인물은?_____________헥토르의 부인을 노예로 부릅니다. 이에 대한 다른 용어는 무엇입니까?\n", + "Processing question 1122/3952 : 종자식물의 분지는 무엇이 자란 것인가?_____________종자식물의 분지는 무엇이 발달한 것인가?\n", + "Processing question 1123/3952 : 프로 베르첼리의 별명은?_____________프로 베르첼리의 별명은 무엇입니까?\n", + "Processing question 1124/3952 : 1854년 미국이 일본과 수교를 하면서 맺은 조약은?_____________미국이 일본과 수교를 하면서 맺은 조약은 무엇인가요?\n", + "Processing question 1125/3952 : 티칼에게서 마야의 중심 도시라는 명성을 뺏은 도시는?_____________티칼에게서 마야의 중심 도시라는 명성을 뺏은 도시는 어디인가요?\n", + "Processing question 1126/3952 : 우찬의 데뷔골 덕분에 페네르바흐체가 얻은 것은 무엇인가?_____________페네르바흐체가 우찬의 첫 번째 골로 얻은 것은 무엇입니까?\n", + "Processing question 1127/3952 : 일본의 직선기선 인정요구로 인한 EEZ의 경계는?_____________일본의 직선기선 주장으로 인해 EEZ의 경계는 어떻게 정해지나요?\n", + "Processing question 1128/3952 : 근대적 대기업은 무엇을 야기하였나?_____________'근대적 대기업이 어떤 결과를 초래했나요?'\n", + "Processing question 1129/3952 : 아인이 옥림과 헤어진 이유는?_____________아인이 옥림과 이별한 이유가 무엇이었나요?\n", + "Processing question 1130/3952 : 접시 돌리기를 보여준 등장인물은 무슨 동물인가요?_____________어떤 동물이 접시를 돌리는가요?\n", + "Processing question 1131/3952 : 코알라는 하루에 최대 얼마 정도의 수면을 취하는가?_____________코알라는 하루에 최대 얼마나 잠을 자나요?\n", + "Processing question 1132/3952 : 그리스의 군대를 막기 위해 열강들이 막아버린 지역은?_____________그리스의 군대를 막기 위해 열강들이 막아버린 지역은 어디인가요?\n", + "Processing question 1133/3952 : 글리세르알데하이드 3-인산이 생성되는 반응은?_____________글리세르알데하이드 3-인산이 생성되는 반응은 무엇인가요?\n", + "Processing question 1134/3952 : 토미 도허티의 지도 아래 첼시 선수들은 무슨 색 양말을 신게 되었는가?_____________첼시 선수들이 토미 도허티의 감독으로 색다른 양말을 신게 되었는지 알고 계신가요?\n", + "Processing question 1135/3952 : 신라시대에 만들어진 작품이라고 추측하는 근거는?_____________신라시대에 제작된 작품이라고 추정되는 근거는 무엇인가요?\n", + "Processing question 1136/3952 : 예성강 입구에서 대전차포에 피격당한 부대는?_____________'예성강 입구에서 대전차포에 맞은 부대는 어디인가요?'\n", + "Processing question 1137/3952 : 니시노미야 이서에서 급행 정기 운행은 언제까지 했나?_____________니시노미야 이서에서 급행 정기 운행은 언제까지 이루어졌나요?\n", + "Processing question 1138/3952 : 누구와의 만남이 매사추세츠 족에게는 불행이었는가?_____________'매사추세츠 족에게는 누구와의 만남이 불운이었나요?'\n", + "Processing question 1139/3952 : 제호퍼가 바이에른주 총리직을 죄더한테 넘긴 해는?_____________제호퍼가 바이에른주 총리직을 죄더한테 넘긴 해는 언제인가요?\n", + "Processing question 1140/3952 : 오버월드의 레벨 제한을 풀기 위해서 플레이어는 능숙도와 완수도에서 어떤 티어를 달성해야 하는가?_____________오버월드의 레벨 제한을 해제하려면 플레이어가 어떤 등급을 달성해야 하는가?\n", + "Processing question 1141/3952 : 미시시피 주에서 미시시피 강과 만나는 강은?_____________미시시피 주에서 미시시피 강과 만나는 강은 무엇인가요?\n", + "Processing question 1142/3952 : 의결권 없는 주식을 뺀 발행주식총수에서, 주주가 주식 몇 개를 보유해야 초과 주식에 대해 의사를 표명하지 못하게 되는가?_____________주식을 보유한 주주가 발행주식총수에서 주식 몇 개를 소유해야 초과 주식에 대한 의사를 표명하지 못하게 되는가?\n", + "Processing question 1143/3952 : 두위밍을 불러 들인 사람은?_____________'두위밍을 소환한 사람은?'\n", + "Processing question 1144/3952 : 2014년 박근혜 대통령이 '한반도 평화통일을 위한 구상'을 주제로 한 연설문은 무엇으로 명명되었는가?_____________'2014년 박근혜 대통령이 발표한 '한반도 평화통일을 위한 구상' 연설문은 어떤 이름으로 알려져 있나요?'\n", + "Processing question 1145/3952 : SS 소속 군인 중 영국 제1 공수 여단 2대대와 교전한 인물은 누구인가?_____________SS 소속 군인 중 영국 제1 공수 여단 2대대와 전투를 벌인 사람은 누구입니까?\n", + "Processing question 1146/3952 : 송진우가 윤치호를 찾아온 날은?_____________윤치호를 만난 날은 언제인가요?\n", + "Processing question 1147/3952 : Presocratics'는 어느 나라 말에서 비롯된 단어인가?_____________'Presocratics'는 어느 국가 말에서 비롯된 용어입니까?\n", + "Processing question 1148/3952 : 노르웨이 사절단이 스웨덴 왕녀를 요구한 것은 언제인가?_____________노르웨이 대사단이 스웨덴 왕녀를 요청한 날짜는 언제입니까?\n", + "Processing question 1149/3952 : 파르네제가 엘프헬름으로 가기 위해 탄 배의 이름은?_____________파르네제가 엘프헬름으로 가기 위해 탄 배의 명칭은 무엇입니까?\n", + "Processing question 1150/3952 : 돈 봉투를 건네주라고 명령한 사람으로 의심 받은 사람은 누구인가?_____________누가 돈 봉투를 건네주라고 지시한 사람으로 의심 받았나요?\n", + "Processing question 1151/3952 : 우르바노 5세가 일시적으로 설립을 허용한 대학교는?_____________어떤 대학교가 우르바노 5세가 일시적으로 설립을 허용했나요?\n", + "Processing question 1152/3952 : 인공호흡기에 쓰이는 에너지는 무엇을 통하여 압력을 만들어내나요?_____________인공호흡기에서 사용되는 에너지를 이용하여 압력을 생성하는 것은 무엇인가요?\n", + "Processing question 1153/3952 : 트롱트낵 요새는 어느 나라가 사용하는 요새인가?_____________트롱트낵 요새는 어느 국가의 요새입니까?\n", + "Processing question 1154/3952 : 금동신묘명삼존불은 어떤 양식으로 만들어졌는가?_____________금동신묘명삼존불은 어떤 형태로 제작되었습니까?\n", + "Processing question 1155/3952 : 국가가 군인 징병시 주민을 찾아 군복무에 적합한지를 파악하는데 필요한 것은?_____________군대가 군인을 모집할 때 어떤 것들을 고려해야 할까요?\n", + "Processing question 1156/3952 : 반 아이들에게 세리가 누구를 좋아한다고 들통났나요?_____________세리가 누구를 좋아한다고 들통났나요?\n", + "Processing question 1157/3952 : 2010년 기준으로 유럽 평의회 의원 회의 특별 참가국이 아닌 나라는 어디인가?_____________어떤 국가가 2010년 유럽 평의회 의원 회의 특별 참가국이 아닌가요?\n", + "Processing question 1158/3952 : 영화 네파리우스: 머천트 오브 소울스의 유통사는?_____________'네파리우스: 영혼의 상인'의 유통사는 누구인가요?\n", + "Processing question 1159/3952 : 아뇨나가 두 번째 해외 진출을 한 해는?_____________아뇨나가 두 번째 국제 시장에 진출한 해는 언제인가요?\n", + "Processing question 1160/3952 : 프라이드 하우스는 누구에 의해 처음 설치되었는가?_____________프라이드 하우스는 누가 처음 설립했나요?\n", + "Processing question 1161/3952 : 넬리 킴이 경기에서 은메달을 획득한 종목은 무엇인가?_____________넬리 킴이 경기에서 은메달을 따낸 종목은 어떤 종목인가요?\n", + "Processing question 1162/3952 : 윤치호가 서양인을 높게 평가하면서 사용한 단어는?_____________윤치호가 서양인을 높이 평가하면서 사용한 용어는 무엇입니까?\n", + "Processing question 1163/3952 : IPTV가입자가 특정 방송 채널을 시청하기 위해 필요한 장비는 무엇인가?_____________IPTV 가입자가 특정 TV 채널을 시청하기 위해 필요한 장비는 무엇인가요?\n", + "Processing question 1164/3952 : 빌리가 정글짐에서 떨어져서 부상당한 부위는?_____________빌리가 정글짐에서 다친 부위는 어디인가요?\n", + "Processing question 1165/3952 : 1979년 일본시리즈 우승팀은?_____________1979년 일본시리즈 챔피언팀은 무엇입니까?\n", + "Processing question 1166/3952 : 존스 일행은 살인 장면을 보고 범인을 쫒을 때 무엇을 타고 이동하는가?_____________존스 일행이 살인 장면을 목격하고 범인을 쫒을 때 어떤 교통 수단을 이용하나요?\n", + "Processing question 1167/3952 : 내트 터너는 어디 출신인가?_____________내트 터너는 어느 지역에서 태어났나요?\n", + "Processing question 1168/3952 : 1989년 당시 티베트는 어느 나라에게 통제를 받고 있었나요?_____________티베트가 1989년 당시 어느 국가에 지배당했습니까?\n", + "Processing question 1169/3952 : 오이 샌드위치를 처음 만들기 시작한 국가는?_____________오이 샌드위치를 처음 만들기 시작한 국가는 어디였습니까?\n", + "Processing question 1170/3952 : 아이스크림과 우유를 하나의 음료로 혼합하기 위해 사용하는 컵의 재질은?_____________어떤 재료로 만든 컵을 사용해야 하는가?\n", + "Processing question 1171/3952 : 일부 노선이 어번 네트워크 구역에 소속되지 않았던 해는?_____________어떤 노선은 어번 네트워크 구역에 속하지 않았던 연도는 언제인가요?\n", + "Processing question 1172/3952 : 윤치호는 어떤 인물의 통역을 맡았나요?_____________윤치호가 누구의 번역가로 일했습니까?\n", + "Processing question 1173/3952 : 마우리츠가 자신의 정적을 제거한 것은 몇 년인가?_____________마우리츠가 자신의 적을 제거한 년도는 몇 년인가요?\n", + "Processing question 1174/3952 : 제니가 아장에 의해 장애를 가지게 된 신체 부위는 어디인가?_____________제니가 아장에 의해 손상을 입은 신체 부위는 어디인가?\n", + "Processing question 1175/3952 : 원숭이들이 도구를 사용하여 견과류를 얻는 모습을 보고 알 수 있는 학습행동은 무엇과 가장 연계되나?_____________원숭이들이 도구를 사용하여 견과류를 얻는 모습을 보고 알 수 있는 학습행동은 무엇과 관련이 있나요?\n", + "Processing question 1176/3952 : 아서를 낳은사람의 남편은?_____________아서를 낳은 사람의 남편은 누구인가요?\n", + "Processing question 1177/3952 : 문제가 사망한 뒤 왕이 된 사람은 누구인가?_____________누가 문제가 사망한 후에 왕이 되었습니까?\n", + "Processing question 1178/3952 : 스바프를라미는 누구의 손자인가?_____________누구의 손자가 스바프를라미인가?\n", + "Processing question 1179/3952 : 일제강점기 당시 조선 지식인들이 일본 정부에게 일본인과 동등한 권리를 요구하는 계기가 된 사건은?_____________조선의 지식인들이 동등한 권리를 요구한 사건은 무엇인가요?\n", + "Processing question 1180/3952 : 타티키오스는 1097년에 십자군들을 돕기 위해 어디로 갔나요?_____________타티키오스가 1097년에 십자군들을 돕기 위해 어디로 갔습니까?\n", + "Processing question 1181/3952 : 조쉬마자의 이적 이후 그의 역할을 대신한 인물은?_____________조쉬마자가 이적한 후에 대신하여 그의 역할을 맡은 사람은 누구인가요?\n", + "Processing question 1182/3952 : 대한민국에 농구가 처음 상륙한 해는?_____________대한민국에 농구가 처음 도입된 연도는 언제인가요?\n", + "Processing question 1183/3952 : 협동조합당의 근간 역할을 하는 단체는?_____________협동조합당의 근간 역할을 하는 단체는 무엇인가요?\n", + "Processing question 1184/3952 : 피츠로이는 항해 중 누구의 생각을 받아들이고 있었나?_____________피츠로이는 항해 중 누구의 생각을 수용하고 있었습니까?\n", + "Processing question 1185/3952 : 1949년 8월 6일에 북한군을 발견한 뒤 무찔렀던 연대는?_____________1949년 8월 6일에 북한군을 발견한 뒤 격퇴한 연대는 무엇입니까?\n", + "Processing question 1186/3952 : 이언 캐머런의 아내가 매킨지 앤드 컴퍼니의 국제 경영 상담자로 일하기 시작한 년도는?_____________이언 캐머런의 부인이 매킨지 앤드 컴퍼니에서 국제 비즈니스 컨설턴트로 일을 시작한 연도는 언제인가요?\n", + "Processing question 1187/3952 : 오브스테트릭스의 뜻에 대해 연구한 사람은?_____________오브스테트릭스의 의미를 연구한 사람은 누구인가요?\n", + "Processing question 1188/3952 : 스페인이 영국에 빼앗겼다가 다시 차지한 지역은?_____________영국이 스페인으로부터 빼앗았다가 다시 차지한 곳은 어디인가요?\n", + "Processing question 1189/3952 : 현대 사회에서 전쟁의 궁극적인 목적으로 보는 것은?_____________전쟁의 궁극적인 목적으로 인식되는 것은 무엇인가요?\n", + "Processing question 1190/3952 : 17세기 이전 베이크드 빈즈는 어떤 콩으로 만들었는가?_____________17세기 이전 베이크드 빈즈는 어떤 콩을 사용하여 만들었습니까?\n", + "Processing question 1191/3952 : 경상도가 만들어질 떄 중점이 되었던 곳은?_____________경남이 만들어질 때 중심이 되었던 곳은 어디였습니까?\n", + "Processing question 1192/3952 : 비트겐슈타인이 소피야 야노프스카야를 만났던 연도는?_____________비트겐슈타인이 소피야 야노프스카야를 만난 해는 언제였습니까?\n", + "Processing question 1193/3952 : 공하류의 무서운 새우라는 의미는 어떤 동물 종류의 외형에서 따온 것인가?_____________어떤 동물 종류의 외형에서 따온 것인가 공하류의 무서운 새우라는 의미?\n", + "Processing question 1194/3952 : 송상현의 위패가 있는 절은?_____________송상현의 위패가 있는 절은 어디에 있나요?\n", + "Processing question 1195/3952 : 아물레흐티에서 \"최저의 인간쓰레기\"라고 지칭한 사람들은?_____________아물레흐티가 \"최저의 인간쓰레기\"로 지칭한 사람들은 누구인가요?\n", + "Processing question 1196/3952 : 디오게네스는 누구에 의해 죽임을 당했나요?_____________디오게네스는 누구에 의해 살해당했습니까?\n", + "Processing question 1197/3952 : 하이든의 <천지창조>에 영향을 준 것은?_____________하이든의 <천지창조>에 영향을 미친 것은 무엇인가요?\n", + "Processing question 1198/3952 : S/W 취약점 찾기 대회에서 수상한 해커그룹들이 찾은 보안 취약점의 특징은?_____________해커 그룹들이 발견한 취약점의 특징은 무엇입니까?\n", + "Processing question 1199/3952 : 기원전 234년에 진나라는 어디를 다시 침략하기로 하였나요?_____________진나라가 공격할 곳은 어디인가요?\n", + "Processing question 1200/3952 : 전북 남원과 전남 나주가 특별 재난 지역으로 지정된 것은 언제인가?_____________'전북 남원과 전남 나주가 특별 재난 지역으로 선포된 시기는 언제였나요?'\n", + "Processing question 1201/3952 : 줄리에 두보의 <<제공>>을 비행 전술학교의 교본으로 사용한 국가는?_____________줄리에 두보의 <<제공>>을 비행 전술학교의 교본으로 사용한 국가는 어디인가요?\n", + "Processing question 1202/3952 : 아오테아로아는 보통 뭐라고 해석하는가?_____________아오테아로아는 일반적으로 어떻게 번역되나요?\n", + "Processing question 1203/3952 : 여운형의 행동을 친일로 매도한 인물은 누구인가?_____________여운형의 행동을 친일로 비난한 사람은 누구인가?\n", + "Processing question 1204/3952 : 헬싱키, 비푸리, 발케아코스에서 첫 여성적위대가 만들어진 년도는?_____________첫 여성적위대가 만들어진 연도는 헬싱키, 비푸리, 발케아코스에서 언제였나요?\n", + "Processing question 1205/3952 : 급성 기관지염 치료를 위해 약과 함께 추천되는 것은?_____________'급성 기관지염 치료를 위해 약과 함께 권장되는 것은 무엇인가요?'\n", + "Processing question 1206/3952 : 에드워드 스톤은 백버드나무의 어떤 것을 사용하여 사람들을 해열할 수 있었나?_____________에드워드 스톤이 백버드나무의 무엇을 사용하여 사람들을 해열할 수 있었나?\n", + "Processing question 1207/3952 : ISO 26000는 기업이 무엇을 시행할 때 필요한 지침서인가?_____________기업이 무엇을 시행할 때 필요한 지침서인 ISO 26000은 무엇인가요?\n", + "Processing question 1208/3952 : 에서 오아이오강이 지구상에서 가장 아름다운 강이라고 표현한 사람은?_____________'어떤 사람이 에서 오아이오강을 지구상에서 가장 아름다운 강으로 묘사했습니까?'\n", + "Processing question 1209/3952 : 1954년 총선에서 자유당과 라이벌이었던 인물은?_____________1954년 총선에서 자유당과 라이벌이었던 인물은 누구였나요?\n", + "Processing question 1210/3952 : 프랑켄슈타인과 앙리 관계를 알 수 있는 노래는?_____________프랑켄슈타인과 앙리 사이의 관계를 다룬 노래는 무엇인가요?\n", + "Processing question 1211/3952 : 1951년과 1952년의 레슬링 대회에서 안데르베리에게 패배한 인물은?_____________안데르베리에게 패배한 인물은 누구인가요?\n", + "Processing question 1212/3952 : 2005년에 하라 연구진들이 발견한 작용을 줄일 수 있는 물질은?_____________하라 연구팀이 2005년에 식별한 작용을 억제할 수 있는 물질은 무엇입니까?\n", + "Processing question 1213/3952 : 천주교로 종교를 바꿨다는 의심을 받았던 학자는?_____________어떤 학자가 천주교로 종교를 전향했다는 의심을 받았습니까?\n", + "Processing question 1214/3952 : 백인들이 신대륙으로 갈 때 탔던 배는?_____________백인들이 신대륙으로 갈 때 사용한 배는 무엇인가요?\n", + "Processing question 1215/3952 : 베토벤은 무엇에 대한 근심으로 유서를 작성하였나요?_____________베토벤이 어떤 문제 때문에 유서를 작성했습니까?\n", + "Processing question 1216/3952 : 고든은 블랙메사 연구소의 어디에서 일했나요?_____________'고든은 블랙메사 연구소의 어떤 장소에서 근무했나요?'\n", + "Processing question 1217/3952 : 왕식렴의 도움을 받아 왕의 자리를 차지하려고 한 인물은 누구인가요?_____________왕식렴의 지원을 받아 왕위를 노리던 인물은 누구인가요?\n", + "Processing question 1218/3952 : 올리벤사가 1297년 이후 처음으로 소유 국가가 바뀐 해는?_____________올리벤사가 1297년 이후 처음으로 소유 국가가 변경된 연도는 언제인가요?\n", + "Processing question 1219/3952 : 꿀풀과와 유사하게 생긴 식물은?_____________어떤 식물이 꿀풀과와 비슷한 외모를 가지고 있나요?\n", + "Processing question 1220/3952 : 천지가 용호라고 불리게 된 계기를 제공한 사람은?_____________천지가 용호라고 불리게 된 계기를 제공한 사람은 누구인가요?\n", + "Processing question 1221/3952 : 정태가 혜주의 약 봉투를 본 곳은?_____________혜주가 정태의 의약품 포장을 보았던 장소는 어디인가요?\n", + "Processing question 1222/3952 : 북지황군위문단 파견에 지원을 해준 기구는?_____________북한 지원단체 중 어느 기관이 북한 지원단 파견을 지원했습니까?\n", + "Processing question 1223/3952 : 10월 23일 독일군은 어디에서 후퇴하던 중이었나?_____________독일군이 10월 23일에 후퇴하던 중이었던 장소는 어디였나요?\n", + "Processing question 1224/3952 : 10월 15일에 호르티를 붙잡은 사람의 소속은 어디인가?_____________호르티를 체포한 사람의 소속은 어디입니까?\n", + "Processing question 1225/3952 : 우룡은 그림에서 어떤 모습으로 묘사되었는가?_____________우룡은 어떤 형상으로 그려졌나요?\n", + "Processing question 1226/3952 : 추측으로만 채헌덕이 범인이라고 발표한 단체는?_____________채헌덕이 범인이라고 추정한 단체는 무엇인가요?\n", + "Processing question 1227/3952 : 1990년 FIFA 월드컵 당시 한국은 2차전에서 어느 국가에 패배했나요?_____________한국이 1990년 FIFA 월드컵 2차전에서 패배한 국가는 어디였습니까?\n", + "Processing question 1228/3952 : 슈파이어는 어느 주의 도시인가?_____________슈파이어는 어느 주의 도시에 위치하나요?\n", + "Processing question 1229/3952 : 구룡이 위치한 도는?_____________'구룡이 있는 지역은 어디에 있나요?'\n", + "Processing question 1230/3952 : 팩트의 후손들이 반대한 것은?_____________'팩트의 자손들이 반대한 것은?'\n", + "Processing question 1231/3952 : 미카엘이 가진 권력을 잃고 죽은 해는?_____________미카엘이 가진 권력을 잃고 죽은 해는 무엇입니까?\n", + "Processing question 1232/3952 : 소영이 창문을 두드리는 모습을 바람에 흔들리는 것으로 착각한 인물은?_____________소영이 창문을 두드리는 모습을 바람에 흔들리는 것으로 착각한 인물은 누구인가요?\n", + "Processing question 1233/3952 : 지방 당국은 무엇을 목표로 특정 분야에만 투자하였는가?_____________지방 당국이 특정 분야에만 투자한 목표는 무엇이었습니까?\n", + "Processing question 1234/3952 : 아멧의 네 부분 중 하나로 머리부위와 연결되어 올렸다 내렸다 할 수 있는 부분은?_____________아멧의 네 부분 중 하나로 머리부위와 연결되어 움직일 수 있는 부분은 무엇인가요?\n", + "Processing question 1235/3952 : 홍승대가 임금 체불로 고소한 사람은?_____________홍승대가 임금을 지불하지 않아 고소한 사람은 누구인가요?\n", + "Processing question 1236/3952 : 고흥 월포농악은 어떤 굿의 한 종류인가?_____________고흥 월포농악은 어떤 춤의 한 종류인가?\n", + "Processing question 1237/3952 : KBO 리그의 첫 번째 승부 조작 사건이 일어난 연도는?_____________KBO 리그에서 최초로 발생한 승부 조작 사건이 일어난 해는 언제였나요?\n", + "Processing question 1238/3952 : 판타로스에게 메넬라오스를 화살로 쏴 죽이라고 사주한 것은 누구인가?_____________누가 메넬라오스를 죽이도록 판타로스에게 명령했습니까?\n", + "Processing question 1239/3952 : 흑기사의 막강한 오라력은 어디서 오는가?_____________흑기사의 강력한 오라는 어디에서 비롯되는가?\n", + "Processing question 1240/3952 : 2017년 총선거에서 50석을 차지한 당이 만들어진 달은?_____________2017년 총선거에서 50석을 차지한 정당이 탄생한 달은 언제인가요?\n", + "Processing question 1241/3952 : 1979년 이래로 가장 큰 폭발이 관측된 화산은?_____________가장 큰 폭발이 관측된 화산은 1979년 이래로 어디에 있나요?\n", + "Processing question 1242/3952 : 세계 1차 대전이 끝난 직후에 메테스키는 무엇으로 일했나요?_____________메테스키가 세계 1차 대전이 끝난 직후에 어떤 직업을 가졌는지 알고 계신가요?\n", + "Processing question 1243/3952 : 리루이취앤의 스승이 심층적으로 연구한 학자는?_____________리루이취앤의 스승이 깊이 연구한 학자는 누구인가요?\n", + "Processing question 1244/3952 : 고등학교에서 문,이과로 나뉘어지지 않게 되는 해는 언제인가?_____________고등학교에서 문, 이과로 나뉘어지지 않는 해는 언제인가요?\n", + "Processing question 1245/3952 : 헨슬로가 처음으로 지질학 강의를 들은 때는 언제였나요?_____________헨슬로가 처음으로 지질학 강의를 들은 때는 언제였습니까?\n", + "Processing question 1246/3952 : 연합군이 유일하게 피해를 입었던 지역은 어디인가?_____________연합군이 손실을 입었던 유일한 지역은 어디였나요?\n", + "Processing question 1247/3952 : 스콴토가 고향으로 귀향한 년도는?_____________스콴토가 고향으로 돌아간 해는 언제인가요?\n", + "Processing question 1248/3952 : 주로 튀김류나 육류 종류와 곁들여 마시는 주류는?_____________튀김이나 고기와 함께 먹기 좋은 음료수는 무엇인가요?\n", + "Processing question 1249/3952 : 일부 중국인 네티즌들은 누구로부터 사과를 받길 원했는가?_____________누구에게 중국인 네티즌들은 사과를 받길 희망했나요?\n", + "Processing question 1250/3952 : 게오르기 테르테르의 처남은?_____________게오르기 테르테르의 형은 누구인가요?\n", + "Processing question 1251/3952 : 예루살렘 성경이 많이 보급되기 전에 사용되던 것은 무엇인가요?_____________'예루살렘 성경이 널리 보급되기 전에 사용되던 것은 무엇입니까?'\n", + "Processing question 1252/3952 : 시각예술가들이 존 케이지의 혁신을 받아들임으로 시작된 현대 미술의 트렌드는?_____________현대 미술의 동향은 시각예술가들이 존 케이지의 혁신을 받아들임으로 어떻게 변화하고 있나요?\n", + "Processing question 1253/3952 : 핵무기 공유 협정을 맺은 경우 발사에 필요한 물건은?_____________핵무기 공유 협정을 맺은 경우 발사에 필요한 물건은 무엇입니까?\n", + "Processing question 1254/3952 : 코끼리 모습의 폭포에 이름을 붙여준 부족은?_____________코끼리 모습의 폭포에 이름을 붙여준 부족은 무엇인가요?\n", + "Processing question 1255/3952 : 장궁병들은 어떤 무기를 통해 기사들의 말을 공격했나요?_____________장궁병들은 어떤 무기를 사용하여 기사들의 말을 공격했습니까?\n", + "Processing question 1256/3952 : 국제적십자운동을 처음 시행한 사람은?_____________국제적십자운동을 최초로 개설한 사람은 누구입니까?\n", + "Processing question 1257/3952 : 토스카나에서 밀라노군를 여러 차례 이긴 싸움 상대는?_____________두 도시 간의 전투에서 밀라노군을 여러 차례 이긴 사람은 누구인가요?\n", + "Processing question 1258/3952 : 웨일스가 잉글랜드에 복종하는 계기를 제공한 민족은?_____________어떤 민족이 웨일스가 잉글랜드에 복종하는 계기를 제공했습니까?\n", + "Processing question 1259/3952 : 기존보다 더 재미있는 타입의 놈이 만들어지면서 다시금 정원 요정의 인기가 오른 시기는?_____________정원 요정의 인기가 다시 상승한 때는 새로운 유형의 인물이 등장하여 더욱 흥미로운 시기가 돌아올 때입니다.\n", + "Processing question 1260/3952 : 카르타고 회의에서 기독교회의 선택을 받지 못한 이론을 주장했던 인물은?_____________카르타고 회의에서 기독교회의 선택을 받지 못한 이론을 주장했던 인물은 누구였나요?\n", + "Processing question 1261/3952 : 1930년대 당시 가장 유명했던 놈 만드는 사람은?_____________1930년대에 유명했던 놈을 만드는 사람은 누구였습니까?\n", + "Processing question 1262/3952 : 현민의 저주가 악화된 것은 무엇이 밝혀진 이후인가?_____________현민의 저주가 악화된 것은 언제 밝혀졌습니까?\n", + "Processing question 1263/3952 : 기독교여자청년회가 한국에서 쓴 명칭은?_____________한국에서 기독교여자청년회를 뜻하는 다른 말은 무엇인가요?\n", + "Processing question 1264/3952 : 1787년 해임된 인물의 원래 지위는?_____________1787년 해임된 인물의 원래 지위는 무엇이었습니까?\n", + "Processing question 1265/3952 : 뚜르개나 새기개를 만들때 필요한 재료는 무엇인가?_____________'뚜르개나 새기개를 제작할 때 필요한 재료는 어떤 것들이 있나요?'\n", + "Processing question 1266/3952 : 독일 기사단은 누구의 지휘 아래 트란실바니아로 이동했나요?_____________독일 기사단은 누구에게서 명령을 받아 트란실바니아로 이동했나요?\n", + "Processing question 1267/3952 : 일본에게 처음으로 공격을 퍼부었던 서양의 군함은?_____________일본에게 처음으로 공격을 퍼부었던 서양의 군함은 무엇이었습니까?\n", + "Processing question 1268/3952 : 가브릴라 데르자빈이 장교 시절 진압한 사건의 주동자는 누구인가?_____________가브릴라 데르자빈이 군인 시절 진압한 사건의 주요 인물은 누구인가요?\n", + "Processing question 1269/3952 : 포라얘르비가 핀란드 합병을 결정한 해는?_____________포라얘르비가 핀란드 통합을 결정한 해는 언제였나요?\n", + "Processing question 1270/3952 : 알베르트가 그의 가정부와 결혼한 것은 무엇을 주기 위해서인가?_____________알베르트가 그의 가정부와 결혼한 이유는 무엇인가요?\n", + "Processing question 1271/3952 : 야마토 박물관은 주로 어떤 기술에 대해 전시하고 있나요?_____________'야마토 박물관은 일반적으로 어떤 기술에 관한 전시를 진행하나요?'\n", + "Processing question 1272/3952 : 홀즈워스의 곡은 에디 반 헤일런이 무엇을 개시하게 하는데 영향을 주었는가?_____________에디 반 헤일런에게 홀즈워스의 음악이 어떤 영감을 주었습니까?\n", + "Processing question 1273/3952 : 술탄에게 거절한 대가로 8년동안 포위된 곳은?_____________술탄이 거절한 대가로 8년 동안 포위된 장소는 어디인가요?\n", + "Processing question 1274/3952 : 콘코바르는 에흐네 다음으로 누구와 혼인하였나?_____________콘코바르는 에흐네 다음으로 누구와 결혼했습니까?\n", + "Processing question 1275/3952 : 시위 행진은 남대문과 더불어 어느 방향으로 이어졌나?_____________시위 행진은 남대문과 함께 어느 쪽으로 계속되었나요?\n", + "Processing question 1276/3952 : 관천대가 소실된 시기는?_____________'관천대가 사라진 시기는?'\n", + "Processing question 1277/3952 : 마윈이 만리장성 안내를 하며 친분을 쌓은 인물은?_____________만리장성 안내를 하며 친분을 쌓은 인물은 누구인가요?\n", + "Processing question 1278/3952 : 우측 2칸 전체에 설치되어있는 것은?_____________'오른쪽 2칸 전체에 설치되어있는 것은 무엇인가요?'\n", + "Processing question 1279/3952 : 석불입상의 대좌와 비슷한 양식을 보이는 불상은?_____________어떤 불상이 석불입상의 대좌와 유사한 형식을 갖고 있습니까?\n", + "Processing question 1280/3952 : 대좌 중 홀로 다른 무늬가 그려진 것은?_____________어떤 패턴이 대좌 중 홀로 다른 것인가요?\n", + "Processing question 1281/3952 : 일리리아어는 다키아어 그리고 트라키아어와 같이 무엇을 형성한다고 추정되는가?_____________일리리아어는 다키아어와 트라키아어와 함께 어떤 언어군을 형성한다고 생각되나요?\n", + "Processing question 1282/3952 : 이누족의 썰매의 재료로 사용되는 나무 종류는?_____________이누족의 썰매의 재료로 사용되는 나무 종류는 무엇인가요?\n", + "Processing question 1283/3952 : 이오에 착륙하기 위해서 탐사선이 이용하는 것은?_____________이오에 착륙하기 위해서 탐사선이 이용하는 것은 무엇인가요?\n", + "Processing question 1284/3952 : 베이 스트리트의 중요성이 부각되었던 연도는?_____________베이 스트리트가 중요한 역할을 한 연도는 언제였나요?\n", + "Processing question 1285/3952 : 제2차 세계 대전 이전에 삼각대를 사용했던 기관총 종류는?_____________제2차 세계 대전 이전에 삼각대를 사용했던 기관총 종류는 무엇입니까?\n", + "Processing question 1286/3952 : 히로시마 희생자에게 바치는 애가의 변경 전 곡명은?_____________히로시마 희생자에게 바치는 애가의 변경 전 곡명은 무엇입니까?\n", + "Processing question 1287/3952 : 마루게'의 끈기에 감탄하여 그가 학교 다니는 것을 허락했던 인물은?_____________'마루게'의 인내심에 감탄하여 그가 학교 다니는 것을 허락했던 사람은 누구인가요?\n", + "Processing question 1288/3952 : 비행기를 통해 입국하는 사람들이 반드시 써서 내야하는 것은 무엇인가요?_____________입국하는 사람들이 반드시 써서 내야하는 것은 무엇입니까?\n", + "Processing question 1289/3952 : 카이사르는 브리튼의 추운 날씨로 인해 어디로 후퇴했는가?_____________카이사르가 브리튼의 추운 날씨로 인해 어디로 철수했나요?\n", + "Processing question 1290/3952 : 발키리가 처음으로 도입된 해는?_____________발키리가 처음으로 등장한 해는 언제인가요?\n", + "Processing question 1291/3952 : 쿠데타 정보를 얻은 인물이 이후에 도망갔던 곳은?_____________어떤 장소로 도피했습니까?\n", + "Processing question 1292/3952 : 중화소비에트공화국의 시초가 된 장소는?_____________중화소비에트공화국의 시초가 된 장소는 어디인가요?\n", + "Processing question 1293/3952 : 시음자들은 포도주를 맛보기 전에 무엇의 냄새를 맡나요?_____________시음자들은 포도주를 맛보기 전에 어떤 향기를 맡나요?\n", + "Processing question 1294/3952 : 란돌포는 어느 섬에서 해적질을 결심하였는가?_____________란돌포가 어느 섬에서 해적활동을 시작했습니까?\n", + "Processing question 1295/3952 : 성제가 즉위하기 전의 왕은 누구인가?_____________성제가 즉위하기 전의 왕은 누구였습니까?\n", + "Processing question 1296/3952 : 마리아 수도원을 옮겨가게 한 사람은?_____________마리아 수도원을 옮겨가게 한 사람은 누구인가요?\n", + "Processing question 1297/3952 : 1870년대 이후로 더욱 발전한 것으로 총을 사용한 군의 병과는?_____________1870년대 이후에 더욱 발전한 것으로 총을 사용한 군의 병과는 무엇입니까?\n", + "Processing question 1298/3952 : 둘째 아들이 죽기 전에 사망한 사람은 주룰루와 어떤 사이였나요?_____________주룰루와 둘째 아들이 죽기 전에 사망한 사람은 어떤 관계에 있었나요?\n", + "Processing question 1299/3952 : 1883년 대한 제국에 들어온 독일 해군 음악단이 소속된 함대는?_____________독일 해군 밴드가 소속된 함대는 무엇입니까?\n", + "Processing question 1300/3952 : 여성해방 이론에 마르트스주의을 접목시키자는 주장을 한 사람은?_____________마르크스주의를 여성해방 이론에 접목시키자는 주장을 한 사람은 누구인가요?\n", + "Processing question 1301/3952 : 태어난 지 얼마 안 된 웨이게오쿠스쿠스는 무엇이 달라지는가?_____________웨이게오쿠스쿠스가 태어난 지 얼마 안 돼서 어떤 변화가 생기나요?\n", + "Processing question 1302/3952 : 훗날 파우라바 왕국을 세운 민족은?_____________파우라바 왕국을 세운 민족은 무엇인가요?\n", + "Processing question 1303/3952 : 조지 4세의 즉위 연회가 열린곳이 지어진 해는?_____________'조지 4세의 즉위 연회가 열린곳이 지어진 해는?' -> '조지 4세의 즉위식이 열린 장소가 건립된 년도는?'\n", + "Processing question 1304/3952 : 존 프레스톤이 성직자로 활동한 교회는 어느 국가에 있었나요?_____________존 프레스톤이 성직자로 일한 교회가 위치한 국가는 어디였나요?\n", + "Processing question 1305/3952 : 러시아어 교사 양미숙의 얼굴이 붉은 이유는?_____________왜 러시아어 교사 양미숙의 얼굴이 붉은가요?\n", + "Processing question 1306/3952 : 1972년에 실시된 서독 총선거에서 뽑아야 하는 서베를린의 의원 수는?_____________1972년에 열린 서독 총선거에서 선출해야 했던 서베를린 의원의 수는 몇 명이었습니까?\n", + "Processing question 1307/3952 : 일왕의 편지를 가지고 고종을 협박한 인물은?_____________누가 일왕의 편지를 가지고 고종을 협박했습니까?\n", + "Processing question 1308/3952 : 데이빗은 평행우주를 증명하기 위해서는 어떤 기계가 필요하다고 주장했나요?_____________데이빗은 병렬 우주를 입증하기 위해 어떤 장치가 필요하다고 주장했습니까?\n", + "Processing question 1309/3952 : 바다뱀자리 방향에 위치한 중력체가 움직인 원인은 무엇으로 추정되나요?_____________바다뱀자리 방향에 위치한 중력체가 움직인 이유는 무엇이라고 생각하십니까?\n", + "Processing question 1310/3952 : 워렌이 영화 스텝진에게 급여 대신 주기로 한 것은?_____________워렌이 영화 스텝진에게 급여 대신 주기로 한 것은 무엇입니까?\n", + "Processing question 1311/3952 : 조경의 할아버지는 누구인가?_____________조경의 할아버지는 누구인가?\n", + "Processing question 1312/3952 : 일본에서 가장 긴 고속도로의 마지막 지점이 되는 도시는 어디인가?_____________일본에서 가장 긴 고속도로의 종착점이 되는 도시는 어디인가요?\n", + "Processing question 1313/3952 : 델리가 만든 발명품 중 산화 되지 않는다고 알려진 것은?_____________델리가 개발한 발명품 중 산화되지 않는 것으로 알려진 것은 무엇인가요?\n", + "Processing question 1314/3952 : 동심원 우주 이론을 만든자로 코페르니쿠스의 우주 체계에 영향을 끼친 사람은?_____________코페르니쿠스의 천체 이론에 영향을 준 학자는 누구인가요?\n", + "Processing question 1315/3952 : 말제르브가 1776년에 퇴직한 곳은?_____________말제르브가 1776년에 퇴직한 장소는 어디인가요?\n", + "Processing question 1316/3952 : 산스크리트어 문법학 전통을 처음 연구한 인물은?_____________누가 산스크리트어 문법학 전통을 처음 연구했습니까?\n", + "Processing question 1317/3952 : 페리 정부가 막을 내린 시기는?_____________페리 정부가 종료한 시점은 언제인가요?\n", + "Processing question 1318/3952 : 에르네스트가 떠나면서 마짜에게 남긴 것은?_____________에르네스트가 떠나면서 마짜에게 남긴 것은 무엇인가요?\n", + "Processing question 1319/3952 : 신익희는 어느 장소에서 윤치호에게 독립운동 참여를 권유했나요?_____________신익희는 어디에서 윤치호에게 독립운동 참여를 권유했나요?\n", + "Processing question 1320/3952 : 판매자가 소비자가 원하는 물건을 조달해와 판매했던 방식은?_____________'소비자가 원하는 상품을 구매하기 위해 판매자가 조달해온 상품은?'\n", + "Processing question 1321/3952 : 2008년 2월 6일에 마이너 리그 계약을 맺은 선수가 100번째 경력 홈런을 친 날은?_____________어떤 날에 마이너 리그 계약을 맺은 선수가 100번째 홈런을 친 날은 언제인가요?\n", + "Processing question 1322/3952 : 미국 관세사들이 짝퉁 판매 사이트를 제재한 시기는?_____________미국 관세사들이 가짜 상품을 판매하는 웹사이트를 제재한 시기는 언제였나요?\n", + "Processing question 1323/3952 : 사탄이 따뜻한 마음을 가진 주인공으로 등장하는 작품은 무엇인가?_____________어떤 작품에서 사탄이 따뜻한 마음을 가진 주인공으로 나타나는가?\n", + "Processing question 1324/3952 : 나치 강제 수용소 수감자 중 가장 높은 비율을 차지한 민족은?_____________어떤 민족이 나치 강제 수용소 수감자 중에서 가장 많은 비율을 차지했습니까?\n", + "Processing question 1325/3952 : 7월 4일 북한군이 전투를 벌인곳은?_____________7월 4일 북한군이 전투를 벌인 장소는 어디인가요?\n", + "Processing question 1326/3952 : 거문도를 포트해필턴이라고 불렀던 국가는?_____________포트해필턴이라고 불렀던 국가는 어디였나요?\n", + "Processing question 1327/3952 : 바르나 십자군의 구성국가는?_____________바르나 십자군의 구성국가는 무엇입니까?\n", + "Processing question 1328/3952 : 1970년대를 중심으로 남녀간의 통속적인 사랑을 표현한 대중적인 내용의 저서는?_____________남녀 사이의 전통적인 로맨스를 다룬 1970년대의 인기 도서는 무엇인가요?\n", + "Processing question 1329/3952 : 중국공산당의 본사는 어디에 있나요?_____________중국공산당의 본부는 어디에 위치하나요?\n", + "Processing question 1330/3952 : 1859년에 중부 이탈리아를 병합한 나라의 왕은?_____________1859년에 중부 이탈리아를 통합한 국가의 국왕은 누구인가요?\n", + "Processing question 1331/3952 : 쿠라이시 부족이 후발을 숭배하는 장소에 대해 글을 썼던 인물은?_____________쿠라이시 부족이 후발을 숭배하는 곳에 대해 글을 쓴 사람은 누구였나요?\n", + "Processing question 1332/3952 : 노르드인 탐험가들과 함께 북아메리카 북대서양 해안에서 세 개의 땅을 찾아낸 인물은?_____________누가 노르드인 탐험가들과 함께 북아메리카 북대서양 해안에서 세 개의 땅을 찾아낸 인물인가요?\n", + "Processing question 1333/3952 : 도미니시가 밴드에서 맡았던 역할은?_____________도미니시가 밴드에서 수행한 역할은 무엇이었습니까?\n", + "Processing question 1334/3952 : 청동기 이전 모계 사회의 존재를 찾아낸 학자의 이름은?_____________청동기 이전 모계 사회의 존재를 밝혀낸 학자는 누구인가요?\n", + "Processing question 1335/3952 : 빨치산 파는 누구를 중심으로 파벌을 구성했나요?_____________빨치산을 판매하는 사람들은 누구를 중심으로 그룹을 형성했습니까?\n", + "Processing question 1336/3952 : 버클러를 이용하거나 애초에 방패의 장점을 버리고 양손 무기를 썼던 사람들은?_____________두 손에 무기를 든 전사들은 무엇을 포기했나요?\n", + "Processing question 1337/3952 : 안티고네스가 셀레우코스를 기습 침략하며 시작된 전쟁은?_____________안티고네스가 셀레우코스를 기습 공격하여 시작된 전쟁은 무엇인가요?\n", + "Processing question 1338/3952 : 1024년에 조지아로 도망간 인물은?_____________'1024년에 조지아로 도피한 인물은 누구인가요?'\n", + "Processing question 1339/3952 : 일본의 헌법 제1조의 이념을 받쳐주는 내용은 무엇인가요?_____________'일본의 헌법 제1조가 지지하는 원칙은 무엇인가요?'\n", + "Processing question 1340/3952 : 토머스 베켓이 캔터베리의 대주교관으로 들어가기 전 사망한 인물은?_____________토머스 베켓이 캔터베리 대주교가 되기 전에 사망한 사람은 누구인가요?\n", + "Processing question 1341/3952 : 커스터드 중 진한 크림의 제형은 주로 어디에 사용되는가?_____________커스터드 중 짙은 크림의 형태는 일반적으로 어디에 사용되나요?\n", + "Processing question 1342/3952 : 자신의 애첩과 함께 몰래 일본으로 도망간 자유당 인물은?_____________\"누군가 자신의 배우자와 함께 비밀리에 일본으로 도주한 자유당 인물은 누구인가요?\"\n", + "Processing question 1343/3952 : 독일 A집단군을 고립시키기 위해 소련군이 펼친 전술은?_____________독일 A집단군을 고립시키기 위해 소련군이 사용한 작전은 무엇이었나요?\n", + "Processing question 1344/3952 : 1970년대 중반, 이즐링턴역에서의 노선 연장에 필요한 예산은 얼마였는가?_____________이즐링턴역에서의 노선 연장을 위해 필요했던 비용은 1970년대 중반에 어느 정도였습니까?\n", + "Processing question 1345/3952 : 제우스를 크레타 섬에 숨겨 키운 신의 남편은?_____________제우스를 크레타 섬에 감추어 키운 신의 남편은 누구인가요?\n", + "Processing question 1346/3952 : 서 베를린의 독일 오페라를 현대적인 고대 양식으로 연출한 사람은?_____________뉴욕 메트로폴리탄 오페라 하우스에서 일하는 사람 중에 '서 베를린의 독일 오페라를 현대적인 고대 양식으로 연출한 사람은?'\n", + "Processing question 1347/3952 : 교황 스테파노 9세가 사망한 년도는?_____________교황 스테파노 9세가 별세한 해는 언제인가요?\n", + "Processing question 1348/3952 : 가잔 칸이 해방 몽골 노예 부대의 사령관으로 임명한 사람의 본래 직위는 무엇인가?_____________가잔 칸이 해방 몽골 노예 부대의 사령관으로 임명한 사람의 본래 직위는 무엇이었습니까?\n", + "Processing question 1349/3952 : 주산을 비판한 사람은?_____________'누가 주산을 비난했습니까?'\n", + "Processing question 1350/3952 : 만지로가 나카하마 성을 부여받은 해는?_____________나카하마 성을 부여받은 해는 언제였나요?\n", + "Processing question 1351/3952 : 에리오르에게는 효력이 없는 마법은?_____________에리오르에게는 영향을 미치지 않는 주문은 무엇인가요?\n", + "Processing question 1352/3952 : 공격을 받아 쓰러진 우시를 보고 화가 나 공격한 인물은?_____________누가 공격한 인물은 누구인가요?\n", + "Processing question 1353/3952 : 스퀴드워드를 주로 무시하는 등장인물은?_____________누구가 스퀴드워드를 주로 무시하는 캐릭터인가요?\n", + "Processing question 1354/3952 : 제1차 세계 대전 기간 중에 목숨을 잃은 인도인은 모두 몇 명인가?_____________제1차 세계 대전 동안 목숨을 잃은 인도인의 총 수는 얼마인가요?\n", + "Processing question 1355/3952 : 프로이센이 독일 종교가 서로 끈끈하게 뭉쳐질 수 있도록 칼뱅파와 루터파를 포함한 신교들을 합친 해는?_____________프로이센이 독일 종교가 서로 끈끈하게 뭉쳐질 수 있도록 칼뱅파와 루터파를 포함한 신교들을 합친 해는 언제인가요?\n", + "Processing question 1356/3952 : 존 벨루시는 코카인과 무엇을 함께 주사했는가?_____________존 벨루시가 코카인과 함께 주사한 물질은 무엇인가요?\n", + "Processing question 1357/3952 : 와타루가 부활동을 시작한 이유는?_____________와타루가 부활동을 시작한 동기는 무엇인가요?\n", + "Processing question 1358/3952 : 여운형의 산소는 어디에 있는가?_____________여운형의 산소가 어디에 위치하고 있습니까?\n", + "Processing question 1359/3952 : 하이팅크가 계관 지휘자라는 수식이 붙기 시작한 년도는?_____________하이팅크가 계관 지휘자라고 불렸던 연도는 언제인가요?\n", + "Processing question 1360/3952 : 명함은 어디에 보관해야 하나요?_____________어디에 명함을 보관해야 하는 게 좋을까요?\n", + "Processing question 1361/3952 : 외국인 선교사들은 어떤 사람들의 부탁을 거절했는가?_____________외국인 선교사들이 어떤 사람들의 요청을 거부했나요?\n", + "Processing question 1362/3952 : 최초의 여성적위대가 참고한 부대 모델은 어느 국가의 것이었나?_____________여성적인 위대가가 참고한 부대 모델이었던 국가는 어디였습니까?\n", + "Processing question 1363/3952 : 볼셰비키와 멘셰비키가 갈라선 해는?_____________볼셰비키와 멘셰비키가 갈라진 해는 무엇인가요?\n", + "Processing question 1364/3952 : 게펀은 툴라기에 누구를 초대하려 했나요?_____________툴라기에 누구를 초대하려 했나요?\n", + "Processing question 1365/3952 : 교황 요한 바오로 2세는 카마라 대주교와 함께 누가 인간다운 삶을 살 수 있도록 도왔는가?_____________카마라 대주교와 함께 누가 인간다운 삶을 살 수 있도록 도왔나요?\n", + "Processing question 1366/3952 : 옵티마테스를 마침내 쓰러트리고 힘을 얻은 사람은 누구인가?_____________옵티마테스를 물리치고 힘을 얻은 사람은 누구입니까?\n", + "Processing question 1367/3952 : 누가 이슬람군에게 연설을 했나?_____________누가 이슬람군에게 연설을 했습니까?\n", + "Processing question 1368/3952 : 오카와 슈메이와 대화를 나눴던 인물이 일본으로 갔던 해는?_____________오카와 슈메이와 대화를 나눴던 인물이 방문했던 해는 언제인가요?\n", + "Processing question 1369/3952 : 최영손이 아버지, 형제들과 파저강으로 정벌 간 년도는?_____________최영손이 아버지와 형제들과 함께 파저강으로 정벌 간 년도는 언제였나요?\n", + "Processing question 1370/3952 : 암흑에너지가 우주에 가하는 힘의 종류는?_____________암흑에너지가 우주에 가하는 힘의 종류는 무엇인가요?\n", + "Processing question 1371/3952 : 학생은 성서의 어떤 부분을 모두 자르기 시작했는가?_____________학생이 성서에서 어떤 부분을 모두 잘랐는지 알려줄 수 있나요?\n", + "Processing question 1372/3952 : 황용주는 어떤 단체의 자산을 빼앗아 정수장학회를 설립하였나요?_____________황용주는 어떤 단체의 자산을 횡령하여 정수장학회를 설립하였나요?\n", + "Processing question 1373/3952 : 1944년 미국, 영국, 캐나다 연합군 공동작전을 수행한 프랑스의 지역은?_____________어떤 지역에서 1944년 미국, 영국, 캐나다 연합군이 공동작전을 수행했나요?\n", + "Processing question 1374/3952 : 유노를 사랑과 결혼의 척도를 나타내주는 신으로 비유하는 신앙은?_____________유노를 결혼과 사랑의 신으로 비유하는 신은 누구인가요?\n", + "Processing question 1375/3952 : 군자정은 누구를 기리기 위해 지어졌나?_____________군자정은 누구를 경외하기 위해 지어졌나?\n", + "Processing question 1376/3952 : 클린턴의 군대 내 성소수자 권리 정책에 대한 보수진영의 생각은 무엇인가?_____________클린턴의 군대 내 성소수자 권리 정책에 대해 보수진영은 어떻게 생각하나요?\n", + "Processing question 1377/3952 : 수감 생활의 고통에 비하면 고문의 고통은 아무것도 아니라고 기술한 인물은?_____________누가 \"수감 생활의 고통에 비하면 고문의 고통은 아무것도 아니라고 설명했나요?\"\n", + "Processing question 1378/3952 : 은미희가 《누에는 고치 속에서 무슨 꿈을 꾸는가》로 상을 받기 전에 연습 삼아 소설을 집필했던 기간은?_____________은미희가 《누에는 고치 속에서 무슨 꿈을 꾸는가》로 상을 받기 전에 소설을 쓴 시기는 언제였나요?\n", + "Processing question 1379/3952 : 가내작업반을 별도로 만들어 상품을 판매하면 얼마의 조세가 징수되는가?_____________'제품을 판매하기 위해 별도의 비즈니스 단위를 세우면 얼마의 세금을 내야 하나요?'\n", + "Processing question 1380/3952 : 가수 '최승이'가 무용 공연을 펼쳤던 작품은?_____________'가수 '최승이'가 춤추며 공연을 펼친 작품은 무엇인가요?'\n", + "Processing question 1381/3952 : 위협 첩보때문에 문 전 대표 신변은 누가 보호하였는가?_____________문 전 대표의 안전을 보호한 사람은 누구였습니까?\n", + "Processing question 1382/3952 : 라인하르트 연대가 대적한 상대는?_____________라인하르트 연대가 대적한 상대는 누구였나요?\n", + "Processing question 1383/3952 : <백설공주에게 죽음을>이 아마존에서 가장 많이 팔린 기간은?_____________'백설 공주의 죽음'이 아마존에서 가장 많이 판매된 시기는 언제였나요?\n", + "Processing question 1384/3952 : 마르티노가 교황이 되는 것을 승인했었지만 후에 후회한 사람은?_____________마르티노가 교황이 되는 것을 승인했었지만 후에 후회한 사람은 누구인가요?\n", + "Processing question 1385/3952 : 재판에서 교황 하드리아노 1세와 교황 레오 3세가 수도원의 땅을 불법적으로 차지했다고 주장한 사람은?_____________누가 수도원의 땅을 불법적으로 차지했다고 주장했나요?\n", + "Processing question 1386/3952 : 웨사구셋에서 학살당한 것은 누구인가?_____________웨사구셋에서 살해당한 사람은 누구입니까?\n", + "Processing question 1387/3952 : 반구헌에 거주하던 인물은?_____________누가 반구헌에 살았나요?\n", + "Processing question 1388/3952 : 엘로이즈의 삼촌 이름은?_____________엘로이즈의 삼촌은 무엇인가요?\n", + "Processing question 1389/3952 : 크렘린을 되찾아온 러시아 사람은?_____________'어떤 러시아인이 크렘린을 되찾았나요?'\n", + "Processing question 1390/3952 : 포이즌 필 조항에 의거해 옵셔널벤쳐스코리아의 대표이사가 타의로 물러날 경우 받게 되는 금액은?_____________옵셔널벤쳐스코리아의 대표이사가 타의로 물러날 경우 받게 되는 금액은 무엇인가요?\n", + "Processing question 1391/3952 : 페일로드군과 카크스군이 힘을 합쳐 맞서 싸운 적은 누구였는가?_____________두 군대가 협력하여 싸운 적은 누구였나요?\n", + "Processing question 1392/3952 : 인도 철학은 나스티카와 무엇으로 분리되어 있었나요?_____________인도 철학은 나스티카와 어떤 것으로 구분되어 있었나요?\n", + "Processing question 1393/3952 : 리비우가 우크라이나의 민족주의 사상의 핵심이 된 계기는?_____________리비우가 우크라이나의 민족주의 사상의 핵심이 된 이유는 무엇입니까?\n", + "Processing question 1394/3952 : 선비족 족장 독발수기의 침입에 대응하여 가충이 출전할 것을 추천한 사람은?_____________가충이 출전할 것을 추천한 사람은 누구인가요?\n", + "Processing question 1395/3952 : 셀주크가 시르다리야 근처로 이주하기 전의 거주지는?_____________셀주크가 시르다리야 근처로 이주하기 전에 살았던 곳은 어디였나요?\n", + "Processing question 1396/3952 : 야마다 히사시의 팀 감독은 누구인가?_____________야마다 히사시의 팀 감독은 누구입니까?\n", + "Processing question 1397/3952 : 탑신의 몸돌 앞면에는 어떤 글씨가 쓰여져 있나요?_____________'몸돌 앞면에는 어떤 문구가 적혀 있나요?'\n", + "Processing question 1398/3952 : 타스만 빙하와 머치슨 빙하에서 흘러내린 물의 최종 도착지는?_____________머치슨 빙하와 타스만 빙하에서 흘러내린 물이 최종 도착하는 곳은 어디인가요?\n", + "Processing question 1399/3952 : 1976년 오프 시즌 훈련 당시 요미우리 OB코치는 누구였나?_____________1976년 오프 시즌 훈련 중에 요미우리 OB팀의 코치는 누구였습니까?\n", + "Processing question 1400/3952 : 메카동을 우주의 끝에 날리려는 목표를 가진 인물은?_____________누가 메카동을 우주의 끝에 날리려는 목표를 가지고 있는가?\n", + "Processing question 1401/3952 : 지구연방군이 붉은 혜성이라 부르는 인물은?_____________'지구연방군이 붉은 혜성이라 부르는 인물은 누구인가요?'\n", + "Processing question 1402/3952 : 갈릴레오가 발견한 다른 위성과 달리 이오에게만 존재하지 않는 것은?_____________이오에 대해 발견된 것 중 다른 위성과 달리 찾을 수 없는 것은 무엇인가요?\n", + "Processing question 1403/3952 : 다래 열매의 껍질은 무슨색인가요?_____________다래 열매의 피부는 어떤 색인가요?\n", + "Processing question 1404/3952 : 혈액침하가 나타나는 혈액성분은?_____________어떤 혈액성분이 혈액침하를 일으키나요?\n", + "Processing question 1405/3952 : 아그리콜라가 아일랜드 인접하여 성을 축조한 장소는 어디인가?_____________아그리콜라가 아일랜드 인접하여 성을 건설한 장소는 어디입니까?\n", + "Processing question 1406/3952 : 비트켄슈타인이 케임브리지 대학교수로 임명되면서 얻은 것은?_____________비트켄슈타인이 케임브리지 대학교수로 임명되면서 얻은 것은 무엇인가요?\n", + "Processing question 1407/3952 : 어린갑의 비늘조각을 고대 로마에서는 무엇이라 불렀나?_____________어린갑의 비늘조각을 고대 로마에서는 무엇이라고 불렀습니까?\n", + "Processing question 1408/3952 : 잉천이 유명해지는 것은 어떤 작품 발표 후인가?_____________잉천이 유명해지는 것은 어떤 작품 공개 이후인가요?\n", + "Processing question 1409/3952 : 245점 미만의 세포에게 잡아 먹힐 수 있는 홀은?_____________245점 미만의 세포에게 잡아먹힐 수 있는 홀은 무엇인가요?\n", + "Processing question 1410/3952 : 니렌기 성과 밀접한 관련이 있는 성은?_____________'니렌기 성과 밀접한 관련이 있는 성은 무엇인가요?'\n", + "Processing question 1411/3952 : 윤치호가 서재필을 찾아간 이후 향한 지역은?_____________윤치호가 서재필을 만나러 간 이후 방문한 곳은 어디인가요?\n", + "Processing question 1412/3952 : 유세군은 누구와의 관계 때문에 시를 지었나요?_____________유세군은 누구와의 관계 때문에 시를 썼습니까?\n", + "Processing question 1413/3952 : 지동설의 옹호자들을 억누른 기관은?_____________'지동설의 옹호자들을 진압한 기관은 무엇인가요?'\n", + "Processing question 1414/3952 : 정보 통신 분야와 관계를 가진 광운대학교의 시발점은?_____________광운대학교의 설립과정에서 정보 통신 분야와 관련된 중요한 역할을 한 사건은 무엇인가요?\n", + "Processing question 1415/3952 : 테세우스의 어머니는?_____________테세우스의 어머니의 이름은 무엇인가요?\n", + "Processing question 1416/3952 : 위에서 아래로 하중이 작용할 경우, 보의 아랫부분은 어떻게 되나요?_____________하중이 아래에서 위로 작용할 때, 보의 윗부분은 어떻게 변하나요?\n", + "Processing question 1417/3952 : 이를 빈약한 용이라 여긴 국가는 어디인가?_____________어떤 국가가 이를 취약한 용으로 간주합니까?\n", + "Processing question 1418/3952 : 가장 먼저 손기정 선수의 활약상을 칭찬한 언론사는?_____________손기정 선수의 우수한 성적을 찬언한 언론사는 무엇인가요?\n", + "Processing question 1419/3952 : 1986 피파 월드컵 8강전이 열린 곳은?_____________'1986 FIFA 월드컵 8강전이 열린 장소는 어디였나요?'\n", + "Processing question 1420/3952 : 이 그림은 석가모니의 어떤 모습을 담았나?_____________석가모니의 어떤 형상이 그림에 묘사되었습니까?\n", + "Processing question 1421/3952 : 칠갑산 암각화의 그림은 어떠한 방식으로 표현되었나?_____________칠갑산 암각화의 그림은 어떻게 표현되었습니까?\n", + "Processing question 1422/3952 : 전체주의의 특징을 규정한 한나 아렌트의 저서는?_____________한나 아렌트가 전체주의의 특징을 규정한 저서는 무엇인가요?\n", + "Processing question 1423/3952 : 연역법과 같이 수학에서 증명하는데 사용할 수 있는 방법은?_____________어떤 방법들이 수학에서 사용되는 증명 방법으로서 쓰이는가?\n", + "Processing question 1424/3952 : 교육부가 주장하는 자사고 지정에 관한 마지막 주 결정자는?_____________교육부가 강조하는 자율고 선정에 관한 최종 주체는 누구인가요?\n", + "Processing question 1425/3952 : 고속 증식로는 경제적 측면이 어떤 단계에서 기존 방식의 원자로를 뛰어넘고자 하는가?_____________경제적 측면에서 고속 증식로는 어떤 측면에서 기존 방식의 원자로를 능가하려고 하는가?\n", + "Processing question 1426/3952 : 독일의 화력전에서 살아남은 건물은?_____________어떤 건물이 독일의 화력전에서 살아남았나요?\n", + "Processing question 1427/3952 : 윤치호가 미국의 특징이 인종주의라고 생각하게 만든 인물은?_____________\"윤치호가 미국의 특징이 인종차별이라고 생각하게 만든 인물은 누구인가요?\"\n", + "Processing question 1428/3952 : 로키가 슬레이프니르를 낳을때 변신한 동물은?_____________로키가 슬레이프니르를 낳을 때 변신한 동물은 무엇인가요?\n", + "Processing question 1429/3952 : 일년 전쟁에서 가장 강력한 기체도 이기지 못한 인물은?_____________일년 전쟁에서 최강의 기체에게 패배한 인물은 누구인가요?\n", + "Processing question 1430/3952 : 미국과 영국의 경계를 서쪽의 로키산맥까지 연장하게 된 회담은?_____________미국과 영국의 서쪽 경계를 연장하기로 한 회담은 무엇인가요?\n", + "Processing question 1431/3952 : 호박 잎의 끝 부분은 몇 개로 나뉘어지는가?_____________호박 잎의 끝 부분은 몇 개의 소각으로 나뉘어지는가?\n", + "Processing question 1432/3952 : 자유 연상은 어떤 학문을 근거로 한 기법인가요?_____________자유 연상은 어떤 분야를 기반으로 하는가요?\n", + "Processing question 1433/3952 : 경제위기에 맞서 임금 협약의 중지를 주장한 사람은?_____________누가 경제 위기에 맞서 임금 협약의 중지를 주장했습니까?\n", + "Processing question 1434/3952 : 첼레스티노 1세가 기록상으로 처음 언급되었을때의 직책은?_____________첼레스티노 1세가 기록상으로 처음 언급되었을 때의 직책은 무엇이었습니까?\n", + "Processing question 1435/3952 : 리치몬드 발렌타인이 제작한 칩은 무엇을 파괴하기 위해 만들어졌나요?_____________리치몬드 발렌타인이 제작한 칩은 무엇을 파괴하기 위해 개발되었나요?\n", + "Processing question 1436/3952 : 엔지니어 루카의 부인의 직업은?_____________루카의 부인이 하는 일은 무엇인가요?\n", + "Processing question 1437/3952 : 연방과 평화 협의를 하려고 한 사람은?_____________누가 연방과 평화 협의를 시도했나요?\n", + "Processing question 1438/3952 : 뇌전증이 가장 많이 발병하는 때는 언제까지인가?_____________뇌전증이 가장 빈번히 발생하는 시기는 언제까지인가?\n", + "Processing question 1439/3952 : 빅토르가 집으로 향하기 전에 누구의 연주를 들었나요?_____________'빅토르가 집으로 향하기 전에 누구의 공연을 감상했나요?'\n", + "Processing question 1440/3952 : 쿠즈네초프는 누구의 명령을 거역하였나요?_____________쿠즈네초프가 누구의 지시를 거부했습니까?\n", + "Processing question 1441/3952 : 명륜당이 대성전 남쪽에 설립된 후 제주향교는 어떤 모습을 띠고있나?_____________제주향교가 명륜당이 대성전 남쪽에 세워진 후에는 어떤 형태로 변모하게 되었습니까?\n", + "Processing question 1442/3952 : 평균적으로 「공주」로 지냈던 자들은 어떤 유형의 학생들이었나?_____________어떤 종류의 학생들이 평균적으로 \"공주\"로 시간을 보냈습니까?\n", + "Processing question 1443/3952 : 유무를 가르쳤던 사람의 아버지는?_____________그 사람을 가르친 사람의 아버지는 누구인가요?\n", + "Processing question 1444/3952 : 레닌그라드 제품보다 결점이 적은 전차포를 생산하는 공장은 어디인가?_____________어떤 지역에서 결함이 적은 전차포를 만드는 공장이 있습니까?\n", + "Processing question 1445/3952 : 그리스인들은 보니파시오를 무엇이라 불렀나요?_____________그리스인들은 보니파시오를 어떻게 불렀나요?\n", + "Processing question 1446/3952 : 베토벤을 낭만주의 파로 회유하려고 했던 인물은 누구인가?_____________베토벤을 낭만주의 파로 회유하려고 시도한 사람은 누구였습니까?\n", + "Processing question 1447/3952 : 분과에 한 개의 씨가 들어있지 않은 풀의 종류는?_____________어떤 풀이 씨가 없는 분과에 속한 식물은 무엇인가요?\n", + "Processing question 1448/3952 : 미국 댈러스의 코튼볼에서 있었던 경기에서 독일이 전반전에 넣은 골 수는?_____________독일이 전반전에 넣은 골 수는 미국 댈러스의 코튼볼에서 있었던 경기에서 얼마나 되나요?\n", + "Processing question 1449/3952 : 베토벤에 대한 루돌프의 존경심의 증거를 간직하고 있는 곳은?_____________베토벤에 대한 루돌프의 존경심의 증거를 간직하고 있는 장소는 어디에 있나요?\n", + "Processing question 1450/3952 : 힐이 사관학교 병원에서 임질의 치료를 받은 때는 몇 월이었나요?_____________힐이 군사 병원에서 임신의 치료를 받은 때는 어느 달이었나요?\n", + "Processing question 1451/3952 : 최초고용계약을 통해 무엇이 쉽게 가능해질 수 있는가?_____________최초 고용 계약을 통해 어떤 것이 쉽게 이루어질 수 있을까요?\n", + "Processing question 1452/3952 : 여장승과 남장승 중에 키가 더 큰 것은 무엇인가?_____________어떤 것이 더 키가 큰가: 여장승과 수컷 사자 중 어느 쪽이 더 큰가?\n", + "Processing question 1453/3952 : 궁예에 대한 민간 전승 중 궁예의 말년에 관한 이야기가 전승되는 곳은?_____________어디에서 궁예의 죽음에 대한 전승이 전해지나요?\n", + "Processing question 1454/3952 : 하인리히 4세는 어디에서 잡혀 감옥에 들어가게 되었나요?_____________하인리히 4세는 어디에서 체포되어 수감소로 이송되었나요?\n", + "Processing question 1455/3952 : 여운형이 태어난 직후에 출생한 남자 형제의 이름은?_____________여운형이 태어난 직후에 출생한 남자 형제의 이름은 무엇인가요?\n", + "Processing question 1456/3952 : 일본이 반자본주의 사회가 되었다고 라고 주장한 조직은?_____________어떤 단체가 일본이 반자본주의 사회가 된다고 주장했나요?\n", + "Processing question 1457/3952 : 델핀이 친구에게 버림받고 방황한 도시는?_____________델핀이 친구에게 버림받고 방황한 도시는 어디인가요?\n", + "Processing question 1458/3952 : 디오도로스 시켈로스의 직업은?_____________디오도로스 시켈로스의 직업은 무엇입니까?\n", + "Processing question 1459/3952 : 아프리카의 축구 국가대표팀들 중 처음으로 8강에 올라갔던 팀은?_____________아프리카 축구 국가대표팀 중에서 처음으로 8강에 진출한 팀은 어디였나요?\n", + "Processing question 1460/3952 : 아카디아 주민들에게 강제 퇴거 명령을 내린 인물은 누구인가?_____________'아카디아 거주자들을 강제로 이주시키기로 한 사람은 누구인가요?'\n", + "Processing question 1461/3952 : 상하이의 황방을 차지하도록한 인물은 어디의 수장인가?_____________황방을 점령한 사람은 어느 지역의 지도자입니까?\n", + "Processing question 1462/3952 : 안토니우스 함대 중 탑이 달린 전투 갤리인 함대 수는?_____________안토니우스 함대 중 탑이 달린 전투 갤리인 함대의 수는 얼마입니까?\n", + "Processing question 1463/3952 : 보수파와 민권파는 어떤 이유로 폭행 소문을 퍼뜨렸나?_____________보수파와 민권파가 왜 폭행 소문을 전파했는가?\n", + "Processing question 1464/3952 : 베니그노 아키노가 암살당한 장소는?_____________베니그노 아키노가 암살당했던 장소는 어디였나요?\n", + "Processing question 1465/3952 : 현재 모란봉 언덕에서 부벽루를 담당하는 시설은?_____________모란봉 언덕에서 부벽루를 책임지는 시설은 무엇입니까?\n", + "Processing question 1466/3952 : 카쿠레인저와 오레인저가 맞서 싸우는 요괴를 만든 인물은 누구인가?_____________요괴를 창조한 사람은 누구입니까?\n", + "Processing question 1467/3952 : 공공사업과 관련한 갈등이 유발되는 현장에서 사용되는 문구는 무엇인가?_____________공공사업과 관련한 갈등이 발생하는 현장에서 사용되는 문구는 무엇입니까?\n", + "Processing question 1468/3952 : <존 윅>의 장르는?_____________\"<존 윅>은 어떤 장르의 영화인가요?\"\n", + "Processing question 1469/3952 : 원동기장치자전거와 일반 자전거의 세금을 다르게 매기기로 한 지역은?_____________원동기장치자전거와 보통 자전거의 세금을 다르게 부과하는 지역은 어디인가요?\n", + "Processing question 1470/3952 : 폰지 사기에서 새로운 투자자들을 끌어들여야 하는 것은 무엇을 얻기 위함인가?_____________새로운 투자자들을 유치해야 하는 이유는 무엇인가요?\n", + "Processing question 1471/3952 : 고노에 다다코의 결혼 전 이름은?_____________고노에 다다코의 결혼 전 이름은 무엇이었습니까?\n", + "Processing question 1472/3952 : 메드닌 전투는 누구의 마지막 전투인가?_____________메드나 전투는 누구의 최후의 전투였습니까?\n", + "Processing question 1473/3952 : 이병주가 박정희와 함께 다녔던 학교는?_____________이병주가 박정희와 함께 다녀왔던 학교는 어디였습니까?\n", + "Processing question 1474/3952 : 파키케투스는 주로 어디에서 생활했었나요?_____________파키케투스는 어디에서 대부분 서식했나요?\n", + "Processing question 1475/3952 : 총재 선거에서 라이벌이 없어 다른 파벌들의 표를 받아 당선된 인물은?_____________총재 선거에서 경쟁자가 없어 다른 파벌들의 지지를 받아 당선된 인물은 누구인가요?\n", + "Processing question 1476/3952 : 페르시아 제국을 건설한 인물은 누구인가요?_____________누가 페르시아 제국을 세웠습니까?\n", + "Processing question 1477/3952 : 유일한 생존자가 정신을 차렸을 때 그는 누가 유괴당했다는 것을 알게되는가?_____________누가 유일한 생존자가 깨어나자마자 유괴되었음을 알게 되나요?\n", + "Processing question 1478/3952 : 인주 이씨와 안산 김씨가 친척이 된 방법은?_____________'인주 이씨와 안산 김씨가 친가가 된 방법은?'\n", + "Processing question 1479/3952 : 자유심증주의는 누구의 의견을 가장 중요시 생각하는가?_____________'자유의지주의는 누구의 의견을 가장 중요하게 여기나요?'\n", + "Processing question 1480/3952 : 조선총독이 시국강연을 위해 도 대표를 모은 해는?_____________조선총독이 시국강연을 위해 도 대표를 모은 해는 언제였습니까?\n", + "Processing question 1481/3952 : 김활란을 대표로 기독교 여성과 사회주의가 결합하여 만들어진 것은?_____________김활란을 대표로 기독교 여성과 사회주의가 결합하여 만들어진 것은 무엇입니까?\n", + "Processing question 1482/3952 : 라텍스 시트의 제작 최소 두께는?_____________라텍스 시트의 생산 최소 두께는 얼마인가요?\n", + "Processing question 1483/3952 : 견과류와 더불어 나이가 들어도 알레르기가 해결되지 않는 식품은?_____________견과류 외에도 나이가 들어도 알레르기가 해결되지 않는 식품은 무엇인가요?\n", + "Processing question 1484/3952 : 로버트 캐롤과 함께 두 동물군을 명확히 분류하는데 힘쓴 사람은 누구인가?_____________로버트 캐롤과 함께 두 동물군을 명확히 분류하는데 노력한 사람은 누구인가?\n", + "Processing question 1485/3952 : 네그리가 무력적인 봉기를 편드는 발언을 한 강의 장소는?_____________어느 장소에서 네그리가 무력한 저항을 장려하는 발언을 했습니까?\n", + "Processing question 1486/3952 : 오비디우스가 사망하기 전까지 머물렀던 지역은?_____________오비디우스가 사망하기 전까지 머물렀던 지역은 어디였나요?\n", + "Processing question 1487/3952 : 굿펠로우나무타기캥거루가 주로 생활하는 장소는 어디인가?_____________어느 곳에서 굿펠로우나무타기캥거루가 일반적으로 서식하나요?\n", + "Processing question 1488/3952 : 쿠나시르 섬의 생태계는 소련 정부의 무엇으로 지정되어 보호받고 있나요?_____________쿠나시르 섬의 생태계는 소련 정부의 무엇으로 지정되어 보호받고 있습니까?\n", + "Processing question 1489/3952 : 로제 프리츠의 언니 이름은 무엇인가요?_____________로제 프리츠의 언니의 이름은 무엇입니까?\n", + "Processing question 1490/3952 : 사람의 머리카락이 하는 가장 큰 기능은?_____________머리카락이 하는 주요 기능은 무엇인가요?\n", + "Processing question 1491/3952 : 90분이 종료된 이후 더 주어진 시간동안 몇 골을 성공시켰는가?_____________90분이 종료된 후 추가 시간 동안 몇 번 골을 넣었습니까?\n", + "Processing question 1492/3952 : 후경이 간문제를 제거하고 황제가 된 년도는?_____________후경이 간문제를 제거하고 황제가 된 해는 언제인가요?\n", + "Processing question 1493/3952 : 혼인이 허용되는 지위는?_____________결혼이 허용되는 지위는 무엇인가요?\n", + "Processing question 1494/3952 : 2개의 패키지와 아이템샵은 언제 새로 생겼나요?_____________'2개의 번들과 상점은 언제 새로 등장했습니까?'\n", + "Processing question 1495/3952 : 이이가 사망하기 세 달 전에 선조에게 청한 것은 무엇이었나?_____________이이가 사망하기 전 세 달 동안 선조에게 요청한 것은 무엇이었습니까?\n", + "Processing question 1496/3952 : 미네르바가 유피테르의 몸에서 벗어날 수 있게 해준 이는?_____________누가 유피테르의 몸에서 미네르바를 해방시켰습니까?\n", + "Processing question 1497/3952 : 비트겐슈타인이 불만을 가진 사람은?_____________불만을 품은 사람은 누구인가요?\n", + "Processing question 1498/3952 : 알렉산더가 강가에서 진을 치고 시행한 전술은?_____________알렉산더가 강가에서 진을 치고 시행한 전술은 무엇인가요?\n", + "Processing question 1499/3952 : 장승이 들어오지 못하게 막고 있는 대상은?_____________장승이 들어오지 못하게 막고 있는 대상은 무엇인가요?\n", + "Processing question 1500/3952 : 홍타이지의 어머니는?_____________홍타이지의 어머니의 이름은 무엇인가요?\n", + "Processing question 1501/3952 : 그린란드는 덴마크로부터 무엇을 얻은 후 그린란드 자체의 깃발을 만들기로 하였는가?_____________'그린란드가 덴마크로부터 얻은 것을 사용하여 그린란드 자체의 깃발을 만들기로 결정했습니까?'\n", + "Processing question 1502/3952 : 국내 대학중 스키부를 처음 만든 대학이 개최한 스키대회가 열린 년도는?_____________국내 대학 중 스키부를 최초로 설립한 대학이 주최한 스키 대회가 개최된 연도는 언제인가요?\n", + "Processing question 1503/3952 : 시시감비스가 알렉산더로 착각한 사람은?_____________알렉산더로 착각한 사람은 누구인가요?\n", + "Processing question 1504/3952 : 자국 내 전쟁으로 이어진 반란을 농민들에게 부추킨 단체는?_____________어떤 단체가 농민들에게 자국 내 전쟁으로 이어진 반란을 부추긴 것으로 알려져 있나요?\n", + "Processing question 1505/3952 : 아펜첼이너로덴주는 어떤 사건을 계기로 반주가 되었나?_____________아펜첼이너로덴주가 어떤 사건을 계기로 인기를 얻게 되었나요?\n", + "Processing question 1506/3952 : 통상적으로 대장전이 간수하는 것은?_____________어떤 것이 일반적으로 대장전을 간수하나요?\n", + "Processing question 1507/3952 : 켈러 박사는 누구의 명령을 받고 실험하였는가?_____________켈러 박사는 누구의 지시를 받고 실험하였습니까?\n", + "Processing question 1508/3952 : 아들이 무엇을 옮겼기 때문에 아들의 어머니가 돌아가셨나?_____________아들이 무엇을 이동시켰기 때문에 아들의 어머니가 사망하셨나요?\n", + "Processing question 1509/3952 : 블레이드 러너에서 실제 사람같은 존재를 부르는 단어는?_____________블레이드 러너에서 인간과 구분되지 않는 존재를 부르는 용어는 무엇입니까?\n", + "Processing question 1510/3952 : 윌리엄 헤이 칼드웰이 오리너구리에 대해 스코틀랜드에 보낸 메시지는?_____________윌리엄 헤이 칼드웰이 오리너구리에 대해 스코틀랜드에 보낸 메시지는 무엇이었나요?\n", + "Processing question 1511/3952 : 비디오 바이오스와 비슷한 역할을 하는 프로그램은?_____________BIOS와 유사한 기능을 하는 프로그램은 무엇인가요?\n", + "Processing question 1512/3952 : 표충사 삼층석탑에서 유물을 발굴한 해는?_____________표촌사 삼층석탑에서 유물을 출토한 연도는?\n", + "Processing question 1513/3952 : 살풀이춤은 원래 누가 추던 춤인가?_____________살풀이춤은 처음에 누가 추던 춤이었나요?\n", + "Processing question 1514/3952 : 어머니가 모든 재산을 가지고 사라졌다는 소식을 전해준 사람은?_____________누가 어머니의 모든 재산을 갖고 사라졌다고 전했나요?\n", + "Processing question 1515/3952 : 사회화를 바라보는 관점은 거시적 관점과 무엇으로 나뉘나요?_____________사회화를 바라보는 관점은 거시적 관점과 미시적 관점으로 나뉘나요?\n", + "Processing question 1516/3952 : 요자파트가 처음으로 근무했던 은행이 위치한 지역은?_____________요자파트가 처음으로 일했던 은행이 위치한 장소는 어디인가요?\n", + "Processing question 1517/3952 : 트랜잭셔널 메모리의 작업 수행 능력을 떨어뜨리는 부분의 명칭은 무엇인가?_____________트랜잭셔널 메모리의 작업 수행 능력을 떨어뜨리는 부분을 무엇이라고 부르나요?\n", + "Processing question 1518/3952 : 클레오파트라 3세가 후계자를 지명할 수 있도록 유언한 사람은?_____________'클레오파트라 3세가 후계자를 지목할 수 있도록 유언한 사람은 누구였나요?'\n", + "Processing question 1519/3952 : 주미 야마다니시키의 산지인 곳은 예전에 어디에 위치하였었나요?_____________주미 야마다니시키의 산지인 곳은 예전에 어디에 위치했습니까?\n", + "Processing question 1520/3952 : 한국에 예수회 대학 설립을 건의한 연도는?_____________한국에 예수회 대학 설립을 건의한 연도는 언제였습니까?\n", + "Processing question 1521/3952 : 제2차 보어 전쟁의 중반에 스뮈츠가 지휘를 받은 인물은?_____________제2차 보어 전쟁의 중간에 스미츠가 지휘를 맡은 인물은 누구였습니까?\n", + "Processing question 1522/3952 : 스파르타군과의 전투에서 트라쉬불로가 노예들에게 제안한 것은?_____________트라쉬불로가 노예들에게 제안한 것은 무엇이었습니까?\n", + "Processing question 1523/3952 : 카스카의 상태를 확인하려는 거츠가를 막은 사람은?_____________누가 카스카의 상태를 확인하려는 거츠가를 막았습니까?\n", + "Processing question 1524/3952 : 몰락한 가문 중 진성공의 즉위에 영향을 미친 가문은?_____________어떤 가문이 진성공의 즉위에 영향을 미쳤습니까?\n", + "Processing question 1525/3952 : 양국 간 의무적 무역 협정을 체결한 회담은 몇년도에 시작되었는가?_____________양국 사이 의무적 무역 협정을 체결한 회담은 언제 시작되었습니까?\n", + "Processing question 1526/3952 : 물리적 제거보다 우선시 할 경우 환경오염을 심화시키는 것은?_____________물리적 제거를 우선시하지 않을 경우 환경오염을 더 악화시키는 것은 무엇인가요?\n", + "Processing question 1527/3952 : 1986년에 채택된 개인 및 가족기업법에서 인정하지 않은 것은?_____________1986년에 시행된 개인 및 가족기업법에서 승인되지 않은 사항은 무엇입니까?\n", + "Processing question 1528/3952 : 사회연구분야처럼 파피의 연구가 평판이 좋은 분야는?_____________파피의 연구가 평판이 좋은 사회과학 분야는 무엇인가요?\n", + "Processing question 1529/3952 : 엑스포대로가 시작되는 도로의 이름은?_____________'엑스포대로가 시작되는 거리의 명칭은 무엇인가요?'\n", + "Processing question 1530/3952 : 진해를 뜯어 고치는데 걸림돌이 되었던 시설은?_____________진해를 수리하는 데 어려움을 겪었던 시설은 무엇입니까?\n", + "Processing question 1531/3952 : 아델리펭귄의 보온을 유지하기 위한 물질은 어디서 나오는가?_____________아델리펭귄의 보온을 유지하기 위한 물질은 어디에서 유래하는가?\n", + "Processing question 1532/3952 : 소년이 동네 건달패에게 소개한 인물의 이름은?_____________소년이 동네 깡패에게 소개한 인물의 이름은 무엇인가요?\n", + "Processing question 1533/3952 : 영 안은 어떤 나라가 지불해야 하는 전쟁 보상금에 관한 것인가?_____________어떤 국가가 전쟁 보상금을 지불해야 하는지에 대해 논의되는 것은 무엇입니까?\n", + "Processing question 1534/3952 : 전국시대 가신단에 요리키, 요리코들이 소속되면 무장의 힘이 세져 반란의 위험이 있다고 염려한 집단은?_____________전국시대 가신단에 요리키, 요리코들이 소속되면 무장의 힘이 세져 반란의 위험이 있다고 염려한 집단은 무엇인가요?\n", + "Processing question 1535/3952 : 페리클레스가 발의한 법이 입제된 시기는?_____________페리클레스가 제안한 법이 통과된 시기는 언제였습니까?\n", + "Processing question 1536/3952 : <성경과 신학>의 저자는?_____________'<성서와 신학>의 저자는 누구입니까?'\n", + "Processing question 1537/3952 : 잘라첸코와 세포 간부의 음모에 의해 리스벳은 어떤 처지가 되었는가?_____________리스벳은 잘라첸코와 세포 간부의 음모로 어떤 상황에 처해있나요?\n", + "Processing question 1538/3952 : 석조비로자나불좌상과 비슷한 시기에 제작되어진 것으로 보이는 불상은?_____________'석조비로자나불좌상과 유사한 시기에 제작된 것으로 보이는 불상은 무엇인가요?'\n", + "Processing question 1539/3952 : 제발트가 쓴 글들은 어떤 분위기를 가지고 있나?_____________트가 쓴 글들은 어떤 느낌을 전달하나요?\n", + "Processing question 1540/3952 : 유굴리의 가족들의 목이 걸린 곳은?_____________유굴리의 가족들의 목이 걸린 곳은 어디인가요?\n", + "Processing question 1541/3952 : 톰 루빈에게 발견되었던 인물은 어디서 자랐나요?_____________톰 루빈이 발견한 인물은 어디에서 유래했습니까?\n", + "Processing question 1542/3952 : 토치가 무엇을 가지고 있어서 돌로 바뀌지 않았는가?_____________토치가 무엇을 소지하고 있어서 석으로 변하지 않았습니까?\n", + "Processing question 1543/3952 : 프랑크인 기수가 기병창을 사용하기 위해 접목시킨 것은 무엇을 탄생시켰나?_____________프랑크인 기수가 기병창을 사용하기 위해 접목시킨 것이 무엇으로 이어졌나요?\n", + "Processing question 1544/3952 : 역사상 최초의 공학자는?_____________누가 역사상 최초의 기술자였습니까?\n", + "Processing question 1545/3952 : 후쿠다 총재가 주요 각료를 재임시킨 이유는?_____________후쿠다 총재가 핵심 각료를 재임시킨 동기는 무엇이었습니까?\n", + "Processing question 1546/3952 : 호라티우스와 가이우스 마에케나스를 만나게 해 준 사람은?_____________'호라티우스와 가이우스 마에케나스를 만나게 해 준 사람은 누구인가요?'\n", + "Processing question 1547/3952 : 전자기파가 비열적 유해성을 유발하려면 주파수가 몇 kHz 이하여야 하는가?_____________전자기파가 해로운 영향을 줄 수 있는 최대 주파수는 몇 킬로헤르쯤이어야 할까요?\n", + "Processing question 1548/3952 : 헨사토리르는 무엇으로 돈을 벌었나?_____________헨사토리르가 어떤 방식으로 수익을 창출했나요?\n", + "Processing question 1549/3952 : 에티오피아 인구의 절반이 유지하고 있는 언어는?_____________에티오피아에서 절반이상의 인구가 사용하는 주요 언어는 무엇인가요?\n", + "Processing question 1550/3952 : 나쁜 짓을 일삼고 도읍지를 장안으로 옮긴 사람은?_____________어떤 사람이 나쁜 행동을 일삼고 도읍지를 장안으로 옮긴 사람은 누구인가요?\n", + "Processing question 1551/3952 : 미하일 2세가 성화상 공경에 긍정적 입장을 취하게 만든 것은 누구인가?_____________'미하일 2세가 성화상 공경에 긍정적 입장을 취하게 만든 것은 누구야?'\n", + "Processing question 1552/3952 : 매춘을 정부와 사업 법규에 의해 규제해야한다는 관점은?_____________매춘을 정부와 법률에 의해 통제해야 한다고 생각하는 입장은 무엇인가요?\n", + "Processing question 1553/3952 : 덜레스가 일본 정치인들보다 먼저 회담한 사람은?_____________덜레스가 일본 정치인들보다 먼저 만난 사람은 누구인가요?\n", + "Processing question 1554/3952 : 전격형 출혈성 천연두 환자는 무엇 때문에 눈의 흰자가 붉은색을 띠는가?_____________왜 전격형 출혈성 천연두 환자의 눈의 흰자가 붉은색을 띠게 되는 것인가요?\n", + "Processing question 1555/3952 : 보은 방향의 도로를 폐쇄하라는 지시는 누구에게 내려졌나?_____________보은 방향 도로 폐쇄 지시는 누구에게 전달되었나요?\n", + "Processing question 1556/3952 : 응진전에서 상량묵서가 발견된 해는 언제인가요?_____________응전에서 상량묵서가 확인된 해는 언제인가요?\n", + "Processing question 1557/3952 : 조선후기 16나한상 중에서 호랑이와 함께 있는 나한상의 종류는?_____________'조선후기 16나한상 중에서 호랑이와 함께 있는 나한상의 종류는?'\n", + "Processing question 1558/3952 : 흥천사 목조여래좌상과 전체적으로 흡사한 구조를 띤 불상은?_____________어떤 불상이 흥천사 목조여래좌상과 구조적으로 유사한가요?\n", + "Processing question 1559/3952 : 선로 사용 시 융통성이 떨어지는 이유는 가까운 선로로 갈 때 무엇을 해야 하기 때문인가?_____________선로 사용 시 융통성이 떨어지는 이유는 가까운 선로로 갈 때 무엇을 해야 하기 때문인가?\n", + "Processing question 1560/3952 : 디아도코이 전쟁은 누구의 죽음으로 인해 일어났나요?_____________디아도코이 전쟁은 누구의 사망으로 인해 발발되었나요?\n", + "Processing question 1561/3952 : 닭들이 죽으면 어디로 처리하는가?_____________닭들이 사망하면 어디로 운반되나요?\n", + "Processing question 1562/3952 : 불가살이는 최시랑에게 무엇으로 감사한 마음을 전했나?_____________불가살이는 최시랑에게 무엇으로 감사한 마음을 표현했나요?\n", + "Processing question 1563/3952 : 분석에서 브라보케라톱스의 자매종으로 예상된 개체는?_____________브라보케라톱스의 자매종으로 예상되는 개체는 무엇인가요?\n", + "Processing question 1564/3952 : 양식 새우를 가장 많이 수출하는 국가는?_____________어떤 국가가 가장 많은 양식 새우를 수출하나요?\n", + "Processing question 1565/3952 : 아이오와 주민들의 인구 분포를 조사한 기관은?_____________'아이오와 주 거주민의 인구 구성을 조사한 단체는 무엇인가요?'\n", + "Processing question 1566/3952 : 카일이 약관에 서명하도록 한 인물은?_____________카일이 약서에 사인하도록 한 사람은 누구인가요?\n", + "Processing question 1567/3952 : 남아공과 더불어 리비아와 외교적인 마찰을 겪고 있는 나라는?_____________어떤 국가가 리비아와 외교적인 갈등을 겪고 있는 나라는 무엇입니까?\n", + "Processing question 1568/3952 : 스페인 내전에서 콘도르 군단이 게르니카를 박살낸 시기는?_____________게르니카를 파괴한 시기는 몇 년이었습니까?\n", + "Processing question 1569/3952 : 뱀 세마리가 꼬여있는 형태의 기둥이 처음 세워진 곳은 어디인가?_____________'뱀 세마리가 뒤얽혀 있는 형태의 기둥이 처음 세워진 장소는 어디입니까?'\n", + "Processing question 1570/3952 : 조상들과 똑같은 모양으로 제작된 작품은 보통 어디에 전시되어있나요?_____________어디에서 조상들과 동일한 형태로 만들어진 작품이 전시되나요?\n", + "Processing question 1571/3952 : 힌두교에서 한 철학적 분파의 스승을 뜻하는 단어는 무엇인가요?_____________'힌두교에서 한 철학적 분파의 스승을 가리키는 말은 무엇인가요?'\n", + "Processing question 1572/3952 : 마이크로소프트 윈도우보다 더 많은 사용자를 보유한 운영 체제는?_____________어떤 운영 체제가 마이크로소프트 윈도우보다 더 많은 사용자를 가지고 있나요?\n", + "Processing question 1573/3952 : 조조에게 모개와 모개를 고소했던 사람 둘 다 세심하게 따져 보아야 한다고 조언했던 인물은 누구인가?_____________누구가 조조에게 두 사람을 세심하게 따져 보라고 조언했습니까?\n", + "Processing question 1574/3952 : 야마구치 다몬은 어느 전쟁에서 전사하였나?_____________야마구치 다몬은 어느 전투에서 전사하였나?\n", + "Processing question 1575/3952 : 황금 견장에서 찾아볼 수 있는 이집트의 신은?_____________황금 견장에서 발견할 수 있는 이집트의 신은 누구인가요?\n", + "Processing question 1576/3952 : 사용자 열명 당 한명이 동의하면 무엇의 진행을 멈추나?_____________사용자 열명 중 하나가 동의하면 무엇이 중지되나요?\n", + "Processing question 1577/3952 : 프리드리히가 겨울왕으로 불리게 된 전쟁은?_____________프리드리히가 겨울왕으로 알려진 전쟁은 무엇입니까?\n", + "Processing question 1578/3952 : 이중근이 서울지방검찰청 검사로 재직할 당시에 맡았던 사건은?_____________이중근이 서울지방검찰청 검사로 근무하던 시기에 맡은 사건은 무엇이었나요?\n", + "Processing question 1579/3952 : 관촉사 앞뜰의 4각 석등보다 큰 것은 무엇인가요?_____________앞뜰의 4각 석등보다 큰 물건은 무엇인가요?\n", + "Processing question 1580/3952 : 워드는 무엇에 열정적이었나?_____________워드는 어떤 것에 열광했나요?\n", + "Processing question 1581/3952 : 영국은 그들의 군대 진영을 설립한 장소를 무엇이라고 불렀나?_____________영국은 그들의 군대 진영을 설립한 장소를 무엇으로 불렀습니까?\n", + "Processing question 1582/3952 : 1914년 말 크리스마스 편지를 독일에게 보낸 나라는?_____________어떤 국가가 1914년 크리스마스 이브에 독일에 편지를 보냈나요?\n", + "Processing question 1583/3952 : 이명법'에 쓰이는 언어는 무엇인가?_____________'이명법'에서 사용되는 말은 무엇입니까?\n", + "Processing question 1584/3952 : 허리케인 아이작의 발생에 영향을 끼친 파동이 중앙아메리카를 통과한 날짜는?_____________허리케인 아이작의 발생에 영향을 끼친 파동이 중앙아메리카를 통과한 날짜는 언제였습니까?\n", + "Processing question 1585/3952 : 실리콘을 실리콘유로 만들기 위해 거치는 과정은?_____________실리콘을 실리콘유로 만들기 위해 거치는 과정은 무엇인가요?\n", + "Processing question 1586/3952 : 대학에서 먹고 사는 방법을 가르치는 것은 합당한 일이라고 얘기한 인물은?_____________'대학에서 식비 관리를 가르치는 것이 정당한 일이라고 주장한 사람은 누구인가요?'\n", + "Processing question 1587/3952 : 튀코 브라헤와 달리 코페르니쿠스의 주장만 믿은 사람은?_____________코페르니쿠스의 주장만 믿은 사람은 누구인가요?\n", + "Processing question 1588/3952 : 키즈는 누구의 자백을 들었는가?_____________누구의 자백을 키즈가 들었나요?\n", + "Processing question 1589/3952 : 궁예와 석총이 공통으로 지향했던 불교 종파는?_____________불교 종파를 공통으로 존중한 두 왕은 누구인가요?\n", + "Processing question 1590/3952 : 4월 14일 솔로들의 날을 상징하는 컬러는?_____________4월 14일 싱글의 날을 상징하는 컬러는 무엇인가요?\n", + "Processing question 1591/3952 : 오타와강은 무엇이 없어지면서 니피싱호 강을 따라 흐르게 되었나?_____________오타와강이 어떤 변화로 인해 니피싱호 강을 따라 흐르게 되었나요?\n", + "Processing question 1592/3952 : 최종훈과 이종현이 무고함을 주장한 회사는?_____________'최종훈과 이종현이 무죄를 주장한 기업은 어디인가요?'\n", + "Processing question 1593/3952 : 1502년 우르비노를 군사적인 지배하에 둔 사람은?_____________1502년 우르비노를 군사적인 통제 아래 둔 사람은 누구인가요?\n", + "Processing question 1594/3952 : 탄소에서 이성질체가 발생할 때 서로 다른 원자가 몇 개 결합하는가?_____________탄소에서 이성질체가 발생할 때 서로 다른 원자가 몇 개 결합하나요?\n", + "Processing question 1595/3952 : 청나라 병사들의 이동이 허가된 지역은?_____________청나라 군인들의 이동이 승인된 지역은 어디인가요?\n", + "Processing question 1596/3952 : 1921년에 한글을 널리 알린 잡지를 만든 곳은?_____________한글을 널리 알린 잡지를 발행한 장소는 어디였습니까?\n", + "Processing question 1597/3952 : 산업이 발달함에 따라 대기중 배출량이 많아지고 있는 것은?_____________산업화가 진행됨에 따라 대기 중 배출량이 증가하는 이유는 무엇인가요?\n", + "Processing question 1598/3952 : 소음으로서 도시조 군을 패닉에 빠뜨린 부대는?_____________도시조 군을 공포에 빠뜨린 소음으로는 어떤 것이 있나요?\n", + "Processing question 1599/3952 : 점프맨 마리오의 외모 참고 모델이었던 인물의 직업은?_____________마리오의 외모 참고 모델이었던 사람의 직업은 무엇인가요?\n", + "Processing question 1600/3952 : 리지웨이 사령관이 실시한 작전은 무엇을 점령하려고 했나요?_____________리지웨이 사령관이 시행한 작전은 무엇을 점령하기 위해 진행되었나요?\n", + "Processing question 1601/3952 : 노아에 의해 방주에서 내보내진 비둘기는 다시 돌아올 때 무엇을 가져왔는가?_____________노아의 방주에서 내보내진 비둘기가 가져온 것은 무엇이었습니까?\n", + "Processing question 1602/3952 : 고바야시가 협상을 두고 함대파와 대립했던 연도는?_____________고바야시가 협상을 두고 함대파와 대립했던 연도는 언제였나요?\n", + "Processing question 1603/3952 : 성원경에 대해 인물평을 적은 책은 언제 만들어졌나요?_____________'성원경에 대한 인물평이 수록된 도서는 언제 출간되었습니까?'\n", + "Processing question 1604/3952 : 윤치호와 함께 개화당의 거사에 대해 비판했던 사람은?_____________개화당의 거사에 대해 비판했던 사람은 누구였나요?\n", + "Processing question 1605/3952 : 요비아누스가 황제가 되기 전에 지원한 원정의 지도자는?_____________요비아누스가 황제가 되기 전에 지원한 원정의 지도자는 누구였습니까?\n", + "Processing question 1606/3952 : 이철희의 아내를 도와주고 있던 인물은?_____________이철희의 아내를 돕는 사람은 누구인가요?\n", + "Processing question 1607/3952 : 톡 쏘는 것처럼 혀가 아린 매운맛을 내는 향신료는 무엇인가?_____________어떤 향신료가 혀를 자극하여 아린 매운맛을 내는가?\n", + "Processing question 1608/3952 : 브르트니에르 신부가 체포된 날짜는 언제인가요?_____________브르트니에르 신부가 체포된 날짜는 어느 날인가요?\n", + "Processing question 1609/3952 : 일월회가 창설된 곳은?_____________일월회가 설립된 장소는 어디입니까?\n", + "Processing question 1610/3952 : 윤치호가 탐독한 저서를 쓴 인물의 국적은?_____________윤치호가 지도한 책을 쓴 사람의 출신국가는 무엇입니까?\n", + "Processing question 1611/3952 : 핀란드군을 이끌어 기습 공격을 하고 숲 속으로 철수한 인물은?_____________'핀란드군을 지휘하여 습격을 하고 숲 속으로 퇴각한 인물은 누구인가요?'\n", + "Processing question 1612/3952 : 안드레이 마르코프 교수가 마르코프 행렬과 함께 개발한 연구는?_____________안드레이 마르코프 교수가 마르코프 행렬과 함께 개발한 연구는 무엇인가요?\n", + "Processing question 1613/3952 : 개찰 외에서도 열차가 보이는 것은 역 승강장과 개찰 외의 사이벽이 무엇으로 되어있기 때문인가?_____________외부에서도 열차가 보이는 이유는 무엇인가?\n", + "Processing question 1614/3952 : 수지와 섞어 점조도를 조절하는 물감은 무엇을 그릴 때 쓰이는가?_____________어떤 물감을 사용하여 수지와 점조도를 혼합하여 그림을 그릴 때 사용하나요?\n", + "Processing question 1615/3952 : 브리지 픽업은 무엇을 활용해 넥 픽업보다 개선된 출력을 만들어내나?_____________브리지 픽업은 어떤 장치를 이용하여 넥 픽업보다 더 뛰어난 출력을 만들어내나요?\n", + "Processing question 1616/3952 : 남쪽의 이민족과 밀접하고 백성들이 무지했던 곳은?_____________어디에서 남쪽의 이주민과 백성들이 무지한 지역이 있었나요?\n", + "Processing question 1617/3952 : 동북한일연군은 김동한을 뭐라 표현했는가?_____________김동한을 어떻게 묘사했습니까?\n", + "Processing question 1618/3952 : 그리스국 이전의 국명은?_____________그리스국 이전의 국명은 무엇이었나요?\n", + "Processing question 1619/3952 : 기존 가내작업반에 속해있던 사람들은 어디로 소속을 옮겼는가?_____________가내작업반 구성원들이 이동한 장소는 어디인가요?\n", + "Processing question 1620/3952 : 양명황 음악가의 사인은?_____________양명황 음악가의 사인은 무엇인가요?\n", + "Processing question 1621/3952 : 육아에 있어 아빠가 아이의 선배 역할을 해야한다고 주장한 의사는?_____________어떤 의사가 아빠가 아이의 선배 역할을 해야한다고 주장했나요?\n", + "Processing question 1622/3952 : 금방 만들어진 라바시가 쉽게 재료로 쓰이는 음식은?_____________어떤 요리가 쉽게 재료로 활용되는 신선한 야채는 무엇인가요?\n", + "Processing question 1623/3952 : 조선에서도 윤치호를 유색 인종이라는 이유로 차별한 사람은?_____________누가 조선에서 윤치호를 피부색을 이유로 차별했나요?\n", + "Processing question 1624/3952 : 사고기의 이륙장소가 3C로 바뀐 이유는?_____________사고기의 출발지가 3C로 변경된 이유는 무엇인가요?\n", + "Processing question 1625/3952 : 인필드 플라이가 무효가 될 경우 해당 플레이는 무엇으로 판정되는가?_____________인필드 플라이가 무효가 될 경우 해당 플레이는 무엇으로 간주되나요?\n", + "Processing question 1626/3952 : 피아노 삼중주 7번의 별칭은?_____________'피아노 삼중주 7번은 다른 이름으로 무엇이라고 불리나요?'\n", + "Processing question 1627/3952 : 소총통은 무엇이 개량된 것인가?_____________소총통은 어떤 것이 향상되었습니까?\n", + "Processing question 1628/3952 : 외계인이 주인공을 괴롭히는데 사용한 것은?_____________외계인이 주인공을 괴롭히는데 사용한 것은 무엇인가요?\n", + "Processing question 1629/3952 : 참호전 양상을 띄게 된 지역은?_____________'참호전 양상을 띄게 된 지역은 어디인가요?'\n", + "Processing question 1630/3952 : 자신의 몸에서 발화가 가능한 사람들을 무엇이라고 부르나요?_____________불폭발성인간을 무엇이라고 부르나요?\n", + "Processing question 1631/3952 : 가짜 드미트리가 정부를 건립한 곳은?_____________가짜 드미트리가 정부를 세운 장소는 어디인가요?\n", + "Processing question 1632/3952 : 최재우가 프리스타일 스키모굴 부문 결승전에서 실격당한 대회는?_____________최재우가 프리스타일 스키모굴 부문 결승전에서 실격당한 대회는 무엇인가요?\n", + "Processing question 1633/3952 : 민다와 테노리오는 누가 우승하도록 도왔나?_____________민다와 테노리오 중에서 누가 승리할 수 있도록 도와줬나요?\n", + "Processing question 1634/3952 : 《국민이 묻는다, 2019 국민과의 대화》에 참여한 정치인은?_____________2019 국민과의 대화에 참여한 정치인은 누구입니까?\n", + "Processing question 1635/3952 : 두 번째, 세 번째 피아노 협주곡 중 먼저 세상에 알려진 곡은?_____________'두 번째, 세 번째 피아노 협주곡 중 가장 먼저 유명해진 곡은 무엇인가요?'\n", + "Processing question 1636/3952 : 윤활제 역할을 위해 잉크에 들어가는 물질은 무엇인가요?_____________잉크의 윤활을 도와주는 물질은 무엇인가요?\n", + "Processing question 1637/3952 : 영국은 어느나라와의 싸움에서 승리해 코이누르 보석을 습득했나요?_____________영국은 어느 국가와의 전투에서 승리하여 코이누르 다이아몬드를 획득했나요?\n", + "Processing question 1638/3952 : 생태여성주의의 학문적, 철학적 하위분야는 무엇에 요점을 두고 있는가?_____________생태여성주의의 학문적, 철학적 하위분야는 어떤 측면에 초점을 맞추고 있나요?\n", + "Processing question 1639/3952 : 우주와 천체의 현상을 관찰하며 일반적이지 않은 현상이 감지되면 왕에게 보고하던 관직은?_____________'우주와 천체의 현상을 관찰하며 일반적이지 않은 현상이 감지되면 왕에게 보고하던 관직은 무엇인가?'\n", + "Processing question 1640/3952 : 쇄자갑이나 판금갑을 파훼하기 위해 개발된 무기는?_____________'쇄자갑이나 판금갑을 파훼하기 위해 개발된 무기는 무엇인가요?'\n", + "Processing question 1641/3952 : 미국에서 기독교 근본주의가 정치적 성격을 띠게 되는 때는?_____________미국에서 기독교 근본주의가 정치적 성격을 띠게 되는 시기는 언제인가요?\n", + "Processing question 1642/3952 : 알로이스 히틀러가 1900년대 감옥살이를 했을 때의 죄목은?_____________알로이스 히틀러가 1900년대 감옥살이를 했을 때의 범행은 무엇이었나요?\n", + "Processing question 1643/3952 : 김옥균이 히라노초를 갔을 당시 믿고 의지했던 인물은?_____________김옥균이 히라노초를 갔을 당시 믿고 의지했던 인물은 누구였나요?\n", + "Processing question 1644/3952 : 컴퓨터의 보안상태를 색상으로 나타내는 윈도우의 구성 요소는?_____________윈도우의 보안상태를 색으로 표시하는 것은 무엇입니까?\n", + "Processing question 1645/3952 : 방봉손이 44세였던 해는?_____________방봉손이 44살이었던 해는 언제였나요?\n", + "Processing question 1646/3952 : 아라카와강 방수로는 언제 완공되었는가?_____________'아라카와강 방호로는 언제 완료되었습니까?'\n", + "Processing question 1647/3952 : 최수종이 <대조영>을 촬영하고 연말 시상식에서 대상을 수상한 년도는?_____________'최수종이 <대조영>을 제작하고 연말 시상식에서 최우수상을 수상한 년도는?'\n", + "Processing question 1648/3952 : 유약을 바르지 않고 구운 도자기 표면의 이름은 무엇인가요?_____________도자기를 바르지 않고 구운 표면의 이름은 무엇인가요?\n", + "Processing question 1649/3952 : 불기둥 같은 날을 가진 검은 어느 나라의 것인가?_____________어느 국가의 국기가 검은 기둥 모양인가요?\n", + "Processing question 1650/3952 : 법적 의무를 행사하기 위해 무작위로 투표하는 것을 무엇이라고 하는가?_____________'법적 의무를 이행하기 위해 임의로 투표하는 것을 무엇이라고 합니까?'\n", + "Processing question 1651/3952 : 생중계된 토론회를 진행자는?_____________생중계된 토론회를 주관자는 누구인가요?\n", + "Processing question 1652/3952 : 조선민주주의공화국이 2019년 개발에 성공하여 조선중앙통신과 내나라에 보도한 기술은?_____________'2019년에 조선민주주의공화국이 개발에 성공하여 조선중앙통신과 내국에 보도한 기술은 무엇인가요?'\n", + "Processing question 1653/3952 : 코흐가 베를린 국립 위생원으로 간 다음 해에 발견한 균은?_____________코흐가 베를린 국립 위생원으로 간 다음 해에 발견한 균은 무엇인가요?\n", + "Processing question 1654/3952 : 나무로 만든 탱화는 뭐라고 부르는가?_____________나무로 만든 탱화는 뭐라고 불리나요?\n", + "Processing question 1655/3952 : 저홍춘의 최초 거주민은?_____________빨강홍의 최초 주민은 누구인가요?\n", + "Processing question 1656/3952 : 청자 퇴화문두꺼비모양 벼루의 원래 목적지는?_____________'청자 퇴화문두꺼비모양 벼루의 처음 목적지는 무엇입니까?'\n", + "Processing question 1657/3952 : 출연진들이 나비어를 보다 쉽게 이해할 수 있도록 도움을 준 자는?_____________누가 나비어를 이해하기 쉽게 도와주었나요?\n", + "Processing question 1658/3952 : 민주당이 고발하려고 한 사건이 일어난 해는?_____________민주당이 고발하려고 한 사건이 발생한 연도는 언제인가요?\n", + "Processing question 1659/3952 : 비트켄슈타인은 무엇에 따라 유대인으로서 대우를 받았나요?_____________\"비트켄슈타인은 어떤 이유로 유대인으로서 대우를 받았나요?\"\n", + "Processing question 1660/3952 : 사리사를 처음 발명한 나라는 어디인가요?_____________사리사를 처음 발명한 국가는 어디입니까?\n", + "Processing question 1661/3952 : 케니 아커만을 탄압하고 박해한 사람은 누구인가?_____________'케니 아커만을 억압하고 학대한 사람은 누구인가?'\n", + "Processing question 1662/3952 : 최용신은 어디에서 유학생활을 하다가 생을 마감했나요?_____________최용신은 어디에서 유학 중 사망하셨나요?\n", + "Processing question 1663/3952 : 스파르타가 엘리스에게 도시의 독립을 강권한 시기에 일어난 무력적인 분쟁은?_____________스파르타가 엘리스에게 도시의 독립을 강요한 시기에 발생한 무력적인 분쟁은 무엇인가요?\n", + "Processing question 1664/3952 : 멜라네시안 관습을 따르는 재판소의 재판장을 선임하는 사람은 누구인가?_____________멜라네시안 관습을 준수하는 재판소의 재판장을 지명하는 사람은 누구입니까?\n", + "Processing question 1665/3952 : 세바스찬 단친이 말한 공연이 열린 장소는?_____________세바스찬 단친이 언급한 공연이 열린 장소는 어디인가요?\n", + "Processing question 1666/3952 : 하사의 검은색 튜닉에 새겨진 문양은 무엇인가?_____________하사의 검은색 튜닉에 새겨진 문양은 어떤 것인가?\n", + "Processing question 1667/3952 : 극예술연구회의 창단 공연작품의 원작자는?_____________'극예술연구회의 창단 공연작품의 원작자는 누구인가요?'\n", + "Processing question 1668/3952 : 무엇을 감소시키기 위해 조현병 치료제를 꾸준히 먹어야하나요?_____________조현병 치료제를 꾸준히 복용해야 하는 이유는 무엇인가요?\n", + "Processing question 1669/3952 : 바둑이와 패의 순서가 많이 다른 게임은?_____________어떤 게임은 바둑이와 패의 순서가 크게 다른가요?\n", + "Processing question 1670/3952 : 청야전술로 약 100명 정도의 보어인 난민을 만든 인물은?_____________누구가 청야전술을 사용하여 약 100명 정도의 보어인 난민을 만들었나요?\n", + "Processing question 1671/3952 : 업스트림 전송 속도는 무엇을 전송하는 속도를 뜻하나?_____________업스트림 속도는 어떤 것을 전송하는 속도를 의미하나요?\n", + "Processing question 1672/3952 : 미치류에게 견두류라는 새로운 명칭을 부여한 사람의 이름은?_____________미치류에게 견두류라는 새로운 명칭을 부여한 사람의 이름은 무엇인가요?\n", + "Processing question 1673/3952 : 검은 나나의 꿈이 신인문학상을 받은 해는?_____________'검은 나나의 꿈이 신인문학상을 수상한 해는?'\n", + "Processing question 1674/3952 : 승려화원들은 누구의 소원을 이루고자 영수암 괘불을 그렸는가?_____________승려화원들은 누구의 소망을 실현하고자 영수암 괘불을 그렸습니까?\n", + "Processing question 1675/3952 : 우주에서 가장 많은 원소는?_____________어떤 원소가 우주에서 가장 풍부한가요?\n", + "Processing question 1676/3952 : 줄리와 스튜어트가 기차에서 내린 것은 무엇 때문인가?_____________왜 줄리와 스튜어트가 기차에서 내렸는가?\n", + "Processing question 1677/3952 : 기자회견을 잘 하지 않으면서 종종 유시만 말하던 인물은?_____________누구가 기자회견을 제대로 하지 못하면서 종종 유시만을 인용하는 사람인가요?\n", + "Processing question 1678/3952 : 로블링이 왕복선에 의해 다친 부위는?_____________로블링이 왕복선에 의해 다친 부위는 어디인가요?\n", + "Processing question 1679/3952 : 차경복 기술위원장이 물러난 이후 기술위원장으로 선임된 인물은?_____________차경복 기술위원장이 사퇴한 후 새로운 기술위원장으로 임명된 사람은 누구인가요?\n", + "Processing question 1680/3952 : 마르시온이 노드 형제단을 배신한 후 결성한 단체는?_____________마르시온이 노드 형제단을 배신한 후 결성한 단체는 무엇인가요?\n", + "Processing question 1681/3952 : 1000여 개의 후각 수용체로 구성되어있는 인간과 동물의 신체조직은?_____________인간과 동물의 체조직은 1000개 이상의 후각 수용체로 이루어져 있습니까?\n", + "Processing question 1682/3952 : 박흥대가 부산판례연구회 회장을 맡고 있으면서 근무하던 곳은?_____________박흥대가 부산판례연구회 회장을 맡고 있으면서 근무하던 장소는 어디였나요?\n", + "Processing question 1683/3952 : 브르타뉴와 노르망디를 구분짓는 것은?_____________'브르타뉴와 노르망디를 구분하는 것은 무엇인가요?'\n", + "Processing question 1684/3952 : 지동설에 대해 확실한 근거를 발견한 브라헤의 제자는?_____________브라헤의 제자 중에서 지동설에 대한 명백한 증거를 발견한 사람은 누구인가요?\n", + "Processing question 1685/3952 : 영국이 오버로드 작전을 수행할 시점에 캉은 어느 나라의 지배를 받고 있었나?_____________캉은 오버로드 작전을 수행할 시점에 어느 국가에 속해 있었나요?\n", + "Processing question 1686/3952 : 모스크바 방송 차이코프스키 교향악단으로 개명될 당시 음악 감독은 누구인가?_____________'모스크바 방송 차이코프스키 교향악단으로 개명될 당시 지휘자는 누구였나요?'\n", + "Processing question 1687/3952 : 경상남도 기념물 제289호를 창건한 인물은?_____________'경상남도 기념물 제289호를 건립한 인물은 누구인가요?'\n", + "Processing question 1688/3952 : 출력 전압이 4배 가량 상승하는 것을 확인할 수 있는 자료는?_____________출력 전압이 약 4배 증가하는 것을 확인할 수 있는 자료가 있나요?\n", + "Processing question 1689/3952 : 플린트를 기본 공간으로 하여 다양한 영화를 제작한 인물은?_____________누가 플린트를 기본 공간으로 하여 다양한 영화를 제작했습니까?\n", + "Processing question 1690/3952 : 빌리네 집 밑에 사는 사람은?_____________'빌리네 집 아래에 살고 있는 사람은 누구인가요?'\n", + "Processing question 1691/3952 : 풍발과 모용운이 끌어내린 황제는?_____________풍발과 모용운이 추락시킨 황제는 누구인가요?\n", + "Processing question 1692/3952 : 다운시프트족이 자신이 원하는 삶을 살기 위해 포기하는 공통 특징은 무엇인가?_____________다운시프족이 자신이 바라는 삶을 실현하기 위해 포기하는 공통 특징은 무엇인가?\n", + "Processing question 1693/3952 : 김 위원장이 중국을 처음 방문할 때 도착했던 곳은?_____________김 위원장이 중국을 처음 방문했을 때 도착한 장소는 어디였습니까?\n", + "Processing question 1694/3952 : 비잔티움 제국이 베네치아 공화국과 조약을 맺은 것은 누구를 견제하기 위해서인가?_____________비잔티움 제국이 베네치아 공화국과 조약을 맺은 것은 어떤 이유 때문인가?\n", + "Processing question 1695/3952 : 치프라스의 출생 국가는?_____________치프라스가 태어난 국가는 어디인가요?\n", + "Processing question 1696/3952 : 어떤 법령에 통화가 불량일 경우에 전화 요금을 돌려받을 수 없다고 정해져있는가?_____________전화 요금을 환불받을 수 없는 경우가 어느 법령에서 규정되어 있는가?\n", + "Processing question 1697/3952 : 벨라루스 정부가 계속 권력을 가지고 있을 수 없었던 원인은?_____________왜 벨라루스 정부가 계속 권력을 유지할 수 없었을까?\n", + "Processing question 1698/3952 : 오페라에서 클링조르의 마법에 걸려 꽃뱀으로 변한 인물 중 원래는 순수했던 인물은?_____________누가 클링조르의 주문에 걸렸을 때 순수했던 인물은 누구인가요?\n", + "Processing question 1699/3952 : 타미코는 누구의 자식인가?_____________\"타미코는 어느 가족의 자손입니까?\"\n", + "Processing question 1700/3952 : 라파엘의 10월14일 오전 12시경의 풍속은?_____________'라파엘의 10월14일 새벽 12시에 바람이 어떻게 불고 있나요?'\n", + "Processing question 1701/3952 : 아편보다 위험성이 더 높은 마약은?_____________어떤 약물이 아편보다 더 위험한가요?\n", + "Processing question 1702/3952 : 가정이 있는 아테네 여성에게는 무엇이 우선순위였나?_____________아테네 여성 중에는 가정이 있는 사람들이 무엇을 중요시했습니까?\n", + "Processing question 1703/3952 : 요나라는 고려를 침입할 때 무엇을 핑계로 삼았는가?_____________고려를 침입할 때 요나라가 무엇을 핑계로 삼았나요?\n", + "Processing question 1704/3952 : 보닌의 지인 중 마술사의 나이는?_____________보닌의 친구 중 마법사의 연령은 어떻게 되나요?\n", + "Processing question 1705/3952 : 작품 《트로일러스와 크리세이드》가 일으키는 논란을 해결하기 어렵다고 본 사람은?_____________《트로일러스와 크리세이드》가 일으키는 논란을 해결하기 어렵다고 생각하는 사람은 누구인가요?\n", + "Processing question 1706/3952 : 원래의 전차가 T-84로 바뀌도록 만든 전쟁은 언제 일어났나요?_____________언제 T-84로 교체되었는가?\n", + "Processing question 1707/3952 : 쓰루오카 송신소까지 영상을 전송하는데 걸림돌이 된 지형은?_____________쓰루오카 송신소까지 영상을 전송하는데 방해 요소가 된 지형은 무엇인가요?\n", + "Processing question 1708/3952 : 벨바스트와 스카하가 있는 지역은?_____________'벨바스트와 스카하가 위치한 지역은 어디인가요?'\n", + "Processing question 1709/3952 : 교황 우르바노 2세가 그레고리오 7세를 원조했을 당시 그의 직책은?_____________교황 우르바노 2세가 그레고리오 7세를 후원했을 때 그의 지위는 무엇이었습니까?\n", + "Processing question 1710/3952 : 5번째 확진자의 근무지는?_____________5번째 확진자가 일하는 곳은 어디인가요?\n", + "Processing question 1711/3952 : 사랑의 여름 당시 히피의 주류 계층은?_____________히피 문화의 정점을 보여준 여름 당시, 사랑의 여름에서 어떤 사람들이 주류였나요?\n", + "Processing question 1712/3952 : 아이스너 회장과 회사 이사들을 상대로 주주들이 낸 소송은 몇 년 후에 판결났나?_____________아이스너 회장과 회사 이사들을 상대로 주주들이 제기한 소송은 몇 년 후에 결론이 나왔습니까?\n", + "Processing question 1713/3952 : 이월은 어떤 전투를 계기로 명예를 잃기 시작했는가?_____________이월은 어떤 전투로 인해 명예를 상실했나요?\n", + "Processing question 1714/3952 : 좌종당이 둥간족을 진압하기 위해 출동한 해는?_____________좌종당이 둥간족을 진압하기 위해 출동한 해는?\n", + "Processing question 1715/3952 : 운주사석탑군이 만들어진 시대는?_____________운주사석탑군이 건립된 시기는 언제인가요?\n", + "Processing question 1716/3952 : 야마토 뮤지엄은 어느 시에서 설립하였나요?_____________'야마토 뮤지엄은 어느 시대에 설립되었습니까?'\n", + "Processing question 1717/3952 : 주기적으로 고혈압, 두통, 다한등의 증상을 일으키는 병의이름은?_____________고혈압, 두통, 다한 등의 증상을 일으키는 질병은 무엇인가요?\n", + "Processing question 1718/3952 : 다리우스를 쫓아가기 직전인 알렉산드로스에게 급박한 소식을 전한 인물은?_____________알렉산드로스를 쫓아가기 직전에 급박한 소식을 전한 인물은 누구였나요?\n", + "Processing question 1719/3952 : 일본이 국제해양법재판소에서 독도 문제를 제기할 수 없도록 규제한 법은?_____________일본이 국제해양법재판소에서 독도 문제를 제기할 수 없도록 규제한 법은 무엇인가요?\n", + "Processing question 1720/3952 : 콘토미레의 주재료는?_____________'콘토미레의 구성 성분은 무엇입니까?'\n", + "Processing question 1721/3952 : 비교적 쉽게 제대로 된 파네토네를 먹을 수 있는 나라는?_____________어떤 국가에서 파네토네를 쉽게 먹을 수 있나요?\n", + "Processing question 1722/3952 : 19세기 이전의 소설은 내용의 흐름을 어떻게 서술하였나?_____________19세기 이전의 소설에서는 이야기의 전개를 어떻게 기술했습니까?\n", + "Processing question 1723/3952 : 멕시코전 이후 장현수 선수의 바뀐 포지션은?_____________장현수 선수가 멕시코전 이후 새롭게 채택한 포지션은 무엇인가요?\n", + "Processing question 1724/3952 : 왕이 사내를 포박하는데 사용한 것은?_____________왕이 사내를 괴롭히는데 사용한 것은 무엇인가요?\n", + "Processing question 1725/3952 : 권력이 강한 가문 출신 사람들이 빠르게 승진하는 문제를 해결하기 위해 신돈이 실시한 정책은?_____________'강력한 가문 출신 사람들이 빠르게 승진하는 문제를 해결하기 위해 신돈이 시행한 정책은 무엇인가요?'\n", + "Processing question 1726/3952 : 소비에트 연방이 수정주의를 도입한 해는?_____________소련이 수정주의를 도입한 해는 언제였나요?\n", + "Processing question 1727/3952 : 민주당 내부의 갈등을 해결하기 위해 양보한 측은?_____________민주당 내부의 갈등을 해결하기 위해 양보한 측은 누구였나요?\n", + "Processing question 1728/3952 : 인종의 대처가 늦었다면 왕이 될 뻔한 인물은?_____________어떤 인물이 왕이 될 수 있었을까요, 인종의 대처가 늦었다면?\n", + "Processing question 1729/3952 : 난카이 전철의 안내도는 언제 사라졌나?_____________'난카이 전철의 안내지는 언제 없어졌나요?'\n", + "Processing question 1730/3952 : 일제강점기 이전 너비아니는 어디의 전유물이었는가?_____________일본의 침공 전 이전 너비아니는 어디의 전유물이었나요?\n", + "Processing question 1731/3952 : 제국 초기 후원자가 필요없던 직업의 분야는?_____________어떤 직업 분야는 제국 초기 후원자가 필요하지 않았습니까?\n", + "Processing question 1732/3952 : 막야검을 거절한 인물은?_____________'막야검을 거부한 인물은 누구인가요?'\n", + "Processing question 1733/3952 : 비오 11세가 돌아누울 수 없을 정도로 완전히 건강을 잃어버렸음에도, 그와 함께 일반 알현을 계획한 사람은?_____________빅토르 휴고가 돌아누울 수 없을 정도로 완전히 건강을 잃어버렸음에도, 그와 함께 일반 알현을 계획한 사람은 누구인가요?\n", + "Processing question 1734/3952 : 호한야선우가 전한에 투항한 해는?_____________호한야선우가 전한에 투항한 해는 언제인가요?\n", + "Processing question 1735/3952 : 척수 반사 중 수면 중에 발생하는 것은?_____________수면 중에 발생하는 것은 척수 반사 중 어떤 것이 있나요?\n", + "Processing question 1736/3952 : 조금씩 유럽사회가 계급사회로 접어들게 된 때는 언제인가?_____________유럽사회가 계급사회로 변화하기 시작한 시기는 언제인가요?\n", + "Processing question 1737/3952 : 알제리가 독일과 악연으로 얽히기 시작한 해는?_____________알제리가 독일과 갈등을 겪기 시작한 연도는 언제인가요?\n", + "Processing question 1738/3952 : 1059년 라테라노에서 열린 시노드에 참석한 주교는 몇 명이었나?_____________1059년 라테라노에서 열린 시노드에 참석한 주교들의 수는 얼마나 되었나요?\n", + "Processing question 1739/3952 : 갈릴레이 위성의 이름을 지을 때 기준이 된 행성은?_____________갈릴레이 위성의 이름을 정할 때 참고한 행성은 무엇인가요?\n", + "Processing question 1740/3952 : 현대 볼펜의 사용기간은 보통 어느정도인가?_____________볼펜의 수명은 일반적으로 얼마나 됩니까?\n", + "Processing question 1741/3952 : 〈Dearborn Independent〉에서 바루크는 누구로부터 비난 받았나요?_____________'〈Dearborn Independent〉에서 바루크는 누구에 대해 공격을 받았나요?'\n", + "Processing question 1742/3952 : 자제단 본부의 단장은 누구인가?_____________자제단 본부의 지도자는 누구입니까?\n", + "Processing question 1743/3952 : 입단 관련 정보는 기밀이지만 연락처나 존재 사실은 감추지 않는 단체는?_____________어떤 단체는 연락처나 존재 사실을 숨기지 않는데, 이 단체는 입단 관련 정보를 기밀로 취급하나요?\n", + "Processing question 1744/3952 : 2009년에 15명의 교사들이 받은 징계의 원인은 무엇이었나?_____________15명의 교사들이 2009년에 징계를 받은 이유는 무엇이었습니까?\n", + "Processing question 1745/3952 : 중장갑 하베스터는 누구를 태울 수 있나요?_____________'중간 갑옷 하베스터는 누구를 운반할 수 있습니까?'\n", + "Processing question 1746/3952 : 비율효과는 재화의 수요가 어떤 특징을 가지기 때문에 발생하는 효과인가?_____________재화의 수요가 어떤 특징을 가지기 때문에 비율효과가 발생하는가?\n", + "Processing question 1747/3952 : 잭슨이 정책을 실행하기 이전에 투표할 수 있던 사람은?_____________누가 잭슨이 정책을 실행하기 이전에 투표할 수 있었습니까?\n", + "Processing question 1748/3952 : 야마오카 모모스케가 등장하는 시리즈와 백귀야행 시리즈의 공통 소재는?_____________야마오카 모모스케가 출현하는 시리즈와 환골탈태 시리즈의 공통 소재는 무엇인가요?\n", + "Processing question 1749/3952 : 인도가 기술 원조를 받을 수 있게 된 연도는?_____________인도가 기술 지원을 받을 수 있게 된 연도는 언제인가요?\n", + "Processing question 1750/3952 : 좌종당의 명령을 듣고 북로로 간 인물은?_____________'좌종당의 지시를 따라 북쪽으로 이동한 사람은?'\n", + "Processing question 1751/3952 : 최초의 조선왕조 녹권은 누구에 의해 소장되고 있나요?_____________누가 최초의 조선왕조 녹권을 소장하고 있습니까?\n", + "Processing question 1752/3952 : 새로운 대형 중폭격기 개발을 위해 필요한 것은?_____________대형 중폭격기를 개발하기 위해 요구되는 것은 무엇인가요?\n", + "Processing question 1753/3952 : 조 디마지오가 보유한 홈런 기록이 깨졌던 날은?_____________조 디마지오가 보유한 홈런 기록이 깨졌던 날은 언제였나요?\n", + "Processing question 1754/3952 : 친구들이 네루다가 체포되는 것을 막기위해 네루다를 숨긴 곳은?_____________어디에 네루다를 감추었습니까?\n", + "Processing question 1755/3952 : 루카치가 부다페스트 대학에 복귀한 이듬해 참석한 국제회의가 열린 도시는?_____________루카치가 부다페스트 대학에 복귀한 다음 해 참석한 국제회의가 열린 도시는 어디였습니까?\n", + "Processing question 1756/3952 : 초크가 통과시키는 전류는?_____________초크가 통과시키는 전류는 무엇인가요?\n", + "Processing question 1757/3952 : 군사 전초 기지의 용도로 쓰인 도시는 언제 만들어졌나요?_____________언제 군사 전초 기지로 사용된 도시가 설립되었습니까?\n", + "Processing question 1758/3952 : 밀라노 대교구를 로마 교구에 예속시킨 밀라노 대교구장은?_____________밀라노 대교구를 로마 교구에 편입시킨 밀라노 대교구장은 누구인가요?\n", + "Processing question 1759/3952 : 왕페이와 이혼한 사람은?_____________왕페이와 이혼한 사람은 누구인가요?\n", + "Processing question 1760/3952 : 이턴이 처음 농구를 하도록 도와준 사람은?_____________이턴이 농구를 처음 시작할 때 도와준 사람은 누구인가요?\n", + "Processing question 1761/3952 : 보증금은 누가 납입하는가?_____________보증금을 지불하는 사람은 누구인가요?\n", + "Processing question 1762/3952 : 백제 시대에 사면불 조성을 추진한 왕은?_____________백제 시대에 사면불 조성을 추진한 왕은 누구였습니까?\n", + "Processing question 1763/3952 : 지속성이 부족한 외견상의 급진성을 지칭하는 용어는?_____________외관적으로 급진적인 지속성 부족을 가리키는 용어는 무엇입니까?\n", + "Processing question 1764/3952 : 씬님의 소속사는 어디인가?_____________씬님은 소속사가 어디에 있나요?\n", + "Processing question 1765/3952 : 보통 정체성이라하면 누구의 것을 말하나?_____________'일반적으로 정체성이라고 하면 누구의 것을 의미하나요?'\n", + "Processing question 1766/3952 : 가이저 지진과 포항 지진의 공통적인 원인은?_____________가이저 지진과 포항 지진의 공통적인 원인은 무엇인가요?\n", + "Processing question 1767/3952 : 구스노키 마사시케 동상은 어디서 만들어졌나?_____________'구스노키 마사시케 동상은 어느 곳에서 제작되었습니까?'\n", + "Processing question 1768/3952 : 김준한을 쌍방울 레이더스 4대 감독으로 추천한 구단주의 이름은?_____________어떤 팀 소속으로 김준한을 4대 감독으로 추천한 구단주의 이름은 무엇인가요?\n", + "Processing question 1769/3952 : 원사들의 제안을 찬성한 인물은?_____________'원사들의 제안을 지지한 사람은 누구인가요?'\n", + "Processing question 1770/3952 : 아데마르가 남프랑스 제후군을 하나로 합치는 것과 연관이 있는 얘기를 주고받았던 인물은?_____________아데마르가 남프랑스 제후군을 하나로 합치는 것과 관련된 대화를 나눈 인물은 누구였습니까?\n", + "Processing question 1771/3952 : 예언자 엘리야가 이스라엘에서 활동하던 시기는?_____________엘리야가 이스라엘에서 활동한 시기는 언제였나요?\n", + "Processing question 1772/3952 : 에드워드가 영향력을 넓히기 위해 설립한 것은?_____________에드워드가 영향력을 확장하기 위해 설립한 것은 무엇입니까?\n", + "Processing question 1773/3952 : 성우들이 스스로를 어필하기 위해 사용하는 것은?_____________성우들이 자신을 어필하기 위해 사용하는 것은 무엇인가요?\n", + "Processing question 1774/3952 : 제1우크라이나 전선군이 베를린 공방전의 결과로 어디를 점령하였는가?_____________제1우크라이나 전선군이 베를린 전투의 결과로 어디를 점령했습니까?\n", + "Processing question 1775/3952 : 워든역 터미널이 대중 교통의 중심이 되기 전 어떤 역이 중심 역할을 하였나?_____________어떤 역이 워든역 터미널이 대중 교통의 중심이 되기 전 중심 역할을 했나요?\n", + "Processing question 1776/3952 : 1960년대 중반 이후로 유지되던 인구 통계 학적 배당에 변화를 준 것은?_____________인구 통계학적 배당에 변화를 주는 것은 1960년대 중반 이후 어떤 변화가 있었나요?\n", + "Processing question 1777/3952 : 용수당을 만들때, 서양에서 맥아당을 대체하여 쓰는 재료는 무엇인가?_____________용수당을 만들 때, 서양에서 맥아당을 대체하여 쓰는 재료는 무엇인가?\n", + "Processing question 1778/3952 : 가운데 부분에서 종 제작 이유가 쓰여진 위치는?_____________종 제작 이유가 쓰여진 위치는 어디에 있나요?\n", + "Processing question 1779/3952 : 에글린턴 애비뉴에서 토론토 피어슨 국제공항까지 연결된 경전철의 건설계획이 발표된 해는?_____________에글린턴 애비뉴에서 토론토 피어슨 국제공항까지 연결된 경전철의 건설계획이 발표된 연도는 언제인가요?\n", + "Processing question 1780/3952 : 벤자민 바커의 부인을 노리고 있는 인물은 누구인가?_____________벤자민 바커의 부인을 탐내는 사람은 누구입니까?\n", + "Processing question 1781/3952 : 황제로부터 전쟁의 마무리 임무를 받은 사람은?_____________'황제로부터 전투 종결 임무를 맡은 인물은 누구인가요?'\n", + "Processing question 1782/3952 : 바르톨로메아가 재판관과 비교한 대상은?_____________바르톨로메아가 재판관과 비교한 대상은 무엇인가요?\n", + "Processing question 1783/3952 : 리듬 부분만 편집해서 수록한 1집 마지막 곡은?_____________1집의 마지막 곡은 '리듬 부분만 편집해서' 포함한 곡인가요?\n", + "Processing question 1784/3952 : 기존 전차에 무엇을 장착시키면 원형의 전차의 화력과 대등한가?_____________어떤 장비를 추가하면 기존의 전차가 원형의 전차와 화력 면에서 동등해질까요?\n", + "Processing question 1785/3952 : 가마쿠라코코마에 역의 이전 명칭은?_____________가마쿠라코코마에 역의 이전 명칭은 무엇이었습니까?\n", + "Processing question 1786/3952 : 산마르코 대성당에서 귀중하게 생각하는 것은?_____________산마르코 대성당에서 소중하게 여기는 것은 무엇인가요?\n", + "Processing question 1787/3952 : 볼룬드의 다리를 자른 사람은?_____________볼룬드에서 다리를 절단한 사람은 누구인가요?\n", + "Processing question 1788/3952 : 문용선의 대학 시절 전공은?_____________문용선이 대학 시절 전공한 항목은 무엇입니까?\n", + "Processing question 1789/3952 : 후기 판본에서 콘코바르 막 네사의 누이가 실종된 곳은?_____________콘코바르 막 네사의 동생이 실종된 곳은 어디인가요?\n", + "Processing question 1790/3952 : 피해를 방지하기 위해 기업이 필수로 여기는 것은?_____________기업이 피해를 방지하기 위해 필수로 간주하는 것은 무엇입니까?\n", + "Processing question 1791/3952 : 성화에서 인도자의 모습을 띤 인물의 품에 안긴 사람은 누구인가?_____________인도자의 모습을 띤 인물의 품에 안긴 사람은 누구입니까?\n", + "Processing question 1792/3952 : 서양에서 유행하는 음악이 이란에 들어오기 전, 이란의 주 음악은?_____________이란에서 유행하는 음악이 서양에 들어오기 전, 이란의 주 음악은 무엇이었나요?\n", + "Processing question 1793/3952 : 창흥측량학교를 신문에 홍보한 사람은?_____________창흥측량학교를 언론에 소개한 사람은 누구인가요?\n", + "Processing question 1794/3952 : 박정희와 김종필에게 고소를 당했을 때 김준연은 이들을 어떤 명분로 반소했는가?_____________김준연이 박정희와 김종필에게 고소를 당했을 때 이들을 어떤 이유로 반소했는가?\n", + "Processing question 1795/3952 : 일한 만시즈는 레인보우 킥을 활용하여 누구의 수비를 뚫었나?_____________누구의 방어를 뚫었나?\n", + "Processing question 1796/3952 : 프리드리히 대왕의 군대와 연합하기 위해 라이프치히를 일임받은 사람은?_____________프리드리히 대왕의 군대와 협력하기 위해 라이프치히를 맡은 인물은 누구인가요?\n", + "Processing question 1797/3952 : 델라즈는 건담개발계획에 대한 정보를 얻고 난 후 무엇을 선택하였는가?_____________델라즈는 건담개발계획에 대한 정보를 얻고 난 후 어떤 선택을 했습니까?\n", + "Processing question 1798/3952 : 리맥에 관련된 정보를 알린 언론은?_____________'리맥에 대한 정보를 전해준 언론사는 무엇입니까?'\n", + "Processing question 1799/3952 : 도마뱀자리 BL 천체의 중앙 부분에는 무엇이 있는가?_____________도마뱀자리 BL 천체의 중앙 부분에는 무엇이 위치하고 있나요?\n", + "Processing question 1800/3952 : 최민수에게 내려진 판결은?_____________'최민수가 받은 결정은 무엇인가요?'\n", + "Processing question 1801/3952 : 브리유니 회담에 참석한 세르비니아 측 인물은?_____________세르비아 측 인물 중 브리유니 회담에 참석한 인물은 누구인가요?\n", + "Processing question 1802/3952 : 조류의 난자는 어디에서 수정되는가?_____________조류의 낵자는 어디서 수정되는가?\n", + "Processing question 1803/3952 : 아리스톤이 윤리적 판단에 필요한 일반적 경로 학습의 필요성을 부정했다고 평가한 인물은?_____________아리스토텔레스가 윤리적 결정을 내리는 데 필요한 보편적 경로 학습의 중요성을 부정한 사람은 누구인가요?\n", + "Processing question 1804/3952 : 혈통친왕보다 높은 칭호가 만들어진 시기는?_____________언제 혈통친왕보다 높은 칭호가 창설되었습니까?\n", + "Processing question 1805/3952 : 빙 거리화 정리는 증명 도중에 어떤 공간을 사용하여 증명하는가?_____________빙 거리화 정리는 증명 도중에 어떤 토폴로지를 사용하여 증명하는가?\n", + "Processing question 1806/3952 : 고고학자들은 어떤 상황일 때 원어를 활용해 원문을 복원하려고 하는가?_____________고고학 연구자들은 어떤 상황에서 원어를 사용하여 원본을 복원하려고 노력하나요?\n", + "Processing question 1807/3952 : 석진형이 이사로 있던 음식업체의 이름은?_____________석진이 살던 집의 음식점 이름은 무엇이었나요?\n", + "Processing question 1808/3952 : 남지기로회도는 무엇을 베낀 작품인가?_____________'남지기로회도는 어떤 작품을 모방한 것인가?'\n", + "Processing question 1809/3952 : 외골격으로 이루어진 곤충의 기관은?_____________곤충의 외골격을 이루는 기관은 무엇입니까?\n", + "Processing question 1810/3952 : 엔베르 호자가 비판했지만 호자주의와 아주 세밀한 차이만 있는 사상은?_____________엔베르가 비판했지만 호자주의와 아주 세밀한 차이만 있는 사상은 무엇인가요?\n", + "Processing question 1811/3952 : 카탈리나의 부관 중 카탈리나의 약혼자와 동기인 인물은 누구인가?_____________카탈리나의 부관 중 카탈리나의 약혼자와 동기인 인물은 누구인가요?\n", + "Processing question 1812/3952 : 파진 밀사이디는 결혼 전 어떤 직업을 가지고 있었나?_____________파진 밀사이디는 결혼 전 어떤 직업을 가지고 있었습니까?\n", + "Processing question 1813/3952 : 3월 14일 입법원에 의해 2차 독회를 통과한 법안은 무엇인가요?_____________2차 독회를 통과한 법안은 무엇인가요?\n", + "Processing question 1814/3952 : 조엽수림대와 온도가 비슷한 지역은?_____________조엽수림대와 온도가 비슷한 지역은 어디인가요?\n", + "Processing question 1815/3952 : 임시찬성건의소의 설립과 재무 관련 정보에 관한 보도를 한 언론은?_____________어떤 언론이 임시찬성건의소의 설립과 재무 관련 정보에 대해 보도했습니까?\n", + "Processing question 1816/3952 : 뉴욕 주지사의 지위를 놓고 듀이와 겨루었던 사람은?_____________뉴욕 주지사의 지위를 놓고 듀이와 겨루었던 사람은 누구였나요?\n", + "Processing question 1817/3952 : 도천사지 내에서 발견되는 와편은 어느 나라 때 만들어진 것인가?_____________\"도천사지 내에서 발견되는 와편은 어느 국가 시대에서 제작되었습니까?\"\n", + "Processing question 1818/3952 : 천궁도 점성술이 처음 생겼다고 하는 국가는?_____________천궁도 점성술이 처음 생겼다고 하는 나라는 어디인가요?\n", + "Processing question 1819/3952 : 하니가 한중가요제에 참여한 연도는?_____________하니가 한중가요제에 참여한 해는 언제인가요?\n", + "Processing question 1820/3952 : 이번에 상영하는 영화에서 유일하게 모자를 쓰고 등장하는 인물은?_____________어떤 캐릭터가 이번에 상영하는 영화에서 유일하게 모자를 쓰고 등장하나요?\n", + "Processing question 1821/3952 : 퍼거슨 시의 무력 시위에 대응하기 위해 경찰이 사용한 물건은?_____________경찰이 사용한 물건은 무엇이었습니까?\n", + "Processing question 1822/3952 : 컴퓨터 지식으로 범법행위를 하는 사람은?_____________불법 행위를 하는 사람은 무엇입니까?\n", + "Processing question 1823/3952 : 민족문학작가회의 소속 소설가들이 시위에 참가한 장소는?_____________소설가들이 시위에 참가한 장소는 어디였습니까?\n", + "Processing question 1824/3952 : 김영달의 가족이 만주로 이사간 해는?_____________김영달의 가족이 만주로 이주한 해는?\n", + "Processing question 1825/3952 : 무굴 제국의 전성기를 이끌었으나 동시에 라지프트 제후의 지지를 잃은 사람은?_____________'무굴 제국의 전성기를 이끌었으나 동시에 라지프트 제후의 지지를 잃은 인물은 누구인가요?'\n", + "Processing question 1826/3952 : 블록체인에 의해 새로이 만들어지고 있는 체계 중 가장 큰 범위를 차지하는 것은?_____________가장 넓은 범위를 차지하는 것은 무엇인가요?\n", + "Processing question 1827/3952 : 로마로 진군하려한 인물은?_____________누가 로마로 진군하려 했나요?\n", + "Processing question 1828/3952 : 아내의 결혼 소식을 듣고 분노에 빠진 인물은?_____________누가 아내의 결혼 소식을 듣고 분노에 빠졌나요?\n", + "Processing question 1829/3952 : B형 항성보다 비이형 별의 스펙트럼에서 더욱 뚜렷하게 나타나는 현상은?_____________어떤 스펙트럼에서 비이형 별의 특징이 더 뚜렷하게 나타나는 현상은 무엇인가요?\n", + "Processing question 1830/3952 : 가짜 드미트리가 1년이 넘게 공격해도 함락시킬 수 없었던 곳은?_____________가짜 드미트리가 1년 이상 동안 침공하지 못했던 곳은 어디였습니까?\n", + "Processing question 1831/3952 : 반토가 평상시에 맡고 있는 직책은?_____________'반토가 보통 맡고 있는 직무는 무엇입니까?'\n", + "Processing question 1832/3952 : 사리사에 취약했던 병종은?_____________어떤 질문이 사리사에 취약했던 병종에 대해 묻는 것인가요?\n", + "Processing question 1833/3952 : 처칠이 독일 해군의 암호책을 해독하기 위해 보낸 곳의 이름은?_____________'처칠이 독일 해군의 코드북을 해독하기 위해 파견된 위치는 어디였나요?'\n", + "Processing question 1834/3952 : 량쓰청 부부의 의견을 거절하고 중국 당국이 만든 것은?_____________'량쓰청 부부의 의견을 무시하고 중국 당국이 제작한 것은?'\n", + "Processing question 1835/3952 : 금식을 철저히 지키면 궁극적으로 가는곳은?_____________금식을 엄격히 지키면 어디로 가게 될까요?\n", + "Processing question 1836/3952 : 요아힘 프리드리히의 친할아버지 이름은?_____________요아힘 프리드리히의 친할아버지의 이름은 무엇입니까?\n", + "Processing question 1837/3952 : 산업혁명이 처음 시작된 나라는?_____________산업혁명이 시작된 국가는 어디인가요?\n", + "Processing question 1838/3952 : 통행증을 사는 것으로 무역 금지령을 피하고자 한 이들은 어느 나라 상인들인가?_____________어느 국가의 상인들이 무역 금지령을 피하기 위해 통행증을 구입하나요?\n", + "Processing question 1839/3952 : 사도세자가 거짓말까지 해가며 즐긴 것은?_____________사도세자가 거짓말까지 해가며 즐긴 것은 무엇인가요?\n", + "Processing question 1840/3952 : 동일한 동물령 몇 가지를 모으면 모드를 플레이할 수 있는 시간이 늘어나는가?_____________모드를 플레이할 수 있는 시간을 늘리기 위해 동일한 동물령을 얼마나 모아야 하는가?\n", + "Processing question 1841/3952 : 사전처분에도 불구하고 양육 부모가 비양육 부모에게 아이를 보여주지 않을 때 위반 행위자에게 1천만원 이하의 과태료를 부과할 수 있는 제도는?_____________양육 부모가 비양육 부모에게 아이를 보여주지 않을 때 위반 행위자에게 1천만원 이하의 과태료를 부과할 수 있는 제도는 무엇인가요?\n", + "Processing question 1842/3952 : 줏키의 이름을 작명한 사람은 누구인가?_____________줏키의 이름을 지은 사람은 누구인가?\n", + "Processing question 1843/3952 : 경기용 탄환 표면 코팅을 구리 대신 윤활재로 하는 이유는?_____________왜 경기용 탄환 표면 코팅에 구리 대신 윤활재를 사용하나요?\n", + "Processing question 1844/3952 : 시작형 거대 모빌아머를 파괴한 것은?_____________거대한 전쟁 기계를 파괴한 것은 무엇인가요?\n", + "Processing question 1845/3952 : 경성제국대학에 1년동안 내는 비용이 이공학부 개설 이후 얼마로 변경되었나?_____________경성제국대학에 이공학부가 개설된 이후 1년 동안 지출하는 비용이 변화했습니까?\n", + "Processing question 1846/3952 : 순서수와 다르게 정렬 전순서 집합 외에도 존재가 가능한 것은?_____________정렬 전순서 집합 외에도 존재할 수 있는 것은 무엇인가요?\n", + "Processing question 1847/3952 : 고샤마인 봉기로 인해 일본은 어느 지역을 획득했는가?_____________일본이 고샤마인 봉기로 어떤 지역을 얻었습니까?\n", + "Processing question 1848/3952 : 새만금호에서 서식하는 어류의 종이 줄어든 가장 큰 이유는 무엇인가?_____________새만금호에서 서식하는 어류의 종이 줄어든 가장 큰 원인은 무엇인가요?\n", + "Processing question 1849/3952 : 트리노반테스족에 영향을 주기 위해 이행된 일은?_____________트리노반테스족에 영향을 미치기 위해 이행된 조치는 무엇입니까?\n", + "Processing question 1850/3952 : 크리스티안 로젠크로이츠가 열여섯 살 때까지 머물렀던 장소는?_____________크리스티안 로젠크로이츠가 16세까지 머물렀던 장소는 어디였습니까?\n", + "Processing question 1851/3952 : 서울중앙지검이 정윤회 씨의 국정 개입을 허위사실로 결론 지은 날짜는 언제였나요?_____________서울중앙지검이 정윤회 씨의 국정 개입을 거짓 사실로 결론 지은 날짜는 언제였습니까?\n", + "Processing question 1852/3952 : 폭탄을 국내로 몰래 가져온 단체는?_____________어떤 단체가 폭탄을 국내로 밀수한 것인가요?\n", + "Processing question 1853/3952 : 스티븐 클라크슨의 전 아내의 현 남편은 누구인가?_____________스티븐 클라크슨의 전 배우자의 현재 배우자는 누구입니까?\n", + "Processing question 1854/3952 : 방초정 근처에 위치하며 마을의 구정물을 정화하는 곳은?_____________'방초정 근방에 위치하며 마을의 구정물을 정화하는 장소는 어디에 있나요?'\n", + "Processing question 1855/3952 : 민수기 마지막 부분에서 여호와의 인도로 계획한 것들을 성공으로 이끄는 인물은?_____________누가 여호와의 인도로 계획한 것들을 성공으로 이끄는 인물인가요?\n", + "Processing question 1856/3952 : 전통 건축 기술을 소멸 위기로 만든 기술은?_____________전통 건축 기법을 소멸 위기에 빠뜨린 기술은 무엇인가요?\n", + "Processing question 1857/3952 : 이범철이 의병활동을 저지하기 위해 파견된 곳은?_____________이범철이 의병활동을 저지하기 위해 파견된 장소는 어디였습니까?\n", + "Processing question 1858/3952 : 아르보레아 주디카토국의 마지막 왕은?_____________아르보레아 주디카토국의 최후 군주는 누구입니까?\n", + "Processing question 1859/3952 : 덴마크에서 독립한 후 노르웨이에서 만들어진 새로운 표준어는?_____________'덴마크에서 독립한 후 노르웨이에서 만들어진 새로운 표준어는 무엇인가요?'\n", + "Processing question 1860/3952 : 아리타 슈조가 컴백상을 수상하는 맹활약을 보인 해는?_____________아리타 슈조가 컴백상을 수상하는 뛰어난 활약을 보인 해는?\n", + "Processing question 1861/3952 : 1902년에서 1904년 사이에 어떤 이유로 서울에 전화를 50여 대밖에 설치하지 못하였나?_____________서울에 전화를 50여 대밖에 설치하지 못한 이유가 무엇이었나요?\n", + "Processing question 1862/3952 : 자본주의는 내부로부터 붕괴할 것이라고 본 사람은?_____________'자본주의는 내부적으로 붕괴될 것이라고 예견한 사람은 누구인가요?'\n", + "Processing question 1863/3952 : 제2차 인도차이나 전쟁이 끝났던 해는?_____________제2차 인도차이나 전쟁이 종식된 해는 언제였습니까?\n", + "Processing question 1864/3952 : 모아이는 무엇으로 이루어져있나?_____________\"모아이는 어떤 성분으로 구성되어 있나요?\"\n", + "Processing question 1865/3952 : 식품이 오염되게 하는 것은?_____________음식물이 오염되게 만드는 것은 무엇인가요?\n", + "Processing question 1866/3952 : 여공이 다시 자리에 올랐다는 사실을 늦게 알게 된 나라는?_____________어떤 사람이 여공이 다시 자리에 올라간 사실을 늦게 깨달았다고 하는가요?\n", + "Processing question 1867/3952 : 성벽 대규모 사업을 벌인 인물은?_____________성벽 대규모 사업을 벌인 인물은 누구인가요?\n", + "Processing question 1868/3952 : 세포이 항쟁은 언제 일어났나?_____________세포이 반란이 언제 일어났나?\n", + "Processing question 1869/3952 : 미국 최고 미술학교가 위치하는 곳의 구체적인 명칭은?_____________미국에서 가장 우수한 미술 대학이 있는 장소의 정확한 이름은 무엇입니까?\n", + "Processing question 1870/3952 : 페레스베트와 부딪힌 전함의 이름은?_____________전함이 페레스베트와 충돌한 전함의 이름은 무엇입니까?\n", + "Processing question 1871/3952 : 테아 레오니의 작중 이름은?_____________테아 레오니의 작중 이름은 무엇인가요?\n", + "Processing question 1872/3952 : 태국인 요리사의 도움으로 도피생활을 시작했던 그룹은?_____________태국 출신 요리사의 지원으로 탈출 생활을 시작한 그룹은 무엇입니까?\n", + "Processing question 1873/3952 : 가이아가 복수를 하기 위해 만든 것은?_____________가이아가 복수를 하기 위해 만든 것은 무엇인가요?\n", + "Processing question 1874/3952 : 화학 반응 발생 시 스스로는 무변하지만 반응 속도에는 변화를 일으키는 것은?_____________화학 반응이 발생할 때 스스로는 변하지 않지만 반응 속도에는 영향을 주는 것은 무엇입니까?\n", + "Processing question 1875/3952 : 하등 척추동물과 비교했을 때 신장의 재생능력이 한정적인 동물 종은?_____________어떤 동물 종이 하등 척추동물과 비교했을 때 신장의 재생능력이 한정적인가요?\n", + "Processing question 1876/3952 : 기형이 자동 소멸되어 진화에는 영향을 끼치지 않는다고 주장한 학파는?_____________기형이 자동 소멸되어 진화에는 영향을 끼치지 않는다고 주장한 학파는 누구인가요?\n", + "Processing question 1877/3952 : 데니를 조선 정부에 소개해준 인물은 누구인가요?_____________'데니를 조선 정부에 소개한 사람은 누구인가요?'\n", + "Processing question 1878/3952 : 선언형 프로그램의 알고리즘에 대한 정의와 반대인 개념은?_____________선언형 프로그램의 알고리즘에 대한 정의와 반대인 개념은 무엇인가요?\n", + "Processing question 1879/3952 : 조이가 반한 사람은 누구의 동생인가?_____________'조이가 반한 사람은 누구의 형제/자매인가?'\n", + "Processing question 1880/3952 : 진함이 진탕에게 뇌물을 상납한 뒤 얻게 된 직위는?_____________진함이 진탕에게 뇌물을 상납한 뒤 얻게 된 직위는 무엇입니까?\n", + "Processing question 1881/3952 : 9호선에서만 운행되는 열차 호수는?_____________9호선에서만 운행되는 기차 호수는 무엇입니까?\n", + "Processing question 1882/3952 : 캐서린 엘리자베스 로빈스의 남편은 누구인가?_____________캐서린 엘리자베스 로빈스의 배우자는 누구입니까?\n", + "Processing question 1883/3952 : 한국판 뉴타입의 간행이 폐지된 해는?_____________한국 버전의 뉴타입이 중단된 해는?\n", + "Processing question 1884/3952 : 세포 셧다운을 실행해야하는 단백질은 어디에 있는가?_____________어떤 위치에 세포 셧다운을 진행해야하는 단백질이 위치하고 있습니까?\n", + "Processing question 1885/3952 : 인도 정당의 상징은 누구를 위함인가?_____________인도 정당의 상징은 누구를 대표하나요?\n", + "Processing question 1886/3952 : 장마전선'의 이동에 영향을 미치는 요인은?_____________'장마전선'의 이동에 영향을 주는 요소는 무엇인가요?\n", + "Processing question 1887/3952 : 남한에 정착하기 위해 탈북자가 교육을 받아야 하는 기간은?_____________탈북자가 남한에 정착하기 위해 교육을 받아야 하는 기간은 얼마인가요?\n", + "Processing question 1888/3952 : 모진 고문으로 손상된 유진길의 신체 부위는?_____________유진길의 몸이 손상된 부위는 무엇인가요?\n", + "Processing question 1889/3952 : 미국기업이 원하는 작업자는 어떤 언어를 사용하나요?_____________미국기업이 요구하는 직원들이 사용하는 언어는 무엇인가요?\n", + "Processing question 1890/3952 : 서로의 배움에 개입하는 학습활동은 학습자의 지식과 함께 무엇을 발달시키는가?_____________학습자의 학습과정에 개입하는 활동이 무엇을 증진시키는가?\n", + "Processing question 1891/3952 : 헨슬로가 케임브리지 대학의 교수로 활동하기 시작한 해는 언제인가요?_____________헨슬로가 케임브리지 대학에서 교수로 일을 시작한 연도는 언제인가요?\n", + "Processing question 1892/3952 : 지하철이 댄포스 역에 정차할 것을 요청한 사람은?_____________댄포스 역에 도착할 때 댄포스 역에서 하차할 것을 요청한 사람은 누구인가요?\n", + "Processing question 1893/3952 : 신종 덥스텝이 오버그라운드로 되는데 크게 기여한 인물은?_____________신종 덥스텝이 지상으로 올라가는 데 크게 기여한 인물은 누구인가요?\n", + "Processing question 1894/3952 : 클라우제비츠가 군인이 된 것은 누구의 영향인가?_____________클라우제비츠가 군인이 된 이유는 누구의 영향으로 인해 있었나요?\n", + "Processing question 1895/3952 : 조경왕 장의 아들은 누구인가?_____________조경왕 장의 아들은 누구입니까?\n", + "Processing question 1896/3952 : 인간의 불안전한 행위에 의해 일어나는 상황은 무엇의 원인이 되나요?_____________어떤 이유로 인해 인간의 위험한 행동이 발생하게 될까요?\n", + "Processing question 1897/3952 : 초대 올림픽 월계수 수상자와 비둘기 모양의 연을 날리는 아이들이 같이 달리는 장면이 나온 올림픽은?_____________어떤 올림픽에서 초대 올림픽 월계수 수상자와 비둘기 모양의 연을 날리는 아이들이 같이 달리는 장면이 나왔나요?\n", + "Processing question 1898/3952 : 일본은 어떤 명분으로 미국 군대가 자국에 머물기를 원하는가?_____________일본은 미국 군대가 자국에 머물기를 원하는 이유가 무엇인가요?\n", + "Processing question 1899/3952 : 사람들이 태풍에 제대로 대비하지 못한 이유는?_____________왜 사람들이 태풍에 적절히 대응하지 못하는가?\n", + "Processing question 1900/3952 : 아테나이의 민주 정치를 파괴한 인물은?_____________아테나이의 민주 정치를 파괴한 인물은 누구인가요?\n", + "Processing question 1901/3952 : 드레드노트 악희사건에 동참한 버지니아의 남자 형제는?_____________'드레드노트 악행 사건에 참여한 버지니아의 형제는 누구인가요?'\n", + "Processing question 1902/3952 : 오티라 터널이 완공된 해는?_____________오티라 터널이 완공된 연도는?\n", + "Processing question 1903/3952 : 최고 지휘부 구성원으로 선출된 사람들은 어디 출신인가?_____________\"최상위 지휘부 구성원으로 선택된 사람들은 어느 지역 출신입니까?\"\n", + "Processing question 1904/3952 : 소위 천의 여왕으로 불리는 인물이 대륙에 발표한 방책은 무엇인가?_____________'대륙에 발표한 방책으로 유명한 인물은 누구인가?'\n", + "Processing question 1905/3952 : 서울교육대학교를 상징하는 동물은 무엇인가?_____________'서울교육대학교를 상징하는 동물은 어떤 것인가?'\n", + "Processing question 1906/3952 : 아기스 3세가 여러 국가와 함께 대항한 국가의 이름은 무엇인가?_____________아기스 3세가 여러 국가와 함께 대항한 국가의 명칭은 무엇입니까?\n", + "Processing question 1907/3952 : 미쿠를 다른 세계로 이끈 정체는?_____________미쿠를 다른 세계로 인도한 존재는 누구인가요?\n", + "Processing question 1908/3952 : 농부들이 콩과 옥수수를 돌려짓기하는 이유는 무엇인가?_____________농부들이 콩과 옥수수를 번갈아 심는 이유는 무엇인가?\n", + "Processing question 1909/3952 : 정해성이 불량배들에게 옆구리를 찔려 심한 부상을 입었던 장소는?_____________정해성이 불량배들에게 옆구리를 찔려 심한 부상을 입었던 장소는 어디였나요?\n", + "Processing question 1910/3952 : 1880년대에 영국과 프랑스가 공동으로 다스리기로 한 지역은 어디였나요?_____________1880년대에 영국과 프랑스가 공동으로 다스리기로 한 지역은 어디였습니까?\n", + "Processing question 1911/3952 : 앤더스 그룹은 시위하는 집단을 피해 누구의 집으로 갔는가?_____________앤더스 그룹은 반발하는 집단을 피해 누구의 집으로 이동했나요?\n", + "Processing question 1912/3952 : 경희궁이 만들어진 시기는?_____________경희궁이 건립된 시기는 언제인가요?\n", + "Processing question 1913/3952 : 서울시가 뚝섬지구에 돔구장을 지을 계획을 발표한 달은?_____________뚝섬지구에 돔구장을 건설할 계획을 발표한 달은 언제였나요?\n", + "Processing question 1914/3952 : 그리샤 예거가 3권의 자서전을 집필한 기간은?_____________그리샤 예거가 3권의 자서전을 쓴 기간은 얼마인가요?\n", + "Processing question 1915/3952 : 테오티우아칸의 양식 무덤에 묻힌 사람은?_____________테오티우아칸의 양식 무덤에 묻힌 사람은 누구인가요?\n", + "Processing question 1916/3952 : 키징거 대연정 다음 총선에서 승리한 당은?_____________키징거 대연정 다음 총선에서 승리한 정당은 무엇입니까?\n", + "Processing question 1917/3952 : 윤치호의 사망원인은?_____________윤치호가 어떤 이유로 사망했나요?\n", + "Processing question 1918/3952 : 1975년에 몬트리올에서 개항한 공항은 도심까지 얼마나 걸리나요?_____________몬트리올에서 1975년에 개장한 공항은 독거리까지 얼마나 걸리나요?\n", + "Processing question 1919/3952 : 한국교원대를 졸업해도 중등학교 교사임용시험의 응시 대상이 안되는 과는?_____________한국교원대를 졸업해도 중등학교 교사임용시험의 응시 대상이 안되는 과는 무엇인가요?\n", + "Processing question 1920/3952 : 윤영채가옥의 건축 연도가 기록된 기와가 발견된 해는?_____________윤영채가옥의 건축 연도가 적힌 기와가 발견된 연도는 언제인가요?\n", + "Processing question 1921/3952 : 발리오니는 무엇에 찔려 죽었나?_____________발리오니는 어떤 것에 찔려 사망했나요?\n", + "Processing question 1922/3952 : 콤바인에 대항할 수 있는 정보를 보내는 인물은?_____________콤바인을 막을 수 있는 정보를 보내는 인물은 누구인가요?\n", + "Processing question 1923/3952 : 보그가 만든 이메일 서비스는 무엇을 대상으로 만들어졌나?_____________보그가 개발한 전자우편 서비스는 어떤 사용자를 대상으로 만들어졌나요?\n", + "Processing question 1924/3952 : 설치 예술가와 건축 디자인 팀이 협력하여 가설한 작품의 이름은?_____________가설 예술가와 건축 디자인 팀이 협력하여 창조한 작품의 명칭은 무엇인가요?\n", + "Processing question 1925/3952 : 폭클별의 에너지를 이용해 아루마스를 없애버리려고 하는 집단은?_____________누가 아루마스를 없애려고 하는가?\n", + "Processing question 1926/3952 : 수메르인 관련 사료가 발견된 곳은?_____________어디에서 수메르어 관련 문헌이 발견되었나요?\n", + "Processing question 1927/3952 : 요한 베르크만스가 사망한 날짜는?_____________요한 베르크만스가 언제 사망했습니까?\n", + "Processing question 1928/3952 : 대한도서관 설립에 관한 기사를 다룬 언론사는?_____________어떤 언론사가 대한도서관 설립에 대한 기사를 실었습니까?\n", + "Processing question 1929/3952 : 빙글이 독보적인 위치를 차지할 수 있는 원인은?_____________빙글이 독보적인 위치를 확보할 수 있는 이유는 무엇인가요?\n", + "Processing question 1930/3952 : 조지아 서쪽에 가장 처음 살기 시작한 사람들은 어디로 부터 이주해왔나요?_____________'조지아 서쪽에 최초로 정착한 사람들은 어느 지역에서 온 이주민들이었나요?'\n", + "Processing question 1931/3952 : 산체스가 피츠버그의 가장 아름다운 25인에 선정된 해는?_____________산체스가 피츠버그의 최고의 25명 중 하나로 선정된 해는 언제인가요?\n", + "Processing question 1932/3952 : 사바나 원칙이 말하는 인간이 치장을 하는 이유는?_____________인간이 치장을 하는 이유에 대해 사바나 원칙이 언급하는 이유는 무엇인가요?\n", + "Processing question 1933/3952 : 중앙에 위치하는 아미타여래좌상은 어떤 방식으로 연화좌 위에 앉아있나?_____________아미타여래좌상이 연화좌 위에 앉아있는 방식은 어떻게 되나요?\n", + "Processing question 1934/3952 : 문정왕후가 보우를 도대선사로 올릴 당시의 조선 왕은 몇 세에 즉위하였는가?_____________문정왕후가 보우를 도대선사로 올릴 당시의 조선 왕은 몇 살에 왕위에 오른 것인가?\n", + "Processing question 1935/3952 : 상대적으로 애니메이션의 캐릭터에 맞추는 것이 수월한 사람은?_____________어떤 사람이 애니메이션 캐릭터에 적합하다고 생각하나요?\n", + "Processing question 1936/3952 : 뮌헨 협약을 통해 전쟁을 모면하려고 했던 영국 총리는?_____________뮌헨 협약을 통해 전쟁을 피하려고 했던 영국 총리는 누구였습니까?\n", + "Processing question 1937/3952 : 한수산 필화 사건 사망자의 직업은 무엇이었는가?_____________한수산 필화 사건 사망자의 직업은 무엇이었습니까?\n", + "Processing question 1938/3952 : 성인아이의 개념을 단계적으로 수용했던 국가는?_____________어떤 국가가 성인아이의 개념을 단계적으로 수용했는지에 대해 알고 싶으세요?\n", + "Processing question 1939/3952 : 사회성을 기를 수 있는 학습 활동 유형은?_____________'사회적 기술을 향상시킬 수 있는 학습 방법은 무엇인가요?'\n", + "Processing question 1940/3952 : 북조선의 5대 혁명가극 중 비극적 결말을 맺는 가극은 무엇인가?_____________북조선의 5대 혁명가극 중 비극적으로 끝나는 가극은 무엇입니까?\n", + "Processing question 1941/3952 : 여성으로 과학분야에서 첫 대학 교수직을 맡은 사람은 어느 나라 사람인가?_____________첫 여성 과학 분야 대학 교수는 어느 국적을 가진 사람인가요?\n", + "Processing question 1942/3952 : 엔 배어 콜의 맏이는?_____________맏이가 엔 배어 콜의 누구인가요?\n", + "Processing question 1943/3952 : 시간의 흐름에 따라 재판 참가자들의 판결에 영향을 끼치는 것은?_____________재판 참가자들의 결정에 영향을 미치는 것은 시간이 지남에 따라 변하는 것이 있나요?\n", + "Processing question 1944/3952 : 진아의 친할머니 이름은?_____________진아의 친할머니는 무엇인가요?\n", + "Processing question 1945/3952 : 김일성이 회고록을 직접 쓰지 않았다고 증언한 사람은?_____________'김일성이 자서전을 직접 쓰지 않았다고 주장한 사람은 누구인가요?'\n", + "Processing question 1946/3952 : 단순한 안티 바이러스 도구들이 네트워크 트래픽 점검을 통해 찾을 수 있는 것은?_____________네트워크 트래픽을 검사함으로써 식별할 수 있는 것은 무엇인가요?\n", + "Processing question 1947/3952 : 무엇이 이슈타르가 사랑한 대상을 죽음에 이르게 했나?_____________이슈타르가 사랑한 대상을 죽음에 이르게 한 원인은 무엇인가요?\n", + "Processing question 1948/3952 : 피에르 루이지 반대 세력이 지지했던 사람은?_____________피에르 루이지 반대 세력이 찬성했던 인물은 누구인가요?\n", + "Processing question 1949/3952 : 벨콜로레 남편의 직업은 무엇인가?_____________벨콜로레 남편은 어떤 직업을 가지고 있나요?\n", + "Processing question 1950/3952 : 기욤 뮈소가 집필하는 소설의 장르는?_____________기욤 뮈소가 쓰는 소설은 어떤 장르에 속하나요?\n", + "Processing question 1951/3952 : 레지널드 폴의 어머니는 언제 사망하였나요?_____________레지널드 폴의 어머니는 언제 돌아가셨나요?\n", + "Processing question 1952/3952 : 20세기 초반에 미치류를 나누기 위해 기준이 되었던 골격은 무엇인가?_____________미치류를 나누기 위해 기준이 되었던 골격은 무엇인가요?\n", + "Processing question 1953/3952 : 부녀자가 얼굴을 가리기위해 썻던 것 중, 고려시대에 사용한 것은?_____________고려시대에 부녀자가 얼굴을 가리기 위해 사용했던 것 중 하나는 무엇이었나요?\n", + "Processing question 1954/3952 : 웃거나 화를 낼 때, 순간적으로 깊은 잠에 빠지면서 근육의 힘이 풀리는 현상은?_____________웃거나 화를 낼 때, 순간적으로 깊은 잠에 빠지면서 근육의 힘이 풀리는 현상은 무엇인가요?\n", + "Processing question 1955/3952 : 동해와 남해의 경계가 부산 해운대구를 지나도록 정한 기관은?_____________부산 해운대구를 가로지르는 경계를 결정한 단체는 무엇입니까?\n", + "Processing question 1956/3952 : 13세의 비르지타와 혼인하여 총 여덟 명의 자녀를 낳은 인물은?_____________'13세의 비르지니아와 결혼하여 총 여덟 명의 자녀를 낳은 인물은 누구인가요?'\n", + "Processing question 1957/3952 : 노르웨이와 스웨덴의 언어를 섞어 쓰는 지역은?_____________어떤 지역에서 노르웨이어와 스웨덴어가 섞여 사용되는가요?\n", + "Processing question 1958/3952 : 부르주아 지식인을 중국 혁명에 참여시켜야 한다고 주장한 인물은 누구인가?_____________누가 부르주아 학자를 중국 혁명에 참여시켜야 한다고 주장했습니까?\n", + "Processing question 1959/3952 : 스페인 군과 트웨쉬 인디언 사이의 갈등의 계기가 된 물건은?_____________스페인 군과 트웨쉬 인디언 간 갈등을 일으킨 물건은 무엇인가요?\n", + "Processing question 1960/3952 : 새로운 공룡 화석이 더이상 생성되지 않기 시작한 시기는 언제부터인가?_____________언제부터 새로운 공룡 화석이 더이상 형성되지 않았나요?\n", + "Processing question 1961/3952 : 만경대학생소년궁전이 설립될 때 같이 건설된 것은?_____________만경대학생소년궁전이 처음 세워질 때 함께 건설된 것은 무엇인가요?\n", + "Processing question 1962/3952 : 오구즈 칸은 누구의 손자인가?_____________오구즈 칸은 누구의 손자입니까?\n", + "Processing question 1963/3952 : 1994 아시안 게임 축구 8강전에서 한국의 상대는?_____________한국의 상대팀은 1994 아시안 게임 축구 8강전에서 누구였나요?\n", + "Processing question 1964/3952 : 고니오가 오스만 제국의 지배에서 벗어난 해는?_____________고니오가 오스만 제국의 지배에서 벗어난 연도는 언제였나요?\n", + "Processing question 1965/3952 : 키라와 카가리 유라 아스하는 어떤 관계인가?_____________'키라와 카가리 유라 아스하는 관계는 어떤 것인가?'\n", + "Processing question 1966/3952 : 검찰 과거사위원회에서 당시 수사 기록을 꺼내 진상조사한 사건 이름은?_____________'검찰 역사조사위원회에서 당시 수사 기록을 찾아 조사한 사건 이름은 무엇인가요?'\n", + "Processing question 1967/3952 : 2000년에 이오를 관측한 탐사선 중 이오가 황과 이산화황으로 덮여있음을 알린 탐사선은 무엇인가?_____________이오를 관측한 탐사선 중 이오가 황과 이산화황으로 덮여있음을 알린 탐사선은 무엇입니까?\n", + "Processing question 1968/3952 : 김석조, 고성모 등에게 자신과 함께 할 것을 권한 사람은?_____________'김석조, 고성모 등에게 함께 할 것을 제안한 사람은 누구인가요?'\n", + "Processing question 1969/3952 : 젤라시오 1세가 교황의 권한을 부각하기 위해 주장한 권리는?_____________젤라시오 1세가 교황의 권한을 부각하기 위해 주장한 권리는 무엇입니까?\n", + "Processing question 1970/3952 : 나인 브릿지 전략에서 러시아의 협력을 이끌어낼 수 있을 것으로 예상되는 분야는 무엇인가?_____________'나인 브릿지 전략에서 러시아의 협력을 이끌어낼 수 있는 분야는 어디인가?'\n", + "Processing question 1971/3952 : 메디치 가문의 몰락 후 토스카나를 넘겨받은 사람은?_____________'메디치 가문의 몰락 이후 토스카나를 승계한 사람은 누구인가요?'\n", + "Processing question 1972/3952 : 구유고슬라비아의 6개 공화국이 최종적으로 모두 분리된 것은 몇 년인가?_____________모든 유고슬라비아 공화국이 독립을 선언한 연도는 언제인가요?\n", + "Processing question 1973/3952 : 페르시아 원정군이 에레트리아를 무찌를 때 가장 먼저 전쟁을 시작한 지역은?_____________페르시아 원정군이 에레트리아를 정복할 때 전투가 시작된 지역은 어디였습니까?\n", + "Processing question 1974/3952 : 온타리오 주의 부총독이 된 인물은 어디 출신인가요?_____________'온타리오 주의 총독이 된 사람은 어느 지역 출신입니까?'\n", + "Processing question 1975/3952 : 법적 구속력이 없는 법정은 누가 만들었나요?_____________누가 법적 효력이 없는 법을 제정하였습니까?\n", + "Processing question 1976/3952 : 작클리와 밀담한 적이 있고 병단 내로 식인 괴몰로 변하는 와인을 퍼트린 인물은?_____________누군가가 작클리와 밀담하며 병단 내로 식인 괴물로 변하는 와인을 퍼트린 인물은 누구인가요?\n", + "Processing question 1977/3952 : 테오도라와 재혼하기 전에 미하일 시슈만의 부인은 누구였는가?_____________미하일 시슈만의 부인은 누구였나요?\n", + "Processing question 1978/3952 : 대륙 회의에서 코시치우슈코가 부여받은 직위는?_____________코시치우슈코가 대륙 회의에서 받은 직위는 무엇입니까?\n", + "Processing question 1979/3952 : 1961년에 민족일보의 인쇄를 중지시켰던 부처는 어디인가?_____________어느 기관이 1961년에 민족일보의 출판을 중단시켰습니까?\n", + "Processing question 1980/3952 : 공연스태프들이 원하는 좌석에 원하는 색깔의 빛을 출력하기 위해 쓰는 도구는?_____________공연스태프들이 사용하는 도구는 무엇인가요?\n", + "Processing question 1981/3952 : 고려후기 전주치소의 위치를 추정한 책은?_____________전주구치소의 위치를 추정한 책은 무엇입니까?\n", + "Processing question 1982/3952 : 왕건을 임금으로 예우하는 의식이 치뤄진 곳은?_____________왕건을 군주로 예우하는 의식이 행해진 곳은 어디인가요?\n", + "Processing question 1983/3952 : 상기 백자입호는 어느 곳에서 주로 쓰였나?_____________백자입호는 주로 어디에서 사용되었습니까?\n", + "Processing question 1984/3952 : 언론, 교육 등에 힘썼던 가톨릭 조직은 언제 활동하였는가?_____________가톨릭 단체가 활동한 시기는 언론, 교육 등에 힘을 쏟았던 가톨릭 조직이 언제 활동했는지 알고 계신가요?\n", + "Processing question 1985/3952 : 톰이 등대지기로 가게 된 섬의 이름은?_____________톰이 등대 관리자로 간 섬의 명칭은 무엇입니까?\n", + "Processing question 1986/3952 : 현대에 점성술을 하는 사람들이 부정적으로 생각하는 단어는?_____________점성술을 하는 사람들이 부정적으로 생각하는 용어는 무엇인가요?\n", + "Processing question 1987/3952 : 곤충이 주변 환경과 비슷한 모양을 하는 이유는?_____________곤충이 주변 환경과 유사한 외모를 가지는 이유는 무엇인가요?\n", + "Processing question 1988/3952 : 미국과 이라크 관리들은 하킴을 누가 죽였다고 보나?_____________하킴이라는 사람을 누가 죽였다고 생각하나요?\n", + "Processing question 1989/3952 : 사하라 사막에 철도가 놓인 시기는?_____________사하라 사막에 철도가 건설된 시기는 언제인가요?\n", + "Processing question 1990/3952 : 낙랑군이 설치된 장소에 있었던 국가를 망하게 한 장본인은 누구인가?_____________낙랑군이 설치된 장소에 있었던 국가를 망하게 한 주요 인물은 누구인가?\n", + "Processing question 1991/3952 : 이정희가 1839년 교우 다섯 명과 함께 죽임을 당한 사실이 기록된 문헌은?_____________이정희가 1839년 친구 다섯 명과 함께 살해당한 사실이 기록된 문헌은 무엇입니까?\n", + "Processing question 1992/3952 : 이준용은 어떤 처지라서 일본이 그를 우호적으로 받아들였나?_____________이준용은 어떤 입장 때문에 일본이 그를 호의적으로 수용했나요?\n", + "Processing question 1993/3952 : 북한군이 국군을 기만하기 위해 배치를 바꾼 것은?_____________북한군이 국군을 속이기 위해 배치를 변경한 이유는 무엇인가요?\n", + "Processing question 1994/3952 : 국회의장 선거에 무소속으로 출마한 사람은?_____________국회의장 선거에 독립으로 출마한 후보는 누구인가요?\n", + "Processing question 1995/3952 : 고려시대 매병은 당시에 무엇을 담는 용도로 쓰였나요?_____________'고려시대 매병은 당시에 어떤 용도로 사용되었습니까?'\n", + "Processing question 1996/3952 : 해양 생태계에서 가장 많이 볼 수 있는 착생식물은 무엇인가?_____________해양 생태계에서 가장 흔히 발견되는 식물은 무엇인가요?\n", + "Processing question 1997/3952 : 불경하다는 비난을 받은 인물은 누구인가?_____________어떤 사람이 비난을 받았는가?\n", + "Processing question 1998/3952 : 맥도날드의 합작회사 중 해운대 해수욕장과 광안리 해수욕장 부근 매장을 담당하는 곳은 어디인가?_____________맥도날드의 해운대 해수욕장과 광안리 해수욕장 부근 매장을 관리하는 회사는 어디인가요?\n", + "Processing question 1999/3952 : 코코뱅의 상품 가치를 정하는 데 영향을 주는 것은?_____________코코뱅의 제품 가치를 결정하는 데 영향을 미치는 것은 무엇입니까?\n", + "Processing question 2000/3952 : 예허 국주의 자녀가 누르가치에게 보내졌을 때의 자녀의 나이는?_____________누르가치에게 보내졌을 때의 자녀의 나이는 몇 살이었나요?\n", + "Processing question 2001/3952 : 서울 올림픽 야구 종목에서 2위를 한 나라는?_____________서울 올림픽 야구 종목에서 준우승을 차지한 국가는 무엇인가요?\n", + "Processing question 2002/3952 : 네팔 의회 의원 중에서 투표를 포기하고 데모를 시작했던 인원은?_____________'네팔 의회 의원 중에서 투표를 포기하고 시위를 시작한 사람은 누구인가요?'\n", + "Processing question 2003/3952 : 1977년의 이스라엘 총선거에서 리쿠드당은 어떤 정당과의 경쟁에서 승리하였나?_____________리쿠드당이 1977년 이스라엘 총선거에서 어떤 정당을 이기고 승리했습니까?\n", + "Processing question 2004/3952 : 포카혼타스와 결혼한 인물은?_____________누가 포카혼타스와 결혼했나요?\n", + "Processing question 2005/3952 : 프러데리와 마나워단이 수렵 중에 만난 동물은 무엇인가요?_____________프러데리와 마나워단이 사냥 중에 만난 동물은 어떤 것인가요?\n", + "Processing question 2006/3952 : 아게실라오스의 아버지는 누구인가?_____________아게실라오스의 아버지는 누구인가요?\n", + "Processing question 2007/3952 : 이만규가 최초로 선고받은 형벌은?_____________이만규가 처음으로 받은 형벌은 무엇이었나요?\n", + "Processing question 2008/3952 : 싸움에 대비한 체육을 다룬 교육의 명칭은?_____________체험적 교육을 통해 싸움에 대비하는 기술을 가르치는 교육은 무엇인가요?\n", + "Processing question 2009/3952 : 영토 확장의 공로를 세운 왕이 즉위한 해는?_____________어떤 왕이 영토를 확장하여 즉위한 해는 무엇입니까?\n", + "Processing question 2010/3952 : 나치와 이념전을 펼쳤던 소련의 이념은?_____________소련이 전개한 이념은 무엇이었습니까?\n", + "Processing question 2011/3952 : 후지가오카 역을 기점으로 히가시야마 선과 연결된 노선은?_____________후지가오카 역을 기준으로 히가시야마 노선과 연결된 노선은 무엇입니까?\n", + "Processing question 2012/3952 : <폴아웃 4>의 음악에 대해 긍정적으로 평가한 플랫폼은?_____________'<폴아웃 4>의 음악을 칭찬한 플랫폼은 어디인가요?'\n", + "Processing question 2013/3952 : 제3차 카얀데르 내각이 무너지게 된 계기는?_____________제3차 카얀데르 내각이 붕괴된 이유는 무엇이었나요?\n", + "Processing question 2014/3952 : 궁전 아래에 위치하던 집에는 몇 칸의 방이 있었는가?_____________궁전 아래에 위치한 집에는 몇 개의 방이 있었습니까?\n", + "Processing question 2015/3952 : 카라치올의 모유을 먹은 동물은?_____________카라치올의 모유를 먹은 동물은 무엇인가요?\n", + "Processing question 2016/3952 : 김두관의 해고를 반대했던 당은?_____________김두관의 해고를 반대했던 정당은 무엇이었나요?\n", + "Processing question 2017/3952 : 맥신이 상급 시험을 준비하던 학교는 어디인가요?_____________어느 학교가 고등학생들을 대비시키는 시험을 준비하고 있나요?\n", + "Processing question 2018/3952 : 2019년 3월 정의용 안보실장과 접촉한 것으로 알려진 인물은?_____________'2019년 3월에 정의용 안보실장과 접촉한 것으로 알려진 인물은 누구인가요?'\n", + "Processing question 2019/3952 : 주노 탐사선의 소속 국가는?_____________\"주노 탐사선은 어떤 국가에서 왔나요?\"\n", + "Processing question 2020/3952 : 후루카와 광업은 <창업100년사>이라는 간행물에서 광독을 어떤 단어로 바꾸어 표현하였나?_____________'후루카와 광업은 <창업100년사>에서 광독을 어떤 용어로 대체하여 표현했나요?'\n", + "Processing question 2021/3952 : 백색육에는어느 정도의 미오글로빈 색소가 내재되어있나?_____________백색육에는 몇 퍼센트의 미오글로빈 색소가 함유되어 있나요?\n", + "Processing question 2022/3952 : 타지마할이 완공되기까지 걸린 시간은?_____________타지마할이 완성되기까지 소요된 시간은 얼마나 되나요?\n", + "Processing question 2023/3952 : 정부의 허가없이 여행 금지 국가를 여행시 처벌할 수 있는 조항이 명시되어 있는 법은?_____________어떤 법안에는 정부 승인 없이 여행 금지 국가로 여행하는 행위에 대한 처벌 조항이 포함되어 있습니까?\n", + "Processing question 2024/3952 : 티모시 콜레토 다음으로 민유라의 요청을 받아 파트너가 된 사람은?_____________민유라의 요청을 받아 파트너가 된 사람은 누구인가요?\n", + "Processing question 2025/3952 : 신존은 자신을 어떤 사람이라고 소개했는가?_____________신존은 자신을 어떤 인물로 소개했습니까?\n", + "Processing question 2026/3952 : 폴리비오스는 필로포이멘이 죽인 스파르타인의 수가 얼마라고 주장했나?_____________폴리비오스가 주장한 스파르타인의 수는 몇 명이었습니까?\n", + "Processing question 2027/3952 : 가타에에 등장하는 신을 표현한 언어는 무엇인가?_____________가타에에 등장하는 신을 표현한 언어는 무엇입니까?\n", + "Processing question 2028/3952 : 포랭과 로트렉, 도미에의 공통된 성향은?_____________포랭과 로트렉, 도미에의 공통점은 무엇인가요?\n", + "Processing question 2029/3952 : 단층은 만들어질 당시의 무엇에 따라 종류가 나뉘나요?_____________단층은 형성 당시의 어떤 요인에 의해 분류되나요?\n", + "Processing question 2030/3952 : 로베르에게 도움을 청한 사람은?_____________로베르에게 지원을 요청한 사람은 누구입니까?\n", + "Processing question 2031/3952 : 데메트리오스가 전황을 타개하기 위해 투입했으나 실패한 병력은?_____________데메트리오스가 전황을 타개하기 위해 투입했으나 실패한 군대는 무엇인가요?\n", + "Processing question 2032/3952 : 인종에 따른 편향을 실험한 나라는?_____________어떤 국가가 인종에 따른 편견을 실험했는가?\n", + "Processing question 2033/3952 : 알코올 의존증 환자가 술을 끊을 때 오한을 일으키는 물질은?_____________알코올 의존증 환자가 술을 끊을 때 오한을 일으키는 물질은 무엇인가요?\n", + "Processing question 2034/3952 : 눈물을 흘리며 정의를 살려달라고 청한 인물은 누구의 친구였나요?_____________눈물을 흘리며 정의를 회복해 주세요라고 탄원한 사람은 누구의 동료였나요?\n", + "Processing question 2035/3952 : 프로메테우스의 정의는 누구를 사랑하는 것인가요?_____________프로메테우스가 사랑하는 것의 정의는 무엇인가요?\n", + "Processing question 2036/3952 : 북마케도니아의 공통 언어로 마케도니아어가 지정된 해는?_____________북마케도니아의 공식 언어로 지정된 마케도니아어가 나타난 연도는 언제인가요?\n", + "Processing question 2037/3952 : 사료 비판 중 실시 자체로 위서를 가릴 수 있는 방식은?_____________사료 비판 중 실시 자체로 위서를 가릴 수 있는 방법은 무엇인가요?\n", + "Processing question 2038/3952 : 긍정적인 생각을 부정적인 생각보다 선호하는 경향을 나타내는 용어는?_____________긍정적인 생각을 부정적인 생각보다 선호하는 경향을 나타내는 용어는 무엇인가요?\n", + "Processing question 2039/3952 : 진원향교 통합 당시 장성향교의 소재지는 어디였는가?_____________장성향교가 위치한 곳은 어디였나요?\n", + "Processing question 2040/3952 : EU경쟁법의 시행 권리를 가진 기관은?_____________어떤 기관이 EU 경쟁법을 시행할 권한이 있습니까?\n", + "Processing question 2041/3952 : 소련이 핀란드와 전쟁을 시작하며 처음 투입한 병력의 수는?_____________소련이 핀란드와 전쟁을 시작하며 처음 투입한 군대의 규모는 얼마였습니까?\n", + "Processing question 2042/3952 : 계몽 군주인 예카테리나 여제를 찬양하면서도 신하들의 아부나 가식을 풍자했던 송시는 무엇인가?_____________송시가 무엇을 찬양하면서도 신하들의 아부나 가식을 풍자했는가?\n", + "Processing question 2043/3952 : 레인보우 킥은 무엇이 무지개와 비슷해 만들어진 명칭인가?_____________'레인보우 킥은 무엇이 무지개와 유사한 이름으로 알려져 있는가?'\n", + "Processing question 2044/3952 : 니콜라오 2세는 누구의 도움을 받아 갈레리아를 정벌하였나?_____________니콜라오 2세는 누구의 지원을 받아 갈레리아를 정복했나요?\n", + "Processing question 2045/3952 : 하인리히가 코냐크 동맹 전쟁에서 도움을 준 인물은 누구에 대항하고 있었나요?_____________하인리히가 코냐크 동맹 전쟁에서 도움을 준 인물이 누구와 대항하고 있었나요?\n", + "Processing question 2046/3952 : 조에라트 철광산의 위치는?_____________조에라트 광산의 위치는 어디에 있나요?\n", + "Processing question 2047/3952 : 법원에서 상고 대상이 아닌 사건에 대해 상고를 기각하는 체계는 무엇인가요?_____________어떤 경우에 법원에서 상고 대상이 아닌 사건에 대해 상고를 기각하는 시스템은 무엇인가요?\n", + "Processing question 2048/3952 : 사벨이 겔구그와의 전투에서 파괴한 부위는?_____________사벨이 겔구그와의 전투에서 파괴한 지역은 어디인가요?\n", + "Processing question 2049/3952 : 미국과의 협상에서 핵무기 대량 축소에 합의한 인물은?_____________'미국과의 협상에서 핵무기 대량 축소에 동의한 인물은 누구인가요?'\n", + "Processing question 2050/3952 : 정치적 무관심이 도움을 주기도 하는 요소는?_____________정치에 대한 무관심이 혜택을 주는 측면은 무엇인가요?\n", + "Processing question 2051/3952 : 이무정이 황소의 난에서 공을 세워 임명된 관직은?_____________이무정이 황소의 난에서 공을 세워 임명된 관직은 무엇입니까?\n", + "Processing question 2052/3952 : 바리사이 파에게 순교당한 인물이 주교였던 곳은?_____________바리사이 파에게 순교당한 인물이 주교였던 곳은 어디였습니까?\n", + "Processing question 2053/3952 : 김정길이 지역주의 제거에 선구하기 전 분위기를 조성한 사람은?_____________'김정길이 지역주의 제거에 선구하기 전 분위기를 조성한 사람은 누구였나요?'\n", + "Processing question 2054/3952 : 솔라리는 어떤 사양을 쓰고있나요?_____________솔라리는 어떤 스펙을 사용하고 있나요?\n", + "Processing question 2055/3952 : 연꽃대좌에 앉아있는 불좌상이 입고 있는 옷은?_____________불좌상이 입고 있는 옷은 무엇인가요?\n", + "Processing question 2056/3952 : 음식 관리나 조리 과정에서 발생하는 문제로 인해 나타날 수 있는 질병은?_____________어떤 질병이 음식 관리나 조리과정에서 발생할 수 있나요?\n", + "Processing question 2057/3952 : 몬태나와 와이오밍은 다코타 준주 지역으로 소속되었다가 언제 각각의 준주로 나뉘어졌나?_____________'몬태나와 와이오밍은 다코타 준주 지역으로 소속되었다가 언제 각각의 주로 분리되었나요?'\n", + "Processing question 2058/3952 : 간부 양성 목적으로 설립된 시설의 이름은?_____________'간부 교육 목적으로 설립된 시설의 명칭은 무엇인가요?'\n", + "Processing question 2059/3952 : 2차 세계대전 당시 독일이 루프트바페 본부를 유치한 도시는?_____________2차 세계대전 중에 독일이 루프트바페 본부를 빼앗은 도시는 어디인가요?\n", + "Processing question 2060/3952 : 자동차 산업에서 세척에 사용하는 재료는?_____________자동차 산업에서 세척에 사용하는 물질은 무엇인가요?\n", + "Processing question 2061/3952 : 김영희가 배구를 시작했던 도시는?_____________김영희가 배구를 시작한 도시는 어디였나요?\n", + "Processing question 2062/3952 : 지우 일행은 전룡을 위한 약을 어디서 구했나?_____________지우 일행은 전룡을 위한 의약품을 어디서 얻었습니까?\n", + "Processing question 2063/3952 : 쿠바에 살아서 도착한 반군 중 그들을 이끈 인물은 누구인가?_____________쿠바에 살아서 도착한 반군 중 그들을 이끈 인물은 누구인가?\n", + "Processing question 2064/3952 : 아라키돈산의 적정 섭취량은 1일 최대 얼마인가요?_____________아라키돈산의 권장 섭취 한계는 하루에 최대 얼마인가요?\n", + "Processing question 2065/3952 : 1994년에 스페이스 명예의 전당에 오른 디지털 영상 처리 기술은 어떤 용도였나요?_____________어떤 목적으로 1994년에 스페이스 명예의 전당에 오른 디지털 영상 처리 기술이 사용되었나요?\n", + "Processing question 2066/3952 : 학생 지도부 회의 참석자 중 고려대학교를 다니는 사람의 이름은?_____________고려대학교 출신인 학생 지도부 회의 참석자의 이름은 무엇인가요?\n", + "Processing question 2067/3952 : 마르크스는 착취계급이 어떤 계급을 상대로 착취했다고 주장했나요?_____________마르크스는 어떤 계급을 착취했다고 주장했나요?\n", + "Processing question 2068/3952 : 우간다 국민을 뜻하는 악기는?_____________'우간다 국민을 뜻하는 악기는 무엇인가요?'\n", + "Processing question 2069/3952 : 외교관과 함께 빨리 전쟁으로부터 대피시켜야 했던 사람들은?_____________빨리 전쟁으로부터 대피해야 했던 사람들은 외교관과 함께 있었나요?\n", + "Processing question 2070/3952 : 1988년에 샤리아티는 파진 밀사이디를 만나기 위해 어디로 갔는가?_____________샤리아티가 파진 밀사이디를 만나기 위해 1988년에 어디로 여행했나요?\n", + "Processing question 2071/3952 : 15살 때까지 맥신과 함께 살았던 인물은 어떤 직업을 가지고 있었나요?_____________어떤 직업을 가지고 계셨나요?\n", + "Processing question 2072/3952 : 홍승대는 누구를 대신하여 동학군의 대장을 만나러 갔나요?_____________홍승대는 누구를 대신하여 동학군의 지도자를 만나러 갔나요?\n", + "Processing question 2073/3952 : 카포레토 전투 이후, 아르만도 디아츠에게 직권을 넘겨야 했던 인물은?_____________카포레토 전투 이후, 아르만도 디아츠에게 직권을 넘겨야 했던 인물은 누구였습니까?\n", + "Processing question 2074/3952 : 윌리엄 3세가 보인강 전투에서 승리한 날짜는?_____________보인강 전투에서 윌리엄 3세가 이겼던 날짜는 언제였나요?\n", + "Processing question 2075/3952 : 해양지각이 맨틀로 돌아가는 과정을 뭐라하는가?_____________해양지각이 맨틀로 돌아가는 과정을 뭐라고 합니까?\n", + "Processing question 2076/3952 : 박칼린이 <명성황후>를 편곡할 때 어느 나라에 있었는가?_____________박칼린이 <명성황후>를 편곡할 때 어느 국가에 있었습니까?\n", + "Processing question 2077/3952 : 에우데르 카마라가 대주교로 활동할 당시 민중 계몽에서 중시했던 요소는?_____________에우데르 카마라가 대주교로 활동할 당시 민중 계몽에서 중시했던 핵심 요소는 무엇이었나요?\n", + "Processing question 2078/3952 : 보상제도에 있어 가장 기본이 되는 것은?_____________보상 시스템에서 가장 기본적인 것은 무엇인가요?\n", + "Processing question 2079/3952 : 채상을 만들 때 사용하는 실을 칭하는 이름은?_____________채상을 만들 때 사용하는 실을 칭하는 다른 이름은 무엇인가요?\n", + "Processing question 2080/3952 : 범용 컴퓨터가 빨라지면서, 디지털 영상 처리 기술은 무엇의 역할을 대신하게 되었나요?_____________디지털 영상 처리 기술이 빨라지면서, 범용 컴퓨터는 어떤 기능을 대신하게 되었나요?\n", + "Processing question 2081/3952 : 불가리아가 공산주의 국가로 전환된 해는?_____________불가리아가 공산주의 국가로 전환된 해는 언제였습니까?\n", + "Processing question 2082/3952 : 갈리아 키살피나를 이탈리아에 복속시킨 사람은?_____________갈리아 키살피나를 이탈리아에 복속시킨 사람은 누구였나요?\n", + "Processing question 2083/3952 : 미국과 달리 이민자 남성과 현지인의 결혼이 가능했던 국가는?_____________어느 국가에서는 이민자 남성과 현지 여성이 결혼할 수 있었나요?\n", + "Processing question 2084/3952 : 환어음에 관한 사항은 무엇을 바탕으로 작성된 것인가?_____________환어음에 대한 정보는 어떤 근거를 기반으로 작성되었나요?\n", + "Processing question 2085/3952 : 사회주의와 공산주의가 폭력 또는 비폭력을 통해 가지려는 것은 무엇인가?_____________사회주의와 공산주의가 폭력 또는 비폭력을 통해 달성하고자 하는 목표는 무엇인가요?\n", + "Processing question 2086/3952 : 음향효과 증대, 고전적 화성법 해체, 혁신적 화성 확대를 한 사람의 이름은?_____________누군가가 음향 효과를 증대시키고, 고전적인 화성법을 해체하며, 혁신적인 화성을 확대한 사람은 누구인가요?\n", + "Processing question 2087/3952 : 왕망은 평제를 황제로 모시려 했을 때 평제의 생모를 어느 곳에서 지내게 하였는가?_____________평제가 황제로 즉위하려 할 때 왕망이 평제의 생모를 어디에 감추었습니까?\n", + "Processing question 2088/3952 : 용가리가 깨어나는데 계기를 제공한 사람은?_____________누가 용가리를 깨우는데 계기를 제공했나요?\n", + "Processing question 2089/3952 : 어리석은 사람 이야기는 어느 나라 이야기인가?_____________'어리석은 사람 이야기는 어느 국가 이야기입니까?'\n", + "Processing question 2090/3952 : 로디니아의 일부로 동남극 지역이 존재하던 시기는?_____________동남극이 로디니아 대륙의 일부였던 시기는 언제였습니까?\n", + "Processing question 2091/3952 : 여운형이 김구에 의해 몸수색을 지시받은 장소는?_____________여운형이 김구에게서 받은 몸수색을 지시받은 장소는 어디였습니까?\n", + "Processing question 2092/3952 : 다케다 역에서 스룻토 KANSAI 이전에 공용으로 쓰였던 승차카드는?_____________다케다 역에서 스룻토 KANSAI 이전에 공용으로 사용되던 승차카드는 무엇인가요?\n", + "Processing question 2093/3952 : 가디너가 비용을 아끼기 위해 참고한 도시는?_____________가디너가 절약을 위해 참고한 도시는 어디인가요?\n", + "Processing question 2094/3952 : 전투복 미착용을 이유로 견장을 사용하지 않는 사람은?_____________전투복을 입지 않아서 견장을 착용하지 않는 사람은 누구인가요?\n", + "Processing question 2095/3952 : 6월 14일에 칼레바는 어디로 향하고 있었나?_____________칼레바가 6월 14일에 어디로 향하고 있었나요?\n", + "Processing question 2096/3952 : 꼬리가 있는 도롱뇽과 달리 개구리는 분추류에서 갈라져 나왔다고 제시한 사람은?_____________분추류에서 갈라져 나왔다고 제시한 사람은 누구인가요?\n", + "Processing question 2097/3952 : 이아손과 글라우케가 결혼한 지역은?_____________이아손과 글라우케가 결혼한 장소는 어디인가요?\n", + "Processing question 2098/3952 : 필리스 샐러바의 아들이 오하이오주 신시내티로 이주한 해는?_____________필리스 샐러바의 아들이 오하이오주 신시내티로 이주한 해는 언제였나요?\n", + "Processing question 2099/3952 : 미야니치 신문과 TBS가 실시한 여론조사에서 우위를 점한 당은?_____________'미야니치 신문과 TBS가 조사한 여론조사에서 선두를 달리고 있는 정당은 무엇인가요?'\n", + "Processing question 2100/3952 : 블루어-댄포스선과 영-유니버시티선이 분리되며 폐쇄된 곳은 어디인가?_____________어디에서 블루어-댄포스선과 영-유니버시티선이 분리되고 폐쇄된 곳은 어디인가요?\n", + "Processing question 2101/3952 : 경빈 박씨는 어떤 신분으로 궁에 들어오게 되었나?_____________경빈 박씨는 어떤 신분으로 궁에 들어오게 되었나?\n", + "Processing question 2102/3952 : 전원이 없어도 동작 가능한 장치는?_____________어떤 장치는 전원이 없어도 작동할까요?\n", + "Processing question 2103/3952 : <백유경>은 어느 나라의 고대 설화를 배경으로 만든 불교 경전인가요?_____________<백유경>은 어느 국가의 고대 전설을 바탕으로 제작된 불교 경전입니까?\n", + "Processing question 2104/3952 : 레몽 4세의 아들이 죽은 해는?_____________레몽 4세의 아들이 죽은 해는 언제인가요?\n", + "Processing question 2105/3952 : 북쪽왕관자리 로 b와 지구 사이의 거리는 어림잡아 얼마나 되는가?_____________북쪽왕관자리에서 b와 지구 사이의 거리는 대략 얼마인가요?\n", + "Processing question 2106/3952 : 곤막은 선우의 딸을 자신의 무엇으로 삼았나요?_____________곤막은 선우의 딸을 자신의 무엇으로 간주했나요?\n", + "Processing question 2107/3952 : 긴 허리와 넓은 어깨의 장대한 신체는 어느 시대 불상의 양식인가?_____________어느 시대 불상의 양식은 어떤 형태의 신체를 갖고 있나요?\n", + "Processing question 2108/3952 : 핀치 웨스트역 지붕에 사용될 색깔은 무엇인가?_____________핀치 웨스트역 지붕에 사용될 색상은 무엇입니까?\n", + "Processing question 2109/3952 : 박근혜의 세종시 관련 주장을 듣고 당을 나가려고 했던 인물은?_____________누가 박근혜의 세종시 관련 발언을 듣고 정당 탈퇴를 고려했나요?\n", + "Processing question 2110/3952 : 청주에서 일어날 반란을 미리 알게 된 이는?_____________'청주에서 일어날 반란을 사전에 알아차린 사람은?'\n", + "Processing question 2111/3952 : 토끼가 거북이의 기분을 상하게 만들었던 거북이의 별명은 무엇인가?_____________거북이가 토끼에게 상처받았던 별명은 무엇인가요?\n", + "Processing question 2112/3952 : 알렉상드린의 아빠는?_____________알렉상드린의 아버지는 누구입니까?\n", + "Processing question 2113/3952 : 갈릴레오 갈릴레이가 쓴 책 중 출판으로 인해 감옥에 갇혔던 저서의 제목은?_____________갈릴레오 갈릴레이가 저쓴 책 중 출판으로 인해 감옥에 갇힌 책의 제목은 무엇인가요?\n", + "Processing question 2114/3952 : 동틀녘에 햇살이 보이기 시작하는 순간을 뭐라고 부르는가?_____________새벽에 햇살이 보이기 시작하는 순간을 무엇이라고 부르나요?\n", + "Processing question 2115/3952 : 핑크색 메르시는 무엇에 대한 사회적 인식을 깨우기 위해 한정적으로 출시되었나?_____________'핑크색 메르시는 어떤 사회적 인식을 증가시키기 위해 한정판으로 출시되었나?'\n", + "Processing question 2116/3952 : 광합성으로 남조녹말을 저장하는 조류는 어떤 생식을 하나요?_____________어떤 생식으로 광합성으로 남조녹말을 저장하는 조류는 무엇인가요?\n", + "Processing question 2117/3952 : Fire ant의 침에 있는 성분은 무엇인가?_____________Fire ant의 침에 있는 성분은 어떤 것인가요?\n", + "Processing question 2118/3952 : 닛폰 제지 후시키 공장이 폐업한 해는?_____________제지 후시키 공장이 폐쇄된 연도는 언제인가요?\n", + "Processing question 2119/3952 : 일본이 전략물자를 몰래 빼돌려 거래했다는 확실한 증거가 있다고 주장한 인물은?_____________일본이 비밀리에 빼앗은 전략물자를 거래한 사람을 지목한 인물은 누구인가요?\n", + "Processing question 2120/3952 : 유종이 조조에게 투항한 해는?_____________조조에게 투항한 해는 언제인가요?\n", + "Processing question 2121/3952 : 윌란 반도 주변에서 일어난 전투의 이름은?_____________윌란 반도 근처에서 발생한 전투를 가리키는 다른 용어는 무엇입니까?\n", + "Processing question 2122/3952 : 고구려에 협박하러 갔다가 연개소문에 의해 토굴에 갇히는 신세가 된 자는?_____________누구가 고구려를 위협하러 갔다가 연개소문에 의해 토굴에 갇힌 사람인가요?\n", + "Processing question 2123/3952 : 예수가 출생한 장소는?_____________예수님이 태어난 곳은 어디인가요?\n", + "Processing question 2124/3952 : 2010년 자신의 음반을 옹호하는 발언을 한 사람은?_____________2010년 자신의 음반을 옹호하는 발언을 한 사람은 누구였나요?\n", + "Processing question 2125/3952 : 선현전이 항복한 국가는?_____________어떤 국가가 선현전을 항복했습니까?\n", + "Processing question 2126/3952 : 아라토스와의 클레오메네스 전쟁에서 패한 뒤 클레오메네스가 피신한 곳은?_____________클레오메네스가 피신한 곳은 어디였나요?\n", + "Processing question 2127/3952 : 들뢰즈가 퀴비에-조프루아 논쟁을 해석한 철학적 입장은 무엇인가?_____________들뢰즈가 퀴비에-조프루아 논쟁을 해석한 철학적 입장은 무엇인가?\n", + "Processing question 2128/3952 : 사실주의와 자연주의가 영향을 받은 사조는?_____________사실주의와 자연주의가 영향을 받은 사조는 무엇인가요?\n", + "Processing question 2129/3952 : 국기 중앙에 자리잡고 있는 국장은 어디에서 따왔는가?_____________국기 중앙에 자리한 국장의 출처가 어디인가요?\n", + "Processing question 2130/3952 : 해변가 절벽에 자리잡고 있는 수도원에서 콤바인 포대를 공격한 인물은?_____________수도원 해변가 절벽에서 콤바인 포대를 공격한 인물은 누구인가요?\n", + "Processing question 2131/3952 : 버몬트 주의 농부들이 가지고 있던 동물들을 팔았던 해는?_____________버몬트 주의 농부들이 가지고 있던 동물들을 팔았던 해는 언제였나요?\n", + "Processing question 2132/3952 : 긴급수급조정조치에 관한 법을 따르지 않을 경우 받을 수 있는 최대 벌금 금액은?_____________긴급수급조정조치에 관한 법을 따르지 않을 시 부과될 수 있는 최대 벌금은 얼마인가요?\n", + "Processing question 2133/3952 : 다양한 사회 대체 복무를 인정해주는 나라는?_____________어떤 국가들이 다양한 사회 대체 복무를 수용하고 있나요?\n", + "Processing question 2134/3952 : 영화 쉬리가 상영되기 전 최고의 흥행기록은 세운 영화는?_____________'영화 쉬리가 상영되기 전 최고의 매출을 올린 영화는 무엇인가요?'\n", + "Processing question 2135/3952 : 미사 본기도의 전통을 만든 것은 무엇인가?_____________'미사 본기도의 전통을 시작시킨 것은 무엇입니까?'\n", + "Processing question 2136/3952 : 린치에게 공격당하고 있다는 소식을 듣고 공화국군이 구조해주었던 집단은?_____________린치에게 습격당하고 있다는 소식을 듣고 공화국군이 구조해주었던 집단은 무엇입니까?\n", + "Processing question 2137/3952 : 왕온수에 대한 소문을 들은 무제가 부여한 직위는?_____________왕온수에 대한 소문을 들은 무제가 부여한 직위는 무엇입니까?\n", + "Processing question 2138/3952 : 경찰들이 시위대에 합류하면서 한 말은?_____________경찰들이 시위대에 가담하면서 한 발언은 무엇이었나요?\n", + "Processing question 2139/3952 : 1984년 올림픽은 미국의 어느 도시에서 개최되었나?_____________어느 도시에서 1984년 올림픽이 개최되었습니까?\n", + "Processing question 2140/3952 : 셀루타의 남편은 누구인가?_____________셀루타의 배우자는 누구입니까?\n", + "Processing question 2141/3952 : 경기와 위황이 제거하려한 인물은?_____________누가 경기와 위황을 제거하려고 했나요?\n", + "Processing question 2142/3952 : 스튜어트를 구하러 온 부대는 어디에서 출발했나?_____________스튜어트를 찾으러 온 군대는 어디에서 출발했습니까?\n", + "Processing question 2143/3952 : 위안스카이가 해임되기 전 지위는?_____________위안스카이가 해임되기 전 지위는 무엇이었습니까?\n", + "Processing question 2144/3952 : 비트겐슈타인이 오지에서 독거하며 써낸 작품은?_____________비트겐슈타인이 오지에서 독거하며 써낸 작품은 무엇인가요?\n", + "Processing question 2145/3952 : 디오메데스가 습격했을 때 레소스는 어디에 있었나?_____________디오메데스가 습격했을 때 레소스가 어디에 있었습니까?\n", + "Processing question 2146/3952 : 포스카리의 재혼 상대는?_____________포스카리의 재혼 배우자는 누구인가요?\n", + "Processing question 2147/3952 : 헤라클레스가 살해한 인물은 누구의 혈연인가?_____________누구의 혈통을 가진 인물이 헤라클레스에게 살해당했나요?\n", + "Processing question 2148/3952 : 제로니모에게 저항을 그만하라고 설득한 사람은?_____________제로니모에게 반대를 그만하도록 설득한 사람은 누구인가요?\n", + "Processing question 2149/3952 : 섬이 침수되더라도 섬을 지키겠다고한 사람은?_____________물에 잠긴 섬을 지키겠다고 한 사람은 누구인가요?\n", + "Processing question 2150/3952 : 고구려 정예부대원 수만명을 데리고 당으로터 압록강을 지키고 있던 인물은?_____________압록강을 지키고 있던 고구려 정예부대원의 지휘관은 누구였나요?\n", + "Processing question 2151/3952 : 1876 민주당 전당 대회의 승리자는 누구인가?_____________1876 민주당 국회의원 대회의 승리자는 누구입니까?\n", + "Processing question 2152/3952 : 감옥을 탈출한 인물이 담비에게 빼았겼던 것은?_____________감옥을 탈출한 인물이 담비에게서 빼았겼던 것은 무엇이었나요?\n", + "Processing question 2153/3952 : 개신교 신학을 만든 세력은?_____________'개신교 신학을 개척한 세력은 누구인가요?'\n", + "Processing question 2154/3952 : 프톨레마이오스는 알렉산더 제국을 통일하려는 사람을 누구라고 생각하게 되었는가?_____________프톨레마이오스는 알렉산더 대왕을 어떻게 부르게 되었나요?\n", + "Processing question 2155/3952 : 이목에게 첫 싸움에서 가능한 빨리 승리하라고 지시한 인물은?_____________이목에게 첫 전투에서 가능한 빨리 이기라고 명령한 인물은 누구인가요?\n", + "Processing question 2156/3952 : 아르마니우스주의는 구원에 있어서 어느 사상과 비교되는가?_____________아르마니우스주의는 구원에 있어서 어떤 사상과 비교됩니까?\n", + "Processing question 2157/3952 : 타지키스탄 요리는 어디의 음식과 비슷한가요?_____________타지키스탄 음식은 어떤 국가의 요리와 유사한가요?\n", + "Processing question 2158/3952 : 당항포에서 왜군의 우두머리를 죽음에 이르게 한 무기는?_____________당항포에서 왜군의 지휘관을 죽음에 이르게 한 무기는 무엇이었습니까?\n", + "Processing question 2159/3952 : 최초의 나무는 식물의 분류체계 중 어디에 속하는가?_____________최초의 나무는 식물의 분류학에서 어떤 분류군에 속하나요?\n", + "Processing question 2160/3952 : 올댓스포츠에서 황상민을 고소하려고 한 이유는?_____________올댓스포츠가 황상민을 고발하려는 이유는 무엇인가요?\n", + "Processing question 2161/3952 : 탐관오리가 주도권을 가진 호해 시절 전에 황제였던 사람은?_____________누가 탐관오리가 주도권을 가진 호해 시절 전에 황제였나요?\n", + "Processing question 2162/3952 : 김준연이 초등학생이 된 해는?_____________김준연이 초등학생이 된 해는 언제인가요?\n", + "Processing question 2163/3952 : 한국군은 어떤 전략을 통해 7월 15일까지 북한군의 진격을 막을 수 있었나?_____________한국군은 7월 15일까지 북한군의 진격을 어떤 전략으로 방어할 수 있었나요?\n", + "Processing question 2164/3952 : 여러 부분으로 이루어진 심실을 가진 종은?_____________어떤 동물은 심장이 여러 부분으로 이루어진 심실을 가지고 있나요?\n", + "Processing question 2165/3952 : ABC에서 방영되는 '시간이동'의 장르는?_____________'ABC에서 방송되는 '타임 트래블'의 장르는?'\n", + "Processing question 2166/3952 : 라마단 기간에서 동틀녘에 햇살이 보이기 시작하는 순간을 무엇이라고 하는가?_____________동틀녘에 햇살이 보이기 시작하는 순간을 무엇이라고 합니까?\n", + "Processing question 2167/3952 : 현재 미국으로 치즈를 운송할 때 사용되는 것은?_____________'미국에서 치즈를 운송하는 데 사용되는 것은 무엇입니까?'\n", + "Processing question 2168/3952 : 루이 9세에게 무슬림에 대립하는 연맹을 결성하자고 제안한 인물은?_____________무슬림에 반대하는 연합을 구성하자고 제안한 사람은 누구인가요?\n", + "Processing question 2169/3952 : 찰스 2세의 뒤를 이어 왕위에 오른 자는?_____________찰스 2세의 뒤를 이어 왕위에 오른 자는 누구인가요?\n", + "Processing question 2170/3952 : 녹명관의 주인처럼 행사하며 다양한 축제를 주최한 사람은?_____________누구가 녹명관의 소유자처럼 행동하며 다양한 축제를 주최했습니까?\n", + "Processing question 2171/3952 : 김경표가 민주당 활동을 시작할 당시 민주당 총재는?_____________김경표가 민주당 활동을 시작할 당시 민주당 총재는 누구였나요?\n", + "Processing question 2172/3952 : 대한제국의 군대 해산 후 황실 경호 업무를 맡게 된 것은 어디인가?_____________대한제국의 군대 해산 후 황실 경호 업무를 맡게 된 곳은 어디입니까?\n", + "Processing question 2173/3952 : 참파가 비자야로 수도를 옮긴 해는?_____________비자야로 수도를 옮긴 해는 언제인가요?\n", + "Processing question 2174/3952 : 김구와 김규식을 비난한 내용의 글을 보고 화를 낸 인물은?_____________'김구와 김규식을 비방한 글을 보고 분노한 사람은 누구인가요?'\n", + "Processing question 2175/3952 : 한 언어를 다른 언어로 번역하기 위해 필요하며, 의미론, 사전학, 화용론을 이해해야 하는 문법은?_____________번역을 위해 필요한 문법은 무엇인가요?\n", + "Processing question 2176/3952 : 신탁통치 오보사건 당시 후견통치에 대해 반대를 하고 있던 집단은?_____________'신탁통치 오보사건 당시 후견통치에 반대한 그룹은 누구였나요?'\n", + "Processing question 2177/3952 : 아열대 전선과 극 전선 지대의 사이에 있는 전선은 무엇인가?_____________아열대 전선과 극 전선 지대의 사이에 있는 전선은 무엇입니까?\n", + "Processing question 2178/3952 : 필명 세레스 에레오르로 출판돼 100만 부 가까운 판매고를 올린 책은?_____________'필명 세레스 에레오르로 출판돼 100만 부 가까운 판매고를 올린 도서는 무엇인가요?'\n", + "Processing question 2179/3952 : 코드링턴이 메메트 알리와 조우한 것은 몇 년인가?_____________코드링턴이 메메트 알리를 만난 해는 몇 년인가요?\n", + "Processing question 2180/3952 : 고구려가 지원군을 보냈고, 산성이라 당나라가 공성하기 어려웠던 성은?_____________어떤 성이 당나라가 공성하기 어려웠던 성인가요?\n", + "Processing question 2181/3952 : 러시아 의회의 하원을 이끄는 자는?_____________'러시아 의회의 하원을 주도하는 사람은 누구인가?'\n", + "Processing question 2182/3952 : 시간이동' 에피소드의 다음 에피소드의 제목은 무엇인가?_____________'시간이동' 에피소드의 다음 에피소드는 무엇인가요?\n", + "Processing question 2183/3952 : 위안부 피해자와 다른 여성들을 위한 사업에 쓰인 금액은 총 얼마인가?_____________'위안부 피해자와 다른 여성들을 위한 프로젝트에 사용된 금액은 총 얼마입니까?'\n", + "Processing question 2184/3952 : 각종 개혁을 실시했으나 결국 푸가초프의 난을 초래한 지도자는?_____________누군가가 각종 개혁을 실시했지만 결국 푸가초프의 난을 초래한 지도자는 누구인가요?\n", + "Processing question 2185/3952 : 교황 비오 11세는 이탈리아와 라테라노 조약을 맺기까지 얼마나 걸렸나요?_____________교황 비오 11세가 이탈리아와 라테라노 협정을 체결하는 데 얼마나 시간이 걸렸나요?\n", + "Processing question 2186/3952 : 민제의 행차를 보고도 정체를 못 알아차린 사람은?_____________누구가 민제의 행차를 봐도 그의 정체를 알아차리지 못했나요?\n", + "Processing question 2187/3952 : 케네디와 존 매케인이 협력한 연도는?_____________케네디와 존 매케인이 협력한 해는 언제였습니까?\n", + "Processing question 2188/3952 : 교회 개혁을 추진하는 사상은 무엇인가?_____________교회 개혁을 추진하는 사상은 어떤 것인가요?\n", + "Processing question 2189/3952 : 앤이 간략하게 재혼식을 거행하는 데 영향을 끼친 영국의 종파는?_____________앤이 재혼식을 간략하게 거행하는 데 영향을 끼친 영국의 종파는 무엇인가요?\n", + "Processing question 2190/3952 : 빌리 진 킹은 누구 덕분에 미국 대표단의 대표로 올림픽에 참가할 수 있었나?_____________'빌리 진 킹이 미국 올림픽 대표로 선발되게 된 이유는 누구인가요?'\n", + "Processing question 2191/3952 : 땅 안에서만 생활하던 모울이 처음 마주하고 놀랐던 곳은?_____________모울이 처음 마주하고 놀랐던 장소는 어디였나요?\n", + "Processing question 2192/3952 : 칭기즈 칸은 차가타이를 무엇이라 칭했는가?_____________칭기즈 칸이 차가타이를 무엇이라 부르는지 알고 계신가요?\n", + "Processing question 2193/3952 : 독일이 우승했던 월드컵에서 전술과 선수 기용의 실패를 맛본 감독은 누구인가?_____________어떤 감독이 독일이 우승했던 월드컵에서 전략과 선수 사용에 실패했는지 알고 계세요?\n", + "Processing question 2194/3952 : 리히노브스키 공작이 베토벤에게 주기적으로 제공한 돈의 액수는?_____________리히노브스키 공작이 베톤에게 주기적으로 제공한 금액은 얼마였나요?\n", + "Processing question 2195/3952 : 와카마쓰의 본래 이름은 무엇이었나요?_____________와카마쓰의 원래 이름은 무엇이었습니까?\n", + "Processing question 2196/3952 : 미라형 변광성의 겉보기 밝기가 크게 변하는 이유는?_____________미라형 변수성의 겉보기 밝기가 크게 변하는 이유는 무엇인가요?\n", + "Processing question 2197/3952 : 15세기 불상들은 어느 시대의 계통이 이어져 온 것으로 추측되는가?_____________15세기 조각상들은 어느 시대의 예술적 전통을 이어받은 것으로 보이나요?\n", + "Processing question 2198/3952 : 김일성이 여운형의 암살을 지시했다고 주장한 사람은?_____________누가 김일성이 여운형을 암살하라고 명령했다고 주장했나요?\n", + "Processing question 2199/3952 : 강가이콘다 촐라푸람을 수도로 지정한 황제는?_____________어떤 황제가 강가이콘다 촐라푸람을 수도로 선정했습니까?\n", + "Processing question 2200/3952 : 윤치호는 누구의 설교를 듣고 충격을 받았나?_____________윤치호는 누구의 말을 듣고 충격을 받았나?\n", + "Processing question 2201/3952 : 안토니우스의 이목을 끌기위해 아그리파가 공격한 곳은?_____________안토니우스가 주목을 받기 위해 아그리파가 타격을 가했던 장소는 어디인가요?\n", + "Processing question 2202/3952 : 법화사가 모셨던 사람은?_____________법화사에서 모셨던 인물은 누구인가요?\n", + "Processing question 2203/3952 : 심청 이야기에 나오는 연꽃과 관련된 전설이 전해지는 곳은?_____________심청 이야기에 등장하는 연꽃과 관련된 전설이 전해지는 장소는 어디인가요?\n", + "Processing question 2204/3952 : 유요를 곡아현에서 몰아낸 사람은?_____________누가 유요를 곡아현에서 쫓아낸 사람인가요?\n", + "Processing question 2205/3952 : 1990년 모든 사망 원인 중 25.8%를 차지한 병은?_____________1990년에 가장 많은 사망을 일으킨 질병은 무엇이었나요?\n", + "Processing question 2206/3952 : 새누리당이 반이 넘는 의석 수를 확보하게 된 것은 언제부터인가?_____________새누리당이 다수를 차지한 의석 수를 확보한 것은 언제부터인가?\n", + "Processing question 2207/3952 : 다리우스 1세는 마케도니아를 정복한 후 누구를 신하로 삼았나요?_____________다리우스 1세는 마케도니아를 정복한 후 누구를 신하로 섬겼습니까?\n", + "Processing question 2208/3952 : 프랑스가 외규장각을 태우고 유물을 약탈한 원인이 되는 사건은?_____________외교적 사건으로 프랑스가 외규장각을 태우고 유물을 약탈한 사건은 무엇인가요?\n", + "Processing question 2209/3952 : 해침 시대에 생물량이 풍부하였던 장소는?_____________해침 시대에 생물량이 풍부했던 장소는 어디였습니까?\n", + "Processing question 2210/3952 : 스웨덴의 비르지타가 일찍이 스웨덴 왕실과 깊은 관계를 맺도록 기여한 인물은?_____________비르지타가 일찍이 스웨덴 왕실과 긴밀한 관계를 맺도록 기여한 인물은 누구인가요?\n", + "Processing question 2211/3952 : 하레위'가 가리키는 것은?_____________'하레위'가 가리키는 것은 무엇인가요?\n", + "Processing question 2212/3952 : 작은 번에서 가로를 보좌하는 직책은?_____________작은 번에서 가로를 도우는 직책은 무엇입니까?\n", + "Processing question 2213/3952 : 최승희를 친일반민족행위 심의 대상자에 포함시켰으나 기각한 단체의 이름은?_____________'최승희를 친일반민족행위 심의 대상자로 분류했지만 거부한 단체는 무엇인가요?'\n", + "Processing question 2214/3952 : 이규완은 자신을 무엇이라 칭했는가?_____________이규완은 자신을 무엇으로 불렀습니까?\n", + "Processing question 2215/3952 : 헬렌 모어는 어떤 무기를 이용하여 리 모건을 살해했나요?_____________리 모건을 죽인 무기가 무엇이었나요?\n", + "Processing question 2216/3952 : 로렌의 땅은 언제부터 프랑스의 지배를 받았는가?_____________로렌의 영토는 언제부터 프랑스의 통치를 받았습니까?\n", + "Processing question 2217/3952 : 교회 소유의 영토를 반환하기로 약속한 자가 사망한 해는?_____________교회 소유의 영토를 반환하기로 약속한 자가 사망한 해는 언제인가요?\n", + "Processing question 2218/3952 : 김치인이 네 차례나 지낸 관직은?_____________김치인이 네 차례나 지낸 관직은 무엇입니까?\n", + "Processing question 2219/3952 : 오취도가 곤미가 된 후 거느린 백성의 수는?_____________오취도가 곤미가 된 후 거느린 백성의 수는 얼마인가요?\n", + "Processing question 2220/3952 : 안나의 남편이었던 사람이 세상을 떠난 것은 몇년도인가?_____________안나의 배우자가 세상을 떠난 연도는 언제인가요?\n", + "Processing question 2221/3952 : 한국군이 지연전술을 펼쳤을 때 북한군은 어떠한 이유로 한국군에게 반격하지 못하였나?_____________북한군이 한국군의 지연전술에 대응하지 못한 이유는 무엇인가요?\n", + "Processing question 2222/3952 : 마르티노가 교황일 당시 교황 즉위는 누구의 허가가 필요했나?_____________교황 즉위를 승인해야 했던 인물은 누구였습니까?\n", + "Processing question 2223/3952 : 인형사를 탄생시킨 것으로 추정되는 정부 기관은?_____________어떤 기관이 인형사를 탄생시킨 것으로 추정됩니까?\n", + "Processing question 2224/3952 : 현재 근로기준법이 과거에 비해 비교적 준수되어도 여전히 해결되지 못한 문제는?_____________근로기준법이 상대적으로 준수되었더라도 여전히 해결되지 못한 문제는 무엇인가요?\n", + "Processing question 2225/3952 : 최초의 점성술 체계는 언제 등장했나요?_____________언제 첫 번째 점성술 시스템이 나타났습니까?\n", + "Processing question 2226/3952 : 제작술의 발전으로 회전대를 이용하고 광택을 낸 도기는?_____________도자기를 도는 도구를 사용하여 광택을 내는 기술은 무엇입니까?\n", + "Processing question 2227/3952 : ERG이론에서 근로자의 근무태도에 중요한 영향을 미치는 것은?_____________근로자의 근무태도에 영향을 미치는 것은 ERG 이론에서 어떤 요소인가요?\n", + "Processing question 2228/3952 : 정착하지 못하고 떠도는 이탈리아인들에게 붙여진 별칭은?_____________이탈리아인들에게 붙여진 별칭은 무엇인가요?\n", + "Processing question 2229/3952 : 일제강점기에 개최된 장치기 대회의 이름은?_____________일본식으로 된 대회이름을 가지고 있는 장치기 대회의 명칭은 무엇입니까?\n", + "Processing question 2230/3952 : 윌리엄 펜이 펜실베이니아를 식민지로 만들 수 있는 권한을 부여받은 연도는?_____________윌리엄 펜이 펜실베이니아를 식민지로 만들 수 있는 권한을 부여받은 연도는 언제였습니까?\n", + "Processing question 2231/3952 : 초월적인 개념을 가진 단어와 구별되는 것은?_____________'초월적인 개념을 가진 단어와 대조되는 것은?'\n", + "Processing question 2232/3952 : 선양 역 고가대합실은 언제 처음 이용되었나?_____________선양 역 고가대합실이 처음 사용된 날짜는 언제인가요?\n", + "Processing question 2233/3952 : 코고로의 대학후배가 죽은 채로 발견된 장소는?_____________코고로의 대학 후배가 죽은 곳은 어디에 있었나요?\n", + "Processing question 2234/3952 : 조고가 차기 승계자로 지정한 인물을 죽인 사람은 누구인가?_____________누가 조고의 계승자로 지명된 인물을 살해했습니까?\n", + "Processing question 2235/3952 : 무으타질라파가 최초로 알려진 곳은 어디인가요?_____________무테라파가 처음으로 발견된 장소는 어디입니까?\n", + "Processing question 2236/3952 : 1987년 이래 후쿠오카 아시아 영화제가 열리는 계절은?_____________후쿠오카 아시아 영화제가 열리는 계절은 어느 계절인가요?\n", + "Processing question 2237/3952 : 조선로동당이 강동정치학원에서 온 유격대원들을 남쪽으로 보내며 만든 부대는?_____________강동정치학원에서 온 유격대원들을 남쪽으로 보내며 만든 부대는 무엇인가요?\n", + "Processing question 2238/3952 : 매니가 싸우다 나가 떨어지는 모습을 보면 발작을 일으키는 인물은?_____________매니가 싸우다 나가 떨어지는 모습을 보면 발작을 일으키는 사람은 누구인가요?\n", + "Processing question 2239/3952 : 송상현이 일본의 침입에 대비하기 위해 동래성 인근에 심었던 것은?_____________송상현이 일본의 침입에 대비하기 위해 동래성 인근에 심었던 것은 무엇이었나요?\n", + "Processing question 2240/3952 : 사촌 관계인 두 인물과 삼각관계에 처한 인물은?_____________두 사람과 삼각관계에 있는 사람은 누구인가요?\n", + "Processing question 2241/3952 : 동로마 제국의 총대주교가 불가리아 총대교구를 정식으로 인정한 것은 어느 왕이 죽고 난 뒤인가?_____________동로마 제국의 총대주교가 불가리아 총대교구를 공식적으로 승인한 것은 어느 왕의 사후 기간에 있었습니까?\n", + "Processing question 2242/3952 : 제 3신분의 행동을 억압하기 위해 왕비가 내세운 것은?_____________왕비가 제 3신분의 행동을 억압하기 위해 사용한 것은 무엇인가요?\n", + "Processing question 2243/3952 : 1989년에 가내작업반은 무엇으로 인정받게 되었나요?_____________가내작업반은 1989년에 어떤 이유로 유명해졌나요?\n", + "Processing question 2244/3952 : 토성과 히페리온의 사진을 촬영한 우주선의 이름은 무엇인가?_____________'토성과 히페리온의 사진을 찍은 우주선의 명칭은 무엇입니까?'\n", + "Processing question 2245/3952 : 내금강에 있는 절 중 제 모습을 유지하고 있는 절은?_____________'내금강에 있는 절 중 제 모습을 유지하고 있는 절은?' -> '내금강에서 보존된 모습을 유지하고 있는 절은 어디에 있나요?'\n", + "Processing question 2246/3952 : 나가시마 게이오의 마지막 경기와 겹친 행사의 주최 구단은?_____________나가시마 게이오의 마지막 경기와 중복된 행사를 개최한 팀은 무엇입니까?\n", + "Processing question 2247/3952 : 2016년 하계 올림픽 태권도 동메달 결정전에서 피에에게 패한 사람은?_____________'2016년 하계 올림픽 태권도 동메달 결정전에서 피에게 패한 선수는 누구였나요?'\n", + "Processing question 2248/3952 : 대청누각이 특징인 곳의 인쇄판에 적혀있는 것은?_____________'대청누각의 특징이 있는 장소에 새겨진 내용은 무엇인가요?'\n", + "Processing question 2249/3952 : 기니피그에게 펠렛을 줄 때 제일 좋은 제품은?_____________'기니피그에게 필요한 영양소를 제공하는 최상의 효과를 가진 펠렛은 무엇입니까?'\n", + "Processing question 2250/3952 : 케트 이전 메스 게그러의 굳어진 뇌의 소유자는?_____________'케트 이전 메스 게그러의 굳어진 뇌의 소유자는 누구인가요?'\n", + "Processing question 2251/3952 : 벤 브라이얼리가 쓴 기념시는 어느 도시에 살던 침팬지에 대한 것이었나?_____________벤 브라이얼리가 쓴 기념시는 어느 도시에 살던 침팬지에 대한 것이었나?\n", + "Processing question 2252/3952 : 일본이 평화선 철폐를 요구한 해는?_____________일본이 평화선 철폐를 요구한 연도는 언제인가요?\n", + "Processing question 2253/3952 : 이혼성이 청년 승려들을 비판했던 사건에서 다친 인물은 누구인가요?_____________누가 이혼성이 청년 승려들을 비판했던 사건에서 다친 인물인가요?\n", + "Processing question 2254/3952 : 호세 카레라스가 재단의 도움을 받아 병을 치료한 병원의 소재지는?_____________호세 카레라스가 재단의 지원을 받아 치료를 받은 병원의 위치는 어디입니까?\n", + "Processing question 2255/3952 : 승무원이 이륙을 요청했을 당시 목표지로 설정한 곳은?_____________승무원이 이륙을 요청했을 때 설정한 목표지는 어디였습니까?\n", + "Processing question 2256/3952 : 나중에 쌓은 산성의 길이는?_____________산성의 길이가 쌓인 후에는 얼마나 됩니까?\n", + "Processing question 2257/3952 : 1997년 평화 협정 당시 러시아 측에서는 누가 사인했나?_____________1997년 평화 협정 당시 러시아 측에서는 누가 서명했나?\n", + "Processing question 2258/3952 : 던스터블 수도원에서 발견된 물건은 누구의 것으로 예상되는가?_____________누구의 소유물로 예상되는 물건이 던스터블 수도원에서 발견되었습니까?\n", + "Processing question 2259/3952 : 19세기에 독일에서 수많은 아이들을 죽인 병은 무엇인가?_____________19세기에 독일에서 수많은 아이들을 죽인 병은 무엇이었습니까?\n", + "Processing question 2260/3952 : 인천상륙작전을 위해 사전에 감행된 경인지역 고립작전의 이름은?_____________인천상륙작전을 위해 사전에 감행된 경인지역 고립작전의 다른 이름은 무엇인가요?\n", + "Processing question 2261/3952 : 민다나오 섬에 있던 사단 중 치안유지 임무를 맡았던 곳은?_____________민다나오 섬에 있던 사단 중 경찰 역할을 수행한 곳은 어디였습니까?\n", + "Processing question 2262/3952 : 간부회 인원을 선발하는 공식 기관은?_____________간부회 회원을 선택하는 공식 기관은 무엇입니까?\n", + "Processing question 2263/3952 : 금호약효와 보응문성은 무엇을 확립한 화승인가?_____________화승이 금호약효와 보응문성을 무엇으로 확립했나요?\n", + "Processing question 2264/3952 : 한국 게임소설의 출발점이라고 할 수 있는 작품은 무엇인가?_____________한국 게임소설의 시작점은 무엇입니까?\n", + "Processing question 2265/3952 : 탈북자들이 라오스를 경유하지 못하게 된 이유로 짐작되는 것은?_____________탈북자들이 라오스를 경유하지 못하게 된 이유에 대해 추측할 수 있는 것은 무엇인가요?\n", + "Processing question 2266/3952 : 로동 신문에 재등장한 공장에는 몇 개의 자동 가공 라인이 설치되어있나요?_____________공장에 설치된 자동 가공 라인의 수는 몇 개입니까?\n", + "Processing question 2267/3952 : 고토 신페이가 제도부흥계획을 만든 이유는?_____________고토 신페이가 제도부흥계획을 세운 동기는 무엇인가요?\n", + "Processing question 2268/3952 : 공산당의 김구 정치자금 조달설과 관련한 규탄성명을 실은 언론은?_____________어떤 언론이 김구 정치자금 조달설을 규탄하는 성명을 발표했나요?\n", + "Processing question 2269/3952 : 조지 피켓의 여단을 지휘한 장교의 소식을 핸콕에게 전한 사람은 누구인가?_____________'조지 피켓의 여단을 이끈 장교에 관한 소식을 핸콕에게 알린 사람은 누구였습니까?'\n", + "Processing question 2270/3952 : 강제 수용소에 갔던 성직자들의 소속은?_____________강제 수용소에 갔던 성직자들의 소속은 무엇이었나요?\n", + "Processing question 2271/3952 : 루도비쿠스와 함께 왕위에 오른 사람은?_____________루도비쿠스와 함께 왕위에 오른 사람은 누구인가요?\n", + "Processing question 2272/3952 : 진나라에서 부정부패를 일삼은 사람들은 누구의 권력을 탐냈나요?_____________진나라에서 부정부패를 일삼은 사람들은 누구의 권력을 갈망했나요?\n", + "Processing question 2273/3952 : 알비니가 전장에 나타나지 않은 것은 무엇 때문인가?_____________알비니가 전투에서 나타나지 않은 이유는 무엇인가요?\n", + "Processing question 2274/3952 : 1977년부터 생 니콜라 뒤 샤르돈네 성당에서 주임 신부로 활동한 사람은?_____________뒤 샤르돈네 성당에서 1977년부터 주임 신부로 활동한 사람은 누구인가요?\n", + "Processing question 2275/3952 : 보너스 아미 중에서 1차 세계대전에 참여했던 사람의 수는?_____________1차 세계대전에 참여했던 보너스 아미 구성원의 수는 몇 명이었습니까?\n", + "Processing question 2276/3952 : 고인돌의 또 다른 이름은?_____________'고인돌의 다른 명칭은 무엇인가요?'\n", + "Processing question 2277/3952 : 러시아에 공화정 형태의 임시정부가 수립되게 만든 사건은?_____________러시아에 공화정 형태의 임시정부가 수립되게 만든 사건은 무엇인가요?\n", + "Processing question 2278/3952 : 전조선축구대회에서 이영민과 라이벌 관계로 경기를 뛴 선수는?_____________이영민과 경쟁 관계에 있는 선수는 누구인가요?\n", + "Processing question 2279/3952 : 바빌론의 공중정원이 실존했는지 정확히 알 수 없는 이유는?_____________바빌론의 공중정원의 존재 여부를 명확히 확인할 수 없는 이유는 무엇인가요?\n", + "Processing question 2280/3952 : 파시파에 그룹은 원래 무엇에 의해 쪼개진 소행성이었나요?_____________파시파에 그룹은 초기에 무엇에 의해 붕괴된 소행성이었나요?\n", + "Processing question 2281/3952 : 프레위디스는 누구의 동생인가?_____________프레위디스는 어떤 사람의 형제인가요?\n", + "Processing question 2282/3952 : 암흑류 조짐이 차별화된 시공간에 있다고 말한 곳은 무슨 기관인가요?_____________암흑류 조짐이 차별화된 시공간에 있는 곳은 어떤 기관입니까?\n", + "Processing question 2283/3952 : 1543년도 미조노 종가의 당주가 묻힌 도시는?_____________1543년에 미조노 종가의 당주가 묻힌 도시는 어디였습니까?\n", + "Processing question 2284/3952 : 수탉은 누구에 의해 공개되었나요?_____________수탉은 누구에 의해 밝혀졌나요?\n", + "Processing question 2285/3952 : 알레산드로 미켈레의 전임자는?_____________알레산드로 미켈레 전임자는 누구인가요?\n", + "Processing question 2286/3952 : 치비타베키아와 라티나 역은 무엇으로 이어져있나요?_____________'치비타베키아와 라티나를 연결하는 것은 무엇입니까?'\n", + "Processing question 2287/3952 : 그리스를 배반한 인물이 테르모퓔라이 습격을 돕기 위해 말해준 것은?_____________어떤 인물이 테르모피레의 습격을 돕기 위해 그리스를 배반한 것을 알려줬나요?\n", + "Processing question 2288/3952 : 위그가 라울로부터 물려받은 직위는 무엇인가요?_____________'위그가 라울로부터 상속받은 직책은 무엇입니까?'\n", + "Processing question 2289/3952 : 크레시 전투에서 대승을 거둔 군대는 누가 지휘했나요?_____________크레시 전투에서 승리를 거둔 군대를 지휘한 지도자는 누구였습니까?\n", + "Processing question 2290/3952 : 왕페이의 홍콩 콘서트장에서 더우웨이는 내내 어떤 악기를 연주했나?_____________더우웨이가 왕페이의 홍콩 공연장에서 항상 어떤 악기를 연주했나요?\n", + "Processing question 2291/3952 : 남조선노동당의 초대 부위원장은 누구인가?_____________남조선노동당의 초대 부위원장은 누구입니까?\n", + "Processing question 2292/3952 : 아자르야에게 패배한 아랍인들의 거주지 중 아자르야가 새롭게 성을 쌓은 지역은 어디인가?_____________아자르야에게 패배한 아랍인들의 거주지 중 아자르야가 새롭게 성을 쌓은 지역은 어디에 있나요?\n", + "Processing question 2293/3952 : 후삼국을 통일하는 과정에서 훌륭한 군사적 역량을 보여준 자는?_____________후삼국을 통일하는 과정에서 뛰어난 군사적 능력을 발휘한 인물은 누구인가요?\n", + "Processing question 2294/3952 : 독일 통일 이후 상당수의 트라반트를 대신한 것은?_____________독일 통일 이후 대부분의 트라반트를 대신한 것은 무엇입니까?\n", + "Processing question 2295/3952 : 망자와 함께 저승길을 동행하는 신선은?_____________어둠 속을 인도하는 신은 누구인가요?\n", + "Processing question 2296/3952 : 보통 미사를 할 때 입는 것으로 등 부분에 큰 십자가 무늬가 있는 것은?_____________어떤 종교에서 미사를 드릴 때 착용하는 것으로, 목에 큰 십자가 무늬가 있는 것은 무엇입니까?\n", + "Processing question 2297/3952 : 전쟁을 일으킨 당사자와 관련자들을 처벌하기 위해 거행된 재판이 열린 곳은?_____________전쟁을 일으킨 당사자와 관련자들을 처벌하기 위해 거행된 재판이 열린 장소는 어디인가요?\n", + "Processing question 2298/3952 : 원각사가 있던 곳에 현재 있는 것은?_____________'원각사가 있던 장소에 현재 위치한 것은 무엇인가요?'\n", + "Processing question 2299/3952 : 《내 여동생이 이렇게 귀여울 리가 없어》는 어떤 문화와 관련된 작품인가요?_____________'《내 여동생이 이렇게 귀여울 리가 없어》는 어떤 문화와 관련된 작품입니까?'\n", + "Processing question 2300/3952 : 음실압의 환기시스템에서 틈새는 어디에 위치하고 있는가?_____________환기시스템의 음실압에서 틈새는 어디에 위치하고 있는가?\n", + "Processing question 2301/3952 : 제6장갑사단이 어디로 가는 도중 소련군 증원부대와 마주쳤나요?_____________제6장갑사단이 어디로 향하다가 소련군 증원부대와 대면했습니까?\n", + "Processing question 2302/3952 : 동맹국과 협상국이 전쟁을 벌이게된 계기는?_____________동맹국과 협상국이 전쟁을 일으킨 이유는 무엇인가요?\n", + "Processing question 2303/3952 : 오수전의 직전에 유통되었으며 구리로 이루어진 화폐는?_____________어떤 금속으로 만들어진 돈이 오수전 직전에 유통되었습니까?\n", + "Processing question 2304/3952 : 가족과 함께 뛰는 100m 달리기 시합' 에서 2등을 한 사람은?_____________'가족과 함께 뛰는 100m 경주에서 2위를 차지한 사람은 누구인가요?'\n", + "Processing question 2305/3952 : 오레스티스에 의해 살해당하기 전에 저주를 건 인물은?_____________오레스티스에 의해 살해당하기 전에 저주를 건 인물은 누구였습니까?\n", + "Processing question 2306/3952 : 이규완이 묻힌 도시는?_____________'이규완이 묻힌 도시는 어디인가요?'\n", + "Processing question 2307/3952 : 중국에서 언제부터 법으로 사유재산을 금지했는가?_____________'중국에서 사유재산을 법적으로 금지한 시기는 언제인가요?'\n", + "Processing question 2308/3952 : 브라헤가 관측한 모든 행성들이 타원 궤도를 따라 운동함을 밝혀낸 자는?_____________브라헤가 관측한 모든 행성들이 타원 궤도를 따라 운동함을 밝혀낸 사람은 누구인가요?\n", + "Processing question 2309/3952 : 이방희가 저격한 사람은?_____________'이방희가 목표로 삼은 사람은 누구인가요?'\n", + "Processing question 2310/3952 : 장면을 이 땅에 민주주의를 실현한 인물이라고 평한 사람은?_____________누가 이 땅에서 민주주의를 실현한 인물로 인정받았나요?\n", + "Processing question 2311/3952 : 프리웨어의 이용 가격은?_____________프리웨어를 사용하는 데 비용이 들지 않나요?\n", + "Processing question 2312/3952 : 프랑스 혁명이 일어난 시기는?_____________프랑스 혁명이 발생한 시기는 언제입니까?\n", + "Processing question 2313/3952 : 웨이코 포위전 이전에 경찰들이 긴장했던 사건은 무엇인가요?_____________웨이코 포위전 이전에 경찰들이 긴장했던 사건은 어떤 것이 있었나요?\n", + "Processing question 2314/3952 : 바빌론의 공중정원이 사실 니네베에 있었다고 주장한 사람은?_____________바빌론의 공중정원이 사실 니네베에 있었다고 주장한 사람은 누구였나요?\n", + "Processing question 2315/3952 : 주민통제기능이 제대로 행해지지 않아 일어난 일은?_____________주민통제기능이 충분히 작동하지 않아 발생한 사건은 무엇인가요?\n", + "Processing question 2316/3952 : 1916년 경복궁에 있던 갈항사터의 탑들은 현재 어디에 소장되어 있는가?_____________갈항사터의 탑들이 현재 소장되어 있는 곳은 어디인가요?\n", + "Processing question 2317/3952 : 실종자의 가족들은 배상급을 받는 것과 더불어 무엇을 요청하였나?_____________실종자의 가족들은 보상금을 받는 것 외에 무엇을 요구했습니까?\n", + "Processing question 2318/3952 : 잉글랜드 요리는 어느 나라 요리에 속하나요?_____________어느 국가의 음식으로 분류되는가요?\n", + "Processing question 2319/3952 : 캐나다의 대부분 지역에서 나타나는 기후는?_____________캐나다의 대부분 지역에서 나타나는 날씨는 무엇입니까?\n", + "Processing question 2320/3952 : 예누파의 아이를 살해한 것은 누구인가?_____________누구가 예누파의 자녀를 죽였나요?\n", + "Processing question 2321/3952 : 유라쿠초선 사쿠라다몬역과 연결되는 지요다선의 역 이름은?_____________유라쿠초선 사쿠라다몬역과 연결되는 지요다선의 역 이름은 무엇인가요?\n", + "Processing question 2322/3952 : 카얀데르의 두 번째 총리 임기기간은 며칠이었나?_____________카얀데르의 두 번째 부총리 임기는 몇 일 동안이었나요?\n", + "Processing question 2323/3952 : 코흐보다 4년 앞서 노벨상을 받게 된 인물은?_____________코흐보다 4년 앞서 노벨상을 받게 된 인물은 누구인가요?\n", + "Processing question 2324/3952 : 괴살메는 어떤 동물과 비슷한 모양을 하고 있나요?_____________'괴살메는 어떤 동물과 닮은 모습을 가지고 있나요?'\n", + "Processing question 2325/3952 : 야와타 쪽에서 들린 포성은 실제로는 누가 공격당한 것이었나?_____________누가 공격당했는지 알고 싶나요?\n", + "Processing question 2326/3952 : 9년만에 스위스를 떠난 키르히너가 가고자 한 목적지는?_____________키르히너가 9년 만에 스위스를 떠나려는데, 그가 가고자 하는 목적지는 어디인가요?\n", + "Processing question 2327/3952 : 아가타에게 종교를 배척하지 않으면 벌을 내리겠다고 협박한 인물은?_____________누구가 아가타에게 종교를 받아들이지 않으면 벌을 받을 것이라고 협박했나요?\n", + "Processing question 2328/3952 : 짜장면이 만들어진 도시는?_____________짜장면이 탄생한 도시는 어디인가요?\n", + "Processing question 2329/3952 : 카르프러 리어타와 같은 사람이라고 추정되는 사람은?_____________카르프러 리어타와 같은 사람이라고 의심되는 사람은 누구인가요?\n", + "Processing question 2330/3952 : 모부투를 국방 장관으로 임명한 인물은?_____________누가 모부투를 국방장관으로 지명했습니까?\n", + "Processing question 2331/3952 : 샤를 6세의 정신 건강이 위태로운 상황이 되면서 권력을 되찾은 자들은 누구인가?_____________샤를 6세가 정신적으로 불안정한 상황에 놓이면서 권력을 재획한 사람들은 누구입니까?\n", + "Processing question 2332/3952 : <두 벗(Les Deux amis)>는 어떤 집단으로부터 특히나 인기가 없었는가?_____________'<두 벗(Les Deux amis)>는 어떤 집단으로부터 특별히 인기가 없었나요?'\n", + "Processing question 2333/3952 : 타지마할 건설에 쓰일 재료를 날랐을 것으로 추측되는 동물은?_____________어떤 동물이 타지마할 건설에 사용된 재료를 운반했을까요?\n", + "Processing question 2334/3952 : 고독사가 나타난 초반에는 주로 어떤 연령층이 발견되었나요?_____________고독사가 나타난 초반에는 주로 어떤 연령대에서 발견되었습니까?\n", + "Processing question 2335/3952 : 코르테스가 반항했던 대상은?_____________코르테스가 반항했던 대상은 무엇이었나요?\n", + "Processing question 2336/3952 : MLB 최초로 두명의 형제가 경기를 함꼐 뛴 날은?_____________MLB 최초로 두 형제가 함께 경기를 한 날은 언제였나요?\n", + "Processing question 2337/3952 : 육사에서 무엇의 조건으로 태권도 단증이 필요한가?_____________태권도 단증을 받기 위한 육사의 요건은 무엇인가요?\n", + "Processing question 2338/3952 : 조소문화협회는 어느 나라에 속한 단체인가?_____________'조소문화협회는 어느 국가 소속 단체인가?'\n", + "Processing question 2339/3952 : 브라질이 고무를 운반할 방법을 구상했던 년도는?_____________브라질이 고무를 운반할 방법을 고안했던 년도는 언제였나요?\n", + "Processing question 2340/3952 : 마가렛 매더슨의 조수 역할을 했던 사람의 직업은?_____________마가렛 매더슨의 조수 역할을 했던 사람의 직업은 무엇이었나요?\n", + "Processing question 2341/3952 : 손견을 죽인 사람의 목숨을 빼앗은 인물은?_____________누가 손견을 죽였나요?\n", + "Processing question 2342/3952 : 불상조성기에서 제작기간은 언제라고 하는가?_____________불상조성기에서 제작기간은 언제인가?\n", + "Processing question 2343/3952 : 원내대표 선거에서 정우택에게 패배한 사람은?_____________'원내대표 선거에서 정우택에게 진 사람은?'\n", + "Processing question 2344/3952 : 의정부법원의 판결로 구속 수감된 범죄자는 몇년도에 체포되었나?_____________의정부법원의 결정에 따라 구금된 범인은 어느 해에 체포되었습니까?\n", + "Processing question 2345/3952 : 성서를 민중에 널리 알리기 위해 노력한 사람은?_____________성서를 대중에 보급시키기 위해 노력한 사람은 누구인가요?\n", + "Processing question 2346/3952 : 사람들은 명륜당에서 무엇을 하는가?_____________명륜당에서 사람들은 무슨 활동을 하는가?\n", + "Processing question 2347/3952 : 유메하라 노조미에게 편지를 전한 사람은 어디에서 활동하고 있나?_____________유메하라 노조미에게 편지를 보낸 사람은 어디에서 일하고 있나요?\n", + "Processing question 2348/3952 : 튀코 브라헤가 연구와 교육적 역할을 충실히 한 연구회를 만든 곳은?_____________튀코 브라헤가 연구와 교육적 역할을 충실히 한 연구회를 만든 곳은 어디인가요?\n", + "Processing question 2349/3952 : 중앙 정부로부터 임무를 받은 총독의 명칭은?_____________총독은 중앙 정부로부터 임무를 받은 지방 행정 관리자의 다른 이름은 무엇입니까?\n", + "Processing question 2350/3952 : 교황권으로부터 황제권의 자치를 논한 사람은?_____________누가 교황권과 황제권의 자치를 논했습니까?\n", + "Processing question 2351/3952 : 나들목 운영비에 대해 지방 자치법 위반을 지적한 것은 누구인가?_____________'나들목 운영비에 대해 지방 자치법 위반을 지적한 사람은 누구인가?'\n", + "Processing question 2352/3952 : 솔트레이크시티 국제공항을 중추 공항으로 사용하고 있는 항공사는?_____________솔트레이크시티 국제공항을 주요 공항으로 이용하고 있는 항공사는 무엇입니까?\n", + "Processing question 2353/3952 : 1949년에 결성된 비밀조직의 표면상 리더는 누구인가?_____________1949년에 창설된 비밀 단체의 공개적인 지도자는 누구입니까?\n", + "Processing question 2354/3952 : 마틸다와 결혼한 인물은?_____________누가 마틸다와 결혼했나요?\n", + "Processing question 2355/3952 : 과육이 오랜지색인 멜론은?_____________멜론은 과육이 오렌지색인가요?\n", + "Processing question 2356/3952 : 스위스에 개신교를 전파하기 시작한 사람은?_____________스위스에서 개신교를 전파하기 시작한 사람은 누구였나요?\n", + "Processing question 2357/3952 : 2015년 기준 1kW당 탄소배출량이 가장 낮은 재생 에너지원은?_____________2015년에 1킬로와트당 가장 적은 탄소배출량을 가진 재생 에너지원은 무엇입니까?\n", + "Processing question 2358/3952 : 페우케스타스가 기원전 323년, 321년에 모두 태수로 유임된 지역은?_____________페우케스타스가 기원전 323년, 321년에 모두 태수로 임명된 지역은 어디인가요?\n", + "Processing question 2359/3952 : <노바라호>가 있던 함대의 지휘자는?_____________'<노바라호>가 있던 함대의 사령관은 누구였습니까?'\n", + "Processing question 2360/3952 : 송문주를 위해 사당을 만들었다는 내용은 누가 작성하였는가?_____________사당을 건설한 사람은 누구입니까?\n", + "Processing question 2361/3952 : 다수의 왕국이 세워지고 무너지는 과정을 거치면서 스코틀랜드에 전하게 된 문화양식은?_____________스코틀랜드에 전하게 된 문화양식은 무엇인가요?\n", + "Processing question 2362/3952 : 거대마젤란망원경의 관측 시작 가능 연도는?_____________거대마젤란망원경이 관측을 시작한 연도는 언제인가요?\n", + "Processing question 2363/3952 : 여야 중 신문과 방송의 교차소유를 반대한 쪽은?_____________신문과 방송의 교차소유를 반대한 쪽은 누구인가요?\n", + "Processing question 2364/3952 : 원주민들이 스페인 사람을 꺼리게 만든 사람은?_____________스페인 사람을 원주민들이 싫어하는 사람은 누구인가요?\n", + "Processing question 2365/3952 : 활나라를 망하게 한 진나라의 장수는?_____________'활나라를 파멸시킨 진나라의 지휘관은 누구인가요?'\n", + "Processing question 2366/3952 : 아인슈타인의 격렬한 비판 상대가 임종한 때는?_____________아인슈타인의 격렬한 비판 상대가 사망한 때는?\n", + "Processing question 2367/3952 : 브라헤는 태양이 어떤 행성을 중점으로 삼아 공전한다고 생각했는가?_____________브라헤는 태양이 어떤 행성을 중심으로 공전한다고 믿었나요?\n", + "Processing question 2368/3952 : 대기이론은 생산활동의 3요소의 어떤 시간을 최소화시키는가?_____________대기이론은 제조 활동의 세 가지 구성 요소 중 어떤 것을 최소화하려고 하는가?\n", + "Processing question 2369/3952 : 광운대 창립기의 시작 연도는?_____________'광운대 설립 초기의 시작 연도는 언제인가요?'\n", + "Processing question 2370/3952 : 교황 선출에 황제의 동의가 필요하게 된 연도는?_____________교황 선출에 황제의 승인이 필요한 연도는 언제인가요?\n", + "Processing question 2371/3952 : 크레딧 밸리 철도의 소유주가 바뀐 것은 언제인가?_____________'크레딧 밸리 철도의 소유자 변경은 언제 발생했습니까?'\n", + "Processing question 2372/3952 : 연희의 직업은?_____________연희는 무슨 일을 하나요?\n", + "Processing question 2373/3952 : 강원도의 영서 지역과 영동 지역은 무엇을 기준으로 나뉘나요?_____________강원도의 서부 지역과 동부 지역은 어떤 기준으로 분류되나요?\n", + "Processing question 2374/3952 : 손이 배에 붙어서 표현되어 있는 이유는 이것이 없었기 때문인데, 이것은 무엇인가?_____________손이 배에 붙어서 표현되어 있는 이유는 이것이 없었기 때문인데, 이것은 무엇인가?\n", + "Processing question 2375/3952 : 현대 도시 계획안은 도시계획의 어떠한 특성을 고려하기 시작하면서 탄생했는가?_____________도시 계획안은 어떤 특성을 고려하여 만들어지게 되었나요?\n", + "Processing question 2376/3952 : 디즈니랜드는 사적인 이벤트를 위해서 어디에 바를 여는가?_____________디즈니랜드는 개인 행사를 위해 어디에 문을 열까요?\n", + "Processing question 2377/3952 : 진입장벽에도 불구하고 글로벌화 된 게임은?_____________어떤 게임이 세계적으로 널리 퍼져 있나요?\n", + "Processing question 2378/3952 : 신민당을 흡수한 당을 만든 사람은?_____________'신민당을 흡수한 정당을 창설한 사람은 누구인가요?'\n", + "Processing question 2379/3952 : 스튜리지를 대신하여 주연 역할을 하게 된 배우는?_____________주연 배우로 대체된 배우는 누구입니까?\n", + "Processing question 2380/3952 : 곽상훈이 자신의 생각을 정리하여 얘기한 것을 무시해버렸던 집단은?_____________곽상훈이 자신의 생각을 정리하여 얘기한 것을 무시해버렸던 집단은 무엇이었나요?\n", + "Processing question 2381/3952 : 귀상어의 동절기 서식지는?_____________귀상어의 겨울 서식지는 어디에 있나요?\n", + "Processing question 2382/3952 : 샤 자한의 관이 타지마할 전체에서 유일하게 대칭 구조를 띠지 않는다고 추측되는 이유는?_____________샤 자한의 관이 타지마할 전체에서 유일하게 대칭 구조를 띠지 않는 것으로 추측되는 이유는 무엇인가요?\n", + "Processing question 2383/3952 : 서민호 전 의원을 정당의 공식 대표자로 내세운 정당은?_____________'서민호 전 의원을 공식적인 대표로 지명한 정당은 무엇인가요?'\n", + "Processing question 2384/3952 : 전산학 발전 초기단계에서 아끼고자 했던 자원은?_____________전산학 발전 초기에 아끼려고 했던 자원은 무엇이었습니까?\n", + "Processing question 2385/3952 : 오노미치 역 동쪽의 지리적 특성으로 붙여진 이름은?_____________오노미치 역 동쪽의 지리적 특성으로 붙여진 이름은 무엇인가요?\n", + "Processing question 2386/3952 : 스레드 플로트 게시판에서 스레드의 위치가 달라지는것 처럼 보이게 하는 것은?_____________스레드 플로트 게시판에서 스레드의 위치가 변하는 것을 시각적으로 나타내는 방법은 무엇인가요?\n", + "Processing question 2387/3952 : 함경도 무산에 거주민의 탈북을 단속하는 집단은 무엇인가?_____________'함경도 무산에 거주하는 이탈주민을 검거하는 단체는 어디인가?'\n", + "Processing question 2388/3952 : 미카일 3세는 언제 불가리아를 공격했는가?_____________미카일 3세가 언제 불가리아를 침공했습니까?\n", + "Processing question 2389/3952 : 본선에서 짐멜스톱을 이긴 사람의 출신국가는?_____________짐멜스톱을 이긴 사람의 국적은 어디입니까?\n", + "Processing question 2390/3952 : 소련 중앙위원회 서기국에서 일했던 사람들은 누구였나?_____________소련 중앙위원회 서기국에서 근무한 인물들은 누구였나요?\n", + "Processing question 2391/3952 : 윤치호가 조선이 문명국의 식민지가 되는 것이 낫다고 한 날은?_____________윤치호가 조선이 문명국의 식민지가 되는 것이 더 나은 것으로 생각한 날은 언제였습니까?\n", + "Processing question 2392/3952 : 장면에게 인사권 압력을 행사한 사람은?_____________누가 장면에게 인사권을 강요했나요?\n", + "Processing question 2393/3952 : 소전제와 대전제에서 나타나는 제3의 개념을 무엇이라고 부르는가?_____________'소전제와 대전제에서 나타나는 제3의 개념을 무엇으로 명명하나요?'\n", + "Processing question 2394/3952 : 히틀러는 예를 들어 누구를 살 가치가 없는 생명이라고 했나?_____________누구를 살 가치가 없는 생명이라고 했나?\n", + "Processing question 2395/3952 : 제1기병사단이 처음으로 전투를 했던 장소는 어디인가?_____________제1기병사단이 처음으로 전투를 벌인 장소는 어디였습니까?\n", + "Processing question 2396/3952 : 후안 왕자가 죽은 해는?_____________'후안 왕자가 사망한 연도는?'\n", + "Processing question 2397/3952 : 윤치호가 감탄한 도로는 어떤 나라의 돈으로 만든 것인가요?_____________윤치호가 놀라워했던 도로는 어느 국가의 통화로 만들어졌습니까?\n", + "Processing question 2398/3952 : 마현 다산마을에서 출입을 통제하고있는곳은?_____________마현 다산마을에서 출입을 통제하고 있는 장소는 어디인가요?\n", + "Processing question 2399/3952 : 니콜라스 2세가 왕위에서 물러나게 된 원인은?_____________왕위에서 물러나게 된 원인은 무엇인가요?\n", + "Processing question 2400/3952 : 간토 대지진으로 인한 사상자 수가 10만 5천명으로 수정된 연도는?_____________간토 대지진으로 인한 희생자 수가 10만 5천 명으로 수정된 연도는 언제였습니까?\n", + "Processing question 2401/3952 : 이시다 겐타가 부상으로 이탈하기 전 마지막으로 치룬 경기는?_____________이시다 겐타가 부상으로 이탈하기 전 마지막으로 치룬 경기는 무엇이었나요?\n", + "Processing question 2402/3952 : 우에르타가 통치권을 가지고 있었을 때, 그를 옹호한 국가는?_____________우에르타가 통치권을 가지고 있었을 때, 그를 지지한 국가는 어디였습니까?\n", + "Processing question 2403/3952 : 고려시대에 거란이 쳐들어왔을 때 경상북도에서 간직한 물건은?_____________\"고려시대에 거란이 침입했을 때 경상북도에서 보호한 물건은?\"\n", + "Processing question 2404/3952 : 사민당이 적녹연정을 이루기 위해선 어느 당과 연정을 구성해야 하는가?_____________사민당이 적녹연정을 이루기 위해선 어느 정당과 연정을 구성해야 하는가?\n", + "Processing question 2405/3952 : 강희제 배역을 맡아 이를 잘 표현한 중국 배우의 이름은?_____________강희제 역을 맡은 중국 배우의 이름은 무엇인가요?\n", + "Processing question 2406/3952 : 꿈속에서 새뮤얼 러브맨은 누구에게 편지를 보냈는가?_____________새뮤얼 러브맨이 누구에게 편지를 썼는지 꿈에서 알아내려고 하나요?\n", + "Processing question 2407/3952 : 이명철이 사건을 저지른 날 하차한 지하철 역은?_____________이명철이 사건을 저지른 날 하차한 지하철 역은 어디였습니까?\n", + "Processing question 2408/3952 : 이호제가 통솔했던 부대가 거의 궤멸된 시기는?_____________이호제가 지휘했던 군대가 대파된 시기는 언제였나요?\n", + "Processing question 2409/3952 : 단양 우씨 마을의 유래에 관한 사연이 있는 나무는?_____________'단양 우씨 마을의 유래에 관한 사연이 있는 나무는 무엇인가요?'\n", + "Processing question 2410/3952 : 1923년에 일어난 지진은 무엇으로 인해 발생했었나요?_____________지난 1923년에 발생한 지진은 어떤 이유로 인해 일어났나요?\n", + "Processing question 2411/3952 : 김계환이 마신 쌍화탕에는 무엇이 들어있었나요?_____________김계환이 마신 쌍화탕에는 어떤 성분이 포함되어 있었습니까?\n", + "Processing question 2412/3952 : 명예 아리아인 호칭을 주는 임무를 맡은 나치의 기관은?_____________나치의 기관 중 명예 아리아인 호칭을 주는 임무를 맡은 것은 무엇입니까?\n", + "Processing question 2413/3952 : 교황 포르모소에게 기독교식 재매장이 허락된 것은 몇 년인가?_____________교황 포르모소에게 기독교식 재매장이 승인된 연도는 몇 년인가요?\n", + "Processing question 2414/3952 : 특정 관측값으로 천체의 위치를 계측할 수 있는 망원경은?_____________어떤 장비를 사용하여 천체의 위치를 관측할 수 있습니까?\n", + "Processing question 2415/3952 : 김동한 사망 2주기를 기리기 위한 좌담회에서 손지환은 어떤 역할을 했나요?_____________손지환은 김동한 사망 2주기를 기념하기 위한 좌담회에서 어떤 역할을 수행했습니까?\n", + "Processing question 2416/3952 : 미드웨이 해전에서 일본 항공모함은 몇 대 소실되었나?_____________미드웨이 해전에서 몇 척의 일본 항공모함이 파괴되었나요?\n", + "Processing question 2417/3952 : 길리포스 장군에게 도움을 구한 곳은?_____________길리포스 장군이 지원을 받은 곳은 어디인가요?\n", + "Processing question 2418/3952 : 박상희는 누구에 의해 생을 마감했나요?_____________박상희는 누구에 의해 사망했나요?\n", + "Processing question 2419/3952 : 강병철이 한화 감독으로 임명 받은 해는?_____________강병철이 한화 감독으로 임명 받은 해는 언제인가요?\n", + "Processing question 2420/3952 : 조선 초기 양식을 엿볼 수 있으며 나무로 만들어진 불상의 모델은?_____________'조선 초기 양식을 엿볼 수 있는 나무로 만들어진 불상의 모델은 무엇인가요?'\n", + "Processing question 2421/3952 : 범인이 김태완군에게 부은 황산은 어디에 담겨져 있었나요?_____________황산이 어디에 보관되어 있었습니까?\n", + "Processing question 2422/3952 : 효명세자의 예찰은 어디에 보관되어 있었나요?_____________효명세자의 예찰이 어디에 저장되어 있었습니까?\n", + "Processing question 2423/3952 : 1874년 귀국 이전 쓰보이가 머물던 국가는?_____________1874년 귀국 이전 쓰보이가 머물던 국가는 어디였습니까?\n", + "Processing question 2424/3952 : 2014년 경리가 케빈, 소진과 함께 결성한 팀 이름은?_____________2014년 경리가 케빈, 소진과 함께 결성한 팀 이름은 무엇이었나요?\n", + "Processing question 2425/3952 : 9번 교향곡과 마찬가지로 특정 표제가 없는 본 윌리엄스의 작품은?_____________본 윌리엄스의 9번 교향곡과 유사한 작품은 무엇일까요?\n", + "Processing question 2426/3952 : 가족이 모두 뇌룡에게 죽임을 당할 당시 락인의 나이는?_____________락인의 가족이 모두 뇌룡에게 죽임을 당할 당시 락인은 몇 살이었나요?\n", + "Processing question 2427/3952 : 신드바드의 당부로 검술을 배우게 된 인물은?_____________신드바드의 당부로 검술을 배우게 된 인물은 누구인가요?\n", + "Processing question 2428/3952 : 벨기에의 차량 통행 방향은?_____________벨기에에서 차량이 이동하는 방향은 무엇입니까?\n", + "Processing question 2429/3952 : 군단병들이 전리품을 원하게 만든 요소는?_____________군단병들이 전리품을 갈망하게 만든 요인은 무엇인가요?\n", + "Processing question 2430/3952 : 월란정사가 있는 곳에서 생겨난 학문은?_____________어디서 월란정사가 있는 곳에서 생겨난 학문은 발전했나요?\n", + "Processing question 2431/3952 : 대통령의 간접 선거 기능을 맡았던 곳이 만들어진 해는?_____________대통령 선거대행 기관이 설립된 연도는 언제인가요?\n", + "Processing question 2432/3952 : 호조로 명칭이 확정된 때의 임금은?_____________'호조로 명명되었을 때의 임금은 얼마인가요?'\n", + "Processing question 2433/3952 : 혜산시의 전용 역은 누구를 위한 것인가?_____________혜산시의 전용 역은 누구를 위해 설립되었습니까?\n", + "Processing question 2434/3952 : 클리리타임네스트라는 어느 나라의 공주였는가?_____________\"어느 국가의 공주로 알려진 클리오페트라는 누구인가요?\"\n", + "Processing question 2435/3952 : 스미토모 오사카 시멘트 전용선의 운행이 중단된 시기는?_____________스미토모 오사카 시멘트 전용선이 중단된 시기는 언제였나요?\n", + "Processing question 2436/3952 : 베로브킨 장군의 뒤를 이어 명령권을 가진 사람은?_____________베로브킨 장군을 대신하여 명령을 맡은 사람은 누구인가요?\n", + "Processing question 2437/3952 : 오래플린이 부스와 대통령 납치에 대해 얘기하기 위해 방문한 식당은 어디에 위치하는가?_____________오래플린이 부스와 대통령 납치에 대해 토론하기 위해 방문한 레스토랑은 어디에 위치하고 있습니까?\n", + "Processing question 2438/3952 : 바둑tv를 운용하면서 바둑이 스포츠로 인정받게 만들기 위해 노력했던 회사는 어디인가?_____________바둑을 스포츠로 인정받게 만들기 위해 노력한 회사는 어디인가?\n", + "Processing question 2439/3952 : 로타르 2세와 발트라다의 결혼은 언제 무효화되었는가?_____________로타르 2세와 발트라다의 결혼이 언제 무효화되었습니까?\n", + "Processing question 2440/3952 : 다섯 명의 선우가 난립하게 된 해는 몇 년인가?_____________다섯 명의 선우가 난립하게 된 해는 몇 년인가?\n", + "Processing question 2441/3952 : husroum (حصروم)을 페르시아어로 번역하면?_____________'حصروم'을 페르시아어로 어떻게 번역합니까?\n", + "Processing question 2442/3952 : 긴테쓰 구단은 퍼시픽 리그에서 몇 번 우승했나?_____________긴테쓰 구단이 퍼시픽 리그에서 몇 차례 우승했습니까?\n", + "Processing question 2443/3952 : 윤치호가 조선에서 탄생한 위대한 인물이라 칭하며 극찬을 보낸 인물은?_____________'윤치호가 조선에서 출생한 위대한 인물로 칭송하며 극찬을 보낸 인물은 누구인가요?'\n", + "Processing question 2444/3952 : 클로스긴팔원숭이는 어디에서만 생활하고 있나요?_____________클로스긴팔원숭이는 어느 지역에서만 서식하고 있나요?\n", + "Processing question 2445/3952 : 닌자도의 크기와 모양이 사무라이가 사용하는 도검과 다른 이유는?_____________닌자도의 크기와 형태가 사무라이의 칼과 다른 이유는 무엇인가요?\n", + "Processing question 2446/3952 : 테드 크루즈 의원과 다이앤 파인스타 의원 사이의 논쟁은 무엇에 관한 것이었나?_____________테드 크루즈 의원과 다이앤 파인스타 의원 간의 논쟁은 무엇을 주된 이유로 하고 있었나요?\n", + "Processing question 2447/3952 : 솔 밤바의 수비형 미드필더로서의 기량을 칭찬한 사람은?_____________솔 밤바의 수비형 미드필더로서의 능력을 칭찬한 사람은 누구인가요?\n", + "Processing question 2448/3952 : 경성제국대학원의 교수와 교직원의 국적은 주로 무엇이었는가?_____________경성제국대학원의 교수와 교직원의 출신 국가는 대체로 어디였나요?\n", + "Processing question 2449/3952 : 뇌전증 발작은 어떤 세포의 기능적 문제로 발생하는 증상인가요?_____________뇌전증 발작은 어떤 세포의 기능적 문제로 인해 발생하는가요?\n", + "Processing question 2450/3952 : 하탸야 중위가 니도로 섬 동부에 상륙할 당시 이용한 보트는 어느 부대 소속인가?_____________중위가 돈 브라운이 니도로 섬 동부에 상륙할 때 사용한 보트는 어떤 부대에 속해 있었나요?\n", + "Processing question 2451/3952 : 합성세제의 폐액 때문에 발생하는 문제로 미생물을 죽게 만드는 요인은?_____________합성세제의 폐액 때문에 발생하는 문제로 미생물을 죽게 만드는 요인이 무엇인가요?\n", + "Processing question 2452/3952 : 의식의 전단계로 무의식을 빼내어 의식으로 바꾸는 것은?_____________무의식을 의식으로 바꾸는 과정은 무엇인가요?\n", + "Processing question 2453/3952 : 러시아의 조치를 제재하려한 세력은?_____________러시아의 조치를 제재하려한 세력은 누구인가요?\n", + "Processing question 2454/3952 : 남종삼이 사망할 당시 유일하게 살아남은 인물은?_____________남종삼이 사망할 당시 유일하게 살아남은 사람은 누구였나요?\n", + "Processing question 2455/3952 : 아케메네스 제국의 금 가공술을 전통으로 이어받은 나라는?_____________어느 국가가 아케메네스 제국의 금 가공술을 전통으로 이어받았습니까?\n", + "Processing question 2456/3952 : 가쓰라 내각에 해군 대신으로 임용된 사람은?_____________\"가쓰라 내각에 해군 대신으로 임명된 사람은 누구인가요?\"\n", + "Processing question 2457/3952 : 리세균이 두 번째로 옥살이를 한 곳은 어디인가?_____________리세균이 두 번째로 옥살이를 한 장소는 어디인가요?\n", + "Processing question 2458/3952 : 할릴자드가 이라크 헌법 비준 허용 협상을 도운 연도는?_____________할릴자드가 이라크 헌법 비준 허용 협상을 도운 연도는 언제였습니까?\n", + "Processing question 2459/3952 : 박지성이 독일과 멕시코의 경기에 대해 설명했던 방송국은?_____________박지성이 독일과 멕시코의 경기에 대해 설명한 방송국은 어디였습니까?\n", + "Processing question 2460/3952 : 신노스케가 속한 조직은?_____________신노스케가 속한 그룹은 무엇입니까?\n", + "Processing question 2461/3952 : 권진이가 자신의 문제를 깨달은 후 신을 위해 무엇이 되기를 결정했는가?_____________권진이가 자신의 문제를 깨달은 후 신을 위해 어떤 역할을 수행하기로 결정했나요?\n", + "Processing question 2462/3952 : 김집이 부여에 부임한 이후 가장 먼저 지원한 기관은?_____________김집이 부여에 부임한 이후 가장 먼저 신청한 단체는 무엇입니까?\n", + "Processing question 2463/3952 : 하정완이 본격적으로 영화설교를 시작한 해는 언제인가요?_____________하정완이 본격적으로 영화 연구를 시작한 해는 언제인가요?\n", + "Processing question 2464/3952 : 대한기계학회에서 '피로의 통계학적 분석'이라는 제목으로 춘계학술강연이 열렸던 해는?_____________'대한기계학회에서 '피로의 통계학적 분석' 주제로 열린 춘계학술강연은 어느 해에 있었나요?'\n", + "Processing question 2465/3952 : 지구를 모두 돌 수 있는 단 하나의 해류는?_____________어떤 해류가 지구를 한 바퀴 돌 수 있는 유일한 해류는 무엇인가요?\n", + "Processing question 2466/3952 : 라쉬를 반여성주의자라고 칭했던 인물은?_____________라쉬를 반여성주의자라고 불렀던 사람은 누구인가요?\n", + "Processing question 2467/3952 : 국내특급우편 취급지역 외 지역으로 우편물을 보낼때 해당 우체국에서 전달할 사람을 정해서 배달하는 제도는?_____________국내특급우편 취급지역 외 지역으로 우편물을 보낼 때 해당 우체국에서 전달할 사람을 정해서 배달하는 제도는 무엇인가요?\n", + "Processing question 2468/3952 : 테크모델철도클럽에서 두 번째 그룹이 한 연구는 무엇에 관한 것이었나?_____________두 번째 그룹이 한 연구는 무엇에 대해 진행되었나요?\n", + "Processing question 2469/3952 : 금적보 공격을 성공시키고 마화룡을 죽인 사람은?_____________'금적보를 침공하고 마화룡을 처치한 사람은 누구인가?'\n", + "Processing question 2470/3952 : 안티오코스의 영토 장악 야망이 가로막힌 계기가 된 사건은?_____________안티오코스의 영토 장악 야망이 방해받은 사건은 무엇인가요?\n", + "Processing question 2471/3952 : 푸들이나 비숑 프리제처럼 개 알레르기 반응을 거의 일으키지 않는 동물 부류는 무엇인가?_____________어떤 동물은 푸들이나 비숑 프리제처와 같이 개 알레르기 반응을 거의 일으키지 않는가?\n", + "Processing question 2472/3952 : 프리타코사우루스의 위석은 모래주머니에서 발견되기도 하지만 가끔 어디에서 발견되나?_____________프리타코사우루스의 위석은 모래주머니에서 발견되기도 하지만 때때로 어디에서 발견되나?\n", + "Processing question 2473/3952 : 이길여가 환자들을 놀라지 않게 하기 위해 가슴에 품고 다녔던 물건은?_____________환자들을 놀라지 않게 하기 위해 가슴에 품고 다녔던 물건은 무엇이었나요?\n", + "Processing question 2474/3952 : 고롯케(코롯케)는 원래 어느 나라 음식인가?_____________고롯케는 원래 어느 국가의 음식입니까?\n", + "Processing question 2475/3952 : 케냐타가 3번째 혼인을 치른 것은 몇년도인가?_____________케냐타가 세 번째 결혼을 한 해는 언제인가요?\n", + "Processing question 2476/3952 : 큰긴코박쥐가 가루받이를 돕는 식물은?_____________어떤 식물이 큰긴코박쥐에게 가루받이를 제공하나요?\n", + "Processing question 2477/3952 : 리우네자네이루에서 개최된 세계선수권대회의 준결승전에서 크르팔레크를 상대로 승리를 거둔 선수는?_____________리우네자네이루에서 개최된 세계선수권대회의 준결승전에서 크르팔레크를 상대로 이긴 선수는 누구인가요?\n", + "Processing question 2478/3952 : 부상을 입어 힌스키에 의해 대체 된 선수는?_____________어떤 선수가 부상을 입어 힌스키에 의해 대체되었습니까?\n", + "Processing question 2479/3952 : 만주보민회의 주활동지는?_____________만주보민회의의 주요 활동 장소는 어디인가요?\n", + "Processing question 2480/3952 : 듀이가 첫 번째로 뉴욕 주지사가 된 해는?_____________듀이가 뉴욕 주지사로 선출된 연도는?\n", + "Processing question 2481/3952 : 보로메오에게 특무성 장관직을 맡긴 인물이 교황으로 선출된 년도는?_____________보로메오에게 특무성 장관직을 맡긴 인물이 교황으로 선출된 년도는 언제였습니까?\n", + "Processing question 2482/3952 : 『금쇄동기』에서 어떤 유형의 문학 작품을 읽을 수 있나?_____________\"『금지동기』에서 어떤 종류의 문학 작품을 읽을 수 있나요?\"\n", + "Processing question 2483/3952 : 비트겐슈타인의 누나의 피아노 선생님은 누구인가?_____________비트겐슈타인의 누나의 피아노 교사는 누구입니까?\n", + "Processing question 2484/3952 : 신토마스 주의가 한계점을 말한 대상은?_____________신토마스 주의가 한계를 언급한 대상은 무엇인가요?\n", + "Processing question 2485/3952 : 러셀은 1889년에 파리 박람회를 방문하여 어느 곳을 다녀왔는가?_____________러셀은 1889년에 파리 박람회를 방문하여 어디를 방문했나요?\n", + "Processing question 2486/3952 : 오늘날 역사적인 장소로 알려진 곳은?_____________어떤 장소가 현재 역사적인 명소로 유명한가요?\n", + "Processing question 2487/3952 : 언필드 문화에서 낫은 무엇과 비슷하게 생겼나요?_____________'언필드 문화에서 낫은 무엇과 유사한 외형을 가지고 있나요?'\n", + "Processing question 2488/3952 : 음낭의 또 다른 명칭은?_____________음낭의 다른 명칭은 무엇입니까?\n", + "Processing question 2489/3952 : 삿포로 올림픽이 열렸을 때 어디를 주요 회장으로 사용했나?_____________삿포로 올림픽이 열렸을 때 어디가 주요 회장으로 사용되었나요?\n", + "Processing question 2490/3952 : 줄리안 어산지가 IS의 배후 인물이라고 주장한 사람은?_____________줄리안 어산지가 IS의 배후 인물이라고 주장한 사람은 누구인가요?\n", + "Processing question 2491/3952 : 대통령 임기가 끝나고 배우가 되려는 사람은?_____________어떤 사람이 대통령의 임기가 끝나면 배우가 되려고 하는가요?\n", + "Processing question 2492/3952 : 조작설의 근거가 되는 물건은?_____________'조작설의 근거가 되는 물건은 무엇인가요?'\n", + "Processing question 2493/3952 : 암컷 애애미 무늬의 색은?_____________암컷 애애미 무늬의 색깔은 무엇인가요?\n", + "Processing question 2494/3952 : 외부에서 성곽으로 향하는 시계를 차단하고 있는 것은?_____________성곽으로 가는 길을 막고 있는 것은 무엇인가요?\n", + "Processing question 2495/3952 : 차티스가르 지역의 우익 민병대의 행동은 헌법에 위반되는 행위라고 인도 대법원이 선고한 날은?_____________인도 대법원이 선고한 날에 대해서 알고 계신가요?\n", + "Processing question 2496/3952 : 일본에서 검찰심사원으로 활동한 경력이 있는 인원 수는?_____________'일본에서 검찰심사원으로 근무한 경력을 가진 사람들은 몇 명인가요?'\n", + "Processing question 2497/3952 : 팔랑크스는 누구의 동방 원정에서도 효과적으로 쓰였나요?_____________팔랑크스는 어떤 유명 인물의 동방 원정에서도 효과적으로 사용되었나요?\n", + "Processing question 2498/3952 : 1956년에 워너가 사기친 인물의 이름은?_____________1956년에 워너가 사기친 인물의 이름은 무엇인가요?\n", + "Processing question 2499/3952 : 가혹한 노동에 대해 국제적으로 규제하고 있는 단체는?_____________어떤 국제기구가 가혹한 노동을 규제하고 있나요?\n", + "Processing question 2500/3952 : 행정을 13도로 지정하고 황제의 권위를 높인 인물은?_____________누가 행정을 13도로 지정하고 황제의 권위를 높였나요?\n", + "Processing question 2501/3952 : 피터와 로렌바움이 하이든의 머리를 대신해 귀족에게 준 것은?_____________하이든의 머리를 대신해 귀족에게 준 것은 무엇입니까?\n", + "Processing question 2502/3952 : 셰이크볼의 속도는 어느 정도 인가?_____________셰이크볼이 어느 속도로 움직이나요?\n", + "Processing question 2503/3952 : 질량이 비슷한 2개의 별이 쌍성계를 이루고 있을 때, 이 쌍성계의 질량 중심은 어디인가?_____________두 별의 질량이 거의 같은 경우, 쌍성계의 질량 중심은 어디에 위치하나요?\n", + "Processing question 2504/3952 : 겨울에 아시아 대륙 내부에서 나타나는 고기압부의 중심이 되는 지역은 어디인가?_____________아시아 대륙 내부에서 겨울에 나타나는 고기압부의 중심이 되는 지역은 어디에 있습니까?\n", + "Processing question 2505/3952 : 영국은 어떤 이유로 공해에서 바다로 유입되는 모든 선박을 막았나?_____________왜 영국은 해양 환경을 보호하기 위해 바다로 유입되는 모든 선박을 막았나요?\n", + "Processing question 2506/3952 : 모투부가 1959년에 다시 방문한 곳은?_____________모투부가 1959년에 재방문한 장소는 어디였습니까?\n", + "Processing question 2507/3952 : 당나라는 고구려의 신성을 언제 점령했는가?_____________당나라가 고구려의 신성을 언제 정복했습니까?\n", + "Processing question 2508/3952 : 김집이 몸이 아파서 내려놓은 관직은?_____________김집이 몸이 아파서 내려놓은 관직은 무엇인가요?\n", + "Processing question 2509/3952 : 봉헌 생활회를 감독하고 관리하는 기관은?_____________봉헌 생활회를 감독하고 관리하는 기관은 무엇입니까?\n", + "Processing question 2510/3952 : 아제르 상귀니스를 아람어로 하면?_____________아제르 상귀니스를 아람어로 하면 무엇인가요?\n", + "Processing question 2511/3952 : 기원전 227년에 군사혁명을 일으켜 에포로스를 살해한 인물은?_____________기원전 227년에 군사혁명을 일으켜 에포로스를 살해한 인물은 누구였습니까?\n", + "Processing question 2512/3952 : 호출에 의해 동적인 상태로 변환되는 소프트웨어 구성요소는?_____________소프트웨어 구성요소 중에서 호출에 의해 동적인 상태로 변환되는 것은 무엇인가요?\n", + "Processing question 2513/3952 : 합당한 이치에 따라 비현실적인 개체가 등장하는 것은 무엇인가?_____________비합리적인 근거에 따라 비현실적인 개체가 나타나는 것은 무엇인가?\n", + "Processing question 2514/3952 : 스코틀랜드 계몽주의자들은 개인과 사회가 함께 발전할 수 있는 것은 어디에서 덕을 기를 때라고 믿었나?_____________스코틀랜드 계몽주의자들은 어디에서 덕을 기를 때 개인과 사회가 함께 발전할 수 있는 것으로 믿었나?\n", + "Processing question 2515/3952 : 요나미네에게는 야쿠자의 어떤 행동이 트라우마로 남았는가?_____________요나미네에게는 야쿠자의 어떤 행동이 심리적 상처를 주었나요?\n", + "Processing question 2516/3952 : 법치국가에서 국민의 처벌 근거를 증명해야하는 기관은?_____________어떤 기관이 법치국가에서 국민의 처벌 근거를 입증해야 하는가?\n", + "Processing question 2517/3952 : 8명 이상의 노동자를 고용하여 영리활동을 하는 경제조직은 언제 이후부터 출현하였나?_____________언제부터 8명 이상의 노동자를 고용하여 영리활동을 하는 경제조직이 나타나기 시작했나요?\n", + "Processing question 2518/3952 : 잔류 러시아인이 러시아 빵을 판매한 지역은?_____________러시아인이 러시아 빵을 판매한 곳은 어디인가요?\n", + "Processing question 2519/3952 : 1895년에 서재필이 숨어있던 곳은?_____________서재필이 1895년에 숨어 있었던 장소는 어디였나요?\n", + "Processing question 2520/3952 : 철도공으로써 받은 첫 급여로 파브르는 무엇을 구매하였나?_____________'철도공으로 처음 받은 월급으로 파브르가 무엇을 샀습니까?'\n", + "Processing question 2521/3952 : 모린의 남자친구가 있는 곳은?_____________'모린의 남자친구가 살고 있는 장소는 어디인가요?'\n", + "Processing question 2522/3952 : 반야월이 어디로 향하던 중에 농부 부부처럼 보이는 남녀의 이별 장면을 보게 되었나?_____________반야월이 어디로 향하던 중에 농부 부부처럼 보이는 남녀의 이별 장면을 목격했나요?\n", + "Processing question 2523/3952 : 프로비던스 건담을 터뜨린 것은 무엇인가?_____________프로비던스 건담을 파괴한 것은 무엇입니까?\n", + "Processing question 2524/3952 : 남진과 함께 대중가요의 발전 원인이 된 사람은?_____________남진과 함께 대중음악의 진보를 이끈 인물은 누구인가요?\n", + "Processing question 2525/3952 : 오다와라 역 11번 타는곳에 서는 열차는 몇 량인가?_____________'오다와라 역 11번 승차장에서 출발하는 기차는 몇 대인가요?'\n", + "Processing question 2526/3952 : 궁예가 석총을 살인할 때 사용한 무기는?_____________궁예가 석총을 살해할 때 사용한 무기는 무엇입니까?\n", + "Processing question 2527/3952 : 영명사는 어떤 사건으로 인해 소실되었나?_____________영명사는 어떤 사건으로 인해 사라졌나요?\n", + "Processing question 2528/3952 : 1970년대 여성운동가들이 차별받는 여성을 비유한 대상은?_____________1970년대 여성운동가들이 차별받는 여성을 비유한 대상은 무엇입니까?\n", + "Processing question 2529/3952 : 1997년 일본 시리즈 우승팀은?_____________1997년 일본 시리즈에서 우승한 팀은 무엇입니까?\n", + "Processing question 2530/3952 : 양회와 강절에서 산서시들과 경쟁을 한 집단은?_____________양회와 강절에서 산서시들과 경쟁을 한 집단은 누구였나요?\n", + "Processing question 2531/3952 : 옛 대한제국의 황제 집안과 관련된 직무를 맡은 관청을 무엇이라 부르는가?_____________옛 대한제국에서 황제 집안과 관련된 직무를 맡은 관청을 무엇이라고 부르나요?\n", + "Processing question 2532/3952 : 메디아인이 자그로스 산맥에 정착을 시작한 시기는 철기 시대 제 몇 기인가?_____________메디아인이 자그로스 산맥에 정착을 시작한 시기는 철기 시대 어떤 시기인가요?\n", + "Processing question 2533/3952 : 페뷔스가 에스메랄다를 변호하지 않은 것은 누구 때문인가?_____________페뷔스가 에스메랄다를 변호하지 않은 이유는 누구 때문인가?\n", + "Processing question 2534/3952 : 피터 클리포드가 마야단의 시골이 공격받고 있음을 알린 날은?_____________피터 클리포드가 마야단의 시골이 공격받고 있음을 알린 날은 언제인가요?\n", + "Processing question 2535/3952 : 강재구 소령을 살해한 무기는?_____________강재구 소령을 살해한 무기는 무엇이었습니까?\n", + "Processing question 2536/3952 : 배우 문예봉이 여주인공으로 활약한 영화는 무엇인가?_____________문예봉이 주연으로 출연한 영화는 무엇인가요?\n", + "Processing question 2537/3952 : 레닌은 누가 정권을 잡아야한다고 생각했나?_____________'레닌은 누가 지배해야 한다고 믿었습니까?'\n", + "Processing question 2538/3952 : 견인상태에서 사격상태가 되는데 시간이 많이 소요되는 것은?_____________견인상태에서 사격상태로 전환하는 데 많은 시간이 소요되는 이유는 무엇인가요?\n", + "Processing question 2539/3952 : 희망의 당에게 자신의 당과 연합할 것을 제안한 인물은?_____________누가 희망의 당에게 자신의 당과 연합할 것을 제안했습니까?\n", + "Processing question 2540/3952 : 헨리 모건소가 오스카 스트라우스와 같은 직위를 받은 것은 몇 년인가?_____________헨리 모건소가 오스카 스트라우스와 동일한 직위를 받은 시기는 몇 년인가요?\n", + "Processing question 2541/3952 : 지구와 화성만한 천체의 충돌로 만들어진 위성은?_____________어떤 천체의 충돌로 만들어진 위성은 지구와 화성만한 천체의 충돌로 만들어진 위성은 무엇인가요?\n", + "Processing question 2542/3952 : 자격 없는 대통령을 대신하여 부통령이 대통령 임기를 수행하도록 하는 내용은 미국 헌법의 어떤 부분에 나와있는가?_____________미국 헌법에서 자격 없는 대통령을 대신하여 부통령이 대통령 임기를 수행하도록 하는 내용은 어느 부분에 기록되어 있습니까?\n", + "Processing question 2543/3952 : 플로리다가 영국 영토가 된 것은 언제인가?_____________플로리다가 영국의 지배로 전환된 시기는 언제였습니까?\n", + "Processing question 2544/3952 : 바젤이 위치한 국가는?_____________바젤이 있는 나라는 어디인가요?\n", + "Processing question 2545/3952 : 남한군의 도망을 방해한 것은 누가 설치하였나요?_____________누가 남한군의 탈출을 방해한 것을 설치했습니까?\n", + "Processing question 2546/3952 : 브룸/예튼/제이고 이론은 단기간 학습을 통해 어디에 적용할 수 있나?_____________브룸/예튼/제이고 이론은 단기 기억을 어디에 활용할 수 있나요?\n", + "Processing question 2547/3952 : 고구려 연맹장들이 세력을 키우고 집권화하는 데 중요한 역할을 한 도구는?_____________고구려 연맹장들이 세력을 강화하고 통치력을 확대하는 데 중요한 수단은 무엇입니까?\n", + "Processing question 2548/3952 : 이탈리아 수석 대주교의 직함 중 없어진 것은?_____________이탈리아 수석 대주교의 직함 중 사라진 것은 무엇인가요?\n", + "Processing question 2549/3952 : 1479년 아라곤의 왕위를 계승한 인물은?_____________1479년 아라곤 왕위를 계승한 사람은 누구인가요?\n", + "Processing question 2550/3952 : 호프만스탈의 사망 원인은?_____________호프만스탈이 어떤 이유로 사망했나요?\n", + "Processing question 2551/3952 : 각진국사가 주변 주민들을 돕기 위해 심은 것은?_____________각진국사가 이웃 주민들을 지원하기 위해 심은 것은 무엇인가요?\n", + "Processing question 2552/3952 : 존재에 대해 의심하는 순간, 존재를 증명하는 것은?_____________'의심의 순간에 존재를 입증하는 것은 무엇인가요?'\n", + "Processing question 2553/3952 : 지온 군의 강하 작전 때 지구상의 연방군이 쓸 수 없게 된 것은?_____________\"지온 군의 강하 작전 때 지구상의 연방군이 사용할 수 없게 된 것은 무엇인가요?\"\n", + "Processing question 2554/3952 : 홈 네이션스와 같은 말은?_____________'홈 네이션스와 같은 용어는 무엇인가요?'\n", + "Processing question 2555/3952 : 플레이어와 블레이드가 알두인에 맞서 싸울 수 있는 힌트를 얻은 장소는?_____________'플레이어와 블레이드가 알두인에 맞서 전투할 수 있는 힌트를 찾을 수 있는 장소는 어디인가요?'\n", + "Processing question 2556/3952 : 석조 보살좌상에서 신체의 밑부분 보다 크다고 느껴지는 것은?_____________석조 보살좌상에서 신체의 밑부분 보다 크다고 느껴지는 것은 무엇인가요?\n", + "Processing question 2557/3952 : 처녀는 물에 무엇을 띄어 왕건에게 주었나요?_____________처녀가 물 위에 띄운 것을 왕건에게 전달했던 것은 무엇이었나요?\n", + "Processing question 2558/3952 : 공릉천이 합류하는 하천은?_____________'공릉천이 합류하는 하천은 무엇인가요?'\n", + "Processing question 2559/3952 : 불염포에 싸여 있는 곳은 무슨 악취가 나는가?_____________불염포에 덮인 곳은 어떤 냄새가 나나요?\n", + "Processing question 2560/3952 : 야마가타 이자부로에게 독립선언 사실을 알린 사람은 모두 몇 명인가?_____________야마가타 이자부로에게 독립선언 사실을 알린 사람들의 숫자는 몇 명입니까?\n", + "Processing question 2561/3952 : 골더스그린역 기준으로 헨든 센트럭역이 위치한 방향은?_____________헨든 센트럭역이 골더스그린역 어느 방향에 위치하나요?\n", + "Processing question 2562/3952 : 삿사 나리마사가 엣추국을 성장시키는데 기반으로 삼은 산업은?_____________삿사 나리마사가 엣추국을 성장시키는데 기반으로 삼은 산업은 무엇인가요?\n", + "Processing question 2563/3952 : 성매매 종사자가 계약에 묶일 필요없이 언제든 그만 둘 수 있음을 의미하는 말은?_____________성매매 종사자가 계약에 묶일 필요없이 언제든 그만 둘 수 있음을 의미하는 말은 무엇인가요?\n", + "Processing question 2564/3952 : 대한민국 임시정부가 김성수에게 내어준 자리는?_____________'대한민국 임시정부가 김성수에게 내어준 자리는 무엇인가요?'\n", + "Processing question 2565/3952 : 사이클롭스는 어떠한 몬스터로 분류되는가?_____________사이클롭스는 어떤 생물로 구분되는가?\n", + "Processing question 2566/3952 : 보조 수트 액터를 맡은 사람은?_____________보조 수트 액터를 맡은 사람은 누구인가요?\n", + "Processing question 2567/3952 : 마사키가 라기아스에 남을 수 있었던 이유는?_____________마사키가 라기아스에 머무를 수 있었던 이유는 무엇이었나요?\n", + "Processing question 2568/3952 : 정병국이 집행유예를 받을 수 있게 도움을 준 것은 누구인가?_____________누가 정병국이 유예를 받을 수 있게 도와줬나요?\n", + "Processing question 2569/3952 : 미키 카즈마가 중요시한 캐릭터의 특징은?_____________미키 카즈마가 중요시하는 캐릭터의 특징은 무엇인가요?\n", + "Processing question 2570/3952 : 소론의 우두머리를 맡은 인물의 아버지는?_____________소론의 지도자를 맡은 사람의 아버지는 누구입니까?\n", + "Processing question 2571/3952 : 독립채산제의 확대 실시 등으로 이루어진 경제 관리 개선 조치를 무엇이라고 하는가?_____________독립채산제의 확대 실시 등으로 이루어진 경제 관리 개선 조치를 무엇이라고 합니까?\n", + "Processing question 2572/3952 : 블랑카의 전기를 빼앗으려한 인물은?_____________블랑카의 전기를 훔치려고 한 인물은 누구인가요?\n", + "Processing question 2573/3952 : 진시황이 즉위하기 전에는 어느 나라의 천자가 유일하게 왕이 될 수 있었나?_____________어느 국가의 천자가 유일하게 황제가 될 수 있었습니까?\n", + "Processing question 2574/3952 : 톰홀츠가 언제 책에서 티타노케라톱스의 동물이명에 대해 언급했나요?_____________톰홀츠는 언제 책에서 티타노케라톱스의 생물학적 명칭에 대해 언급했나요?\n", + "Processing question 2575/3952 : 2001년 포이즌 필 규정을 채택한 회사의 지분을 두 번째로 많이 소유한 곳은?_____________포이즌 필 규정을 채택한 회사의 2위 지분 소유자는 어디인가요?\n", + "Processing question 2576/3952 : 혜경궁 홍씨의 저서는?_____________'혜경궁 홍씨의 글은 무엇인가요?'\n", + "Processing question 2577/3952 : 1969년 공화주의 스파르타크 경연 대회에서 킴의 성적은?_____________1969년 공화주의 스파르타크 경연 대회에서 킴은 어떤 성적을 거뒀나요?\n", + "Processing question 2578/3952 : 컴퓨터 플랫폼 중 가장 유명한 것은?_____________가장 유명한 컴퓨터 플랫폼은 무엇인가요?\n", + "Processing question 2579/3952 : 자신의 병사를 지키며, 적군의 사기를 떨어뜨릴 수 있는 공격 방법은?_____________'적의 사기를 떨어뜨리고 병사들을 보호하는 방법은 무엇인가요?'\n", + "Processing question 2580/3952 : 레온나토스가 측근 호위관이 된 연도는?_____________레온나토스가 측근 호위관이 된 연도는 언제인가요?\n", + "Processing question 2581/3952 : 센트럴 런던으로 출근하는 사람들 중 자차를 이용하는 사람의 비율은?_____________센트럴 런던을 출근하는 사람 중에서 차를 이용하는 사람의 비율은 얼마인가요?\n", + "Processing question 2582/3952 : 동키의 발명품의 명칭은?_____________동키가 개발한 제품의 명칭은 무엇인가요?\n", + "Processing question 2583/3952 : 무인은 언제부터 일국동량의 명령을 받기 시작했는가?_____________언제 무인이 일국동량의 지시를 받기 시작했나요?\n", + "Processing question 2584/3952 : 노동 시장 안의 현상들을 학문화할 수 있었던 기반을 다지기 시작한 시기는?_____________노동 시장 내 현상을 연구하기 시작한 시대는 언제였습니까?\n", + "Processing question 2585/3952 : 메흐메트가 이탈리아를 침략한 이유는?_____________메흐메트가 이탈리아를 침략한 동기는 무엇이었나요?\n", + "Processing question 2586/3952 : 유엔 인구 기금은 누구를 만날 때 7개의 규칙을 따르라고 하였나?_____________누구를 만나러 갈 때 유엔 인구 기금이 따라야 하는 규칙은 몇 개인가요?\n", + "Processing question 2587/3952 : 도조 히데키는 누구의 죽음 이후에 통제파의 주요 인물이 되었나요?_____________도조 히데키는 어느 인물의 사망 이후에 통제파의 주요 인물이 되었나요?\n", + "Processing question 2588/3952 : 마사카타의 시체가 고사카 산에 묻히기 이전에 있었던 곳은?_____________마사카타의 시체가 고사카 산에 묻히기 이전에 머물렀던 장소는 어디였나요?\n", + "Processing question 2589/3952 : 그레고리오를 라테리노 궁전에 가둔모임은?_____________'그레고리오를 라테리노 궁전에 가둔 사람들은?'\n", + "Processing question 2590/3952 : 경제적 이유로 다시 창을 무기로 사용한 국가는?_____________어떤 국가가 경제적 이유로 다시 창을 무기로 사용했는가?\n", + "Processing question 2591/3952 : 프시타코사우루스의 얼굴에서 유일하게 다른 파충류와 다른것은?_____________프시타코사우루스의 얼굴에서 다른 파충류와 다른 것은 무엇인가요?\n", + "Processing question 2592/3952 : 나무다리의 한계를 대체하기 위해 만든 것은?_____________나무다리의 한계를 대체하기 위해 만든 것은 무엇인가요?\n", + "Processing question 2593/3952 : 쇼군 직속가신단 중 쇼군을 직접 만날 수 있는 무사는?_____________쇼군 직속가신단 중 쇼군을 직접 만날 수 있는 무사는 누구인가요?\n", + "Processing question 2594/3952 : 유영 대신 황태자가 될 뻔한 인물은?_____________누가 유영 대신 황태자가 될 뻔한 인물인가요?\n", + "Processing question 2595/3952 : 닉슨 행정부가 출범한 시기는?_____________\"닉슨 행정부가 시작된 시기는 언제인가요?\"\n", + "Processing question 2596/3952 : 20세기 이후에 함대 통보함의 임무를 대신하는 것은?_____________20세기 후반에 함대 통보함의 임무를 대신하는 것은 무엇입니까?\n", + "Processing question 2597/3952 : 치천나라가 건립된 해는?_____________치천나라가 세워진 해는 언제인가요?\n", + "Processing question 2598/3952 : 러일 전쟁의 승전국은?_____________러시아 제국의 승전국은 무엇입니까?\n", + "Processing question 2599/3952 : 역대 로마의 왕들 중 가장 먼저 포룸 로마눔에서 베스타 여신을 섬기는 의식을 치른 왕의 이름은?_____________가장 먼저 포룸 로마눔에서 베스타 여신을 섬기는 의식을 친 로마의 왕은 누구인가요?\n", + "Processing question 2600/3952 : 실외에서 하는 농구 경기를 무엇이라고 하는가?_____________농구 경기를 야외에서 하는 것을 무엇이라고 부르나요?\n", + "Processing question 2601/3952 : 타르 연주자가 음을 결정하기 위해 손을 대야 하는 것은?_____________타르 연주자가 음을 결정하기 위해 손을 대는 것은 무엇인가요?\n", + "Processing question 2602/3952 : 주제 사라마구가 반종교주의자라며 비판한 곳은?_____________사라마구가 반종교주의자로 지적한 곳은 어디인가요?\n", + "Processing question 2603/3952 : 열대 파동으로부터 제 8호 열대저기압이 생겨난 날짜는?_____________제 8호 열대저기압이 형성된 날짜는 열대 파동으로부터 언제였나요?\n", + "Processing question 2604/3952 : 송우석이 인권 변호사로 활동하게 된 계기는?_____________송우석이 인권 변호사로 활동하게 된 이유는 무엇인가요?\n", + "Processing question 2605/3952 : 남성 노동자들은 누가 중국 남성들의 미국 이민을 거부하길 바랐는가?_____________누가 중국 남성들의 미국 이주를 원치 않았나요?\n", + "Processing question 2606/3952 : 외교 사절단이라는 함정을 이용해 프리츠 황제를 암살하고자 한 집단은?_____________프리츠 황제를 암살하고자 한 집단은 무엇인가?\n", + "Processing question 2607/3952 : 2차 컨스타운 전투 당시 브레킨리지는 누구의 휘하에 있었나?_____________2차 컨스타운 전투 중 브레킨리지는 누구에게 속해 있었나요?\n", + "Processing question 2608/3952 : 알렉산드로스 대왕은 고대 근동을 언제 점령했는가?_____________알렉산더 대왕이 고대 근동을 언제 정복했습니까?\n", + "Processing question 2609/3952 : 광종이 혜거를 만나러 도덕암에 갈 때 이용했던 이동수단은?_____________광종이 혜거를 만나러 도덕암에 가던 길에 사용한 교통 수단은 무엇이었나요?\n", + "Processing question 2610/3952 : 로빈훗과 필립 왕세자가 만난 곳의 지명은?_____________로빈훗과 필립 왕세자가 만난 곳의 지명은 무엇입니까?\n", + "Processing question 2611/3952 : 돈오점수와 혜능의 법맥은 양립할 수 없다고 주장한 사람은?_____________돈오점수와 혜능의 법맥은 양립할 수 없다고 주장한 사람은 누구인가요?\n", + "Processing question 2612/3952 : 나폴레옹이 크렘린 궁을 불태운 것은 몇 년인가?_____________나폴레옹이 크렘린 궁을 불태운 연도는 몇 년인가요?\n", + "Processing question 2613/3952 : 모하베드 나부스의 아내는?_____________\"모하베드 나부스의 아내의 이름은 무엇인가요?\"\n", + "Processing question 2614/3952 : 알렉산더 3세를 자신의 사위로 맞고자 했던 할리카르낫소스의 지배자는?_____________할리카르낫소스의 지배자인 사람은 누구인가요?\n", + "Processing question 2615/3952 : 은평공원의 김용원 유적비에 이돈직의 공적이 새겨진 사실을 찾아낸 인물은?_____________은평공원의 김용원 유적비에 이돈직의 공적이 새겨진 사실을 찾아낸 사람은 누구인가요?\n", + "Processing question 2616/3952 : 군 징집을 면제받은 인물이 1차 세계대전 당시 옮겨간 지역은?_____________1차 세계대전 당시 군대를 면제받은 사람이 이주한 지역은 어디였나요?\n", + "Processing question 2617/3952 : 5종의 단공류 중 네가지의 종류를 차지하는 동물은?_____________어떤 동물이 다섯 종류의 단공류 중 네 종류를 차지하나요?\n", + "Processing question 2618/3952 : 조스마의 나이는 약 몇 년으로 예측되는가?_____________'조스마는 대략 몇 살인 것으로 추정되는가?'\n", + "Processing question 2619/3952 : 레코드와 Nullable 참조를 조합하여 나타내는 자료구조는?_____________'레코드와 널 가능한 참조를 조합하여 나타내는 자료구조는?'\n", + "Processing question 2620/3952 : <발굴추척, 어느 삼형제의 선택>이 방영된 날은?_____________'<발굴추적, 세 형제의 선택>이 방영된 날짜는 언제였나요?'\n", + "Processing question 2621/3952 : 서방의 진출로 파생된 십자군운동이 중세의 어떤 제도를 해체시켰는가?_____________십자군운동이 중세의 어떤 제도를 해체시켰는가?\n", + "Processing question 2622/3952 : 컴퓨터와 통신망으로 이루어진 새로운 도시건설 계획은 어느 지역에서 마련하는 중인가?_____________어느 지역에서 컴퓨터와 통신망으로 이루어진 새로운 도시건설 계획이 진행 중인가요?\n", + "Processing question 2623/3952 : 경기장에 있는 특별 지정 구역은 누구를 위한 것인가?_____________'경기장 내 특별 지정 구역은 누구를 위해 설정되었습니까?'\n", + "Processing question 2624/3952 : 윌리 딕슨의 블루스 천국이 개장된 년도는 언제인가요?_____________\"윌리 딕슨의 블루스 천국이 처음으로 문을 열었던 해는 언제인가요?\"\n", + "Processing question 2625/3952 : 빌게이츠가 8800 컴퓨터의 값 하락에 대해서 알게 된 글은 언제 발행되었나요?_____________빌게이츠가 8800 컴퓨터의 값 하락에 대해서 알게 된 글이 언제 공개되었습니까?\n", + "Processing question 2626/3952 : 거대도시에서 가족의 해체, 각종 범죄, 정신적 질환 등이 특별히 많아지는 것은 무엇이 충돌되기 때문인가?_____________거대도시에서 가족의 붕괴, 범죄 증가, 정신적 질환 등이 특별히 증가하는 이유는 무엇인가요?\n", + "Processing question 2627/3952 : 부인과 수도사가 밀회를 하는데 걸림돌인 사람은?_____________두 사람 사이에 갈등을 일으키는 사람은 누구인가요?\n", + "Processing question 2628/3952 : 1966년 처음으로 운행된 베이역은 블루어에서 어디까지 운행되었나?_____________베이역이 처음으로 운행된 연도는 언제인가요?\n", + "Processing question 2629/3952 : 제11장갑사단이 우회시킨 부대는?_____________제11장갑사단이 피해 간 부대는 무엇입니까?\n", + "Processing question 2630/3952 : 함경북도에서 유일하게 철도가 없는 군은?_____________함경북도에서 유일하게 철도가 없는 군은 어디인가요?\n", + "Processing question 2631/3952 : 윤세주가 교관을 맡았으며 민족혁명당 규모 확대에 이바지한 학교는?_____________윤세주가 지도자로 활동하며 민족혁명당 규모를 확대시킨 학교는 어디인가요?\n", + "Processing question 2632/3952 : 최초로 영국 아카데미 외국어 영화상을 받은 한국 영화는?_____________한국 영화 중에서 처음으로 영국 아카데미 외국어 영화상을 수상한 작품은 무엇인가요?\n", + "Processing question 2633/3952 : 보현암 석조관음보살의 보존 상태는 어떠한가?_____________'보현암 석조관음보살의 현재 상태는 어떤가요?'\n", + "Processing question 2634/3952 : 아달베르트의 부친이 돌아가신 해는?_____________\"아달베르트의 아버지가 세상을 떠난 해는?\"\n", + "Processing question 2635/3952 : 천안군당의 사상은?_____________천안군당의 신념은 무엇입니까?\n", + "Processing question 2636/3952 : 반민특위에 체포되고 60년 후에 안인식이 오른 명부는?_____________안인식이 오른 명부는 반민특위에 체포되고 60년 후에 무엇인가요?\n", + "Processing question 2637/3952 : 핏소니아 로퀴애가 사냥하는데 이용하는 것은?_____________핏소니아 로퀴애가 사냥하는데 사용하는 것은 무엇인가요?\n", + "Processing question 2638/3952 : 다양한 양조 방법이 설명되어 있는 가장 오래된 문헌이 발견된 곳은?_____________가장 오래된 문헌에서 다양한 양조 방법이 설명되어 있는 곳은 어디에서 발견되었나요?\n", + "Processing question 2639/3952 : 돌궐제국을 건국한 이후 소그디아나에 생긴 변화는?_____________소그디아나에 어떤 변화가 일어났나요 돌궐제국이 세워진 이후에?\n", + "Processing question 2640/3952 : 이스라엘의 유일한 여왕의 손자는 누구인가?_____________이스라엘의 유일한 여왕의 손자는 누구인가?\n", + "Processing question 2641/3952 : 파이드라의 남편은 누구인가?_____________파이드라의 배우자는 누구입니까?\n", + "Processing question 2642/3952 : 천황이 대국민 메시지에 대한 원고 작성을 완료한 날짜는 언제인가요?_____________대왕이 국민들에게 보낼 메시지에 대한 초안을 마친 날짜는 언제인가요?\n", + "Processing question 2643/3952 : 안나 네다의 오빠는 어느 나라의 임금인가?_____________안나 네다의 오빠는 어떤 국가의 왕이십니까?\n", + "Processing question 2644/3952 : 타지키스탄 지역에서 인기가 가장 많은 요리는?_____________'타지키스탄 지방에서 가장 인기 있는 음식은 무엇인가요?'\n", + "Processing question 2645/3952 : 3당 합당을 겪은 정당 중 군사정권에서 책임이 있는 당은?_____________군사정권에서 3당 합당을 겪은 정당 중 책임 있는 정당은 어느 정당인가요?\n", + "Processing question 2646/3952 : 무굴의 그림은 어느 국가의 양식을 이어받았는가?_____________무굴의 그림은 어떤 나라의 예술 스타일을 계승했습니까?\n", + "Processing question 2647/3952 : 소문에 의하면 1887년 4월 20일의 행사에서 어떤 사건이 일어났는가?_____________1887년 4월 20일의 행사에서 무슨 일이 있었는지에 대한 소문이 있나요?\n", + "Processing question 2648/3952 : 민간에서 전해지는 바에 의하면 궁예는 누구와 대적하다 죽었는가?_____________궁예는 누구와 대립하다 죽었습니까?\n", + "Processing question 2649/3952 : 계필하력을 특별히 아꼈던 왕은?_____________어떤 왕이 계획력을 특별히 갖고 있었습니까?\n", + "Processing question 2650/3952 : 런던에서 큰 화재가 일어났던 당시 제임스 셜리는 어떤 직업을 가지고 있었나?_____________제임스 셜리가 런던에서 큰 화재가 일어난 당시 어떤 직업을 가지고 있었습니까?\n", + "Processing question 2651/3952 : 브리튼 섬에 독립 세력을 확립하고 왕국을 건설한 이들은?_____________'브리튼 섬에서 독립을 선언하고 왕국을 세운 사람들은 누구인가요?'\n", + "Processing question 2652/3952 : 로마군을 상비병으로 만든 인물은?_____________로마군을 상비병으로 만든 인물은 누구인가요?\n", + "Processing question 2653/3952 : 테오도르 뒤부아가 받기를 거절한 상은?_____________테오도르 뒤부아가 받기를 거절한 상은 무엇입니까?\n", + "Processing question 2654/3952 : 이윤필의 아버지는 누구인가?_____________이윤필의 아버지는 누구입니까?\n", + "Processing question 2655/3952 : 블룸필드의 전공은 무엇인가?_____________블룸필드가 전공한 학문 분야는 무엇인가요?\n", + "Processing question 2656/3952 : 하늘의 남극 방향을 찾을 수 있게 해주는 별은?_____________어떤 별이 하늘의 남극 방향을 나타내나요?\n", + "Processing question 2657/3952 : 노랫말의 번역이 대구 시구 번역보다 훨씬 제약이 많은 이유는?_____________왜 노랫말을 번역하는 것이 대구 시구 번역보다 더 제약이 많은 이유일까요?\n", + "Processing question 2658/3952 : 이집트의 통일 당시 티니스 왕족에 합쳐진 왕족은?_____________이집트의 통일 당시 티니스 왕족에 합쳐진 왕족은 무엇입니까?\n", + "Processing question 2659/3952 : 이민자들이 필요로 했던 것은?_____________'이주민들이 요구했던 것은 무엇이었습니까?'\n", + "Processing question 2660/3952 : 의사소통이 잘 안되거나 여행이 연기, 혹은 취소된다고 해석하는 경우는?_____________의사소통이 원활하지 않거나 여행이 연기되거나 취소되는 경우가 있나요?\n", + "Processing question 2661/3952 : 웅게른슈테른베르크가 포로로 붙잡혔던 유격대의 리더는 누구였나요?_____________웅게른슈테른베르크가 포로로 붙잡혔던 유격대의 지휘관은 누구였나요?\n", + "Processing question 2662/3952 : 67년에 데뷔 싱글을 낸 밴드는?_____________어떤 밴드가 1967년에 첫 싱글을 발표했습니까?\n", + "Processing question 2663/3952 : 중세 사람들의 상상력을 자극한 창의 주인은 누구인가?_____________중세 시대 사람들의 상상력을 자극한 창의 주인은 누구입니까?\n", + "Processing question 2664/3952 : 총학에서 노동자의 인권에 관한 내용을 기반으로 협의하여 정한 규칙은?_____________총학에서 근로자의 인권에 대한 내용을 기반으로 협의하여 정한 규정은 무엇입니까?\n", + "Processing question 2665/3952 : 수지는 오목이를 누구와 결별시켰는가?_____________오목이를 누구와 헤어졌나요?\n", + "Processing question 2666/3952 : 통진당의 행보를 비판하고 해산을 주장한 사람은?_____________통진당의 활동을 비판하고 해산을 요구한 사람은 누구인가요?\n", + "Processing question 2667/3952 : 전체 중 일본의 매출이 40%인 회사는?_____________일본에서의 매출 비율이 40%인 기업은 무엇입니까?\n", + "Processing question 2668/3952 : 이베이에서 페이팔로 결제가 가능한 것은 언제까지인가?_____________이베이에서 페이팔로 지불이 가능한 기간은 언제까지입니까?\n", + "Processing question 2669/3952 : 다카기 모리미치가 50개의 도루를 기록해 도루왕 타이틀을 받았던 해는?_____________다카기 모리미치가 50번의 베이스 도루를 성공시켜 도루왕 타이틀을 획득한 시즌은 언제인가요?\n", + "Processing question 2670/3952 : 예수가 아닌 다른 메시아의 등장을 바라고 있는 사람은?_____________다른 구원자의 출현을 기다리고 있는 사람은 누구인가요?\n", + "Processing question 2671/3952 : 산악 포병 연대 발령 당시 비트겐슈타인의 계급은?_____________비트겐슈타인이 산악 포병 연대에 발령될 때의 계급은 무엇이었습니까?\n", + "Processing question 2672/3952 : 보닌의 처형 방식이 캘리포니아주의 치사 주사로 변경된 해는 언제인가요?_____________보닌의 처형 방식이 캘리포니아주의 치사 주사로 변경된 해는 언제인가요?\n", + "Processing question 2673/3952 : 히로시마를 누르고 우승을 차지한 팀은 어디인가?_____________어떤 팀이 히로시마를 이기고 우승을 차지했나요?\n", + "Processing question 2674/3952 : 독일 연방의 맹주 국가에서 혁명이 발생한 시기는?_____________독일 연방의 맹주 국가에서 혁명이 일어난 시기는 언제였나요?\n", + "Processing question 2675/3952 : 르네상스 시대에 세례대를 관리하던 곳의 명칭은?_____________세례대를 관리하던 곳의 명칭은 무엇입니까?\n", + "Processing question 2676/3952 : 원작자가 주인공을 결정한다고 주장한 사람은?_____________누가 주인공을 결정한다고 말한가요?\n", + "Processing question 2677/3952 : 6개국에서 1등을 한 음반이 출시되었던 해는?_____________어떤 해에 6개국에서 1위를 차지한 음반이 발매되었나요?\n", + "Processing question 2678/3952 : 피배서인이 행사할 수 있는 권리의 범위는?_____________피배서인이 행사할 수 있는 권리의 범위는 무엇인가요?\n", + "Processing question 2679/3952 : 중등교육이 의무적으로 처음 시행된 곳은?_____________어느 지역에서 중학교 교육이 의무화되었나요?\n", + "Processing question 2680/3952 : 보다폰은 누구를 후원하는가?_____________보다폰은 누구에게 자금을 지원하나요?\n", + "Processing question 2681/3952 : 창구가 운영되는 시간에 역무원이 직접 표를 검사하는 역사는?_____________창구가 운영되는 시간에 역무원이 직접 표를 검사하는 역사는 무엇입니까?\n", + "Processing question 2682/3952 : 가정맹어호와 관련된 동물은 무엇인가요?_____________'가정맹어호와 관련된 동물은 어떤 종류가 있나요?'\n", + "Processing question 2683/3952 : 새누리당의 무상급식 관련 정책적 모순점을 지적한 인물은?_____________새누리당의 무상급식 관련 정책적 모순점을 지적한 인물은 누구인가요?\n", + "Processing question 2684/3952 : 동양극장 사업을 실패로 돌아가게 만든 인물은?_____________무슨 인물이 동양극장 사업을 망하게 했나요?\n", + "Processing question 2685/3952 : 본래, 한왕 측에서 팽성 대전에 참전했으나 한을 배신하고 항우의 편으로 넘어간 인물은?_____________누가 한왕 측에서 팽성 대전에 참전했으나 한을 배신하고 항우의 편으로 넘어갔나요?\n", + "Processing question 2686/3952 : 성화 점화 전에 비둘기를 풀던 방식은 어떤 올림픽 이후로 바뀌게 되었는가?_____________비둘기를 풀던 방식이 어떤 올림픽 이후에 변화되었나요?\n", + "Processing question 2687/3952 : S.롱스타드 중위의 국적은?_____________S.롱스탠드 중위의 출신 국가는 무엇입니까?\n", + "Processing question 2688/3952 : 사람들은 간결과 진중권의 토론에서 누가 이겼다고 생각하는가?_____________누가 간결과 진중권의 토론에서 승리했다고 생각하나요?\n", + "Processing question 2689/3952 : 독일이 여객선이 운항하는 해로에서 공격하지 않겠다는 의사를 밝히기 전 마지막으로 침몰한 배는?_____________독일이 여객선이 운항하는 해로에서 공격하지 않겠다는 의사를 밝히기 전 마지막으로 침몰한 배는 무엇입니까?\n", + "Processing question 2690/3952 : 세키가하라 전투에서 요도도노의 라이벌은?_____________세키가하라 전투에서 요도도노의 경쟁자는 누구입니까?\n", + "Processing question 2691/3952 : 구글의 실시간 웹 서치 기능은?_____________'구글의 라이브 웹 검색 기능은 무엇입니까?'\n", + "Processing question 2692/3952 : 풍진의 전파 경로는?_____________풍진이 전파되는 방식은 무엇인가요?\n", + "Processing question 2693/3952 : 분에이 전쟁 이후 로쿠하라 단다이에게 주어진 권한으로 처벌할 수 있는 신분은?_____________로쿠하라 단다이가 주어진 권한으로 처벌할 수 있는 사람은 누구인가요?\n", + "Processing question 2694/3952 : 과도위가 유엔의 승인 없이 외국군의 파병지원을 요청할 수 있게 된 날은?_____________과도위가 유엔의 승인 없이 외국군의 파병지원을 요청할 수 있게 된 날은 언제인가요?\n", + "Processing question 2695/3952 : 비메이로 전투에서 영국군 원정대가 프랑스 부대를 격파시킨 해는?_____________비메이로 전투에서 영국군 원정대가 프랑스 부대를 격파시킨 해는 무엇입니까?\n", + "Processing question 2696/3952 : 공자 돌이 임금의 자리에 올랐던 시기는 언제인가?_____________공자 돌이 임금의 자리에 올랐던 시기는 언제였습니까?\n", + "Processing question 2697/3952 : 이스라엘이 수에즈 운하를 자유로이 왕래하는 조건으로 이집트에 반환한 지역은?_____________이스라엘이 수에즈 운하를 자유롭게 통과할 수 있도록 이집트에 반환한 지역은 어디인가요?\n", + "Processing question 2698/3952 : 예루살렘 공의회는 누가 유대 그리스토교인의 주장에 반론하면서 개최되었나요?_____________누가 예루살렘 공의회에서 유대 그리스토교인의 주장에 반박하기 위해 모였나요?\n", + "Processing question 2699/3952 : 생물측정학파와 멘델학파의 대립을 해결한 신다원주의의 이론은?_____________신다원주의의 이론은 생물측정학파와 멘델학파의 대립을 어떻게 해결했나요?\n", + "Processing question 2700/3952 : 아이들의 우울감은 어디서 오는가?_____________아이들의 우울증은 어디서 비롯되는가?\n", + "Processing question 2701/3952 : 대한민국 정부가 수립된 다음 해에 지어진 관청 건물은?_____________대한민국 정부가 세워진 후에 지어진 관청 건물은 무엇입니까?\n", + "Processing question 2702/3952 : 오스트리아 황제가 항복했던 해에 나폴레옹이 패배했던 나라는?_____________나폴레옹이 패배한 국가는 오스트리아 황제가 항복한 해에 어떤 국가였습니까?\n", + "Processing question 2703/3952 : 조혜련은 기미가요 무대에 박수를 보낸 행동에 대한 해명을 어느 프로그램에서 하였나?_____________조혜련은 무대에 박수를 보낸 행동에 대한 설명을 어디에서 했나요?\n", + "Processing question 2704/3952 : 세종대학교의 산하부서중, 한국형 온실가스배출 경로분석 프로그램을 개발한 곳은?_____________세종대학교의 소속 기관 중, 한국형 온실가스배출 경로분석 프로그램을 개발한 곳은 어디인가요?\n", + "Processing question 2705/3952 : 동영상 콘텐츠로 날씨를 제공하는 예보 유형은?_____________날씨를 제공하는 예보 유형으로 동영상 콘텐츠를 사용하는 것은 무엇인가요?\n", + "Processing question 2706/3952 : 나플레옹이 넬슨 제독에 의해 패배하게 된 전쟁은 언제 발발하였나요?_____________나폴레옹이 넬슨 제독에 의해 패배하게 된 전쟁은 언제 시작되었습니까?\n", + "Processing question 2707/3952 : 우리나라에서 유일하게 백로의 서식지가 아닌 곳은?_____________한국에서 백로의 서식지가 아닌 유일한 지역은 어디인가요?\n", + "Processing question 2708/3952 : 인정식이 일제 경찰에 체포된 해는?_____________인정식이 일본 경찰에 체포된 날짜는 언제인가요?\n", + "Processing question 2709/3952 : 사자의 서신을 본 후 고구려 군사로 하여금 압록강 나루에 진을 치도록 만든 고구려의 장수는?_____________고구려의 장수인 사자의 서신을 본 후 고구려 군사를 압록강 나루에 진을 치도록 만든 인물은 누구인가요?\n", + "Processing question 2710/3952 : 인목의 굵은 가지와 원줄기에 생기는 형상과 비슷한 것은?_____________인목의 굵은 가지와 원줄기에 생기는 형상과 비슷한 것은 무엇인가요?\n", + "Processing question 2711/3952 : 도시조의 설득으로 결국 곤도가 얻고자 결정한 직위는?_____________곤도가 도시조의 설득으로 결정한 직위는 무엇인가요?\n", + "Processing question 2712/3952 : 요자의 삼촌은 어떤 관직에 있었나?_____________요자의 삼촌은 어떤 직위에 있었나요?\n", + "Processing question 2713/3952 : 한사람에게 같은 인슐린 주사를 처방했을 때 다르게 생성되는 것은?_____________인슐린 주사를 동일하게 처방했을 때 발생하는 차이는 무엇인가요?\n", + "Processing question 2714/3952 : 웨인을 사망에 이르게 한 합병증의 원인이 된 병은?_____________웨인을 사망에 이르게 한 합병증의 원인이 된 병은 무엇인가요?\n", + "Processing question 2715/3952 : 이혼성이 이유를 말하지 않았던 사건은 언제 일어났나요?_____________언제 이혼 선서가 이유를 공개하지 않았나요?\n", + "Processing question 2716/3952 : 사천왕을 모시기 위해 조선시대부터 사찰입구에 건축한 건물은?_____________사찰입구에 건축한 건물은 무엇인가요?\n", + "Processing question 2717/3952 : 의회와 정부의 갈등 때문에 군대를 동원한 사람은?_____________군대를 동원한 사람은 누구인가요?\n", + "Processing question 2718/3952 : 아르눌프가 교황 포르모소의 구원 요청을 수락한 년도는 언제인가?_____________아르눌프가 교황 포르모소의 구원 요청을 받아들인 연도는 몇 년인가요?\n", + "Processing question 2719/3952 : 원희룡이 사상적 전환을 맞게 된 계기가 된 것은?_____________원희룡이 정치적 입장을 변화시키게 된 계기가 된 것은 무엇인가요?\n", + "Processing question 2720/3952 : 아라키스의 통치권을 원하는 가문이 황제에게 주어야 하는 것은?_____________아라키스의 통치권을 원하는 가문이 황제에게 주어야 하는 것은 무엇인가요?\n", + "Processing question 2721/3952 : 이탈리아 발말렌코에서 진행된 세계 주니어 선수권 대회에서 1등을 거머쥔 선수는?_____________세계 주니어 선수권 대회에서 우승한 선수는 누구인가요?\n", + "Processing question 2722/3952 : 마르첼로 1세가 시행한 내용을 알 수 있게 해주는 서적은?_____________마르첼로 1세가 시행한 내용을 알 수 있게 해주는 서적은 무엇인가요?\n", + "Processing question 2723/3952 : 사물인터넷 보안 시스템 중 모은 정보를 서버로 보내는 역할을 하는 보안 시스템의 이름은?_____________사물인터넷 보안 시스템 중 모은 정보를 서버로 보내는 역할을 하는 보안 시스템의 다른 이름은 무엇인가요?\n", + "Processing question 2724/3952 : 공박에 새롭게 추가된 인물은?_____________새롭게 추가된 인물은 누구인가요?\n", + "Processing question 2725/3952 : 훈다손의 뜻은?_____________\"훈다손의 의미는 무엇인가요?\"\n", + "Processing question 2726/3952 : 소비에트 러시아 대표가 회의에 갈 수 없도록 만들었던 전쟁은?_____________어떤 전쟁으로 인해 소비에트 러시아 대표가 회의에 참석할 수 없게 되었나요?\n", + "Processing question 2727/3952 : 1575년 아시가루가 다네가시마로 무장하고 참가한 전투는?_____________아시가루가 다네가시마로 무장하고 참가한 전투는 무엇입니까?\n", + "Processing question 2728/3952 : 하이네만이 두 번째로 법무장관에 취임한 것은 몇 년인가?_____________하이네만이 두 번째로 법무장관으로 임명된 연도는 몇 년인가요?\n", + "Processing question 2729/3952 : 참의원 선거에서 신체 장애인 후보자로 당선된 최초의 인물은?_____________참의원 선거에서 장애인 후보로 당선된 최초의 인물은 누구인가요?\n", + "Processing question 2730/3952 : 경쟁 조직 간의 폭력 행위가 잠시동안 잠잠해진 시기는 언제인가요?_____________경쟁 조직 간의 폭력 행위가 잠시동안 잠잠해진 시기는 언제인가요?\n", + "Processing question 2731/3952 : 후타마타구치 전투가 일어났던 달은?_____________후타마타구치 전투가 일어났던 달은 무슨 달이었나요?\n", + "Processing question 2732/3952 : \"장씨종친회\"가 실렸던 신문은?_____________\"'장씨종친회'가 실렸던 신문은 무엇입니까?\"\n", + "Processing question 2733/3952 : 팔로마 로레나의 아들이 가장 처음 만든 영화는?_____________팔로마 로레나의 아들이 최초로 제작한 영화는 무엇입니까?\n", + "Processing question 2734/3952 : 이주노동자를 위한 병원을 기점으로, 세계 곳곳에 의료지원이나 의료진 교육 사업을 진행하는 회사는?_____________어떤 회사가 이주노동자를 위한 병원을 중심으로 세계 각지에서 의료 지원이나 의료진 교육 사업을 진행하고 있습니까?\n", + "Processing question 2735/3952 : 등무칠이 반란을 일으키기 전에 없앤 것은 무엇인가요?_____________등무칠이 반란을 일으키기 전에 없앤 것은 무엇입니까?\n", + "Processing question 2736/3952 : 어떠한 목적 의식도 가지지 않은 상태를 장자는 뭐라고 했는가?_____________장자가 어떠한 목적 의식도 가지지 않은 상태를 무심(無心)이라고 했나요?\n", + "Processing question 2737/3952 : 생활이 제일'이라는 구호를 내건 정당은?_____________'삶이 최우선'이라는 구호를 내건 정당은?\n", + "Processing question 2738/3952 : 두 포르투갈어 화자가 처음 대화를 할 시에 곤란을 겪는 화자는?_____________두 포르투갈어로 말하는 사람들이 처음 만날 때 발생할 수 있는 어려움을 겪는 사람은 누구인가요?\n", + "Processing question 2739/3952 : 봉은사 승려를 문정왕후에게 주선해준 인물은?_____________봉은사 승려를 문정왕후에게 소개해준 사람은 누구인가요?\n", + "Processing question 2740/3952 : 《일본이란 어떤 나라인가》가 집필된 년도는?_____________《일본이란 나라에 관한 연구》라는 책이 나온 연도는 언제인가요?\n", + "Processing question 2741/3952 : 활동자격을 빼앗긴 당은 어떤 정치적 성향을 띠는가?_____________어떤 정치적 성향을 가진 당은 활동자격을 박탈당한 경우가 있나요?\n", + "Processing question 2742/3952 : 하장청이 마크의 삼촌을 죽인 수단은?_____________하장청이 마크의 삼촌을 죽인 방법은 무엇이었나요?\n", + "Processing question 2743/3952 : 당중앙과 함께 공산당의 투쟁 방침을 논의하는 집단은?_____________어떤 단체가 공산당의 전략을 논의하는지에 대해 물어보고 싶으신가요?\n", + "Processing question 2744/3952 : 위표가 항우 쪽으로 돌아서는 계기가 된 발언을 한 인물은 누구인가?_____________누가 항우 쪽으로 돌아서는 발언을 한 사람인가?\n", + "Processing question 2745/3952 : 뉴크로부존의 마법 사용자들의 이명은?_____________뉴크로부존의 마법 사용자들의 이명은 무엇인가요?\n", + "Processing question 2746/3952 : 현판에 임영관이란 글씨를 자필로 쓴 사람은 누구인가?_____________'현판에 임영관이라는 글씨를 손글씨로 남긴 사람은 누구인가?'\n", + "Processing question 2747/3952 : 1561년, 안상에게 합자보를 수정하라고 지시받은 인물은?_____________1561년, 안상에게 합자보를 수정하라고 지시받은 인물은 누구였습니까?\n", + "Processing question 2748/3952 : 선거에서 대통령 다음으로 표를 많이 받은 사람은 어떤 직책을 맡게 되는가?_____________'선거에서 대통령 다음으로 표를 많이 받은 사람은 어떤 직책을 맡게 되는가?' -> '선거에서 2등으로 선출된 후보는 어떤 직책을 맡게 되나요?'\n", + "Processing question 2749/3952 : 누르가치가 오바를 돕기 위해 파병한 것은 몇 년인가?_____________누르가치가 오바를 지원하기 위해 파견된 기간은 몇 년인가요?\n", + "Processing question 2750/3952 : 남명혁 부인의 사망 당시 나이는?_____________'남명혁 부인이 사망한 시점에 몇 살이셨나요?'\n", + "Processing question 2751/3952 : 아카리가 미조로기 료타를 만난 해는?_____________아카리가 미조로기 료타를 만난 연도는 언제인가요?\n", + "Processing question 2752/3952 : 장성향교는 임진왜란으로 소실 된 이 후 언제 다시 지어졌는가?_____________장성향교가 임진왜란으로 소실된 후 언제 재건되었습니까?\n", + "Processing question 2753/3952 : 남자와 딸들이 찾은 여자 시체는 몇 개인가?_____________여자 시체를 발견한 아버지와 딸들은 몇 명인가요?\n", + "Processing question 2754/3952 : 모개가 관리 선발 시 가장 중시했던 것은?_____________모개가 관리 선발 시 가장 중시했던 것은 무엇이었습니까?\n", + "Processing question 2755/3952 : 프랑스에서 불법 다운로드를 한 사용자를 차단하는 법률을 제정한 곳은 어디인가?_____________어느 국가에서는 프랑스에서 불법 다운로드를 한 사용자를 차단하는 법률을 도입했습니까?\n", + "Processing question 2756/3952 : 일본이 영국과의 런던 군축조약에서 파기한 해는 언제인가?_____________일본이 영국과의 런던 군축조약에서 파기한 해는 언제인가?\n", + "Processing question 2757/3952 : 조혜련은 <힐링캠프, 기쁘지 아니한가> 이전에 어떤 프로그램에 출연하여 일본 활동에 대해 언급하였나?_____________조혜련은 <힐링캠프, 기쁘지 아니한가> 이전에 어떤 프로그램에 출연하여 일본 활동에 대해 언급하였나?\n", + "Processing question 2758/3952 : 스티븐 비건의 문재인 접견 당시 미국 행정수반을 맡았던 인물은 누구인가?_____________스티븐 비건의 문재인과의 만남 때 미국 행정부의 대표자는 누구였나요?\n", + "Processing question 2759/3952 : 아우구스투스의 군사 체제 이후 로마군대의 속칭은?_____________로마제국의 군대를 무엇이라고 불렀나요?\n", + "Processing question 2760/3952 : 파르나바즈의 무덤 앞 석상은 무엇으로 제작되었는가?_____________파르나바즈의 무덤 앞 석상은 어떤 재료로 만들어졌습니까?\n", + "Processing question 2761/3952 : 스퀠쾨더가 남군 해군에 인도된 시기는?_____________스퀠쾨더가 남군 해군에 이양된 시기는 언제였나요?\n", + "Processing question 2762/3952 : 박진이 기자로 있었던 곳은?_____________박진이 기자로 다녀왔던 장소는 어디였나요?\n", + "Processing question 2763/3952 : 베네치아와 오스만 튀르크의 분쟁이 끝이 났음을 증명하는 것은?_____________베네치아와 오스만 제국 간의 갈등이 종결되었음을 입증하는 것은 무엇입니까?\n", + "Processing question 2764/3952 : 히로인이 좋아하는 마음으로 오빠를 부르는 호칭은?_____________히로인이 좋아하는 심정으로 오빠를 부르는 호칭은 무엇인가요?\n", + "Processing question 2765/3952 : 고천문학자는 연구할 때 사회 분야와 어떤 분야의 조화를 이루는 것이 중요한가?_____________고천문학자는 연구할 때 사회 분야와 어떤 분야의 균형을 이루는 것이 중요한가?\n", + "Processing question 2766/3952 : 큰 앞바퀴와 작은 뒷바퀴를 가진 자전거는 무엇인가?_____________어떤 차량은 큰 앞바퀴와 작은 뒷바퀴를 가지고 있나요?\n", + "Processing question 2767/3952 : 에마 가문의 멸망은 요리쓰나가 누구와 힘을 합쳐 이루어냈는가?_____________에마 가문의 멸망은 요리쓰나가 누구와 협력하여 달성되었나요?\n", + "Processing question 2768/3952 : 토지의 중요성에 대해 말한 인물이 한글을 알리기 위해 제작한 것은?_____________한글을 널리퍼뜨리기 위해 노력한 인물이 만든 것은 무엇인가요?\n", + "Processing question 2769/3952 : 사후세계의 존재를 믿는 민족은?_____________사후세계의 존재를 믿는 민족은 누구인가요?\n", + "Processing question 2770/3952 : 카를로만과 파핀이 권력을 얻기 전에 가장 큰 권력을 가지고 있던 인물은?_____________가장 큰 권력을 가지고 있던 인물은 누구였습니까?\n", + "Processing question 2771/3952 : 개인이 기업의 자산을 보유하며 8명 이상의 노동자를 고용하여 수익을 얻는 기업의 유형은?_____________어떤 유형의 기업이 8명 이상의 노동자를 고용하고 수익을 창출하며 개인이 기업 자산을 소유하는 것인가요?\n", + "Processing question 2772/3952 : 15세기 유럽에서 개발된 다표식 환자는?_____________15세기 유럽에서 개발된 다표식 환자는 무엇인가요?\n", + "Processing question 2773/3952 : 파울은 박스의 무엇을 먹는 방식으로 경기에서 누가 이길지 예측했나?_____________파울은 어떤 방식으로 박스를 먹는 방식으로 경기에서 승리할 것이라 예측했나?\n", + "Processing question 2774/3952 : 알라마간 섬을 통과할 때 태풍 초이완이 일으킨 바람의 세기는 어느정도였나?_____________알라마간 섬을 건널 때 태풍 초이완이 일으킨 바람의 세기가 어느 정도였습니까?\n", + "Processing question 2775/3952 : 2004년 태화들 회의록 관련 소송에서 패한 것은?_____________2004년 태화들 회의록 관련 소송에서 패한 쪽은 누구인가요?\n", + "Processing question 2776/3952 : 지라치를 납치한 사람의 직업은?_____________지라치를 납치한 사람의 직업은 무엇입니까?\n", + "Processing question 2777/3952 : 조선시대에는 상민보다 누구의 도폭이 더 넓었나요?_____________조선시대에는 누구의 도폭이 더 넓었습니까?\n", + "Processing question 2778/3952 : 레이에게 킹 목사를 죽였는지에 관한 질문을 던진 사람은 누구인가?_____________누가 레이에게 킹 목사를 죽였는지에 대해 물었나요?\n", + "Processing question 2779/3952 : <강희왕조>의 원작의 저자는?_____________'<강희왕조>의 원작의 저자는 누구입니까?'\n", + "Processing question 2780/3952 : 원종 종무원이 이전하기 전 위치는?_____________'원종 종무원이 이전하기 전 위치는 어디였나요?'\n", + "Processing question 2781/3952 : 자영은 누구에게 옥새를 넘기며 항복했나?_____________자영은 누구에게 옥새를 넘기며 항복했나?\n", + "Processing question 2782/3952 : 대한독립군단은 몇 년도에 설립되었나?_____________대한독립군단은 언제 창설되었습니까?\n", + "Processing question 2783/3952 : 번데기가 완전히 다른 모습이 되는 것을 무엇이라고 부르는가?_____________번데기가 완전히 다른 모습이 되는 것을 무엇이라고 합니까?\n", + "Processing question 2784/3952 : 탄산염과 규산염질로 이루어진 퇴적물은 어디에서 온 것인가?_____________탄산염과 규산염질로 이루어진 퇴적물은 어디에서 유래했습니까?\n", + "Processing question 2785/3952 : 홈즈는 무엇을 통해 본인의 추리가 잘못되었다는 것을 알게 되었나?_____________홈즈는 무엇을 통해 자신의 추리가 잘못되었다는 것을 깨달았나요?\n", + "Processing question 2786/3952 : 대부분의 입시가 사용하는 선발 기준은?_____________학부 대학 진학을 위한 대부분의 입시에서 사용하는 선발 기준은 무엇입니까?\n", + "Processing question 2787/3952 : 에린이 열대폭풍으로 지정된후 바로 대류가 약해졌다고 분석된 이유는?_____________에린이 열대폭풍으로 지정된 후 대류가 약해진 이유는 무엇인가요?\n", + "Processing question 2788/3952 : 크로아티아 국가방위군이 형성된 해는 언제인가요?_____________크로아티아 국가방위군이 설립된 해는 언제인가요?\n", + "Processing question 2789/3952 : 다윈에 의하면 진화과정에서 가장 중요한 결정 주체는?_____________다윈에 따르면 진화과정에서 가장 중요한 결정 주체는 무엇인가요?\n", + "Processing question 2790/3952 : 잉카제국의 마지막 왕은 ?_____________잉카제국의 최후 군주는 누구였습니까?\n", + "Processing question 2791/3952 : 프리마 카테고리아 1912-1913 결승전에서 6-0으로 패배한 팀은?_____________프리마 카테고리아 1912-1913 결승전에서 6-0으로 패배한 팀은 어디에서 왔습니까?\n", + "Processing question 2792/3952 : 크라이자우어 크라이스가 가담한 것은?_____________크라이자우어 크라이스가 관여한 것은 무엇인가요?\n", + "Processing question 2793/3952 : 이집트를 통일한 나라가 섬긴 신은?_____________이집트를 통일한 국가가 섬긴 신은 누구인가요?\n", + "Processing question 2794/3952 : 알파급 잠수함들이 신뢰성을 높이기 위해 원자로를 무엇으로 대체했나?_____________알파급 잠수함들이 안전성을 높이기 위해 원자로를 무엇으로 대체했나?\n", + "Processing question 2795/3952 : 크릭이 케임브리지에 있었던 기간은?_____________크릭이 케임브리지에서 얼마나 있었나요?\n", + "Processing question 2796/3952 : 요리노부는 어떤 사건을 계기로 무가동량이 되었나?_____________요리노부가 무가동량이 되었던 사건은 무엇입니까?\n", + "Processing question 2797/3952 : 베네딕토 16세가 삼층관을 없앤 뒤 그려 넣은 것은 무엇인가?_____________삼층관을 없앤 후 베네딕토 16세가 그려 넣은 것은 무엇입니까?\n", + "Processing question 2798/3952 : 지출 대비 저수입을 강요 당하는 것은 공익사업의 어떤 특성 때문인가?_____________공익사업의 어떤 특성으로 인해 저소득층이 높은 지출 대비 저소득을 겪게 되는 이유는 무엇인가요?\n", + "Processing question 2799/3952 : 바다의 왕관을 빼앗으러 아크셔를 습격한 인물은?_____________아크셔를 습격하여 바다의 왕관을 훔친 인물은 누구인가요?\n", + "Processing question 2800/3952 : 《마라의 죽음》은 무슨 목적으로 만들었나?_____________'《마라의 죽음》은 왜 창작되었나?'\n", + "Processing question 2801/3952 : 한국전쟁은 남한이 일으켰다고 주장한 사람은?_____________한국전쟁은 남한이 시작했다고 주장한 사람은 누구인가요?\n", + "Processing question 2802/3952 : 율레스 레폰트가 디자인하기 직전 제복은 어디에서 볼 수 있는가?_____________율레스 레폰트가 디자인하기 직전 제복은 어디에서 구할 수 있나요?\n", + "Processing question 2803/3952 : 카자흐스탄에서 즐겨먹는 소시지의 주재료는 무엇인가요?_____________'카자흐스탄에서 인기 있는 소시지의 주성분은 무엇인가요?'\n", + "Processing question 2804/3952 : 대한민국 대 알제리에서 후반전 시작 후 5분만에 골을 넣은 선수는?_____________알제리와 대한민국 경기에서 후반전 시작 후 5분 만에 골을 넣은 선수는 누구인가요?\n", + "Processing question 2805/3952 : 어떤 호칭이 공의회의 승인을 받았나?_____________어떤 호칭이 공의회의 승인을 받았습니까?\n", + "Processing question 2806/3952 : 베트남 내전이면서 국제전의 모습이었던 전쟁은 언제 끝났는가?_____________베트남 내전과 국제전이 겹친 전쟁이 언제 종식되었나요?\n", + "Processing question 2807/3952 : 중공군에게 잡히지 않은 스코틀랜드군 대부분이 살아남은 곳은 터널과 어디인가?_____________스코틀랜드군 대부분이 살아남은 곳은 터널과 어디에 있나요?\n", + "Processing question 2808/3952 : 500만원의 벌금형에 처해졌던 사건은 언제 일어났나요?_____________해당 사건이 발생한 시기는 언제인가요?\n", + "Processing question 2809/3952 : 작품에서 로즈의 남자친구 역할을 맡은 배우는?_____________로즈의 연인 역할을 맡은 배우는 누구인가요?\n", + "Processing question 2810/3952 : 사용대차에서 일방이 상대방에게 목적물을 제공하는 대가는?_____________사용대차에서 일방이 상대방에게 목적물을 제공하는 대가는 무엇입니까?\n", + "Processing question 2811/3952 : 이강주처럼 공격수에서 리베로로 전향하여 최고가 되었던 인물은?_____________이강주처럼 공격수에서 리베로로 전향하여 최고가 되었던 인물은 누구인가요?\n", + "Processing question 2812/3952 : 온타리오 요새가 만들어진 연도는?_____________온타리오 요새가 지어진 연도는 언제인가요?\n", + "Processing question 2813/3952 : 192년에 곽사와 일대일로 교전을 벌인 인물은?_____________192년에 곽사와 일대일로 전투를 벌인 인물은 누구인가요?\n", + "Processing question 2814/3952 : 선형대수학을 활용하면 어려운 비선형 방정식 문제를 무엇으로 바꿀 수 있는가?_____________선형대수학을 이용하면 어떻게 어려운 비선형 방정식 문제를 단순화할 수 있나요?\n", + "Processing question 2815/3952 : MRI는 토르플렉시스 검사와 관련해 어떤 부분에서 도움을 주는가?_____________MRI는 토르플렉시스 검사와 관련해 어떤 측면에서 유용한가요?\n", + "Processing question 2816/3952 : 우라노스가 가이아의 자식들을 가둔 곳은?_____________우라노스가 가이아의 자식들을 가둔 곳은 어디인가요?\n", + "Processing question 2817/3952 : 궁펑과 결혼하던 시기, 차오관화의 소속 정당은?_____________궁펑과 결혼하던 시기에 차오관화가 속한 정당은 무엇이었습니까?\n", + "Processing question 2818/3952 : 라구엘이 교회들을 화해시키도록 지시한 인물은 누구인가요?_____________라구엘이 교회들을 화합시키도록 지시한 인물은 누구입니까?\n", + "Processing question 2819/3952 : 신뢰할 수 없는 데이터를 받는다면 무엇에 문제를 일으킬 수 있는가?_____________어떤 문제가 발생할 수 있나요, 신뢰할 수 없는 정보를 받았을 때?\n", + "Processing question 2820/3952 : 프란체스코 페레이라 코티뉴가 항해한 배는 몇 년도에 출발했나요?_____________프란체스코 페레이라 코티뉴가 항해한 배가 출발한 연도는 언제였습니까?\n", + "Processing question 2821/3952 : 정형 삼차신경통에 도움이 되지 않는 약물은?_____________정형 삼차신경통에 효과가 없는 약물은 무엇인가요?\n", + "Processing question 2822/3952 : 주체는 현상에 의해 이뤄지지 않고 존재로서 인식하지 못한다는걸 칸트는 무엇이라고 여겼는가?_____________칸트는 주체가 현상에 의해 이뤄지지 않고 존재로서 인식하지 못한다는 것을 '노우멘론'으로 여겼나요?\n", + "Processing question 2823/3952 : 당간지주를 볼 수 있는 시설은?_____________'어디서 당간지주를 관람할 수 있나요?'\n", + "Processing question 2824/3952 : 거제시에서 만세운동을 기념하는 행사가 5월 2일에 열렸던 이유는?_____________거제시에서 만세운동을 기념하는 행사가 5월 2일에 열렸던 이유가 무엇이었나요?\n", + "Processing question 2825/3952 : 한복이 등장하지 않는 부는?_____________한복이 출연하지 않는 부분은 무엇입니까?\n", + "Processing question 2826/3952 : 필수 자격으로 이슬람 신학교 졸업과 군에서 실시하는 시험 합격이 요구되는 것은?_____________이슬람 신학교 졸업과 군에서 실시하는 시험 합격이 필수 자격으로 요구되는 것은 무엇입니까?\n", + "Processing question 2827/3952 : 워싱턴과 관계있는 전시품을 볼 수 있는 곳은?_____________\"워싱턴에서 전시품을 관람할 수 있는 장소는 어디인가요?\"\n", + "Processing question 2828/3952 : 가도를 이용한 여행의 증가에 영향을 준 나라는?_____________여행을 즐기는 사람들의 수가 늘어나면서 어떤 국가가 여행 산업에 영향을 주었습니까?\n", + "Processing question 2829/3952 : 카프 구단을 첫 A클래스로 이끈 감독의 이름은?_____________카프 구단을 최초 A클래스로 이끈 감독의 이름은 무엇인가요?\n", + "Processing question 2830/3952 : 색슨족이 사용하던 언어는?_____________'색슨족이 사용하던 언어는 무엇인가요?'\n", + "Processing question 2831/3952 : 도브로 폴 전투에서 불가리아군이 패배한 해는?_____________도브로 폴 전투에서 불가리아군이 패배한 연도는 언제인가요?\n", + "Processing question 2832/3952 : 마티디아를 위해 신전을 세운 사람은 누구인가?_____________마티디아를 위해 신전을 세운 사람은 누구입니까?\n", + "Processing question 2833/3952 : 어른임을 증명해서 상좌를 차지하는 잔치를 연 동물은?_____________어른임을 입증하여 상좌를 차지하는 잔치를 연 동물은 무엇입니까?\n", + "Processing question 2834/3952 : 가울리가의 공식 시합이 종료된 날짜는?_____________가울리가의 공식 경기가 끝난 날짜는 언제인가요?\n", + "Processing question 2835/3952 : 메이지 정부의 개혁에 이의를 제기하는 가문을 뭐라고 지칭했는가?_____________가문을 뭐라고 지칭했나요 메이지 정부의 개혁에 반대하는 사람들을?\n", + "Processing question 2836/3952 : 왕위 계승 전쟁에서 이긴 사람은 누구인가?_____________'왕위 계승 전투에서 승리한 사람은 누구인가?'\n", + "Processing question 2837/3952 : 산업기술연수제도는 어느 나라의 제도를 바탕으로 만들어졌나요?_____________산업기술연수제도는 어느 국가의 제도를 기반으로 구성되었나요?\n", + "Processing question 2838/3952 : 니더슐레지엔 대관구의 유일한 지휘자는?_____________니더슐레지엔 대관구의 유일한 지휘자는 누구입니까?\n", + "Processing question 2839/3952 : 한국이 MDAP 예산을 원조 받으려면 반드시 거쳐야 하는 절차는?_____________한국이 MDAP 예산을 받기 위해 필수적으로 해야 하는 절차는 무엇인가요?\n", + "Processing question 2840/3952 : 로제스트벤스키는 음악 감독으로서 몇 년동안 일했나?_____________로제스트 벤스키가 음악 감독으로 활동한 기간은 얼마나 되나요?\n", + "Processing question 2841/3952 : 드래곤이 나쁜것을 상징한다고 주장한 분파는?_____________드래곤이 악을 상징한다고 주장한 분파는 무엇인가요?\n", + "Processing question 2842/3952 : 베토벤을 감시했을 것으로 보이는 정부는?_____________어떤 단어를 사용해야 할까요?\n", + "Processing question 2843/3952 : 미에빌이 2001년 선거에 출마해 얻은 득표 비율은?_____________미에빌이 2001년 선거에 출마해 얻은 득표 비율은 얼마였나요?\n", + "Processing question 2844/3952 : 중종이 죽은 후 왕위에 오른 인물이 거주하던 곳은?_____________중종이 사망한 후 왕위를 계승한 사람이 살았던 장소는 어디였나요?\n", + "Processing question 2845/3952 : 확증 편향을 소재로 한 작품의 제목은?_____________확증 편향을 소재로 한 작품의 제목은 무엇인가요?\n", + "Processing question 2846/3952 : 오선화가 귀국에 대한 증명을 요청한 기관은 어디인가요?_____________오선화가 귀국에 대한 증명을 요청한 단체는 어디에요?\n", + "Processing question 2847/3952 : 브라질 언론사가 연도와 국기를 가지고 조롱한 선수는?_____________브라질 언론이 연도와 국기를 사용하여 조롱한 축구 선수는 누구인가요?\n", + "Processing question 2848/3952 : 보통 국무대신이 국회의원을 같이 맡는 정치 시스템은?_____________국무대신과 국회의원이 동시에 존재하는 정치 시스템은 무엇인가요?\n", + "Processing question 2849/3952 : 카를로 피코르니에가 베버르베이크 근처 운동장에서 부상을 당한 일은 무엇이라 불리는가?_____________카를로 피코르니에가 베버르베이크 근처 운동장에서 부상을 당한 일은 무엇이라고 알려져 있나요?\n", + "Processing question 2850/3952 : 신시가지는 누가 조성하였나요?_____________신시가지를 건설한 사람은 누구인가요?\n", + "Processing question 2851/3952 : 신돈이 권력가 자식의 빠른 출세를 막기 위해 실행한 것은?_____________'신돈이 권력가 자식의 빠른 승진을 막기 위해 행한 행동은?'\n", + "Processing question 2852/3952 : 바버, 리게티, 스트라빈스키 등이 피아노 협주곡을 작곡한 시기는?_____________클래식 음악 작곡가들이 피아노 협주곡을 작곡한 시기는 언제인가요?\n", + "Processing question 2853/3952 : 중동지역에서 유일하게 성공한 경제 자유구역은?_____________중동에서 유일하게 성공한 경제 자유구역은 어디인가요?\n", + "Processing question 2854/3952 : 이브라임 퍄샤는 누구의 자식인가?_____________이브라힘 푸샤는 누구의 자손입니까?\n", + "Processing question 2855/3952 : 《도구적 이성 비판》에서 '객관적 이성'의 상대 개념은 무엇인가?_____________《도구적 이성 비판》에서 '객관적 이성'의 상대 개념은 무엇입니까?\n", + "Processing question 2856/3952 : 2018년에 김정은을 중화인민공화국에 초대한 사람은?_____________김정은을 2018년에 중국에 초대한 사람은 누구였습니까?\n", + "Processing question 2857/3952 : 무씨가 죽은 이후 허망해하는 이융기에게 고력사가 권유한 장소는 어디인가?_____________이융기가 무씨의 사망으로 괴로워할 때 고력사가 추천한 장소는 어디인가요?\n", + "Processing question 2858/3952 : 반대당과 협의하여 제임스 2세를 폐위시킨 정당은?_____________어떤 정당이 반대당과 협의하여 제임스 2세를 폐위시킨 것인가요?\n", + "Processing question 2859/3952 : 니켈은 어떤 과정을 통하여 추출이 가능한가요?_____________니켈은 어떻게 추출되나요?\n", + "Processing question 2860/3952 : 모닝스타를 사용하기 시작한 시기는?_____________\"모닝스타를 이용하기 시작한 때는 언제인가요?\"\n", + "Processing question 2861/3952 : 과거 기록물에서 알 수 있는 지진의 강도는?_____________과거 기록물에서 파악할 수 있는 지진의 세기는 무엇인가요?\n", + "Processing question 2862/3952 : 밀풍군 탄의 아들이 김씨의 양자가 된 해는?_____________'밀풍군의 아들이 김씨의 자녀가 된 해는?'\n", + "Processing question 2863/3952 : 금붕어의 경우에 신장을 다치면 무엇이 재생되나요?_____________금붕어의 경우에 신장을 다치면 무엇이 재생되는가요?\n", + "Processing question 2864/3952 : 한나 아렌트가 악의 평범성에 대해 이야기한 저서는?_____________한나 아렌트가 악의 평범성에 대해 이야기한 책은 무엇인가요?\n", + "Processing question 2865/3952 : 노퍽 카운티에서 탈출한 노예 3명을 지켜준 지휘관의 이름은?_____________노퍽 카운티에서 도망친 노예 3명을 지킨 지휘관의 이름은 무엇입니까?\n", + "Processing question 2866/3952 : 봉기군과 함께 영국군의 협상가를 살인한 경찰의 소속 지역은?_____________봉기군과 함께 영국군의 협상가를 살해한 경찰의 소속 지역은 어디였나요?\n", + "Processing question 2867/3952 : 케트 막 마가트의 라이벌은?_____________케트 막 마가트의 경쟁자는 누구인가요?\n", + "Processing question 2868/3952 : 긴 시간동안 진화가 이루어지지 않은 동물은?_____________어떤 동물은 오랜 시간 동안 진화가 일어나지 않았나요?\n", + "Processing question 2869/3952 : 인간 몸의 본질적 특성이 확립되기 시작한 시기는?_____________인간 신체의 본질적 특성이 확립되기 시작한 시기는 언제인가요?\n", + "Processing question 2870/3952 : 마흐무드 알카슈가리가 <튀르크어 대사전>을 만들기 시작한 년도는?_____________마흐무드 알카슈가리가 <튀르크어 대사전>을 시작한 해는 언제였나요?\n", + "Processing question 2871/3952 : 아르군 칸이 호노리오 4세에게 보낸 친서의 번역본이 보괸되어 있는 곳은?_____________아르군 칸이 호노리오 4세에게 보낸 편지의 번역본이 저장되어 있는 장소는 어디인가요?\n", + "Processing question 2872/3952 : 양자 컴퓨터에서 \"모든 예제의 정답을 맞출 가능성이 높다\"의 의미를 가진 말은?_____________양자 컴퓨터에서 \"모든 예제의 정답을 맞출 가능성이 높다\"의 의미를 가진 말은 무엇인가요?\n", + "Processing question 2873/3952 : 우부승지와 함께 윤원형과 이기를 비판하고 내쫓는데 가담한 인물의 직책은?_____________누구와 함께 윤원형과 이기를 비판하고 내쫓는데 가담한 인물의 직책은 무엇인가요?\n", + "Processing question 2874/3952 : 체임벌린의 국내 정책 중, 인구의 의료 조사를 위해 만든 것은?_____________체임벌린의 국내 정책 중, 인구의 의료 조사를 위해 만든 것은 무엇인가요?\n", + "Processing question 2875/3952 : 타끼야는 이슬람의 어느 종파에게 강력한 지지를 받는가?_____________타끼야는 이슬람의 어느 분파에게 강력한 후원을 받나요?\n", + "Processing question 2876/3952 : 사망할 때까지 보릴과 동맹 관계를 유지한 사람은?_____________누가 사망할 때까지 보릴과 동맹 관계를 유지했나요?\n", + "Processing question 2877/3952 : 최초의 총장은 몇 년도까지 임기를 유지했는가?_____________최초의 총장이 얼마나 오래 임기를 유지했습니까?\n", + "Processing question 2878/3952 : 플레이어가 수직적인 전투를 펼쳐야 하는 지형은?_____________어떤 지형에서 플레이어는 상승적 전투를 해야 할까요?\n", + "Processing question 2879/3952 : 사산성에 대한 설명이 남아 있는 기록은 무엇인가?_____________사산성에 대한 기록이 남아 있는 문헌은 무엇인가요?\n", + "Processing question 2880/3952 : 동체부에 있는 용을 그릴때 무엇을 사용하였는가?_____________용을 그릴 때 사용한 것은 무엇인가요?\n", + "Processing question 2881/3952 : 마리아의 큰오빠는 어느 나라에서 태어났나요?_____________마리아의 형은 어느 국가에서 출생했습니까?\n", + "Processing question 2882/3952 : 에이든이 다룰 수 있는 물체는 보통 어떠한 색을 하고 있는가?_____________에이든이 다룰 수 있는 물체는 일반적으로 어떤 색을 가지고 있나요?\n", + "Processing question 2883/3952 : 물질파 가설을 바탕으로 발표된 방정식은?_____________'물질파 가설을 기반으로 발표된 방정식은 무엇입니까?'\n", + "Processing question 2884/3952 : 아후가니스탄은 무슨 장르인가?_____________아후가니스탄은 어떤 유형인가요?\n", + "Processing question 2885/3952 : 훼손 시에 대비할 수 있는 장비나 설비가 완벽하지 않아 패배하게 된 전투는?_____________훼손 시에 준비된 장비나 설비가 부족해서 패배하게 된 전투는 무엇인가요?\n", + "Processing question 2886/3952 : 데카브리스트 중 처형되고 감옥에 간 사람들을 제외한 나머지는 어디로 귀양 가게 되었나?_____________데카브리스트 중 처형되고 감옥에 간 사람들을 제외한 나머지는 어디로 추방되었나?\n", + "Processing question 2887/3952 : 관측천문학 부문에서 별의 광도 계측에 사용되는 것은?_____________별의 광도를 측정하는 데 사용되는 것은 무엇인가요?\n", + "Processing question 2888/3952 : 니샤푸르를 다스리기로 한 군주는?_____________'니샤푸르를 통치한 지도자는?'\n", + "Processing question 2889/3952 : 매사추세츠 공과대학교에 있는 PDP-1을 제공한 회사는?_____________PDP-1을 제공한 회사는 누구인가요?\n", + "Processing question 2890/3952 : 임오군란이 일어났을 때 명성황후가 도피한 곳은?_____________명성황후가 도피한 곳은 어디였습니까?\n", + "Processing question 2891/3952 : 샤이반계 유목민들이 주치 울루스의 소유권을 두고 분쟁한 상대는?_____________샤이반계 유목민들이 주치 울루스의 소유권을 두고 분쟁한 상대는 누구였나요?\n", + "Processing question 2892/3952 : 떠돌이 빈곤층이 모이는 형태의 도시문제가 발생하는 곳은?_____________떠돌이 빈곤층이 집결하는 도시문제가 발생하는 곳은 어디인가요?\n", + "Processing question 2893/3952 : 스가 요시히데가 브리핑을 진행했던 년도는?_____________스가 요시히데가 브리핑을 진행한 연도는 언제였습니까?\n", + "Processing question 2894/3952 : 보니파시오 5세의 선대 교황은 누구였나?_____________보니파시오 5세의 선대 교황은 누구인가요?\n", + "Processing question 2895/3952 : 지크 예거가 키요미에게 넘기려 한 인물은 어디에 거주하고 있었나요?_____________지크 예거가 키요미에게 넘기려 한 인물은 어느 장소에 살았습니까?\n", + "Processing question 2896/3952 : 2차 대륙회의는 언제 열렸나?_____________2차 대륙회의는 언제 개최되었습니까?\n", + "Processing question 2897/3952 : 불타는 수도원에서 형제들이 찾아냈지만 그 이후 볼 수 없었던 것은?_____________불타는 수도원에서 형제들이 발견했지만 그 이후 사라진 것은 무엇입니까?\n", + "Processing question 2898/3952 : CIS 탄생의 계기가 된 인물은 누구인가?_____________CIS의 출현을 촉발시킨 인물은 누구인가요?\n", + "Processing question 2899/3952 : 보다스가 교장으로 재임하고 있는 곳은 어디인가?_____________보다스가 교장으로 지내고 있는 장소는 어디인가요?\n", + "Processing question 2900/3952 : 서울 지역 대학교 총학생회에 도움을 준 회사는?_____________어떤 기업이 서울 지역 대학교 총학생회에 지원을 했나요?\n", + "Processing question 2901/3952 : 1919년 비트겐슈타인의 원고를 대신 출판한 사람은?_____________비트겐슈타인의 원고를 대신 출판한 사람은 누구인가요?\n", + "Processing question 2902/3952 : 어셈블리의 구성 요소 중 어셈블리에 대한 고유값을 가진 것은?_____________어셈블리의 구성 요소 중에 고유값을 가진 것은 무엇인가요?\n", + "Processing question 2903/3952 : 2005년에 <선군화원에 꽃들은 만발한다>라는 글이 실린 언론은?_____________2005년에 <선군화원에 꽃들은 만발한다>라는 글이 실린 언론은 무엇입니까?\n", + "Processing question 2904/3952 : 인천 아시안 게임에서 북한의 인공기는 누구의 반대로 없어졌나요?_____________인천 아시안 게임에서 북한의 인공기는 누구의 반대로 사라졌나요?\n", + "Processing question 2905/3952 : 검은담비가 주로 먹는 식물은 무엇인가?_____________'검은담비가 대부분 먹는 식물은 어떤 것인가?'\n", + "Processing question 2906/3952 : 후루오야 마사토에게 남우주연상을 두번이나 안겨준 작품은?_____________'후루오야 마사토에게 두 번째로 남우주연상을 수여한 작품은 무엇인가요?'\n", + "Processing question 2907/3952 : 스빈후부드가 신분제 중심의 핀란드 국회를 개혁하는데 큰 영향을 미쳤던 시기는?_____________스빈후부드가 핀란드 국회를 개혁하는데 큰 영향을 미쳤던 시기는 언제였나요?\n", + "Processing question 2908/3952 : 자본주의적 성향을 띠는 농업 구조는 무엇에서부터 발전됐는가?_____________농업 구조가 자본주의적인 성향을 가지게 된 원인은 무엇인가요?\n", + "Processing question 2909/3952 : 궁정 유대인의 사업 대상은?_____________궁정 유대인의 사업 대상은 무엇인가요?\n", + "Processing question 2910/3952 : Lee Ross의 실험 중 활용된 에세이에서 입장 차이의 기준이 된 인물은?_____________Lee Ross의 실험 중 활용된 에세이에서 입장 차이의 기준이 된 인물은 누구인가요?\n", + "Processing question 2911/3952 : 주종찬이 그의 손에서 나오는 피로 쓴 글자는?_____________주종찬이 그의 손에서 나오는 피로 쓴 글자는 무엇인가요?\n", + "Processing question 2912/3952 : 김 루치아의 재판 결과 내려진 선고는?_____________'김 루치아의 재판 결과는 무엇인가요?'\n", + "Processing question 2913/3952 : 손님이 집에서 신발을 벗는 경우가 거의 없는 나라는?_____________어떤 국가에서는 거의 모든 사람이 집 안에서 신발을 벗는 경우가 많다고 알려져 있나요?\n", + "Processing question 2914/3952 : 니시노미야 구장에서 삼진 신기록이 나왔을 당시 아웃당한 주자는 누구인가?_____________니시노미야 구장에서 삼진 신기록이 나왔을 당시 아웃당한 주자는 누구였습니까?\n", + "Processing question 2915/3952 : 주요 그리스 국가 중 필리포스에게 항복하지 않은 국가는?_____________어떤 국가가 필리포스에게 항복하지 않았습니까?\n", + "Processing question 2916/3952 : 미국 전 지역과 영연방에서 인기가 많았던 구두약은?_____________어떤 신발 수선용품이 미국과 영연방 전 지역에서 인기가 많았나요?\n", + "Processing question 2917/3952 : 진우량이 도피처로 결정한 곳은 어디인가?_____________진우량이 도망칠 곳은 어디인가요?\n", + "Processing question 2918/3952 : 죽림사 세존괘불탱은 어떤 재료 위에 그려졌는가?_____________죽림사 세존괘불탱은 어떤 재료 위에 그려졌습니까?\n", + "Processing question 2919/3952 : 발전소의 연료로 이용되며 선박의 추진에 영향을 미치는 것은 무엇에 의해 만들어지나요?_____________무엇이 선박의 움직임을 제공하는 연료로 사용되는 것인가요?\n", + "Processing question 2920/3952 : 구슬 모양이 특징인 불상의 머리부분은 무엇을 본떠 만든것인가?_____________불상의 머리부분은 어떤 형태의 모래알을 본떠 만들어졌나요?\n", + "Processing question 2921/3952 : 코로나 시기에 전랑 외교는 어떤 단어로 쓰이기 시작했나요?_____________코로나 시기에 전랑 외교는 어떤 용어로 불리기 시작했나요?\n", + "Processing question 2922/3952 : 아우구스투스에게서 황제의 징표를 빼앗은 사람은 어느 민족인가?_____________황제의 징표를 빼앗은 사람이 어느 국가 출신인가요?\n", + "Processing question 2923/3952 : 개 홍역 바이러스가 그늘진 곳보다 더 오래 생존 가능한 곳은?_____________개 홍역 바이러스가 그늘진 곳보다 더 오래 생존 가능한 장소는 어디인가요?\n", + "Processing question 2924/3952 : 자캐오가 회개의 결단을 표현한 말은?_____________자캐오가 회개의 결단을 표현한 말은 무엇인가요?\n", + "Processing question 2925/3952 : 기원전 379년 테베의 시민궐기를 이끈 단체는?_____________테베의 시민궐기를 이끈 단체는 어떤 조직이었나요?\n", + "Processing question 2926/3952 : 윤치호가 국방군 양성을 위해 만들자고 건의한 것은?_____________윤치호가 국방군 양성을 위해 제안한 것은 무엇인가요?\n", + "Processing question 2927/3952 : 모스크바 아나키스트 그룹 연맹의 주요 활동 대상은?_____________'모스크바 아나키스트 그룹 연맹이 주로 공격하는 대상은?'\n", + "Processing question 2928/3952 : 컴퓨터가 실험실에서 보편적으로 이용되기 시작한 시기는?_____________컴퓨터가 실험실에서 널리 사용되기 시작한 시기는 언제인가요?\n", + "Processing question 2929/3952 : 이집트의 통치자가 되기 위해 호루스가 대적한 것은 누구인가?_____________누가 이집트의 통치자가 되기 위해 호루스와 대결했습니까?\n", + "Processing question 2930/3952 : 김학규가 김준연과 한민당을 싫어하게 된 계기는?_____________'김학규가 김준연과 한민당을 싫어하게 된 이유는 무엇인가요?'\n", + "Processing question 2931/3952 : 오윤부의 이름 앞에 붙었던 칭호는?_____________오윤부의 이름 앞에 붙었던 칭호는 무엇이었나요?\n", + "Processing question 2932/3952 : 켈시 그래머가 엑스맨: 최후의 전쟁에서 비스트역을 연기한 후에 다시 그 역으로 출연한 작품은?_____________켈시 그래머가 엑스맨: 최후의 전쟁에서 비스트역을 연기한 후에 다시 그 역으로 출연한 작품은 무엇인가요?\n", + "Processing question 2933/3952 : 유성 생식을 하지 않는 생물의 종류는?_____________어떤 종류의 생물이 유성 생식을 하지 않는가?\n", + "Processing question 2934/3952 : 불가살이가 먹은 무기들을 사용하는 장수는 실제로 어느 나라 사람인가?_____________불가살이가 먹은 무기들을 사용하는 장수는 실제로 어느 국적을 가진 사람인가요?\n", + "Processing question 2935/3952 : 로봇을 제어하기 위해 설치해야 하는 것은?_____________로봇을 조작하기 위해 설치해야 하는 것은 무엇입니까?\n", + "Processing question 2936/3952 : 엘리너 여사는 트루면 대통령으로부터 어떤 직무를 위임 받았는가?_____________엘리너 여사는 트루만 대통령으로부터 어떤 임무를 맡았습니까?\n", + "Processing question 2937/3952 : 1859년 2월에 코친차이나의 사이공에 원정간 인물은?_____________사이공에 원정간 인물은 누구였나요?\n", + "Processing question 2938/3952 : 진성이 좋아하던 물건 중 장모가 싫어했던 것은?_____________진성이 선호했던 물품 중 장모가 반대했던 것은 무엇인가요?\n", + "Processing question 2939/3952 : 1996년의 설 특집 드라마는 어떤 축제에서 특별상을 받았나요?_____________어떤 축제에서 1996년의 설 특집 드라마가 특별상을 수상했습니까?\n", + "Processing question 2940/3952 : 제시카 런스포드 법'이 만들어진 것은 언제인가?_____________'제시카 런스포드 법'이 제정된 날짜는 언제입니까?\n", + "Processing question 2941/3952 : 정부의 인프라 구축으로 인해 충남대와 더불어 인터넷 관련 혜택을 본 학교는?_____________충남대학교와 같이 정부의 인프라 구축으로 인터넷 혜택을 받는 학교는 어디인가요?\n", + "Processing question 2942/3952 : 가성 소다 공장의 리빌딩이 완료된 것은 언제인가?_____________가성 소다 공장의 리빌딩이 완료된 날짜는 언제였습니까?\n", + "Processing question 2943/3952 : 다린 켄드릭이 구속된 곳은 어디인가?_____________다린 켄드릭이 체포된 장소는 어디입니까?\n", + "Processing question 2944/3952 : 일제강점기 당시 청소년 미술 교육을 진행한 곳은?_____________일제강점기 시대에 청소년 미술 교육을 실시한 곳은 어디였나요?\n", + "Processing question 2945/3952 : 윌리엄 3세가 2개 지역의 왕이었던 해는?_____________윌리엄 3세가 2개 지역의 군주였던 해는 무엇입니까?\n", + "Processing question 2946/3952 : 손지환이 부회장 역할을 맡았던 조직에서 설치하여 운영한 것은?_____________손지환이 부회장 역할을 맡았던 조직에서 설치하여 운영한 것은 무엇입니까?\n", + "Processing question 2947/3952 : 강화 샤이닝 라이더 킥에서의 에너지는 어떤 모양을 착안하여 만들어졌는가?_____________강화 샤이닝 라이더 킥에서의 에너지는 어떤 형태를 모방하여 생성되었습니까?\n", + "Processing question 2948/3952 : 루카스 바첸로데 다음으로 대주교가 된 사람은?_____________다음 대주교는 누구인가요?\n", + "Processing question 2949/3952 : 후안 마요르가는 <다윈의 거북이>로 어떠한 결과를 얻었나?_____________다윈의 거북이로 인해 후안 마요르가가 어떤 성과를 얻었습니까?\n", + "Processing question 2950/3952 : 2가지의 공국으로 나눠지게 된 곳은 어디인가요?_____________어디에서 2개의 국가로 분할되었습니까?\n", + "Processing question 2951/3952 : 사회주의가 자유민주주의처럼 보호받아야한다고 장면이 주장했던 곳은?_____________사회주의가 자유민주주의처럼 보호받아야한다고 주장했던 곳은 어디였나요?\n", + "Processing question 2952/3952 : 계속되는 러시아의 세력 확장에 강희제가 지은 건물은?_____________강희제가 지은 건물은 무엇인가요?\n", + "Processing question 2953/3952 : 도자와시가 참석한 회의의 결과는 언제 발표되었나요?_____________도자와시가 참석한 회의의 결과가 발표된 날짜는 언제였나요?\n", + "Processing question 2954/3952 : 아이제나흐파(派)의 중요인물은 누구인가요?_____________아이제나흐파(파)의 주요 인물은 누구인가요?\n", + "Processing question 2955/3952 : 펠리페는 어떤 나라를 대표하여 바르셀로나 올림픽에 참가하였는가?_____________펠리페는 어느 국가를 대표하여 바르셀로나 올림픽에 참가했습니까?\n", + "Processing question 2956/3952 : 영국 해군이 다시 후장포를 사용하기로 한 것은 몇 년도인가?_____________영국 해군이 후장포를 재사용하기로 한 연도는 언제인가요?\n", + "Processing question 2957/3952 : 제파 디 미노는 친구의 아내에게 함께 복수하기를 부탁하며 무엇을 건네었나?_____________제파 디 미노는 친구의 배우자에게 함께 보복하기를 요청하며 무엇을 전달했습니까?\n", + "Processing question 2958/3952 : 당나라군의 몰락에 결정적인 역할을 한 세력은 누구인가?_____________당나라군의 몰락에 결정적인 역할을 한 세력은 누구였습니까?\n", + "Processing question 2959/3952 : 일본 역사상 처음으로 패배한 무사가 할복하지 않게 도와준 사람은?_____________무사가 처음으로 패배한 사람을 도와준 사람은 누구였나요?\n", + "Processing question 2960/3952 : 존 릿지는 누구와 정치적인 힘겨루기를 하였나?_____________존 릿지가 누구와 정치적인 대립을 겪었나요?\n", + "Processing question 2961/3952 : 쿠 훌린의 아들이 콘늘라임을 알고 쿠 훌린에게 알리려 한 사람은?_____________쿠 훌린의 아들이 콘늘라임을 알고 쿠 훌린에게 알리려 한 사람은 누구인가요?\n", + "Processing question 2962/3952 : 호키가와 강 하부와 연결되어있는 강은?_____________'호키가와 강 하부와 연결되어있는 강은 무엇인가요?'\n", + "Processing question 2963/3952 : 게오르크의 음악에 대한 천재성은 언제부터 사람들에게 보여졌나요?_____________'게오르크가 음악적 재능을 처음으로 드러낸 시기는 언제인가요?'\n", + "Processing question 2964/3952 : 마르크수 주의를 주장하는 사람들이 자본국가를 어떻게 지칭하는가?_____________마르크수 주의를 주장하는 사람들이 자본국가를 어떻게 부르나요?\n", + "Processing question 2965/3952 : 전기배선용에는 무엇에 의한 손상을 막기 위해 온도조정기능이 있나요?_____________전기배선용에서 손상을 방지하기 위해 온도를 조절하는 장치가 있는가요?\n", + "Processing question 2966/3952 : 윤치호가 미국을 더이상 정의와 자유의 국가라 여기지 않게 된 것은 어떤 조약 때문인가?_____________윤치호가 미국을 더 이상 자유와 정의의 나라로 보지 않게 된 이유는 어떤 협약 때문인가요?\n", + "Processing question 2967/3952 : 데네볼라가 에너지 생산을 위해 연소시키는 물질은 무엇인가?_____________데네볼라가 에너지를 생산하기 위해 연소시키는 물질은 무엇인가요?\n", + "Processing question 2968/3952 : 신한청년당이 파리강화회의에 특파한 인물은 누구인가?_____________파리강화회의에 특파한 인물은 누구인가요?\n", + "Processing question 2969/3952 : 오영제의 직업은 무엇인가?_____________오영제는 어떤 일을 하나요?\n", + "Processing question 2970/3952 : 선교사들과 함께 잠자리와 음식을 제공받은 인물은 누구인가?_____________누가 선교사들과 함께 잠자리와 음식을 제공받았습니까?\n", + "Processing question 2971/3952 : 동관이 요나라를 침략하기 위해 동맹을 맺은 나라는?_____________\"동관이 요나라를 침략하기 위해 동맹을 맺은 국가는 무엇입니까?\"\n", + "Processing question 2972/3952 : 그림 형제가 처음 엮어낸 책은?_____________어떤 작가가 처음으로 엮어낸 책은 무엇인가요?\n", + "Processing question 2973/3952 : 상품화폐의 인플레이션을 제재하지 못하도록 하는 것은?_____________상품화폐의 인플레이션을 억제하지 못하도록 하는 요인은 무엇인가요?\n", + "Processing question 2974/3952 : 터널 내의 환기 방식은 횡류식에서 어떤 방식으로 바뀌었나요?_____________터널 내의 환기 방식은 횡류식에서 어떻게 변화되었습니까?\n", + "Processing question 2975/3952 : 해왕성의 불규칙 위성 중 해왕성과 가장 멀리 떨어진 것은?_____________해왕성의 불규칙 위성 중 해왕성과 가장 먼 곳에 있는 위성은 무엇인가요?\n", + "Processing question 2976/3952 : 고려 고종 때 유일하게 구제약으로 쓰였던 것은 무엇인가요?_____________고려 고종 시기에 유일하게 구제약으로 사용된 것은 무엇입니까?\n", + "Processing question 2977/3952 : 현생 양서류의 호흡방식을 이용해 몸 밖으로 내보낼 수 있는 것은?_____________어떤 것이 현생 양서류의 호흡방식을 이용하여 몸 밖으로 내보낼 수 있는 것인가요?\n", + "Processing question 2978/3952 : 키루스가 형을 몰래 죽이려 했던 계획을 사전에 고발했던 인물은?_____________'키루스가 형을 몰래 죽이려 했던 계획을 사전에 폭로한 사람은 누구였나요?'\n", + "Processing question 2979/3952 : 철불상이 많이 제작된 시대는 언제인가?_____________철불상이 많이 생산된 시대는 언제였습니까?\n", + "Processing question 2980/3952 : 마블고양이가 다른 고양이들에 비해 더 긴 것은 무엇인가요?_____________마블고양이가 다른 고양이들에 비해 더 긴 것은 무엇입니까?\n", + "Processing question 2981/3952 : 일리아드 첫 장면에 나오는 것은 누구인가?_____________'일리아드의 시작에 등장하는 인물은 누구인가?'\n", + "Processing question 2982/3952 : 목섬의 동백나무는 어디서 유래됐다고 하는가?_____________목섬의 동백나무는 어디에서 비롯되었다고 알려져 있나요?\n", + "Processing question 2983/3952 : 철갑기병이 주로 사용하던 무기는?_____________철갑기병이 주로 사용하던 무기는 무엇이었습니까?\n", + "Processing question 2984/3952 : 적진의 측면을 먼저 무너뜨리고 그 우위로 적의 중앙을 공격하는 전략은?_____________적진의 측면을 먼저 공격하여 적의 중앙을 약화시키는 전략은 무엇인가요?\n", + "Processing question 2985/3952 : 카르타고군이 전투에 사용한 동물은?_____________카르타고군이 전투에 사용한 동물은 무엇인가요?\n", + "Processing question 2986/3952 : 보티건은 누구의 조언을 듣고 탑을 건설하려 했나요?_____________보티건은 누구의 충고를 따라 탑을 건설하려 했나요?\n", + "Processing question 2987/3952 : 장민호를 다른 연예인과 비유해 설명한 인물은?_____________다른 스타들과 비교해 설명한 인물은 누구인가요?\n", + "Processing question 2988/3952 : 니어브가 핀 막 쿠월을 만나러 갈 때 이용한 수단은?_____________니어브가 핀 막 쿠월을 만나러 갈 때 이용한 교통 수단은 무엇이었나요?\n", + "Processing question 2989/3952 : 이자성이 산해군을 공격할 때 동원한 군사의 수는?_____________이자성이 산해군을 침공할 때 동원한 군대의 인원은 얼마인가요?\n", + "Processing question 2990/3952 : 타지마할은 누구의 무덤인가요?_____________누구의 무덤이 타지마할인가요?\n", + "Processing question 2991/3952 : 키토 지역 토착민들이 잉카 군대에게 큰 타격을 준 곳은?_____________키토 지역 토착민들이 잉카 군대에게 큰 타격을 준 곳은 어디였습니까?\n", + "Processing question 2992/3952 : 백제가 2가지 언어를 사용하는 나라였을 수 있다고 주장한 사람은?_____________백제가 두 가지 다른 언어를 사용했을 수 있다고 주장한 사람은 누구인가요?\n", + "Processing question 2993/3952 : 지오영과 유통마진을 나누어 갖는 기업이 공급하는 마스크 비율은?_____________'마스크를 제공하는 기업 중에서 지오영과 유통 이익을 나누는 기업의 비율은 얼마인가요?'\n", + "Processing question 2994/3952 : 스카를라티가 처음 나폴리에 거주한 것은 몇 년인가?_____________스카를라티가 처음 나폴리에 살았던 시기는 몇 년이었습니까?\n", + "Processing question 2995/3952 : 루키우스가 율리우스 법을 통과시킨 시기는?_____________루키우스가 율리우스 법을 통과시킨 시기는 언제였나요?\n", + "Processing question 2996/3952 : 나이가 아닌 신분을 기준으로 할인이 적용되는 곳은?_____________어떤 자격을 기준으로 할인이 적용되는 곳은 어디인가요?\n", + "Processing question 2997/3952 : 시민주의적 성향을 보인 정기 간행물은 무엇인가?_____________어떤 정기 간행물이 시민 참여를 장려하는가?\n", + "Processing question 2998/3952 : 용화사 내부의 오른쪽에 있는 작은 바위에서 누가 자주 기도하나?_____________누가 용화사 내부 오른편 작은 바위에서 자주 기도하나?\n", + "Processing question 2999/3952 : 벨기에는 어느 전쟁에서 패배하여 독일군에 의해 요새를 잃게 되었나요?_____________어느 전쟁에서 벨기에는 패배하여 독일군에 의해 요새를 잃게 되었습니까?\n", + "Processing question 3000/3952 : 브르너는 카롤루스 마르텔루스가 교회 토지를 빼앗아 어떤 군인을 키우려 했다고 주장했나?_____________브르너는 카롤루스 마르텔루스가 교회 토지를 빼앗아 어떤 군인을 키우려 했다고 주장했다고 말한 적이 있나요?\n", + "Processing question 3001/3952 : 젊어서부터 군대에서 두각을 나타낸 사람은?_____________누가 젊어서부터 군대에서 두각을 나타냈나요?\n", + "Processing question 3002/3952 : 스밀레츠는 어느 나라의 간섭에 의해 황제가 되었는가?_____________스밀레츠는 어떤 국가의 개입으로 황제가 되었습니까?\n", + "Processing question 3003/3952 : 오자와가 핼시를 꾀어내기 위해 손실을 감수한 것은?_____________오자와가 핼시를 얻기 위해 손해를 봤다는 것은 무엇입니까?\n", + "Processing question 3004/3952 : 네덜란드 국가대표팀에서 가장 많은 골을 넣은 선수는?_____________네덜란드 국가대표팀에서 가장 많은 득점을 기록한 선수는 누구인가요?\n", + "Processing question 3005/3952 : 후고의 추대에 도움을 줬다는 의심을 사 바벤베르크에게 공격받은 사람은?_____________바벤베르크가 후고의 추대에 도움을 줬다는 의심을 사는 사람은 누구인가요?\n", + "Processing question 3006/3952 : 오스만 제국의 황제가 누구한테 권위를 행사하기 위해 칼리파권을 양위받았나?_____________오스만 제국의 황제가 누구에게 권위를 부여받기 위해 칼리파권을 양위받았나요?\n", + "Processing question 3007/3952 : 레닌의 선봉대로 러시아 제국을 완벽히 무너뜨린 단체는?_____________어떤 집단이 러시아 제국을 완전히 붕괴시킨 것으로 알려져 있는지 알고 계십니까?\n", + "Processing question 3008/3952 : 위험중립 측도에서의 적정가격이 실제로 사용될 수 있게 하는 것은?_____________적정가격이 사용될 수 있게 하는 방법은 무엇인가요?\n", + "Processing question 3009/3952 : 세균은 사람의 몸속에 들어올 때 어디로 들어오나?_____________세균이 인체에 침투하는 방법은 어디인가요?\n", + "Processing question 3010/3952 : 면역력이 약한 환자의 경우, 항생제 치료법 효과가 미미할 수 있는 원인은 무엇인가?_____________면역력이 낮은 환자의 경우, 항생제 치료법의 효과가 제한될 수 있는 이유는 무엇인가요?\n", + "Processing question 3011/3952 : 2014년 7월 14일 이후로 고속도로 노선을 지정하는 주체는?_____________누가 2014년 7월 14일 이후에 고속도로 노선을 지정하나요?\n", + "Processing question 3012/3952 : 김조원이 청와대 민정수석이 되는 것을 반대한 사람은?_____________김조원이 청와대 민정수석으로 임명되는 것에 반대한 사람은 누구인가요?\n", + "Processing question 3013/3952 : 루체왕국은 아시아지역의 몇 개의 거점이 연합해서 만들어졌나?_____________루체왕국은 아시아 지역에서 몇 개의 거점이 통합하여 생성되었나요?\n", + "Processing question 3014/3952 : 일본에서 지진 피해를 입지 않은 건물은 무엇인가?_____________'일본에서 지진 피해를 입지 않은 건물의 종류는 무엇인가?'\n", + "Processing question 3015/3952 : 조지아 식민지의 칙허장을 발급받은 자가 금지했던 제도는?_____________조지아 식민지의 칙허장을 발급받은 자가 금지했던 제도는 무엇인가요?\n", + "Processing question 3016/3952 : 플레이어가 이길 승산이 있는지 예측할 수 있는 문서는?_____________플레이어가 승리할 가능성을 예측할 수 있는 문서는 무엇인가요?\n", + "Processing question 3017/3952 : 후두의 영어표현은 누구에게서 비롯된 것인가?_____________후두의 영어 용어는 누구에게서 유래되었습니까?\n", + "Processing question 3018/3952 : 황금 양을 가지면 왕이 되어야 한다는 티에스테스의 의견에 동의한 인물은?_____________누가 황금 양을 소유하면 왕이 되어야 한다는 티에스테스의 견해에 동의했습니까?\n", + "Processing question 3019/3952 : 보속은 어떤 종교에서 속죄 행위라는 의미로 쓰이나요?_____________보속은 어떤 종교에서 속죄 행위라는 의미로 쓰이나요?\n", + "Processing question 3020/3952 : 그림 형제가 《소년의 마적》에 영향을 받아 출간한 서적은?_____________'그림 형제가 《소년의 마적》에 영향을 받아 출간한 책은 무엇인가요?'\n", + "Processing question 3021/3952 : 윈스턴 처칠 총리 이전의 보수당 총리는?_____________윈스턴 처칠 총리 이전의 보수당 총리는 누구였나요?\n", + "Processing question 3022/3952 : 현재 사용되는 가타카나를 체계화한 법규가 발표된 해는?_____________가타카나를 체계적으로 정리한 법규가 발표된 해는 언제인가요?\n", + "Processing question 3023/3952 : 엘디아의 초대 황제라고 알려졌던 사람을 노예로 부리던 사람은 누구인가?_____________누가 엘디아의 초대 황제로 알려졌던 사람을 노예로 부린 사람인가요?\n", + "Processing question 3024/3952 : 이중로의 얼굴 그림에서 옷 테두리와 같은 색으로 그린 부분은?_____________이중로의 얼굴 그림에서 옷 테두리와 같은 색으로 그린 부분은 무엇인가요?\n", + "Processing question 3025/3952 : 압둘라의 아버지를 죽게한 병 이름은?_____________압둘라의 아버지를 죽게한 병 이름은 무엇인가요?\n", + "Processing question 3026/3952 : 이보 안드리치가 시집 <알리야 제르젤레즈의 여행>을 발표한 해는 언제인가?_____________'이보 안드리치가 시집 <알리야 제르젤레즈의 여행>을 출간한 년도는 언제인가?'\n", + "Processing question 3027/3952 : 《볼티모어 선》지에서 피닉스와 위더스푼을 호평한 사람은?_____________'《볼티모어 선》지에서 피닉스와 위더스푼을 칭찬한 사람은 누구인가?'\n", + "Processing question 3028/3952 : 프티 부르주아적 급진주의'의 형성 가능성이 있는 계층은?_____________'프티 부르주아적 급진주의'의 형성 가능성이 있는 계층은 누구인가요?\n", + "Processing question 3029/3952 : 농업과 목춥업 등이 구축되는 근원이며, 생산력의 근간은?_____________농업 및 목축업이 발전되는 근원이며, 생산력의 기반이 되는 것은 무엇입니까?\n", + "Processing question 3030/3952 : 액운공사에 대한 설명이 나와있는 저서는?_____________액운공사에 대한 설명이 포함된 책은 무엇인가요?\n", + "Processing question 3031/3952 : 1999년에서 2004년까지 비타민 A 보충으로 목숨을 건진 사람은 대략 몇 명인가?_____________1999년부터 2004년 사이에 비타민 A 보충으로 생명을 구한 사람은 대략 몇 명인가요?\n", + "Processing question 3032/3952 : 미국 국내 노동 관계법의 별칭은?_____________미국 국내 노동 관계법의 다른 말은 무엇인가요?\n", + "Processing question 3033/3952 : 오카야마 공습 전후로 국도 주변에 형성된 것은 무엇인가?_____________'오카야마 공습 전후에 국도 주변에 생긴 것은 무엇인가?'\n", + "Processing question 3034/3952 : 마르코스 정권이 공항에서 암살한 필리핀 야당 지도자는?_____________마르코스 정권이 공항에서 암살한 필리핀 야당 지도자는 누구였나요?\n", + "Processing question 3035/3952 : 클린턴은 1996년 재선에서 누구를 꺾고 선거를 이겼나요?_____________빌 클린턴은 1996년 대통령 선거에서 누구를 이겼나요?\n", + "Processing question 3036/3952 : 루카시의 아들이 태어난 곳은?_____________루카시의 아들이 태어난 장소는 어디인가요?\n", + "Processing question 3037/3952 : 토리노 조약을 맺은 년도는?_____________토리노 조약을 맺은 연도는 언제였습니까?\n", + "Processing question 3038/3952 : 이광의 할아버지는 누구인가?_____________이광의 조부는 누구입니까?\n", + "Processing question 3039/3952 : 갈릴레이는 무엇을 이오와 동일한 천체로 생각했나요?_____________갈릴레이는 이오를 무엇과 동일한 천체로 생각했나요?\n", + "Processing question 3040/3952 : 1930년대 초중반에 전수린과 함께 작곡가로 쌍두마차를 이룬 사람은?_____________'1930년대 초중반에 전수린과 함께 작곡가로 협업했던 사람은 누구인가요?'\n", + "Processing question 3041/3952 : 윤치호가 독립운동에의 참여를 등한시하기 시작한 해는?_____________윤치호가 독립운동에 참여를 등한시하기 시작한 해는 언제인가요?\n", + "Processing question 3042/3952 : 다수의 태국 왕들이 승려로 임명되었던 절은 어디인가요?_____________태국 왕들이 승려로 임명되었던 절은 어디에 위치하나요?\n", + "Processing question 3043/3952 : 네브카드네자르 2세의 부인은?_____________네부카드네자르 2세의 왕비는 누구였나요?\n", + "Processing question 3044/3952 : 삼성이 더이상 한겨레를 광고하지 않는 까닭은?_____________삼성이 한겨레 광고를 중단한 이유는 무엇인가요?\n", + "Processing question 3045/3952 : 고쿠데라의 머리 모양에 영향을 준 것으로 추정되는 사람은?_____________머리 스타일을 결정한 것으로 의심되는 사람은 누구입니까?\n", + "Processing question 3046/3952 : 카자크의 소통 언어는?_____________카자크의 공식 언어는 무엇인가요?\n", + "Processing question 3047/3952 : 임선규의 작품이 처음으로 공연한 극장은?_____________임선규의 작품이 처음으로 공연한 극장은 어디였나요?\n", + "Processing question 3048/3952 : 1978년 콘클라베의 승자는?_____________\"1978년 콘클라베에서 선출된 사람은?\"\n", + "Processing question 3049/3952 : 프로그램 관리자 역할을 시작 메뉴가 맡았던 최초 버전은?_____________프로그램 관리자 역할을 시작 메뉴가 맡았던 최초 버전은 무엇인가요?\n", + "Processing question 3050/3952 : 진승현이 각종 불법 행위를 통해 만든 것은?_____________'진승현이 법을 어기며 얻은 것은 무엇인가요?'\n", + "Processing question 3051/3952 : 이사회에 가입되어있는 회원국 수는?_____________MRC에 가입되어있는 회원국 수는 몇 개인가요?\n", + "Processing question 3052/3952 : 로그 혁명 사건의 주도 세력은?_____________'로그 혁명 사건의 주요 주체는?'\n", + "Processing question 3053/3952 : 오스만 튀르크의 영토가 축소된 원인은?_____________오스만 튀르크의 영토가 감소한 이유는 무엇인가요?\n", + "Processing question 3054/3952 : 찰스 도우슨에게 유골의 파편을 준 것은 누구라고 했나?_____________누가 찰스 도우슨에게 유골의 파편을 전달했다고 밝혔나요?\n", + "Processing question 3055/3952 : 루움 전쟁에서 에이스 부대로 활약했던 집단은?_____________에이스 부대로 활약한 집단은 무엇인가요?\n", + "Processing question 3056/3952 : 유상이 사용한 약 중 스님과 관련된 약은 무엇인가?_____________'유상이 사용한 약 중 스님과 관련된 약은 무엇입니까?'\n", + "Processing question 3057/3952 : 이규완은 무엇을 발전시켜야 사회의 발전과 문명화를 이룰 수 있다고 했나?_____________이규완이 사회의 발전과 문명화를 이룰 수 있는 방법으로 언급한 것은 무엇인가요?\n", + "Processing question 3058/3952 : 트로이아 목마 반입에 반대한 예언자는?_____________누가 트로이아 목마 반입을 반대했나요?\n", + "Processing question 3059/3952 : <우순소리>를 금지시킨 제도는?_____________'<우순소리>를 금지시킨 제도는 무엇인가요?'\n", + "Processing question 3060/3952 : 진나라에 복종하려 했지만 대부들의 저항이 심했던 나라는?_____________어떤 나라가 진나라에 복종하려 했지만 대부들의 저항이 심했던 나라인가요?\n", + "Processing question 3061/3952 : 코치슈가 음악 감독을 그만둔 건 언제인가?_____________코치슈가가 음악 감독을 물러난 시기는 언제였나요?\n", + "Processing question 3062/3952 : 행복추구권의 줄이지 않은 원래 용어는?_____________'행복을 추구할 권리의 줄이지 않은 원래 용어는 무엇인가요?'\n", + "Processing question 3063/3952 : 수고당에 보존되어 있는 의류는 누구의 것인가?_____________\"수고당에 수집된 의류는 누구의 소유물인가요?\"\n", + "Processing question 3064/3952 : 사지 일가가 오노 성을 다스리기 이전에 군림하던 일가는 어디인가?_____________오노 성을 다스리기 이전에 군림하던 일가는 어디에 있었습니까?\n", + "Processing question 3065/3952 : 북극의 얼음층에 서식하며, 북극곰의 주식이 되는 동물은?_____________북극 지역에서 서식하며, 북극곰의 주식이 되는 동물은 무엇인가요?\n", + "Processing question 3066/3952 : 신체에 령주를 새긴 마술사는 몇 명인가?_____________신체에 령주를 새긴 마법사는 몇 명인가요?\n", + "Processing question 3067/3952 : 경찰들의 주장이 거짓이라는 증거가 된 물건은?_____________어떤 증거가 경찰들의 주장이 거짓임을 입증하는 물건인가요?\n", + "Processing question 3068/3952 : 베트남의 남북을 갈라지게 만든 군사 분계선이 위치한 곳은?_____________'베트남의 남북을 분리하는 군사 분계선이 위치한 곳은 어디인가요?'\n", + "Processing question 3069/3952 : 황제 즉위 초반부터 농업 발전에 엄청난 공을 들인 인물은?_____________농업 발전에 큰 관심을 가진 인물은 누구인가요?\n", + "Processing question 3070/3952 : 시칠리아 지원군은 어느 세력을 돕기 위해 오는가?_____________시칠리아 지원군은 어떤 세력을 지원하기 위해 올까요?\n", + "Processing question 3071/3952 : 13살 때 아버지가 죽은 인물이 태어났던 해는?_____________어떤 연도에 13세에 아버지가 돌아가신 분이 태어났나요?\n", + "Processing question 3072/3952 : 사건 관련자가 이홍기가 아니라 이종현임을 밝힌 언론사는?_____________어떤 언론사가 사건 관련자가 이홍기가 아니라 이종현임을 밝혔습니까?\n", + "Processing question 3073/3952 : 손일은 본인이 기습 공격 대상이 된 것을 알아챈 후 어디로 도망갔나?_____________손일이 기습 공격 대상이 된 것을 깨달은 후 어디로 도주했나요?\n", + "Processing question 3074/3952 : 이란에서 쿠데타를 시도한 당이 만들어진 연도는?_____________이란에서 쿠데타를 시도한 당이 창설된 연도는 어디인가요?\n", + "Processing question 3075/3952 : 필리핀 1페소는 원화로 얼마 정도 하는가?_____________'한국 화폐로 필리핀 1페소는 몇 원인가요?'\n", + "Processing question 3076/3952 : 장씨의 항소심이 열린 곳은?_____________장씨의 항소심이 열린 장소는 어디인가요?\n", + "Processing question 3077/3952 : 카리용 요새가 만들어지는데 요인을 제공한 나라는?_____________카리용 요새가 건설되는데 영향을 준 국가는 무엇인가요?\n", + "Processing question 3078/3952 : 류리크 왕조가 세워진 이후 카간이라는 명칭은 무엇으로 바뀌어갔나?_____________류리크 왕조가 세워진 이후 카간이라는 명칭은 어떤 이름으로 대체되었나요?\n", + "Processing question 3079/3952 : 여운형이 직업을 가져야 한다는 아버지의 말에 따라 새로 입학한 교육기관의 명칭은?_____________여운형이 직업을 가져야 한다는 아버지의 말에 따라 새로 입학한 교육기관의 명칭은 무엇인가요?\n", + "Processing question 3080/3952 : 빌럼 왕세자(훗날 빌럼2세)의 아버지가 살고있던 나라는?_____________빌럼 왕세자(향후 빌럼 2세)의 아버지가 살고 있던 국가는 어디였습니까?\n", + "Processing question 3081/3952 : 알루미늄 합금 차체는 어떤 부분에서 약점을 보이는가?_____________알루미늄 합금 차체가 어떤 부분에서 취약한가?\n", + "Processing question 3082/3952 : 정부가 강제로 이주시킨 대상은?_____________누가 강제로 이주시킨 대상인가요?\n", + "Processing question 3083/3952 : 라세레나의 별칭은 무엇인가?_____________라세레나의 다른 이름은 무엇입니까?\n", + "Processing question 3084/3952 : 기존의 성능보다 업그레이드 된 하이퍼카드를 구현하도록 만들어진 언어는?_____________하이퍼카드를 개선한 언어는 무엇인가요?\n", + "Processing question 3085/3952 : 진국이 확실한 형태의 국가가 아니라고 해석했던 인물은?_____________어떤 인물이 진국이 확실한 형태의 국가가 아니라고 해석했습니까?\n", + "Processing question 3086/3952 : Israels가 초반에 몰두하여 그린 그림의 종류는?_____________'Israels가 초반에 집중한 그림의 종류는 무엇입니까?'\n", + "Processing question 3087/3952 : 문정왕후가 친형제들의 싸움에서 편을 들어주지 않은 인물은?_____________문정왕후가 친형제들의 싸움에서 편을 들어주지 않은 인물은 누구였습니까?\n", + "Processing question 3088/3952 : 책 《예언이 빗나갈 때》에서 컬트 집단이 주장한 멸망의 날은 언제인가?_____________《예언이 빗나갈 때》에서 컬트 집단이 주장한 멸망의 날은 언제인가?\n", + "Processing question 3089/3952 : 국방군 무오설에서 독일 국방군과 유사하다고 주장했던 군대는?_____________독일 국방군과 유사하다고 주장했던 군대는 무엇인가요?\n", + "Processing question 3090/3952 : AMBAC 성능이 저하된 증가장갑의 부위는?_____________AMBAC 성능이 저하된 증가장갑의 부위는 어디인가요?\n", + "Processing question 3091/3952 : 데니소바 동굴에서 발견된 화석은 인류의 어떤 종과 유사했나요?_____________데니소바 동굴에서 발견된 화석은 어떤 종에 속했나요?\n", + "Processing question 3092/3952 : 도미니카 공화국에 허리케인경보가 약 하루정도 유지되었을 당시 앨런이 위치했던 바다는?_____________앨런이 위치했던 바다는 허리케인 경보가 약 하루 동안 유지된 도미니카 공화국에서 어디에 있었나요?\n", + "Processing question 3093/3952 : 그리스 화가의 기록에 대한 도전이 나타나는 작품은?_____________어떤 그리스 화가의 기록에 대한 도전이 나타나는 작품은 무엇인가요?\n", + "Processing question 3094/3952 : 대적광전 주변에 세워진 탑 중 기단이 한 층만 있는 탑은 무엇인가?_____________대적광전 주변에 세워진 탑 중 기단이 한 층만 있는 탑은 어떤 건물인가요?\n", + "Processing question 3095/3952 : 처음 듀이가 헤드라인을 달성할때 기소한 인물이름은?_____________처음 듀이가 헤드라인을 달성할 때 기소한 사람의 이름은 무엇인가요?\n", + "Processing question 3096/3952 : 멀티플레이 종류 중 녹스의 꽃의 구체적 명칭은?_____________녹스의 꽃이란 멀티플레이 종류 중에 무엇인가요?\n", + "Processing question 3097/3952 : 치료 시작시기나 치료 전 발작 횟수가 결과를 미치는 것은?_____________치료를 시작할 때나 치료 이전에 발작 빈도가 결과에 영향을 미치나요?\n", + "Processing question 3098/3952 : 숙종의 꿈 속에 나온 사람은 누구를 언급했나?_____________숙종이 꿈 속에서 봤던 인물은 누구를 언급했습니까?\n", + "Processing question 3099/3952 : 서방 교회의 분열을 종결시킨 사람은?_____________서방 교회의 분열을 종결시킨 사람은 누구인가요?\n", + "Processing question 3100/3952 : 크세르크세스 1세의 두 번쨰 침공이 실패한 원인이 된 전투는?_____________크세르크세스 1세의 두 번째 침공이 실패한 원인이 된 전투는 무엇인가요?\n", + "Processing question 3101/3952 : 모브의 동생에게 초능력이 생기는 계기가 된 인물은?_____________모브의 동생이 초능력을 얻게 된 계기가 된 인물은 누구인가요?\n", + "Processing question 3102/3952 : 브리튼이라는 이름이 처음으로 나타난 곳은 어디인가?_____________브리튼이라는 명칭이 처음으로 등장한 장소는 어디입니까?\n", + "Processing question 3103/3952 : 1974년에 FIFA 월드컵이 열린 나라는?_____________어느 나라에서 1974년 FIFA 월드컵이 개최되었습니까?\n", + "Processing question 3104/3952 : 카스가는 복역 기간은?_____________'카스가는 감금 기간은 얼마인가요?'\n", + "Processing question 3105/3952 : 초대 교회에서 성당 중앙에 놓았던 것은?_____________성당 중앙에 놓았던 것은 무엇이었나요?\n", + "Processing question 3106/3952 : 고갱의 표현주의적 특징을 표현주의 화가들이 발전시킨 시기는?_____________표현주의 화가들이 개발한 시기는 언제인가요?\n", + "Processing question 3107/3952 : 아이오와 주는 미국 내 옥수수 재배량의 대략 얼마를 점유하는가?_____________아이오와 주는 미국 내 옥수수 생산량의 대략적인 비율이 얼마인가요?\n", + "Processing question 3108/3952 : 독립운동 중 감옥에 수감되었으며 고문의 후유증으로 사망한 인물은?_____________무승인의 후유증으로 사망한 인물은 누구인가요?\n", + "Processing question 3109/3952 : 제임스 보이가 격리된 것은 무엇 때문인가?_____________제임스 보이가 격리된 이유는 무엇입니까?\n", + "Processing question 3110/3952 : 1954년 월드시리즈 우승 팀은?_____________어떤 팀이 1954년 MLB 월드시리즈에서 우승했습니까?\n", + "Processing question 3111/3952 : 갈리아인들이 왕으로 추대한 사람은?_____________갈리아인들이 왕으로 즉위시킨 사람은 누구인가요?\n", + "Processing question 3112/3952 : 스트라빈스키가 \"스위스 시계 장인\"이라고 칭한 인물이 사망한 해는?_____________스트라빈스키가 \"스위스 시계 장인\"이라고 칭한 인물이 사망한 해는 언제인가요?\n", + "Processing question 3113/3952 : 팔꿈치에 생긴 구획 증후군을 빨리 치료하지 않을 시, 쓸 수 없게 되는 신체 조직은?_____________\"팔꿈치에 발생한 구획 증후군을 적절히 치료하지 않으면, 기능을 잃게 되는 조직은 무엇인가요?\"\n", + "Processing question 3114/3952 : 양희가 찬사를 보낸 이는?_____________양희가 칭찬을 받은 사람은 누구인가요?\n", + "Processing question 3115/3952 : 시집 《하늘과 바람과 별과 시》를 출간한 사람은?_____________'하늘과 바람과 별과 시'를 출판한 사람은 누구인가요?\n", + "Processing question 3116/3952 : 통일된 조지아 왕국의 초대 왕은 누구인가?_____________통일된 조지아 왕국의 최초 군주는 누구입니까?\n", + "Processing question 3117/3952 : 시라토리가 군사재판에 회부된 죄목은?_____________시라토리가 군사재판에 회부된 죄목은 무엇입니까?\n", + "Processing question 3118/3952 : 리스 옐친이 비평한 헌법은 어디에 근거하고있나요?_____________리스 옐친이 비판한 헌법은 어떤 근거를 가지고 있나요?\n", + "Processing question 3119/3952 : 싯다르타가 부처에 의해 깨달음을 얻은 후에 헤어진 인물은?_____________싯다르타가 부처에 의해 깨달음을 얻은 후에 헤어진 인물은 누구인가요?\n", + "Processing question 3120/3952 : 베이역이 운행을 시작한 해는 언제인가?_____________'베이역이 개업한 연도는 언제인가?'\n", + "Processing question 3121/3952 : 마오쩌둥 사상에서 다른 사상으로 바꾼 사람들은 어느 나라 사람인가?_____________마오쩌둥 사상에서 다른 사상으로 전환한 사람들은 어느 국적을 가지고 있나요?\n", + "Processing question 3122/3952 : 워싱턴-스펜서 토지 허용의 재측량을 지시한 도시는?_____________워싱턴-스펜서 토지 허용의 재측량을 지시한 도시는 어디인가요?\n", + "Processing question 3123/3952 : 베토벤의 절친이 작품 출간을 위해 부가한 별칭은?_____________베토벤의 친구가 작품을 발표할 때 사용한 다른 이름은 무엇입니까?\n", + "Processing question 3124/3952 : 도쿄 내 모든 대학교 중 가큐슈인 본 캠퍼스에만 있는 시설은?_____________가큐슈인 본 캠퍼스에만 있는 시설은 도쿄 내 모든 대학교 중에서 유일한 시설은 무엇인가요?\n", + "Processing question 3125/3952 : 청소년 유해 매체물로 평가될 시, 방송될 수 없는 시간은?_____________청소년 유해 매체물로 평가될 시, 방송될 수 없는 시간은 언제인가요?\n", + "Processing question 3126/3952 : 정부가 한국거래소를 어디로 이전시키면서 서울의 금융지구 순위가 하락하였나?_____________한국거래소가 어디로 이전되면서 서울의 금융지구 순위가 하락했나요?\n", + "Processing question 3127/3952 : 아킬레 라티가 종교 문제로 목숨을 잃어도 가고 싶어 했던 나라는?_____________아킬레 라티가 종교 문제로 목숨을 잃어도 가고 싶어 했던 국가는 어디였나요?\n", + "Processing question 3128/3952 : 세포 성분과 아크릴 아마이드의 결합을 위해 첨가되는 것은?_____________세포 성분과 아크릴 아마이드를 결합하기 위해 사용되는 것은 무엇인가요?\n", + "Processing question 3129/3952 : 디그 더그를 움직이는데 필요한 도구는?_____________'디그 더그를 조작하는 데 필요한 장비는 무엇입니까?'\n", + "Processing question 3130/3952 : 일행들과 함께 션 크러셔를 훔칠 수 있게 퀴 쥬스를 설득한 인물은?_____________션 크러셔를 훔치기 위해 퀴 쥬스를 설득한 인물은 누구인가요?\n", + "Processing question 3131/3952 : 보나보가 제국주의에 대항할수 있는 진정한 힘이라 일컬은 것은?_____________보나보가 제국주의에 대항할 수 있는 진정한 힘이라고 일컬어지는 것은 무엇인가요?\n", + "Processing question 3132/3952 : 허긴스가 신시내티 샴록스에서 사용한 가짜 이름은 무엇인가요?_____________허긴스가 신시내티 샴록스에서 사용한 가짜 이름은 무엇입니까?\n", + "Processing question 3133/3952 : 가인지경영에 따르면 인재 경영은 무엇으로부터 시작되나?_____________인재 관리는 어떤 것으로부터 시작되나요?\n", + "Processing question 3134/3952 : 처음으로 대통령이 탄핵안이 의결 되었을 당시 이를 반대하던 당은?_____________대통령 탄핵안이 처음으로 의결될 당시 반대했던 정당은 무엇이었나요?\n", + "Processing question 3135/3952 : 단종이 사약을 받았다는 결정적 증거가 기록된 책은?_____________'단종이 사약을 받았다는 결정적 증거가 기록된 책은 무엇인가요?'\n", + "Processing question 3136/3952 : 신시내티에서 노면전차의 승객 수를 감소시킨 교통 수단은?_____________신시내티에서 노면전차의 승객 수를 감소시킨 교통 수단은 무엇인가요?\n", + "Processing question 3137/3952 : 알바니아가 오스만에 정복당한 이후 아르버레셔인들이 여러 번의 이주를 거쳐 최종적으로 자리를 잡은 곳은?_____________알바니아가 오스만에 정복당한 이후 아르버레셔인들이 여러 번의 이주를 거쳐 최종적으로 자리를 잡은 곳은 어디인가요?\n", + "Processing question 3138/3952 : 자주 국방 가능 국가가 독자적으로 갖추어야 할 GPS나 정보, 정찰자산 같은 자산은?_____________어떤 국가가 자주 국방이 가능하려면 독자적으로 보유해야 하는 자산은 무엇입니까?\n", + "Processing question 3139/3952 : 하나의 요소로부터 만들어져 실패모양인 공추류의 뼈는?_____________어떤 과정을 거쳐 실패모양인 공추류의 뼈가 만들어질까요?\n", + "Processing question 3140/3952 : 모리스가 처음으로 특정 당파에 속하게 된 연도는?_____________모리스가 처음으로 특정 정당에 속한 해는 언제인가요?\n", + "Processing question 3141/3952 : 래깅에 강경한 입장을 보인 기관의 결정에 동의한 인물은?_____________'래깅에 강경한 입장을 보인 기관의 결정에 동의한 사람은 누구인가?'\n", + "Processing question 3142/3952 : 이중창은 언제를 대비한 것인가?_____________'이중창은 어떤 목적으로 설치되는가?'\n", + "Processing question 3143/3952 : 데모스테네스가 투항한 세력은?_____________데모스테네스가 가담한 세력은 무엇입니까?\n", + "Processing question 3144/3952 : 빌 클린턴이 처음으로 선거에서 패배한 연도는?_____________빌 클린턴이 처음으로 선거에서 패배한 해는 언제였습니까?\n", + "Processing question 3145/3952 : 1941년 특설부대에 체포된 항일연군 여자전사는 몇 명인가?_____________항일연군 여자전사가 1941년 특설부대에 체포된 숫자는 몇 명입니까?\n", + "Processing question 3146/3952 : 크누트를 자연으로 돌려보내자고 주장한 사람은?_____________'크누트를 자연 속으로 회귀시키려고 주장한 사람은 누구인가요?'\n", + "Processing question 3147/3952 : 경성콤그룹의 핵심 인물은?_____________경성콤그룹의 주요 인물은 누구입니까?\n", + "Processing question 3148/3952 : 음형이 A나 B를 벗어나 독자적으로 흘러가는 부분은 몇 마디인가?_____________음형이 A나 B를 벗어나 독자적으로 흘러가는 구절은 몇 마디인가요?\n", + "Processing question 3149/3952 : 그리스 정부에 올림픽의 재건과 관련한 문서를 보낸 인물은?_____________'그리스 정부에 올림픽의 재건과 관련한 문서를 전달한 사람은 누구인가요?'\n", + "Processing question 3150/3952 : 3.1운동이 평화적 선언서 낭독으로 한국의 독립을 알리자는 의도가 감정적 시위로 변질됐다고 말한 사람은?_____________'3.1운동이 한국의 독립을 알리기 위한 평화적 선언서가 감정적 시위로 변질됐다고 지적한 인물은 누구인가요?'\n", + "Processing question 3151/3952 : 아이챌린지 율동놀이 세미나'에서 율동놀이 이외에도 교육받을 수 있는 것은?_____________'아이챌린지 율동놀이 세미나'에서 율동놀이 이외에도 교육받을 수 있는 것은 무엇인가요?\n", + "Processing question 3152/3952 : 사람들이 sns 해시태그에 오빠딸을 태그하고 누구의 사진을 함께 게시하는가?_____________누구의 사진을 함께 게시하는가?\n", + "Processing question 3153/3952 : 예르마가 처음 공개된 곳은 어디인가?_____________예르마가 처음 공개된 장소는 어디입니까?\n", + "Processing question 3154/3952 : 회고록을 통해 주장한 내용은 몇년도에 부정되었는가?_____________'회고록을 통해 주장한 내용은 몇년도에 뒤엎혔습니까?'\n", + "Processing question 3155/3952 : 인간에게 심각한 다양한 질병을 초래하는 아레나바이러스의 종의 수는?_____________아레나바이러스의 종의 수는 몇 개인가요?\n", + "Processing question 3156/3952 : 제임스 1세의 국적은?_____________제임스 1세의 국적은 무엇입니까?\n", + "Processing question 3157/3952 : <조선공로자명감>을 작성한 기관은?_____________'어떤 단체가 <조선공로자명감>을 저술했습니까?'\n", + "Processing question 3158/3952 : 카스티요가 비난한 사람은?_____________'카스티요가 비난한 사람은 누구인가요?'\n", + "Processing question 3159/3952 : 여운형은 누구와 함께 일본으로 갔나요?_____________'여운형은 누구와 함께 일본으로 여행을 다녀왔나요?'\n", + "Processing question 3160/3952 : 윤치호가 병으로 인해 쓰러지는 모습을 목도한 사람은 누구인가요?_____________누가 윤치호가 병으로 인해 쓰러지는 것을 목도했나요?\n", + "Processing question 3161/3952 : 폴리포니는 누가 남긴 것인가?_____________폴리포니는 누가 작성했습니까?\n", + "Processing question 3162/3952 : 비트겐슈타인이 병원에서 봉사를 할 수 있도록 한 인물의 직업은?_____________비트겐슈타인이 의료기관에서 자원봉사를 할 수 있도록 하는 사람의 직업은 무엇입니까?\n", + "Processing question 3163/3952 : 클레멘스 2세가 교황이 되기 전의 행보에 대해 지적한 교황청의 세력은?_____________클레멘스 2세가 교황이 되기 전의 행보에 대해 비판적인 교황청의 세력은 누구였나요?\n", + "Processing question 3164/3952 : 시민파빌리온이 위치한 도시는?_____________시민파빌리온이 있는 도시는 어디에 위치하고 있나요?\n", + "Processing question 3165/3952 : 에두아르도 드 필리포의 사망일은?_____________에두아르도 드 필리포는 언제 죽었습니까?\n", + "Processing question 3166/3952 : 김용식이 맨 처음 활동했던 곳은?_____________김용식이 처음으로 활동한 장소는 어디였나요?\n", + "Processing question 3167/3952 : 선 레코드에 의해 프레슬리 음반은 얼마에 팔렸는가?_____________프레슬리 음반은 선 레코드에 의해 얼마에 팔렸나요?\n", + "Processing question 3168/3952 : 사림 세력 제거를 모의했으며 이황과 뜻이 일치했던 세력은?_____________'사림 세력 제거를 계획했으며 이황과 의견이 일치했던 세력은 누구였습니까?'\n", + "Processing question 3169/3952 : 정부가 전후복구재건 사업을 시작된 후에 생긴 기구는 무엇인가?_____________전후복구재건 사업이 시작된 후에 생긴 기구는 무엇입니까?\n", + "Processing question 3170/3952 : 연꽃을 표현한 문양과 함께 광배에서 볼 수 있는 또 다른 문양은?_____________광배에서 볼 수 있는 또 다른 문양은 무엇인가요?\n", + "Processing question 3171/3952 : 이고르 댜틀로프가 이끄는 모임에서 가장 먼저 빠진 사람은?-_____________이고르 댜틀로프가 이끄는 그룹에서 처음으로 떠난 사람은 누구인가요?\n", + "Processing question 3172/3952 : 알렌이 사람들을 잠들게 하기 위해 사용한 것은 무엇인가?_____________알렌이 사람들을 잠들게 하기 위해 사용한 것은 무엇입니까?\n", + "Processing question 3173/3952 : 여름철 열사병을 막기 위해 대한민국 군대는 언제 오후 일정을 시행하는가?_____________대한민국 군대는 여름철 열사병을 예방하기 위해 언제 오후 휴식을 실시하나요?\n", + "Processing question 3174/3952 : 다양한 지역에 거주하면서 전국 각지에서 살인을 저지른 인물은?_____________어느 지역에 살지 않고 전국 각지에서 살인을 저지른 인물은 누구인가요?\n", + "Processing question 3175/3952 : 고블린 이전에 케잔을 다스리던 종족은?_____________케잔을 다스리던 종족은 무엇인가요?\n", + "Processing question 3176/3952 : 미군정의 미곡정책에 대한 반발로 일어난 사건을 일으킨 집단은?_____________미군정의 미곡정책에 반발하여 일어난 사건을 촉발한 집단은 무엇인가요?\n", + "Processing question 3177/3952 : 내전에 외국의 간섭이 금지된 것은 언제인가?_____________외부 간섭이 금지된 것은 언제였습니까?\n", + "Processing question 3178/3952 : 그레고리오를 라테라노 궁전에 감금한 사람은?_____________라테라노 궁전에 감금한 사람은 누구인가요?\n", + "Processing question 3179/3952 : 미네소타대학의 식품공학과가 개발한 것은?_____________'미네소타대학이 개발한 식품공학과의 결과물은 무엇입니까?'\n", + "Processing question 3180/3952 : 게오르크 프리드리히가 헝기리왕에게 오폴레 지역의 통치권을 넘긴해는?_____________헝가리 왕에게 오폴레 지방을 넘겨준 사람은 게오르크 프리드리히였나요?\n", + "Processing question 3181/3952 : 고종의 진보적 정책을 다른 사람이 한 것으로 왜곡한 책은 언제 발행되었나?_____________'고종의 진보적 정책을 다른 사람이 한 것으로 왜곡한 출판물은 언제 출간되었습니까?'\n", + "Processing question 3182/3952 : 우르바노 5세가 이태리 전역에 십자군 원정을 명령한 해는?_____________우르바노 5세가 이태리 전역에 십자군 원정을 명령한 해는 무엇인가요?\n", + "Processing question 3183/3952 : 잭슨이 생애 첫 전투를 치른 해는?_____________잭슨이 최초 전투를 치른 해는 언제였나요?\n", + "Processing question 3184/3952 : 아르군의 아들이 자랐던 곳은?_____________아르군의 자식이 성장한 장소는 어디인가요?\n", + "Processing question 3185/3952 : 요리요시가 무쓰노카미로서의 기한이 끝난 시기는?_____________무쓰노카미로서의 기한이 끝난 시기는 언제인가요?\n", + "Processing question 3186/3952 : 도이 류이치는 무엇에 사인했다는 것이 들켜 민주당을 떠나게 되었는가?_____________도이 류이치는 어떤 이유로 민주당을 떠나게 되었나요?\n", + "Processing question 3187/3952 : 오리지널 약품과 같은 성분의 제네릭 의약품은 무엇을 완료한 이후로 개발 가능한가?_____________제네릭 의약품은 어떤 조건을 충족하면 오리지널 약품과 같은 활성 성분을 사용하여 개발할 수 있나요?\n", + "Processing question 3188/3952 : 진왕 정의 말을 전해 들은 후 제왕 건은 어떤 행동을 취할 것이라고 다짐하였나?_____________제왕 건이 진왕의 정의 말을 전해들은 후 어떤 행동을 취할 것이라고 다짐했나요?\n", + "Processing question 3189/3952 : 이규완이 김학우를 죽인 사람이라고 지목한 인물은?_____________'이규완이 김학우를 살해한 사람으로 지목한 인물은?'\n", + "Processing question 3190/3952 : 양산군 하북면 삼수리에 터전을 잡고 양산 이씨의 시조가 된 사람은?_____________양산군 하북면 삼수리에서 거주하며 양산 이씨의 시조가 된 사람은 누구인가요?\n", + "Processing question 3191/3952 : 펨토의 전생은 누구인가?_____________펨토의 전생은 누구입니까?\n", + "Processing question 3192/3952 : <내 어머니 사는 나라>의 작가가 직접 방문했던 곳은?_____________'<나의 어머니가 사는 국가>의 저자가 직접 방문한 장소는 어디입니까?'\n", + "Processing question 3193/3952 : 2020년 직권남용으로 인해 2년형을 선고받았던 사람의 직위는 무엇이었나요?_____________어떤 사람이 2020년에 직권남용으로 인해 2년형을 선고받았을 때, 그 사람의 직위는 무엇이었습니까?\n", + "Processing question 3194/3952 : 미디어법 가결선포 권한쟁의를 발생시킨 측은?_____________미디어법 가결선포 권한쟁의를 일으킨 측은 누구인가요?\n", + "Processing question 3195/3952 : 황녹색의 유약이 있는 겉부분이 없어지면 무슨색을 띄는가?_____________황녹색의 유약이 있는 겉부분이 없어지면 어떤 색을 나타내나요?\n", + "Processing question 3196/3952 : 인류의 발전과 혼란의 원인을 제공한 주체는?_____________무엇이 인류의 진보와 혼란을 초래한 주체인가요?\n", + "Processing question 3197/3952 : 교황 갈리스토2세가 종교회의를 개최한 도시는?_____________교황 갈리스토2세가 종교회의를 개최한 도시는 어디였나요?\n", + "Processing question 3198/3952 : 김구가 안공근에게 야단쳤던 내용이 담긴 책은?_____________'김구가 안공근을 비난한 내용이 포함된 책은 무엇인가요?'\n", + "Processing question 3199/3952 : 기혼 남성들이 사용하던 망건은 신체 어느 부위에 착용하는 것인가?_____________기혼 남성들이 사용하던 넥타이는 신체 어느 부위에 착용하는 것인가?\n", + "Processing question 3200/3952 : 반도가극단과 더불어 시대극을 조선어로 연극하는 단체는?_____________'반도가극단과 더불어 시대극을 조선말로 공연하는 단체는?'\n", + "Processing question 3201/3952 : 파비아 대학교에 일반 대학의 지위를 부여한 인물의 직업은?_____________'파비아 대학교에 대학의 지위를 부여한 인물의 직업은 무엇인가요?'\n", + "Processing question 3202/3952 : 혁마르파는 무엇을 통해 중핵파와 해방파의 지도자들을 죽였는가?_____________혁마르파는 어떤 수단을 사용하여 중핵파와 해방파의 지도자들을 죽였습니까?\n", + "Processing question 3203/3952 : 헨드릭스는 어디로 휴가를 갔다가 뇌졸중을 앓았나요?_____________헨드릭스가 휴가 중 뇌졸중을 앓았다고 알려져 있나요?\n", + "Processing question 3204/3952 : 스텝 기후와 사막 지형이 동시에 나타나는 곳은?_____________어떤 지역에서 스텝 기후와 사막 지형이 동시에 나타나는 곳은 어디인가요?\n", + "Processing question 3205/3952 : 페라타 제6군단은 기원전 41년에 누구와 동방에 있었나요?_____________페라타 제6군단은 기원전 41년에 누구와 동방에 있었습니까?\n", + "Processing question 3206/3952 : 네팔의 헌법 수립안 투표에서 기권한 사람의 수는?_____________네팔의 헌법 수립안 투표에서 기권한 사람의 수는 얼마인가요?\n", + "Processing question 3207/3952 : 이슈타르가 다시 부활한 탐무즈와 함께 머무를 수 있는 계절은?_____________이슈타르가 다시 부활한 탐무즈와 함께 머무를 수 있는 시기는 언제인가요?\n", + "Processing question 3208/3952 : <무정>을 기획한 인물이 태어난 도시는?_____________'<무정>을 계획한 사람이 출생한 도시는 무엇입니까?'\n", + "Processing question 3209/3952 : 실존하는 발광체로 만들 수 있는 색깔을 의미하는 단어는?_____________어떤 색깔을 표현하는데 사용되는 색상을 의미하는 용어는 무엇인가요?\n", + "Processing question 3210/3952 : 아서 케이스가 조작에 있어서 큰 역할을 했다고 판단한 인물은?_____________누가 아서 케이스가 조작에 있어서 큰 역할을 했다고 생각합니까?\n", + "Processing question 3211/3952 : 장춘단 터가 공원으로 바뀐 해는?_____________장춘단 터가 공원으로 변환된 해는 언제인가요?\n", + "Processing question 3212/3952 : 상대론에서 운동에너지와 전체에너지의 합은 무엇에 비례하나?_____________상대론에서 운동에너지와 전체에너지의 합은 무엇에 비례하나?\n", + "Processing question 3213/3952 : 초신성이 폭발할 때 충격파에 의해 압축되거나 열을 받는 것은 무엇인가?_____________초신성이 폭발할 때 충격파에 의해 압축되거나 열을 받는 것은 무엇입니까?\n", + "Processing question 3214/3952 : 블레인이 연방 상원으로 선발되기 전까지 맡은 보직이 끝난 해는?_____________블레인이 연방 상원으로 선발되기 전에 끝난 보직이 있던 해는 언제인가요?\n", + "Processing question 3215/3952 : 더우징퉁의 출생 날짜는?_____________더우징퉁은 언제 태어났나요?\n", + "Processing question 3216/3952 : 북한의 작은 목선이 삼척항에 입항했던 날, 대책 회의가 시작된 장소는?_____________북한의 소형 선박이 삼척항에 도착한 날, 비상 회의가 시작된 장소는 어디였습니까?\n", + "Processing question 3217/3952 : 1950년대 항생제과다사용 원인은 미생물이 항생제에 무엇을 가지게 되어서인가?_____________미생물이 항생제에 저항성을 발달하는 원인은 무엇인가?\n", + "Processing question 3218/3952 : 장면의 깡패 및 혁신세력 소탕 추진 계획을 수포로 돌린 사건은?_____________'어떤 사건이 장면의 깡패 및 혁신세력 소탕 추진 계획을 수포로 돌린 것인가요?'\n", + "Processing question 3219/3952 : 춘추 전국 시대에 널리 쓰였던 화폐는?_____________춘추 전국 시대에 널리 사용된 통용되던 화폐는 무엇이었나요?\n", + "Processing question 3220/3952 : 에드워드 3세가 프랑스에서 철수한 것은 무엇 때문인가?_____________에드워드 3세가 프랑스에서 철수한 이유는 무엇이었나요?\n", + "Processing question 3221/3952 : 브리오니 협정에 따르면, 슬로베니아는 독립 선포 후 얼마동안 독립 활동을 멈춰야 하는가?_____________브리오니 협정에 따르면, 슬로베니아는 독립 선포 후 얼마 동안 중단해야 하는가?\n", + "Processing question 3222/3952 : 510년 민주정을 성립한 나라와 전쟁에서 충돌하였던 조직은?_____________어떤 국가가 510년 민주정을 성립하고 전쟁에서 충돌한 조직은 무엇입니까?\n", + "Processing question 3223/3952 : 요셉하이든이 자신의 모든 교향곡을 작성하기까지 얼마나 걸렸는가?_____________요셉 하이든이 자신의 총 교향곡 수를 완성하는 데 얼마나 시간이 걸렸습니까?\n", + "Processing question 3224/3952 : 아미달라 여왕이 팰퍼틴과 손잡고 견제하고자 한 대상은?_____________아미달라 여왕이 팰퍼틴과 협력하여 제안한 대상은 무엇인가요?\n", + "Processing question 3225/3952 : 지방자치단체를 분석한 최초의 보고서는?_____________'지방자치단체를 조사한 최초의 보고서는 무엇인가요?'\n", + "Processing question 3226/3952 : 주찬의 굴복을 받은 사람은?_____________주찬의 항복을 받은 사람은 누구인가요?\n", + "Processing question 3227/3952 : 박종철이 검찰총장직에서 물러나는데 결정적 역할을 한 제도는?_____________박종철이 검찰총장직에서 물러나는 데 결정적 역할을 한 제도는 무엇인가요?\n", + "Processing question 3228/3952 : 나이지리아에서 민주주의의 날이 처음 생긴 년도는?_____________나이지리아에서 민주주의의 날이 처음으로 선언된 해는 어느 해인가요?\n", + "Processing question 3229/3952 : 후한에서 사마씨 가문과 함께 명성을 날린 집안은?_____________사마가문이 후한에서 명성을 떨치며 함께한 집안은 어디인가요?\n", + "Processing question 3230/3952 : 2차 국공 합작 이후 국민당이 설립한 기관은?_____________국민당이 설립한 기관은 무엇인가요?\n", + "Processing question 3231/3952 : \"이와나미 문화인\"과 이미지적으로 친화성이 있는 인물의 이름은?_____________이와나미 문화와 관련이 있는 인물의 이름은 무엇인가요?\n", + "Processing question 3232/3952 : 옻칠의 종류 중 유일하게 물질의 산화를 막기위해 칠하는 것은?_____________옻칠의 종류 중 유일하게 물질의 산화를 막기 위해 칠하는 것은 무엇인가요?\n", + "Processing question 3233/3952 : 1175년에 많은 인부들이 고용되었던 곳은?_____________1175년에 많은 노동자가 고용된 장소는 어디였습니까?\n", + "Processing question 3234/3952 : 후아나의 남편은 어디 출신인가?_____________후아나의 배우자는 어느 지역에서 왔습니까?\n", + "Processing question 3235/3952 : 모터헤드에서 베이스와 보컬을 동시에 맡고 있는 사람은?_____________'모터헤드에서 베이스와 보컬을 동시에 맡고 있는 멤버는 누구인가요?'\n", + "Processing question 3236/3952 : 아르타크세르크세스를 독으로 살해한 인물은 누구인가?_____________누가 아르타크세르크세스를 독살한가?\n", + "Processing question 3237/3952 : 영지대사가 절을 재건하기 전 절의 명칭은?_____________영지대사가 절을 재건하기 전 절의 명칭은 무엇이었습니까?\n", + "Processing question 3238/3952 : 승표 부부에 대해 적혀있는 명문은 무엇으로 쓰여진 것인가?_____________'승표 부부에 대한 명문은 어떤 문서에 기록되어 있습니까?'\n", + "Processing question 3239/3952 : 피해자의 왕따 문제를 회피한 사람은 누구인가요?_____________'피해를 입은 사람의 왕따 문제를 피한 사람은 누구인가요?'\n", + "Processing question 3240/3952 : 수천명의 원군이 전투력 강화를 위해 퀘벡으로 파견된 해는?_____________몇 명의 군대가 전투력 향상을 위해 퀘벡으로 파견되었나요?\n", + "Processing question 3241/3952 : 경성제국대학과 홋카이도제국대학의 예과 수업연한이 동일해진 것은 몇 년인가?_____________경성제국대학과 홋카이도제국대학의 예과 수업기간이 동일해진 연도는 언제인가요?\n", + "Processing question 3242/3952 : 잉글랜드에게서 돈과 물품, 군인들을 전달할 수 있었던 것은 무엇을 차지했기 때문인가?_____________잉글랜드에게서 돈과 물품, 군인들을 전달할 수 있었던 것은 무엇을 차지했기 때문인가?\n", + "Processing question 3243/3952 : 두영에게 형양을 지키도록 명령한 인물은 누구인가요?_____________'두영에게 형제를 지키도록 명령한 인물은 누구입니까?'\n", + "Processing question 3244/3952 : 2013년 올레나 소콜로브스키가 출장할 수 없게 된 이유는?_____________올레나 소콜로브스키가 2013년 출장을 못 갔던 이유는 무엇이었나요?\n", + "Processing question 3245/3952 : 행복한 왕자 동상이 도움을 요청한 동물은?_____________어떤 동물이 행복한 왕자 동상에게 도움을 요청했나요?\n", + "Processing question 3246/3952 : 빈딘성에서 가장 높은 지역은 어디인가?_____________빈딘성에서 가장 높은 곳은 어디에 위치하나요?\n", + "Processing question 3247/3952 : 베이컨이 발표한 부정적인 원리 중 언어와 관련된 원리는?_____________베이컨이 제시한 부정적인 원리 중 언어와 관련된 원리는 무엇인가요?\n", + "Processing question 3248/3952 : 소련군은 언제부터 핀란드 내륙으로 진격하였는가?_____________소련군이 언제부터 핀란드 내륙으로 전진했습니까?\n", + "Processing question 3249/3952 : 이슬람교와 힌두교를 혼합해서 새로운 종교를 만든 사람은?_____________새로운 종교를 만든 사람은 이슬람교와 힌두교를 혼합해서 만든 종교는 무엇인가요?\n", + "Processing question 3250/3952 : 김용석이 행정소송에 도입돼야 한다고 한 제도는?_____________김용석이 행정소송에 포함되어야 한다고 말한 제도는 무엇인가요?\n", + "Processing question 3251/3952 : 세계 최초로 능동방어시스템 고안에 앞장선 국가는?_____________어떤 국가가 세계 최초로 미사일 방어 시스템을 개발했나요?\n", + "Processing question 3252/3952 : 제25회 선거에서 중증장애인이 아닌 당선자가 뽑힌 이후에 소속된 곳은?_____________선거에서 중증장애인이 아닌 당선자가 뽑힌 후에 소속된 곳은 어디인가요?\n", + "Processing question 3253/3952 : 통일주체국민회의의 구성을 명시한 법은?_____________통일주체국민회의의 구성을 규정한 법은 무엇입니까?\n", + "Processing question 3254/3952 : 프로메테우스에게 고통을 주기 위해 보낸 동물은?_____________어떤 동물이 프로메테우스에게 고통을 주기 위해 보내졌습니까?\n", + "Processing question 3255/3952 : 펑후섬의 강한 바람 때문에 붙여진 이름은?_____________펑후섬의 강한 바람 때문에 붙여진 이름은 무엇인가요?\n", + "Processing question 3256/3952 : 모라꼿으로 인해 14억 달러의 손해를 본 국가는?_____________어떤 국가가 모라꼿으로 인해 14억 달러의 손해를 입었습니까?\n", + "Processing question 3257/3952 : 도조 히데키는 누구의 사망 이후에 비황도파의 중심 인물이 되었나요?_____________도조 히데키는 누구가 사망한 후 비황도파의 주요 인물이 되었나요?\n", + "Processing question 3258/3952 : 법주사에서 동쪽으로 약 6km 지점에 위치한 봉우리의 현재 명칭은?_____________봉우리의 현재 명칭은 무엇입니까?\n", + "Processing question 3259/3952 : 크라우드 펀딩 기술을 통해 뉴스를 제작하는 방식을 국내에 도입한 회사는?_____________어떤 기업이 국내에서 크라우드 펀딩을 활용하여 뉴스를 생산하는 방식을 도입했나요?\n", + "Processing question 3260/3952 : 쓰치야 히로시가 우수 선수상을 받은 해는?_____________쓰치야 히로시가 최우수 선수상을 받은 연도는 언제였습니까?\n", + "Processing question 3261/3952 : 과거 내무성이 담당하던 토목 업무를 현재 담당하고 있는 기관은?_____________'과거 내무성이 담당하던 토목 업무를 현재 담당하고 있는 기관은 무엇인가요?'\n", + "Processing question 3262/3952 : 마르카리안이 유소년기의 대부분을 살았던 나라는?_____________마르카리안이 소년 시절을 보낸 국가는 어디인가요?\n", + "Processing question 3263/3952 : 뮈라가 축출하려한 사람은?_____________뮈라가 내쫓으려고 했던 사람은 누구였나요?\n", + "Processing question 3264/3952 : 황금방울새가 등장하는 소설의 작가는?_____________황금방울새가 나오는 소설의 저자는 누구인가요?\n", + "Processing question 3265/3952 : 해적의 공격으로 인해 다른 무역로를 찾으려 했던 국가는?_____________어떤 국가가 해적의 침공으로 인해 다른 해상 무역로를 찾으려고 했습니까?\n", + "Processing question 3266/3952 : 호라티우스가 깊은 우정관계라고 생각한 인물은?_____________호라티우스가 깊은 친분을 느낀 인물은 누구인가요?\n", + "Processing question 3267/3952 : 옐친 대통령이 의회를 해산하는 계기를 만들었던 집단은?_____________어떤 집단이 의회 해산을 촉발시킨 것이었나요?\n", + "Processing question 3268/3952 : 북대서양의 해류는 어느 지역의 해류와 유사한가?_____________북대서양의 해류는 어떤 지역의 해류와 비슷한가요?\n", + "Processing question 3269/3952 : 글의 의미를 이해하여 표현하는 방법은 무엇인가요?_____________글의 의미를 파악하고 전달하는 방법은 어떻게 되나요?\n", + "Processing question 3270/3952 : 프리츠는 노예들에게 돼지를 놓아준 범인이 나오지 않으면 노예들의 무엇을 뽑겠다고 했나?_____________프리츠는 노예들에게 돼지를 놓아준 범인이 나오지 않으면 노예들의 무엇을 뽑겠다고 했습니까?\n", + "Processing question 3271/3952 : 인공 조명이 등장하기 전 광공해를 일으킨 것은?_____________빛 오염이라고도 불리는 것은 무엇인가요?\n", + "Processing question 3272/3952 : 피에가 유니버시아드 대신 참가한 대회에서 준결승 상대는?_____________'피에가 유니버시아드를 대신하여 참가한 대회에서 준결승 상대는 누구인가요?'\n", + "Processing question 3273/3952 : 루르카작전의 해상함들은 그디냐에서 어디로 이동하였나요?_____________루르카작전의 해상함들은 어느 위치에서 어느 곳으로 이동했습니까?\n", + "Processing question 3274/3952 : 홍준표 후보는 소양강과 함께 어떤 것을 사례로 들며 녹조가 생기는 이유를 설명하였나?_____________홍준표 후보는 소양강과 함께 어떤 사례를 들어 녹조가 생기는 이유를 설명하였나?\n", + "Processing question 3275/3952 : 히브리 성서에서 그리스도를 뭐라 표현했는가?_____________'성경에서 그리스도를 어떻게 묘사했습니까?'\n", + "Processing question 3276/3952 : 장면은 아이젠하워에게 새정부의 핵심정책은 무엇이 될 거라고 했나?_____________아이젠하워에게 새 정부의 주요 정책은 무엇이 될 것으로 예상했나요?\n", + "Processing question 3277/3952 : 벨라사리우스에게 군권을 위임해 이탈리아 정복을 지시한 사람은?_____________벨라사리우스에게 군사 지휘를 맡기고 이탈리아 정복을 명령한 사람은 누구였습니까?\n", + "Processing question 3278/3952 : 달인을 절친으로 만들면 이득을 보는 등급은?_____________달인을 친구로 만들면 이득을 보는 등급은?\n", + "Processing question 3279/3952 : 팔라제국에서 황제들이 신봉한 종교 외에 인정한 종교는?_____________'팔라제국에서 황제들이 승인한 종교 외에 허용된 종교는 무엇인가요?'\n", + "Processing question 3280/3952 : 델핀이 젊은 남자와 같이 녹색 광선을 본 곳은?_____________델핀이 젊은 남자와 함께 녹색 빛을 보았던 장소는 어디였나요?\n", + "Processing question 3281/3952 : 응고되어 있는 코코넛 오일이 녹기 시작하는 온도는?_____________코코넛 오일이 응고되어 있는 상태에서 녹기 시작하는 온도는 얼마인가요?\n", + "Processing question 3282/3952 : 2007년 에리트레아의 자유 지수를 하위 3등이라고 평가한 기관은?_____________에리트레아의 자유 지수를 하위 3위로 평가한 기관은 무엇입니까?\n", + "Processing question 3283/3952 : 틀라스가 지나 롤로브리지다를 위해 공격하지 않은 대상은?_____________누가 롤로브리지다를 위협하지 않았습니까?\n", + "Processing question 3284/3952 : 슈트레제만에 대한 여론이 부정적으로 바뀌기 시작한 시기는?_____________슈트레제만에 대한 평판이 부정적으로 변하기 시작한 시기는 언제였습니까?\n", + "Processing question 3285/3952 : 콘스탄티노폴리스 총대주교에게 치명타를 안겨준 칙령을 내린 사람은?_____________콘스탄티노폴리스 총대주교에게 치명타를 안겨준 칙령을 내린 인물은 누구였습니까?\n", + "Processing question 3286/3952 : 오류가 많은 게임이라는 낙인이 찍힐 수밖에 없었던 당시 상황은?_____________게임에서 많은 결함이 발견되어 낙인이 찍힌 당시 상황은 무엇이었나요?\n", + "Processing question 3287/3952 : 불리한 정보를 배제하는 이유에 대해 말한 사람은?_____________'부정적인 정보를 배제하는 이유에 대해 이야기한 사람은 누구인가요?'\n", + "Processing question 3288/3952 : 유일하게 항원대변이가 발생하는 바이러스 유형은 무엇인가?_____________어떤 바이러스 유형에서만 독특한 항원 변이가 발생합니까?\n", + "Processing question 3289/3952 : 이안 스틸이 군에 최적화된 수로라고 말한 호수는?_____________이안 스틸이 군에 최적화된 수로라고 말한 호수는 어디인가요?\n", + "Processing question 3290/3952 : 갈리폴리 전투를 승리로 이끈 인물은?_____________갈리폴리 전투에서 승리를 거둔 인물은 누구인가요?\n", + "Processing question 3291/3952 : 1754년에 식민지 쟁탈전에서 승기를 잡은 국가는?_____________1754년에 식민지 쟁탈전에서 승기를 잡은 국가는 무엇입니까?\n", + "Processing question 3292/3952 : 개미가 자신의 목적지를 찾기 위해 보는 것은?_____________개미가 자신의 목적지를 찾기 위해 보는 것은 무엇인가요?\n", + "Processing question 3293/3952 : 이교주 어머니의 성씨는?_____________어머니의 성씨는 무엇인가요?\n", + "Processing question 3294/3952 : 네루다가 사망할 당시 군사혁명을 일으킨 사람의 이름은?_____________네루다가 사망할 당시 군사혁명을 일으킨 사람의 이름은 무엇인가요?\n", + "Processing question 3295/3952 : 초창기 전화번호의 길이는?_____________전화번호의 길이는 초창기에는 몇 자였습니까?\n", + "Processing question 3296/3952 : 블레인이 판매자를 대신하여 판 상품은 무엇인가?_____________블레인이 상인을 대신하여 판매하는 상품은 무엇입니까?\n", + "Processing question 3297/3952 : 꽃잎 형태의 판 3장을 끼운 다음 13각으로 만들어진 손잡이의 위치는?_____________꽃잎 모양의 판 3장을 겹쳐 놓은 후, 13각으로 형성된 손잡이의 위치는 어디에 있습니까?\n", + "Processing question 3298/3952 : 십자군은 카르부가 군대에 대처하기 위해 어디를 함락시켰는가?_____________십자군이 카르부에 맞서기 위해 어디를 정복했습니까?\n", + "Processing question 3299/3952 : 김장생의 할아버지가 맡았던 직책은 무엇인가?_____________김장생의 할아버지가 맡았던 직책은 어떤 것이었습니까?\n", + "Processing question 3300/3952 : 이오에 있는 산들 중 가장 높은 산은 무엇인가?_____________이오에 있는 가장 높은 산은 무엇입니까?\n", + "Processing question 3301/3952 : 프라다 지아니니의 후임이 구찌의 디자인 스튜디오에 온 해는?_____________프라다의 전 재단 회장인 프랑소와 프라다의 후임이 구찌의 디자인 스튜디오에 온 해는 언제인가요?\n", + "Processing question 3302/3952 : 중국 기자들은 누구의 이름을 본떠 최강희의 별명을 지어주었나요?_____________중국 기자들은 누구의 이름을 모방하여 최강희에게 별명을 붙였습니까?\n", + "Processing question 3303/3952 : 법칙은 무엇을 토대로 생성되는가?_____________'규정은 어떤 근거에 의해 만들어지나요?'\n", + "Processing question 3304/3952 : 윌리엄 3세와 메리 2세를 혼인시킨 인물은 누구인가?_____________누구가 윌리엄 3세와 메리 2세를 결혼시켰습니까?\n", + "Processing question 3305/3952 : 마렉 아스라프의 사후 우웨이스 1세가 탐내기 시작한 것은?_____________마렉 아스라프의 사후 우웨이스 1세가 원하는 것은 무엇인가요?\n", + "Processing question 3306/3952 : 배우 얼굴의 형태를 많이 바꾸지 않고 간단하게 하는 화장은?_____________배우의 얼굴 형태를 크게 변화시키지 않으면서 간단하게 하는 메이크업은 무엇인가요?\n", + "Processing question 3307/3952 : 차홍녀와 황철이 만든 극단이 설립되었던 해는?_____________차홍녀와 황철이 설립한 연극단이 시작된 해는 언제인가요?\n", + "Processing question 3308/3952 : 루이지애나흙파는쥐 다음으로 큰 동부흙파는쥐는?_____________동부흙파는쥐 중에서 가장 큰 것은 무엇입니까?\n", + "Processing question 3309/3952 : 토르고가 하던일을 이어받은 사람을 연기한 배우 이름은?_____________토르고를 계승한 사람을 연기한 배우 이름은 무엇인가요?\n", + "Processing question 3310/3952 : 안시성을 격파하려 했지만 실패한 국가는?_____________어떤 나라가 안시성을 공략하려 했으나 실패한 나라는 무엇입니까?\n", + "Processing question 3311/3952 : 해병대 자선 마라톤'행사는 며칠에 열릴 계획이었는가?_____________'해병대 자선 마라톤'행사는 언제 예정되어 있었나요?\n", + "Processing question 3312/3952 : 장덕의 세 번째 정규 음반에 수록된 자작곡 수는?_____________장덕의 세 번째 정규 앨범에 포함된 고유한 곡의 수는 몇 개인가요?\n", + "Processing question 3313/3952 : 누가 적벽대전에서 승리했는가?_____________'적벽대전에서 승리한 사람은 누구인가?'\n", + "Processing question 3314/3952 : 전기와 전자가 서로 유도하는 원리를 활용해 만든 물건은?_____________두 물질이 서로 유도하는 원리를 활용해 만든 물건은 무엇인가요?\n", + "Processing question 3315/3952 : 오리온 함이 배정받은 위치는 어디인가?_____________오리온 함이 할당된 위치는 어디에 있습니까?\n", + "Processing question 3316/3952 : 사람들에게 절대적으로 알라를 믿기를 가르친 사람은?_____________누가 사람들에게 절대적으로 알라를 믿기를 가르쳤나요?\n", + "Processing question 3317/3952 : 박창숙의 막내아들 이름은?_____________'박창숙의 막내아들은 무엇인가요?'\n", + "Processing question 3318/3952 : 니콜라옙스크 사건을 주동한 빨치산의 리더 중 자유단 세력에 희생된 이는 누구인가?_____________뉴욕 시티에서 발생한 테러리스트 공격 사건의 주범으로 지목된 인물은 누구입니까?\n", + "Processing question 3319/3952 : 김순이 일리 지방을 공격할 때라고 생각한 이유는?_____________김순이가 일리 주를 침공하려고 했던 이유는 무엇인가요?\n", + "Processing question 3320/3952 : 장괴가 진유를 살해하게 된 빌미를 초래한 사람의 이름은?_____________빌미를 살해하게 된 사람의 이름은 무엇인가요?\n", + "Processing question 3321/3952 : 이 초상화는 얼굴의 어느 방면을 그린 것인가?_____________이 초상화는 얼굴의 어느 쪽을 묘사했습니까?\n", + "Processing question 3322/3952 : 하이다 과이는 하이다언어로 어떻게 해석되는가?_____________'하이다 과이는 하이다언어로 어떻게 번역되나요?'\n", + "Processing question 3323/3952 : 19세기에 박해를 받음에도 불구하고 동학과 함께 백성들 사이에 전파된 종교는?_____________19세기에 박해를 받음에도 불구하고 동학과 함께 백성들 사이에 전파된 종교는 무엇인가요?\n", + "Processing question 3324/3952 : 옵발덴주는 언제부터 독자적인 발언권을 가지게 되었는가?_____________'옵발덴주가 독립적인 발언권을 획득한 시기는 언제인가요?'\n", + "Processing question 3325/3952 : 뉴욕에서 폭발이 일어났을 당시 폭발이 발생했다는 사실을 알린 사람은 누구였나?_____________뉴욕에서 폭발이 일어났을 때 폭발 사실을 알린 사람은 누구였습니까?\n", + "Processing question 3326/3952 : 프리웨어와 셰어웨어의 설치 시 공통점은?_____________프리웨어와 셰어웨어의 설치 시 공통점이 무엇인가요?\n", + "Processing question 3327/3952 : 사민당이 화력 발전보다 친환경적이라 주장하는 것은?_____________사민당이 친환경적인 방향으로 발전을 주장하는 이유는 무엇인가요?\n", + "Processing question 3328/3952 : 장경근이 일본으로 밀항했다는 사실을 알린 언론사는?_____________장경근이 일본으로 밀항했다는 사실을 알린 언론사는 무엇입니까?\n", + "Processing question 3329/3952 : 페르디난도 2세의 전 부인이 낳은 자식의 이름은?_____________페르디난도 2세의 전 부인이 낳은 자식의 이름은 무엇인가요?\n", + "Processing question 3330/3952 : 대통령 선거에서 이기기 위해 어업협정 체결 사실을 대중에게 늦게 알린 인물은?_____________어떤 인물이 대통령 선거에서 승리하기 위해 어업협정 체결 사실을 대중에게 숨긴 것으로 알려져 있나요?\n", + "Processing question 3331/3952 : 나히체반 칸국에 대한 관할권은 어느 나라로 옮겨졌나?_____________나히체반 칸국의 관할권이 어느 국가로 이전되었습니까?\n", + "Processing question 3332/3952 : 정원의 5분의 1을 소프트웨어 특기자로 뽑는 단과대가 생겨난 해는?_____________정원의 1/5을 소프트웨어 전문가로 선발하는 단과대가 설립된 연도는 언제입니까?\n", + "Processing question 3333/3952 : 흑요석이 사용된 것은 구석기 시대 어느 시기인가?_____________흑요석이 사용된 것은 구석기 시대 어느 시기에 사용되었습니까?\n", + "Processing question 3334/3952 : 식민통치기간동안 이뤄진 서구화는?_____________식민지배시기 동안 발생한 서구화는 무엇인가요?\n", + "Processing question 3335/3952 : 도쿠가와 이에야스는 어떤 전쟁 때문에 소마 가문을 서군으로 간주했나요?_____________도쿠가와 이에야스는 어떤 전쟁으로 소마 가문을 서군으로 간주했나요?\n", + "Processing question 3336/3952 : 보소 5세와 이르멘가르트의 결혼을 주선한 인물은 누구였나?_____________누가 보소 5세와 이르멘가르트의 결혼을 주선했습니까?\n", + "Processing question 3337/3952 : 존 게일 파커 2세가 로고를 만들어준 회사는 어디에 있나요?_____________'존 게일 파커 2세가 디자인한 상징은 어느 회사에서 만들어졌나요?'\n", + "Processing question 3338/3952 : 드라마 닥터 후를 방영한 방송사는?_____________닥터 후라는 드라마를 방영한 방송사는 무엇입니까?\n", + "Processing question 3339/3952 : 기면증의 가장 유력한 발병 원인은?_____________기면증의 주요 발병 원인은 무엇인가요?\n", + "Processing question 3340/3952 : 두만강 지역이 처음으로 주목받은 시기는 언제인가?_____________두만강 지역이 처음으로 주목받은 시기는 언제인가?\n", + "Processing question 3341/3952 : 군 정부의 권한 남용을 지적한 기관은?_____________어떤 조직이 군부의 권한 남용을 비판했나요?\n", + "Processing question 3342/3952 : 다이묘가 새로이 만들어지는 조건은?_____________다이묘가 새롭게 형성되는 조건은 무엇인가요?\n", + "Processing question 3343/3952 : 토마스가 캔터베리의 대주교로 활동하도록 명령한 인물은 누구인가요?_____________누가 토마스에게 캔터베리 대주교로 일하라고 지시했습니까?\n", + "Processing question 3344/3952 : 서적 \"논고\"를 영문으로 옮긴 사람은 누구인가?_____________논고라는 서적을 영어로 번역한 사람은 누구인가요?\n", + "Processing question 3345/3952 : 오키노쿠니에 신탁으로 신풍이 적의 배를 침몰시켰다는 소문이 돈 때는?_____________오키노쿠니에서 적의 선박을 침몰시킨 신탁에 대한 소문이 퍼지고 있나요?\n", + "Processing question 3346/3952 : 불경에서 석가모니의 말씀을 전파하는 새는?_____________'불경에서 석가모니의 가르침을 전하는 새는?'\n", + "Processing question 3347/3952 : 높은 수준의 대회에서 피스톨 그립이 가장 빈번히 사용되는 종목은?_____________피스톨 그립이 가장 빈번히 사용되는 종목은 무엇인가요?\n", + "Processing question 3348/3952 : 미국의 일광절약시간제 기간이 늘어나기 시작한 해는 언제인가요?_____________미국에서 일광시간제가 증가하기 시작한 연도는 언제인가요?\n", + "Processing question 3349/3952 : 시분할 운영 체제를 통해 사용자들에게 분배되는 것은?_____________사용자들에게 분배되는 것은 무엇입니까?\n", + "Processing question 3350/3952 : 요동도행군의 선발 기병부대 숫자는?_____________요동도행군의 선발 기병부대 인원은 몇 명인가요?\n", + "Processing question 3351/3952 : 테런스 엄마의 직업은?_____________테런스 어머니는 어떤 직업을 가지고 계십니까?\n", + "Processing question 3352/3952 : 공세를 실패하기 전 북한군 전략의 중점은?_____________북한군의 전략적 중심은 무엇이었습니까?\n", + "Processing question 3353/3952 : 이순몽 장군의 자택이 설립된 시기는?_____________이순몽 장군의 자택이 건립된 시기는 언제인가요?\n", + "Processing question 3354/3952 : 소비자 행동론은 어떤 학문에 포함된 이론인가요?_____________소비자 행동론은 어떤 분야에 속한 이론인가요?\n", + "Processing question 3355/3952 : 1991년까지 한국에 진출한 맥도날드의 지점은 모두 몇 곳인가?_____________한국에 진출한 맥도날드의 지점 수는 1991년까지 총 몇 개였습니까?\n", + "Processing question 3356/3952 : 함재기는 어디서 출동대기를 하는가?_____________함재기는 어디에서 대기를 하나요?\n", + "Processing question 3357/3952 : 브라이언메이는 어느 기업의 픽업을 구매했나요?_____________브라이언메이가 어떤 회사의 픽업을 샀습니까?\n", + "Processing question 3358/3952 : 암스테르담에 시청을 세운 인물은?_____________암스테르담에서 시청을 세운 사람은 누구인가요?\n", + "Processing question 3359/3952 : 결혼정보회사 선우의 설립자의 통명은?_____________선우의 결혼정보회사 설립자의 성함은 무엇인가요?\n", + "Processing question 3360/3952 : 개인 사용자가 각자 사용할 데이터베이스를 디자인하는 것을 쉽게 해준 프로그램은?_____________어떤 소프트웨어가 개인 사용자들이 자신만의 데이터베이스를 쉽게 디자인할 수 있도록 도와주는가요?\n", + "Processing question 3361/3952 : 1916년, 공유 결합이 두 원자가 전자쌍을 함께 나눠 생기는 현상이라는 것을 알아낸 인물은?_____________두 원자가 전자쌍을 함께 나눠 생기는 현상을 발견한 인물은 누구인가요?\n", + "Processing question 3362/3952 : 자미토프는 델라즈 분쟁을 근거로 무엇을 만들었나요?_____________자미토프는 델라즈 분쟁을 근거로 어떤 것을 생산했습니까?\n", + "Processing question 3363/3952 : 과거의 희곡작품을 주로 취급하는 장르는?_____________어떤 장르는 과거의 연극 작품을 중점적으로 다루나요?\n", + "Processing question 3364/3952 : 임헌영은 어느 기관에 소속되어 있는가?_____________임헌영은 어떤 조직에 속해 있나요?\n", + "Processing question 3365/3952 : 강희제가 소박한 사람이라며 칭찬한 인물은?_____________'강희제가 소박한 사람이라고 칭찬한 사람은 누구인가요?'\n", + "Processing question 3366/3952 : 동인도회사를 해체한 나라는?_____________\"동인도회사를 해산한 국가는 어디인가요?\"\n", + "Processing question 3367/3952 : 상숙이 본인의 당선을 기원하며 빌었던 대상은?_____________상숙이 당선되기를 바라며 기도한 대상은 누구였나요?\n", + "Processing question 3368/3952 : 1945년 8월 하순 당시 조만식이 있었던 도시는?_____________1945년 8월 하순에 조만식이 있었던 도시는 어디였습니까?\n", + "Processing question 3369/3952 : 크리올 엘리트들이 스페인 의회에게 요청한 점은 모두 몇 개인가?_____________크리올 엘리트가 스페인 의회에게 요청한 것은 총 몇 가지입니까?\n", + "Processing question 3370/3952 : 밀본은 왕궁에서 누구를 대신하여 왕을 치료하였나요?_____________밀본은 궁중에서 누구를 대신하여 왕을 치료했습니까?\n", + "Processing question 3371/3952 : 단독으로 대기권에 진입할 수 있는 기술을 처음 소유한 기체는?_____________처음으로 단독으로 대기권에 진입할 수 있는 기술을 보유한 항공기는 무엇인가요?\n", + "Processing question 3372/3952 : 왕이 동명을 죽이려하자 동명이 도피한 지역은?_____________왕이 동명을 죽이려고 할 때 동명이 도피한 장소는 어디였습니까?\n", + "Processing question 3373/3952 : ㄱ씨가 코로나 감염 여부를 무료로 확인받기 위해서는 어느 지역에서 확인받아야 하는가?_____________어느 곳에서 무료로 코로나 감염 여부를 확인받을 수 있나요?\n", + "Processing question 3374/3952 : 첼로와 함께 발전 조짐 이후 번갈아 연주하는 악기는?_____________어떤 악기가 첼로와 번갈아 연주하는 악기인가요?\n", + "Processing question 3375/3952 : 임한경이 변호사 개업을 하기 전 직위는?_____________임한경이 변호사 사무소를 시작하기 전에 가지고 있던 직위는 무엇이었나요?\n", + "Processing question 3376/3952 : 중상주의 시기에 콜베르는 어떤 국가의 산업을 보호하려 했나요?_____________콜베르가 중상주의 시기에 어떤 국가의 산업을 보호하려 했습니까?\n", + "Processing question 3377/3952 : 경희대학교에 들어가 수비를 전담하게 된 선수의 키는?_____________경희대학교에 진학한 후 수비 포지션을 맡게 된 선수의 키는 얼마인가요?\n", + "Processing question 3378/3952 : 천연두와 비슷하여 흔히 헷갈리는 병명은 무엇인가요?_____________두뇌 염증과 비슷하여 흔히 헷갈리는 병명은 무엇인가요?\n", + "Processing question 3379/3952 : 상주시 화북면에서 문장대까지 걸리는 시간은?_____________문장대까지 도착하는 데 걸리는 시간은 상주시 화북면에서 얼마나 소요되나요?\n", + "Processing question 3380/3952 : 마라의 죽음'의 복제품은 몇 년도부터 제작되기 시작했는가?_____________'마라의 죽음'의 판본은 언제부터 생산되었습니까?\n", + "Processing question 3381/3952 : 이유립씨가 글을 싣기 시작한 잡지사가 창간된 시기는?_____________이유립씨가 글을 싣기 시작한 잡지사가 설립된 시기는 언제인가요?\n", + "Processing question 3382/3952 : 훈족이 교황을 만나고 돌아가던 순례자들을 공격한 곳은?_____________어디에서 훈족이 교황을 만나고 돌아가던 순례자들을 공격했나요?\n", + "Processing question 3383/3952 : 사고의 원인을 밝히는 데에는 어떤 사람들이 참여했는가?_____________'사고의 원인을 규명하는 데에는 누가 관여했나요?'\n", + "Processing question 3384/3952 : 인간세계에서 볼바는 누구의 역할을 대신한다고 여겨졌나요?_____________누구가 인간세계에서 대신하는 역할은 누구인가요?\n", + "Processing question 3385/3952 : 호쿠토는 업무전화를 받고 어디로 가버렸나요?_____________호쿠토는 업무전화를 받고 어디로 사라졌나요?\n", + "Processing question 3386/3952 : 리켈메가 대표팀에 들어갈 수 있었던 기량을 보여준 경기는?_____________'리켈메가 대표팀에 합류할 만큼의 능력을 보여준 경기는?'\n", + "Processing question 3387/3952 : 삼척기줄다리기에서 속닥기줄은 누가 잡는 줄인가?_____________삼척기줄다리기에서 속닥기줄은 누가 잡는가?\n", + "Processing question 3388/3952 : 아시아 여자 농구 선수권 대회는 몇 년에 열렸는가?_____________'아시아 여자 농구 선수권 대회는 언제 개최되었습니까?'\n", + "Processing question 3389/3952 : 윤직선의 아들 이름은?_____________윤직선의 자녀 이름은 무엇인가요?\n", + "Processing question 3390/3952 : 재개발 이전에 프레쉬킬스 매립이었던 곳은?_____________프레쉬킬스 매립지가 있던 재개발 이전 지역은 어디였습니까?\n", + "Processing question 3391/3952 : 유럽 연합을 만들 때, 중요하게 여겨야 할 가치가 서술되어있는 조항은 어디인가?_____________유럽 연합을 창설할 때, 중요하게 고려해야 할 가치가 명시된 조항은 어디에 포함되어 있습니까?\n", + "Processing question 3392/3952 : 우주정거장이 추락하는 사건의 원인은 무엇인가?_____________우주정거장이 떨어지는 사고의 원인은 무엇입니까?\n", + "Processing question 3393/3952 : 란돌포가 전 재산을 투자한 상품으로 하고자 한 일은?_____________'란돌포가 투자한 상품으로 하고자 한 일은 무엇인가요?'\n", + "Processing question 3394/3952 : 제나라의 실질적인 권력자는 누구였는가?_____________누가 제나라의 사실상 지배자였습니까?\n", + "Processing question 3395/3952 : 고조선의 세력 축소에 대한 내용이 나와있는 책은?_____________'고조선의 세력 축소에 대한 정보가 포함된 도서는 무엇인가요?'\n", + "Processing question 3396/3952 : 연예인들은 성우에 비해 어떤 교육을 받지 못해 미숙한 연기를 보여주는가?_____________연예인들은 성우보다 교육이 부족하여 연기가 서툴러 보이나요?\n", + "Processing question 3397/3952 : 튀코 브라헤는 프레데리크 2세가 사망한 후 어디로 이주하나요?_____________튀코 브라헤는 프레데리크 2세가 사망한 후 어디로 이주하였습니까?\n", + "Processing question 3398/3952 : 현재 선수촌 형태의 시설의 시발점은 무엇이었는가?_____________선수촌 형태의 시설의 시발점은 무엇이었나요?\n", + "Processing question 3399/3952 : 지미 카더는 선거 공약으로 무엇을 내세웠는가?_____________'지미 카터는 대선 공약으로 어떤 것을 제안했습니까?'\n", + "Processing question 3400/3952 : 레오 6세에 의해 감금당하여 살해된 인물은 누구인가요?_____________누구가 레오 6세에 의해 구금되어 살해당했나요?\n", + "Processing question 3401/3952 : 모아이를 이루는 돌의 종류는 무엇인가?_____________\"모아이를 이루는 돌은 어떤 종류인가요?\"\n", + "Processing question 3402/3952 : 다 다른 계정으로 게시물을 올려도 무엇이 동일하다면 모든 게시물의 IP 주소는 동일한가?_____________게시물을 다른 계정으로 게시해도 모든 게시물의 IP 주소가 같은가?\n", + "Processing question 3403/3952 : 폴란인의 후손들은 오늘날 뭐라 불리는가?_____________폴란인의 후손들은 현재 어떻게 불리나요?\n", + "Processing question 3404/3952 : 아버지를 존중하지 않았던 인물은 누구인가요?_____________누가 아버지를 존중하지 않았나요?\n", + "Processing question 3405/3952 : 입방 밀집 구조 보다 간격이 더 큰 구조는 무슨 모양을 띄고 있나요?_____________무엇이 입방 밀집 구조 대신 사용되는 다른 용어인가요?\n", + "Processing question 3406/3952 : 이오의 표면이 산으로 둘러싸여 있는 것은 어떤 현상 때문인가?_____________이오의 표면이 산으로 에워싸여 있는 이유는 무엇인가요?\n", + "Processing question 3407/3952 : 에너지 기본권의 의미를 포함하는 법 조항은?_____________에너지 접근 권의 법적 근거는 무엇인가요?\n", + "Processing question 3408/3952 : 청화백자병에서 당시의 새로운 유행양식과 높은 미적감각을 엿볼수 있는 표현 방식은?_____________청화백자병에서 당시의 새로운 유행양식과 높은 미적감각을 엿볼 수 있는 표현 방식은 무엇인가요?\n", + "Processing question 3409/3952 : 사쿠라가 성장할 때 스피넬 선을 만든 이유는?_____________사쿠라가 성장할 때 왜 스피넬 선을 만들었는가?\n", + "Processing question 3410/3952 : 발터 카우프만은 《지하실의 수기》를 뭐라 표현 했는가?_____________발터 카우프만은 '지하실의 수기'를 어떻게 묘사했습니까?\n", + "Processing question 3411/3952 : 척추측만증을 앓는 사람의 척추에 부정적인 영향을 끼치는 힘은 무엇인가요?_____________'척추측만증을 앓는 사람의 척추에 해를 끼치는 힘은 무엇인가요?'\n", + "Processing question 3412/3952 : 웹 브라우저의 취약점을 최소한으로 보완할 수 있는 방법은?_____________웹 브라우저 보안을 강화하는 방법에 대해 알려주세요.\n", + "Processing question 3413/3952 : 한국의 주먹밥과 비슷한 일본의 음식은?_____________일본에서는 주로 어떤 음식을 먹나요?\n", + "Processing question 3414/3952 : 영국 국방부가 공식적으로 만들어진 해는?_____________영국 국방부가 공식적으로 설립된 해는 언제인가요?\n", + "Processing question 3415/3952 : 케네스 크레이크가 심리학에 영향력을 미친 대륙은?_____________케네스 크레이크가 심리학에 영향을 미친 대륙은 어디인가요?\n", + "Processing question 3416/3952 : 심우섭을 모티브로하여 만든 인물이 등장하는 책 제목은?_____________심우섭을 영감으로 삼아 만들어진 책의 제목은 무엇인가요?\n", + "Processing question 3417/3952 : 혼자가 된 소영의 옆에서 큰 힘이 되어준 사람은?_____________소영이에게 큰 지원을 준 사람은 누구인가요?\n", + "Processing question 3418/3952 : 임산부가 태몽을 꾸는 시기는 주로 임신전후와 또 언제인가?_____________임신부가 태몽을 꾸는 시기는 일반적으로 임신 전후와 언제인가요?\n", + "Processing question 3419/3952 : 1978년 세계사격선수권대회에 출전하는 사람들이 머물렀던 곳은?_____________어느 장소에 1978년 세계사격선수권대회 참가자들이 머물렀나요?\n", + "Processing question 3420/3952 : 에르빈의 죽음을 확인한 사람은?_____________에르빈의 사망을 확인한 사람은 누구인가요?\n", + "Processing question 3421/3952 : 옥타비아누스는 사모스섬에서 무엇으로 만들어진 선물들을 받았나?_____________옥타비아누스가 사모스 섬에서 어떤 소재로 만들어진 선물을 받았나요?\n", + "Processing question 3422/3952 : 콜초프는 인터뷰에서 라이오넬 크랩을 살해한 보상으로 무엇을 받았다고 했나?_____________콜초프는 라이오넬 크랩을 살해한 대가로 어떤 것을 받았다고 말했나요?\n", + "Processing question 3423/3952 : 일부 북한 사람들이 북한에 송환된 재일동포들을 낮추어 부른 단어는?_____________북한에서 재일동포들을 송환하는 것을 뭐라고 부르나요?\n", + "Processing question 3424/3952 : 본존불의 하체의 가운데 부분에서 볼 수 있는 것은?_____________하체의 중앙 부분에서 볼 수 있는 것은 무엇입니까?\n", + "Processing question 3425/3952 : 시미즈 건설이 기밀을 발설하여 공사에 대한 입찰을 하지 않았던 집단은?_____________시미즈 건설이 비밀을 폭로하여 공사에 대한 입찰을 하지 않았던 집단은 누구였습니까?\n", + "Processing question 3426/3952 : 페터 스토이베산트가 포트 캐지미어를 세웠던 장소의 현재 이름은 무엇인가?_____________페터 스토이베산트가 포트 캐지미어를 세웠던 장소의 현재 명칭은 무엇인가요?\n", + "Processing question 3427/3952 : 번오기의 진군에 의해 살해 당한 대장은 누구인가?_____________번오기의 진군으로 인해 살해당한 대장은 누구인가?\n", + "Processing question 3428/3952 : 스파르타스가 그리스의 총대주교를 만나게끔 도와준 인물은?_____________스파르타스가 그리스의 총대주교를 만나게끔 도와준 사람은 누구인가요?\n", + "Processing question 3429/3952 : 경정수익금으로 환경보호운동과 인류박애운동을 한 단체는?_____________어떤 단체가 경정수익금을 사용하여 환경보호활동과 인류애운동을 하는가요?\n", + "Processing question 3430/3952 : 진공흡인 유방생검술에서 1회에 많은 양의 조직을 얻을 때 사용하는 도구는?_____________진공흡인 유방생검술에서 1회에 많은 양의 조직을 얻을 때 사용하는 도구는 무엇인가요?\n", + "Processing question 3431/3952 : 경제적 의미의 국토란 무엇인가?_____________국토의 경제적 의미는 무엇인가요?\n", + "Processing question 3432/3952 : 시아파가 다른 종교의 찬동을 얻기 시작한 해는?_____________시아파가 다른 종교의 찬동을 얻기 시작한 해는 언제였습니까?\n", + "Processing question 3433/3952 : 최은영의 등단 작품은?_____________'최은영의 데뷔 작품은 무엇인가요?'\n", + "Processing question 3434/3952 : 기체와 얼음에 둘러싸여진 c 중심핵의 모습와 유사한 모양새를 띄고 있는 행성은 무엇인가?_____________어떤 행성은 기체와 얼음으로 둘러싸인 c 중심핵과 유사한 형태를 가지고 있나요?\n", + "Processing question 3435/3952 : 군주로부터 임명되었던 각료들은 퇴임 후 어떤 직위를 맡았는가?_____________각료들은 퇴임 후 어떤 직위를 맡았습니까?\n", + "Processing question 3436/3952 : 1940년부터 독일과 함께 연합군을 공격한 나라는?_____________어떤 국가가 1940년부터 독일과 함께 연합군을 공격했습니까?\n", + "Processing question 3437/3952 : 빅·잠을 부순 부대는?_____________어떤 대규모의 군대가 밤을 깨우는 것을 무너뜨린다고 하는가?\n", + "Processing question 3438/3952 : 비봉산성은 누구의 침략을 방어하기 위해 지어졌나요?_____________'비봉산성은 어떤 왕국의 침략을 막기 위해 세워졌습니까?'\n", + "Processing question 3439/3952 : 북한은 평양에 무엇이 있기 때문에 고조선의 도읍이 현재의 평양시라고 주장하는가?_____________북한은 평양에 무엇이 있기 때문에 조선의 도읍이 현재의 평양시라고 주장하는가?\n", + "Processing question 3440/3952 : 도기가 도입되기 전부터 사용되던 요리 방법은?_____________요리 방법이 도기가 도입되기 전부터 사용되던 것은 무엇인가요?\n", + "Processing question 3441/3952 : 스파르타와 아테네 사이에 일어난 무력적인 분쟁은?_____________스파르타와 아테네 사이에 발생한 무력한 충돌은 무엇인가요?\n", + "Processing question 3442/3952 : 클라이드 톰보가 명왕성을 찾아냈던 장소는?_____________어디에서 클라이드 톰보가 명왕성을 발견했나요?\n", + "Processing question 3443/3952 : 신탁통치 오보사건은 어떤 신문사와 관련되어있나요?_____________'신탁통치 오보사건은 어떤 언론사와 관련되어 있나요?'\n", + "Processing question 3444/3952 : 로잔의 옛 명칭인 라우소니움은 어느 시대에 붙여진 것인가?_____________로잔의 과거 이름인 라우소니움은 몇 시대에 부여되었습니까?\n", + "Processing question 3445/3952 : 사람들의 보편적인 연대를 붕괴시키고 일부만 단결시키는 것은 무엇인가?_____________'사람들의 보편적인 연대를 붕괴시키고 일부만 단결시키는 것은 어떤 행위인가?'\n", + "Processing question 3446/3952 : 합동 조사반과 같은 달에 조사 결과를 발표한 기관은?_____________합동 조사반과 같은 달에 조사 결과를 발표한 기관은 무엇입니까?\n", + "Processing question 3447/3952 : 1932년 11월에 조동호를 상해로 보내라고 명령한 인물은 어디에 있었나요?_____________'1932년 11월에 조동호를 상해로 파견하라고 지시한 사람은 어디에 있었습니까?'\n", + "Processing question 3448/3952 : 코드링턴이 바스 훈장을 수여받았던 때는 언제인가?_____________코드링턴이 바스 훈장을 받은 날짜는 언제였습니까?\n", + "Processing question 3449/3952 : 동시에 2발을 쏠 수 있는 무기 중 포물선 형태로 공격하는 것은 무엇인가?_____________어떤 무기는 공격할 때 포물선 형태로 동시에 2발을 발사할 수 있나요?\n", + "Processing question 3450/3952 : 의사-석유 교환 협정으로 이득을 본 베네수엘라의 정책은?_____________베네수엘라가 의사-석유 교환 협정으로 이익을 얻은 정책은 무엇입니까?\n", + "Processing question 3451/3952 : 학교 지휘부가 \"혼란을 피하여 침착하게 한강을 넘어라\"라고 지시를 내린 이유는?_____________학교 지휘부가 한강을 건너라고 지시한 이유는 무엇인가요?\n", + "Processing question 3452/3952 : 윤치호는 원산에 사는 사람들이 무엇에 대해 무지하다고 하였나?_____________'윤치호는 원산에 사는 사람들이 무엇을 모르고 있다고 언급했나요?'\n", + "Processing question 3453/3952 : 한국과학기술원에서 반도체 집적 회로 제작 설비를 갖추기 위해 투자한 기간은?_____________한국과학기술원에서 반도체 집적 회로 제작 설비를 구축하는 데 소요된 시간은 얼마인가요?\n", + "Processing question 3454/3952 : 예수에게 자신의 삶을 바친다는 의미에 포함되어 있는 물건은?_____________예수를 따르는 사람들이 가지고 있는 물건은 무엇인가요?\n", + "Processing question 3455/3952 : 코우테츠가 전투에 사용된 건 언제까지인가?_____________코우테츠가 전투에 사용된 것이 며칠까지였습니까?\n", + "Processing question 3456/3952 : 호르스트 슈만이 미군의 포로에서 풀려난 연도는?_____________호르스트 슈만이 미군의 포로에서 탈출한 연도는 언제인가요?\n", + "Processing question 3457/3952 : 김진양을 좌우사의 직위에서 물러나게 한 조직은?_____________김진양이 좌우사의 직위에서 물러나게 한 단체는 무엇입니까?\n", + "Processing question 3458/3952 : 줄기 네발동물은 줄기생물군에서 무엇을 제외한 종들인가?_____________줄기 네발동물은 줄기생물군에서 어떤 종들을 제외한가요?\n", + "Processing question 3459/3952 : 하산 부즈루그가 쿠첵에게 패배 후 쫓겨난 곳은?_____________하산 부즈루그가 쿠첵에게 패배한 후 추방당한 곳은 어디인가요?\n", + "Processing question 3460/3952 : 2000년 일본 중의원 의원 총선거 당시 사사키의 경쟁자는?_____________일본 중의원 의원 총선거 당시 사사키의 경쟁자는 누구였나요?\n", + "Processing question 3461/3952 : 창녕 포교당 목조여래좌상과 대구 동화사 대웅전 목조삼세불좌상 중 먼저 만들어진 것은?_____________'창녕 포교당 목조여래좌상과 대구 동화사 대웅전 목조삼세불좌상 중 어떤 것이 먼저 만들어졌나요?'\n", + "Processing question 3462/3952 : 수만 명의 사람들이 아바시제의 사퇴를 요청하러 간 곳은?_____________아바시제가 사퇴를 요청받은 장소는 어디입니까?\n", + "Processing question 3463/3952 : 안중근의 동생이 실종된 지역은?_____________안중근의 동생이 사라진 곳은 어디인가요?\n", + "Processing question 3464/3952 : 노부스 호모들의 원래 신분은?_____________노부스 호모들의 원래 신분은 무엇입니까?\n", + "Processing question 3465/3952 : 풀 팽창식 사이클은 다른 사이클과 비교했을 때 어떤 문제를 가지고 있는가?_____________풀 팽창 사이클은 다른 사이클과 비교했을 때 어떤 단점을 가지고 있는가?\n", + "Processing question 3466/3952 : 정치에 자신이 영향력을 행사할 수 없다고 생각하는 사람들을 분석한 인물은?_____________누구가 정치에 영향을 미칠 수 없다고 생각하는 사람들을 연구한 사람은 누구인가요?\n", + "Processing question 3467/3952 : 코알라가 하루 대부분을 잠을 자는 데 영향을 끼친 것은?_____________코알라가 하루 대다수를 수면에 보내는 이유는 무엇인가요?\n", + "Processing question 3468/3952 : 진왕 정 15년 진나라가 조나라를 공격할 때 가장 먼저 공격한 지역은 어디인가?_____________진왕 정 15년 진나라가 조나라를 공격할 때 가장 먼저 공격한 지역은 어디였습니까?\n", + "Processing question 3469/3952 : 아노머가 안정적인 상태가 되기 위해 아노머기와 고리의 다른 작용기 사이에서 이루어지는 반응은 무엇인가?_____________아노머가 안정적인 상태가 되기 위해 아노머기와 고리의 다른 작용기 사이에서 이루어지는 반응은 무엇인가?\n", + "Processing question 3470/3952 : 쿼텃이 중동 평화 로드맵으로 이스라엘과 팔레스타인 사이에서 끝나기를 바라는 것은?_____________쿼텃이 중동 평화 로드맵으로 이스라엘과 팔레스타인 사이에서 끝나기를 희망하는 것은 무엇입니까?\n", + "Processing question 3471/3952 : 2001년 노스 지역 선거에서 459표를 받은 인물이 인터넷에서 사용하는 명칭은?_____________2001년 노스 지역 선거에서 459표를 받은 인물이 인터넷에서 사용하는 별명은 무엇인가요?\n", + "Processing question 3472/3952 : 아 바오아 쿠를 다시 침략하도록 지휘한 사람은?_____________'아 바오아 쿠를 다시 공격하도록 명한 인물은 누구인가요?'\n", + "Processing question 3473/3952 : 비잔틴 제국의 황제와 누르 앗딘이 평화협정을 맺은 지 3년 후에 베르트랑은 어떤 전쟁에 참전했나?_____________베르트랑이 어떤 전쟁에 참전했나요?\n", + "Processing question 3474/3952 : 사패산 송추계곡에서 발원한 하천의 이전 명칭은?_____________사패산 송추계곡에서 발원한 하천의 이전 명칭은 무엇이었습니까?\n", + "Processing question 3475/3952 : 네델란드가 경제적인 면 뿐 아니라 문화적인 면으로도 가장 전성기를 이룬 시기는?_____________네델란드가 경제적인 측면 뿐만 아니라 문화적인 면에서도 가장 번창한 시기는 언제였나요?\n", + "Processing question 3476/3952 : 지금까지도 전통도자기를 제조하는 도예가들 다수가 살고 있는 곳은?_____________전통 도자기를 생산하는 도예가들이 많이 거주하는 지역은 어디인가요?\n", + "Processing question 3477/3952 : 프랑스가 베트남을 공격한 명분은?_____________프랑스가 베트남을 침공한 이유는 무엇이었습니까?\n", + "Processing question 3478/3952 : 라오스에서 독립선언이 이루어진 해에 심각한 식량 부족을 겪은 나라는?_____________라오스에서 독립선언이 이루어진 해에 심각한 식량 부족을 겪은 국가는 어디인가요?\n", + "Processing question 3479/3952 : 에렌을 조사병단으로 투입하기 위해 에렌을 때렸던 인물은?_____________에렌을 조사병단으로 투입하기 위해 에렌을 때린 사람은 누구인가요?\n", + "Processing question 3480/3952 : 오드리의 남지친구의 직업은?_____________오드리의 전 여자친구의 직업은 무엇인가요?\n", + "Processing question 3481/3952 : 우에노가 공식적으로 사과받은 인물의 직위는?_____________우에노가 공식적으로 사과받은 인물의 직위는 무엇입니까?\n", + "Processing question 3482/3952 : 펠리페는 무엇을 조종하는 훈련을 받았나요?_____________펠리페가 어떤 것을 조종하는 훈련을 받았습니까?\n", + "Processing question 3483/3952 : 기원전 25년에 킬리키아의 서쪽 땅을 다스린 인물은?_____________킬리키아 서쪽 땅을 다스린 인물은 기원전 25년에 누구였습니까?\n", + "Processing question 3484/3952 : 전염병이 에티오피아에서 시작했다고 기록한 사람은?_____________에티오피아에서 발생한 전염병을 기록한 사람은 누구인가요?\n", + "Processing question 3485/3952 : 진양서류가 화석 상태로 남아있을 가능성이 희박한 원인은 무엇인가?_____________진양서류가 화석 상태로 남아있을 가능성이 희박한 이유는 무엇인가요?\n", + "Processing question 3486/3952 : 프랑스군의 옆을 공격하여 그들을 퇴각시켰던 집단은?_____________어떤 집단이 프랑스군을 공격하여 퇴각시켰나요?\n", + "Processing question 3487/3952 : 국가운영 체제가 국가자본주의로 가게된 것은 어느 계급의 변질 때문인가?_____________국가 자본주의로 이행되는 국가 운영 체제의 변화는 어떤 계급의 타락으로 인해 발생했나요?\n", + "Processing question 3488/3952 : 노르웨이어에 많은 영향을 준 언어가 속한 그룹은?_____________어떤 언어가 노르웨이어에 큰 영향을 미쳤는가?\n", + "Processing question 3489/3952 : 승부 조작에 관한 신고를 받은 곳은?_____________어디에서 승부 조작을 신고받나요?\n", + "Processing question 3490/3952 : 선고 된 형의 집행을 뒤로 미루는 것을 무엇이라고 하는가?_____________무엇이 선고 된 형의 집행을 뒤로 미루는 것을 지연이라고 하는가?\n", + "Processing question 3491/3952 : 헬렌 레너드 헤이가 아들이 3살일 때 머물렀던 곳은?_____________헬렌 레너드 헤이의 아들이 3살 때 머물렀던 장소는 어디였습니까?\n", + "Processing question 3492/3952 : 족장에서 황제로 진급한 인물이 위미르를 깔보며 불렀던 명칭은?_____________위미르를 깔보며 불렀던 명칭은 무엇인가요?\n", + "Processing question 3493/3952 : 아얌을 사용하던 사람은?_____________아얌을 사용하던 사람은 누구였나요?\n", + "Processing question 3494/3952 : 김홍륙이 지냈던 벼슬 중 가장 높은 직위를 가진 벼슬의 이름은 무엇인가?_____________김홍륙이 지냈던 가장 높은 직위를 가진 벼슬은 무엇입니까?\n", + "Processing question 3495/3952 : 후지타카가 나데시코와 혼인할 당시 후지타카의 나이는?_____________후지타카가 나데시코와 결혼했을 때 후지타카는 몇 살이었나요?\n", + "Processing question 3496/3952 : 서경우는 언제 처음 관직에 올랐나?_____________서경우가 처음으로 관직에 오른 날짜는 언제인가요?\n", + "Processing question 3497/3952 : 토라에게 작은 린트부름을 선물한 인물은?_____________토라에게 작은 린트부름을 선물한 사람은 누구인가요?\n", + "Processing question 3498/3952 : 인권과 티베트 운동가 연합이 뉴욕에서 집회를 열어 석방시키고자 한 사람은?_____________뉴욕에서 집회를 열어 티베트 운동가를 석방시키고자 한 사람은 누구인가요?\n", + "Processing question 3499/3952 : 최열이 사도가 되기 위해 지불한 금액은?_____________최열이 사도가 되기 위해 지불한 비용은 얼마였나요?\n", + "Processing question 3500/3952 : 많은 사람들에게 교도소의 문제점을 알린 인물은?_____________교정시설의 결함을 대중에게 알린 인물은 누구인가요?\n", + "Processing question 3501/3952 : 미에슈코 1세의 왕비의 국적은?_____________미에슈코 1세의 왕비는 어느 국적인가요?\n", + "Processing question 3502/3952 : 그로스테스트가 박탈 이론을 이용해 순수 결핍으로 생각했던 단어는?_____________박탈 이론을 이용해 순수 결핍으로 생각했던 단어는 무엇입니까?\n", + "Processing question 3503/3952 : 감염내과 전문의들은 어떤 병의 원인을 알아내는 것에 도움을 주는가?_____________감염내과 전문의들은 어떤 질병의 원인을 발견하는 데 도움을 줄까요?\n", + "Processing question 3504/3952 : 사단장이 포로의 진술 내용을 재확인하라고 명령한 사람은?_____________사단장이 포로의 진술 내용을 재확인하라는 명령을 내린 사람은 누구인가요?\n", + "Processing question 3505/3952 : 리처드 액셀이 과학에 대한 태도를 바꾼 기관은 어디인가?_____________리처드 액셀이 과학에 대한 태도를 변화시킨 조직은 어디에 있습니까?\n", + "Processing question 3506/3952 : 저온 보관 기술이 개발되지 않았을 당시, 브로콜리보다 더 많이 유통된 것은?_____________브로콜리 대신 다른 식물이 냉장 보관 기술이 개발되지 않았을 때 더 많이 유통되었나요?\n", + "Processing question 3507/3952 : 세금 납부 영수증이 여권의 기능을 대신할 수 있는 나라는?_____________어떤 국가에서 세금 납부 영수증이 여권의 대체 기능을 할 수 있는가?\n", + "Processing question 3508/3952 : 아디아포라와 선악이 서로 무관하다고 주장한 사람은 누구인가?_____________아디아포라와 선악이 상호 무관하다고 주장한 사상을 제시한 사람은 누구인가요?\n", + "Processing question 3509/3952 : 이셴 층을 두가지 방법으로 측정했을 때 다른 결과가 나온 부분은?_____________이셴 층을 두 가지 방식으로 측정했을 때 다른 결과가 나온 부분은 무엇인가요?\n", + "Processing question 3510/3952 : 기후 변화 대응 체계 해소 취지에 선구할 수 있는 방안으로 대두되는 농업 장소는?_____________농업 분야에서 기후 변화에 대응하기 위한 최신 방안은 무엇인가요?\n", + "Processing question 3511/3952 : 공장제 수공업에서 기계제 대공장으로, 자본주의적 생산관계가 형성되는 전환점을 무엇이라고 하는가?_____________공장 생산 방식에서 수공업으로부터 대규모 기계 제조 공장으로 전환되면서 자본주의적 생산관계가 형성되는 전환점을 무엇이라고 합니까?\n", + "Processing question 3512/3952 : 오마의걸의 ‘violet 버전‘ 음반 표지의 배경은 무엇인가?_____________'오마이걸의 ‘violet 버전‘ 음반 표지의 배경은 어떤 것인가?'\n", + "Processing question 3513/3952 : 1967-68 시즌의 우승팀은 누구인가?_____________1967-68 시즌의 챔피언은 누구입니까?\n", + "Processing question 3514/3952 : 노르드인 탐험가들이 북대서양 해안에서 발견한 땅 중 가장 늦게 발견된 곳은?_____________가장 최근에 발견된 땅 중 노르드인 탐험가들이 북대서양 해안에서 찾은 곳은 어디인가요?\n", + "Processing question 3515/3952 : 옛날 어부들이 육수를 만들기 위해 사용했던 것은?_____________옛날 어부들이 육수를 만들기 위해 사용했던 것은 무엇이었습니까?\n", + "Processing question 3516/3952 : 최성면, 이원용과 함께 팀을 다시 꾸린 인물은?_____________'최성면과 이원용이 함께 팀을 다시 조직한 사람은 누구인가요?'\n", + "Processing question 3517/3952 : 로크리누스가 훔베르를 살해한 방법은?_____________로크리누스가 훔베르를 살해한 방식은 무엇인가요?\n", + "Processing question 3518/3952 : 정조가 태어난 해는?_____________정조가 출생한 해는 언제인가요?\n", + "Processing question 3519/3952 : 제임스 로건에게 땅을 판 펜실베이니아 지역의 원주민은?_____________펜실베이니아 지역에서 땅을 판 제임스 로건에게 원주민은 누구였습니까?\n", + "Processing question 3520/3952 : 공정 러시아당에서 빈부격차를 줄이기위해 채택해야 한다고 주장하는 세제는?_____________공정 러시아당에서 빈부격차를 줄이기위해 채택해야 한다고 주장하는 세제는 무엇인가요?\n", + "Processing question 3521/3952 : 성 베네딕도가 수도사들에게 반드시 읽어야 한다고 권하는 것은 누구의 저서인가?_____________성 베네딕도가 수도사들에게 꼭 읽어야 한다고 권하는 책은 누구의 저서인가요?\n", + "Processing question 3522/3952 : 유란시아 재단은 2000년에 몇 권의 책을 팔았는가?_____________유란시아 재단이 2000년에 몇 권의 도서를 판매했습니까?\n", + "Processing question 3523/3952 : 금강 자전거길의 종착지는 어디인가?_____________금강 자전거길의 끝지점은 어디에 있나요?\n", + "Processing question 3524/3952 : 세계인권선언과 국제인권규약을 비교했을 때 어떤 것이 더 세세한 규약을 담고있나?_____________세계인권선언과 국제인권규약을 대조했을 때 어떤 것이 더 구체적인 규정을 포함하고 있는가?\n", + "Processing question 3525/3952 : 청주시에서 학생요금은 무엇에 따라 달라지나요?_____________청주시에서 학생료는 어떤 기준으로 변동하나요?\n", + "Processing question 3526/3952 : 키루스의 애인 아스파시아의 원래 이름은?_____________아스파시아의 진짜 이름은 무엇입니까?\n", + "Processing question 3527/3952 : 엔베르 호자와 같이 종속지의 혁명이 인민민주주의의 혁명이라고 강조한 자는?_____________누가 엔베르 호자와 같이 종속지의 혁명이 인민민주주의의 혁명이라고 강조했나요?\n", + "Processing question 3528/3952 : 인도에서 제일 많이 알려진 악기의 가장 일반적인 형태는?_____________인도에서 가장 유명한 악기의 일반적인 형태는 무엇인가요?\n", + "Processing question 3529/3952 : 텐스카타와의 개명전 이름은?_____________'텐스카타와의 개명전 이름은 무엇인가요?'\n", + "Processing question 3530/3952 : 방실이가 출생한 지역은 어디인가요?_____________방실이가 태어난 곳은 어디인가요?\n", + "Processing question 3531/3952 : 박근혜 후보 대선 캠프에서 윤씨의 직책은?_____________윤씨가 박근혜 후보 대선 캠프에서 맡은 역할은 무엇이었나요?\n", + "Processing question 3532/3952 : 신일고는 어디에 있는가?_____________신일고는 어느 곳에 위치하고 있습니까?\n", + "Processing question 3533/3952 : 자신의 이익을 위해서 옳지 못한 일을 주저없이 행동에 옮기는 이를 뭐라 하는가?_____________어떤 행동을 주저 없이 하는 사람을 뭐라고 부르나요?\n", + "Processing question 3534/3952 : 위대한 탄생은 초기에 어떤 프로그램을 모방했다고 비난을 받았나요?_____________'위대한 출생은 처음에 어떤 소프트웨어를 모방했다고 비판을 받았습니까?'\n", + "Processing question 3535/3952 : 강재구 대위의 사망일은?_____________강재구 대위의 사망 날짜는 언제인가요?\n", + "Processing question 3536/3952 : 잘못된 보도로 인해 신탁통치반대운동이 찬반으로 나뉘어지게 한 언론은?_____________어떤 언론이 잘못된 보도로 인해 신탁통치반대운동을 양분시킨 것인가요?\n", + "Processing question 3537/3952 : 가옥을 디자인하고 만들었던 인물은?_____________'주택을 디자인하고 건설한 사람은 누구인가요?'\n", + "Processing question 3538/3952 : 샴스 알딘의 형제는 누구인가?_____________샴스 알딘의 동생은 누구입니까?\n", + "Processing question 3539/3952 : 가격탄력성의 정도를 표현을 위해 기준이 되는 숫자는?_____________'가격탄력성의 정도를 나타내는데 사용되는 숫자는 무엇입니까?'\n", + "Processing question 3540/3952 : 잉글랜드군은 누구를 미제리코르테로 찔러 죽였는가?_____________누가 잉글랜드군에 의해 미제리코르테로 찔러졌습니까?\n", + "Processing question 3541/3952 : 관리의 비리와 재산 은닉 현상을 없애준 화폐는?_____________어떤 화폐가 관리의 부정행위와 재산 은닉을 방지하는데 도움이 되었나요?\n", + "Processing question 3542/3952 : 칼 구스타브 에밀 만네르헤임 남작이 지원하는 자원 봉사단은 어디로 보내졌나?_____________칼 구스타브 에밀 만네르헤임 남작이 후원하는 자원 봉사단이 어떤 곳으로 파견되었습니까?\n", + "Processing question 3543/3952 : 테바이는 권력을 잃고난 뒤 누구에게 복종하게 되는가?_____________테바이는 권력을 상실한 후 누구에게 복종하게 되나요?\n", + "Processing question 3544/3952 : 랑선에서 퇴각 결정을 내린 자가 받은 조치는?_____________랑선에서 퇴각 결정을 내린 자가 받은 처벌은 무엇인가요?\n", + "Processing question 3545/3952 : 이고르 댜틀로프를 중심으로 만들어진 탐사대에서 다수를 차지한 성별은?_____________이고르 댜틀로프를 중심으로 만들어진 탐사대에서 다수를 차지한 성별은 무엇인가요?\n", + "Processing question 3546/3952 : 유명한 펑크 베이시스트의 일부는 어떤 방식으로 연주하였나?_____________어떻게 유명한 펑크 베이시스트들이 연주를 하는가?\n", + "Processing question 3547/3952 : 아살 북서쪽에 유도 폭탄이 떨어진 해는?_____________'아살 북서쪽에 유도 폭탄이 떨어진 연도는?'\n", + "Processing question 3548/3952 : 크리스티 역은 어느 도시에 있는가?_____________크리스티 역이 위치한 도시는 어디인가요?\n", + "Processing question 3549/3952 : 이남호 소령의 제3대대가, 제2대대가 진천으로 간 이후에 간 곳은?_____________이남호 소령의 제3대대가, 제2대대가 진천으로 이동한 후 방문한 장소는 어디입니까?\n", + "Processing question 3550/3952 : 후각과 청각이 발달한 진도개의 탁월함은 무엇에 적합한가?_____________진도개의 뛰어난 후각과 청각 능력은 어떤 환경에 유용한가?\n", + "Processing question 3551/3952 : 손상 된 후 재생 가능한 거위와 오리의 신체 부위는?_____________어떤 부분이 손상된 후에도 재생이 가능한 거위와 오리의 신체 부위는 무엇인가요?\n", + "Processing question 3552/3952 : 교황 베네딕토 16세가 영국에서 가장 먼저 찾아간 곳은?_____________교황 베네딕토 16세가 영국에서 처음으로 방문한 장소는 어디인가요?\n", + "Processing question 3553/3952 : 튀니스의 왕이 딸의 정략결혼을 원활히 진행하기 위해 도움을 청한 사람은?_____________튀니스의 왕이 딸의 정략결혼을 원활히 진행하기 위해 도움을 청한 사람은 누구였나요?\n", + "Processing question 3554/3952 : 연방군 요새를 공격하기 위해 티안무 함대가 준비한 것은?_____________티안무 함대가 연방군 요새를 타격하기 위해 어떤 것을 준비했나요?\n", + "Processing question 3555/3952 : 1950년 신강지역에서 최고 군 지도자 지위에 있었던 사람은?_____________1950년 신강지역에서 최고 군 지도자 지위에 있었던 사람은 누구였습니까?\n", + "Processing question 3556/3952 : 흰다리새우와 블랙타이거새우는 양식 새우의 몇 퍼센트를 차지하나요?_____________양식용 새우 중 흰다리새우와 블랙타이거새우가 차지하는 비율은 몇 퍼센트인가요?\n", + "Processing question 3557/3952 : 승려들의 참여로 붙기 시작한 시위의 별칭은?_____________승려들의 참여로 시작된 시위의 다른 이름은 무엇인가요?\n", + "Processing question 3558/3952 : 주민등록 상에서 신고, 직권조치, 이의신청, 호적신고의 방법으로 기입된 내용을 변경하는 것을 무엇이라고 하는가?_____________주민등록 상에서 신고, 직권조치, 이의신청, 호적신고의 방법으로 기입된 내용을 변경하는 것을 무엇이라고 합니까?\n", + "Processing question 3559/3952 : 니클라스 쥘레의 팀은 경기에서 몇 km를 뛰었는가?_____________니클라스 쥘레의 팀이 경기 도중 이동한 거리는 얼마인가요?\n", + "Processing question 3560/3952 : 리비아 과도국가평의회가 공식적으로 합법정부로 받아들여진 날은?_____________리비아 과도국가평의회가 공식적으로 합법정부로 인정된 날짜는 언제입니까?\n", + "Processing question 3561/3952 : 빌리에르 군이 오스위고 요새로 접근할 때 몽칼름은 어디로 가고 있었는가?_____________몽칼름이 오스위고 요새로 접근할 때 빌리에르 군은 어디로 향하고 있었나요?\n", + "Processing question 3562/3952 : 서천리 당산의 남자 돌장승의 이름은?_____________당산의 남자 돌장승의 이름은 무엇인가요?\n", + "Processing question 3563/3952 : 카르타즈가 처음 발행된 것은 몇년도인가?_____________카르타즈가 처음 발행된 해는 언제인가요?\n", + "Processing question 3564/3952 : 토우다만 족으로 알려진 종족과 싸운 것은 누구인가?_____________누가 토우다만 족으로 알려진 종족과 싸웠습니까?\n", + "Processing question 3565/3952 : 에드워드 오헤어 대령이 제로센을 상대로 탄 기체는?_____________에드워드 오헤어 대령이 제로센을 상대로 탄 기체는 무엇입니까?\n", + "Processing question 3566/3952 : 종업원의 자율성을 증가시키기 위한 보상 방법은?_____________종업원의 독립성을 높이는 방법은 무엇입니까?\n", + "Processing question 3567/3952 : 트라벨시가 멘체스터 시티 FC로 이적한 해는?_____________멘체스터 시티 FC로 이적한 해는 언제인가요?\n", + "Processing question 3568/3952 : 기온이 높은 동굴 내부에 서식할 수 있는 것은?_____________어떤 것이 높은 온도를 견딜 수 있는지 알려주세요.\n", + "Processing question 3569/3952 : 전국반생체실험협회의 부위원장을 맡은 사람 중 여자의 비율은 어느정도였는가?_____________전국반생체실험협회의 부위원장을 맡은 사람 중 여성의 비율은 어느 정도였습니까?\n", + "Processing question 3570/3952 : 1949년 대한식량공사 이사들의 퇴임은 무엇 때문인가?_____________대한식량공사 이사들이 1949년 퇴임한 이유는 무엇이었습니까?\n", + "Processing question 3571/3952 : 핀란드의 대표단이 1940년 3월 6일에 향한 곳은?_____________핀란드 대표단이 1940년 3월 6일에 방문한 곳은 어디였습니까?\n", + "Processing question 3572/3952 : 다른 동물과 다르게 호모 사피엔스만 가지고 있는 특징은?_____________호모 사피엔스만의 특징은 무엇인가요?\n", + "Processing question 3573/3952 : 맨 처음 표현주의영화들이 이상한 배경을 사용하게 된 이유는 무엇이 모자랐기 때문인가?_____________표현주의 영화들이 이상한 배경을 사용하게 된 이유는 무엇이 부족했기 때문인가?\n", + "Processing question 3574/3952 : 그래픽 사용자 인터페이스는 어떤 모양으로 마우스 위치를 나타내나요?_____________'GUI에서 마우스 커서는 어떻게 표시되나요?'\n", + "Processing question 3575/3952 : 윤치호가 일제의 '우호적인 식민통치'를 기대했다고 비판한 사람은?_____________윤치호가 일본의 '우호적인 식민지배'를 비판한 사람은 누구인가요?\n", + "Processing question 3576/3952 : 시마즈 도시히사를 참수한 사람은?_____________시마즈 도시히사를 처형한 사람은 누구인가요?\n", + "Processing question 3577/3952 : 대중을 통제하기 위해 위정자들의 수단이 되기도 한 것은?_____________위정자들이 대중을 통제하기 위해 사용하는 수단은 무엇입니까?\n", + "Processing question 3578/3952 : 특별보고관은 특별한 임무와 관련된 인터넷 문제를 해결할 때 어떤 사람이 참여하기를 바라나?_____________특별보고관은 특별한 임무와 관련된 인터넷 문제를 해결할 때 어떤 사람이 협조하기를 희망하나요?\n", + "Processing question 3579/3952 : 신돈을 죽이고자 했던 인물은?_____________누가 신돈을 죽이려고 했나요?\n", + "Processing question 3580/3952 : 서재필은 어느 궁을 지켰는가?_____________서재필은 어느 왕궁을 지켰는가?\n", + "Processing question 3581/3952 : 킹이 변호사로서 자문을 해준 의원은?_____________의원에게 변호사로서 자문을 해준 킹은 누구인가요?\n", + "Processing question 3582/3952 : 로마 시민권 부여에 관한 규정을 발표한 것은 언제인가?_____________'로마 시민권 부여에 대한 규정을 발표한 시기는 언제였습니까?'\n", + "Processing question 3583/3952 : 그린'박사는 누구로부터 정글을 구하려고 하는가?_____________'그린'박사가 정글을 구하려는 대상은 누구입니까?\n", + "Processing question 3584/3952 : 고구려와 싸우기 위해 배를 만들도록 지시했으며 바다 길을 통해 침략을 도모한 인물은 누구인가?_____________누구가 고구려와 싸우기 위해 배를 지어 바다 길을 통해 침략을 시도했습니까?\n", + "Processing question 3585/3952 : 밴드에게 창작적으로 제약을 준 인물은?_____________밴드에게 창작적으로 제약을 가한 사람은 누구인가요?\n", + "Processing question 3586/3952 : \"요원 호출\" 영상에 출연하는 캐릭터는?_____________'요원 호출' 비디오에 출연하는 캐릭터는 누구인가요?\n", + "Processing question 3587/3952 : 행성들이 타원을 그리며 태양 주위를 돈다는 사실을 정리한 이론은?_____________어떤 이론이 행성들이 타원을 그리며 태양 주위를 돈다는 사실을 설명하나요?\n", + "Processing question 3588/3952 : 1102년에 파스칼 2세에 의해 파문당했던 인물이 1년 뒤에 선언한 것은?_____________1102년에 파스칼 2세에 의해 파문당했던 인물이 1년 뒤에 선언한 것은 무엇인가요?\n", + "Processing question 3589/3952 : 스코틀랜드에 봉건제가 도입됐을 것으로 추측되는 시기는?_____________스코틀랜드에서 봉건제가 도입된 것으로 추정되는 시기는 언제인가요?\n", + "Processing question 3590/3952 : 백기를 든 북한군에 대해 사격을 중지시킨 사람은?_____________'백기를 든 북한군에 대해 사격을 멈춘 사람은 누구인가?'\n", + "Processing question 3591/3952 : 요한 9세는 무엇을 더 튼튼하게 만드는 것이 맞다고 판단하여 람베르토 2세를 지지했는가?_____________요한 9세는 무엇을 더 강화하는 것이 적절하다고 생각하여 람베르토 2세를 지지했습니까?\n", + "Processing question 3592/3952 : 바키를 불합격하게 만든 제도는 누구를 위한 것이였나요?_____________'바키를 탈락시킨 제도는 어떤 그룹을 위해 설립되었나요?'\n", + "Processing question 3593/3952 : 크렘린 궁과 함께 러시아를 대표하는 겨울 궁전이 위치해 있는 지역은 어디인가?_____________러시아를 대표하는 겨울 궁전이 위치한 지역은 어디인가요?\n", + "Processing question 3594/3952 : 시오야슌이 붕대를 감고 촬영한 이유는?_____________시오야슌이 붕대를 감고 촬영한 이유는 무엇인가요?\n", + "Processing question 3595/3952 : 이계록이 기업인으로 활동을 시작하던 시기에 근무한 지역은 어디인가?_____________이계록이 사업가로 활동을 시작했을 당시 일한 지역은 어디였습니까?\n", + "Processing question 3596/3952 : 웰시의 전임 1소대장은 누구인가?_____________웰시의 전임 1소대장은 누구입니까?\n", + "Processing question 3597/3952 : 방글라데시와 벵골만 서쪽 지역에서 점심 식사 후에 잠깐 자는 잠을 무엇이라고 부르는가?_____________'방글라데시와 벵골만 서쪽 지역에서 점심 식사 후에 졸음을 무엇이라고 부르나요?'\n", + "Processing question 3598/3952 : 주민들의 반발로 인해 태조 왕건은 어디를 떠나게 되나요?_____________태조 왕건이 주민들의 반발로 인해 떠나게 된 곳은 어디인가요?\n", + "Processing question 3599/3952 : 키미 라이코넨과 데니스는 누구 앞에서 계약을 했는가?_____________'키미 라이코넨과 데니스는 어느 사람 앞에서 계약을 체결했습니까?'\n", + "Processing question 3600/3952 : 구두충이 숙주의 창자에 붙을 수 있는 이유는 주둥이에 무엇이 있기 때문인가?_____________숙주의 주둥이에 무엇이 있기 때문에 구두충이 숙주의 창자에 붙을 수 있는 이유가 되는가?\n", + "Processing question 3601/3952 : 국제 올림픽 위원회로부터 토미 스미스와 함께 쫓겨난 인물은?_____________토미 스미스와 함께 국제 올림픽 위원회로부터 해고된 인물은 누구인가요?\n", + "Processing question 3602/3952 : 브란스톡 나무의 검을 뽑는 자가 검의 주인이 될 것이라 말한 인물은?_____________브란스톡 나무의 검을 뽑는 자가 검의 주인이 될 것이라고 말한 인물은 누구인가요?\n", + "Processing question 3603/3952 : 12월 12일에 호트군의 선봉이었던 사단의 하루 이동 거리는?_____________호트군의 선봉이었던 사단이 12월 12일에 이동한 거리는 얼마였나요?\n", + "Processing question 3604/3952 : 위미르와 함께 엘디아 제국을 세운 사람은?_____________위미르와 함께 엘디아 제국을 세운 사람은 누구인가요?\n", + "Processing question 3605/3952 : 장갑 두께가 두꺼워질수록 무게 증가로 오는 문제는?_____________장갑 두께가 증가하면 무게도 증가하게 되는 문제는 무엇인가요?\n", + "Processing question 3606/3952 : 장승은 무엇이 들어오는 것을 막나?_____________장승은 무엇을 차단하나요?\n", + "Processing question 3607/3952 : 라티움인이 사용하는 언어의 종류는?_____________라티움인이 사용하는 언어는 무엇입니까?\n", + "Processing question 3608/3952 : 암·수의 유전자를 반반씩 받아 새로운 생명을 만드는 생식은?_____________어떤 과정을 통해 암·수의 유전자가 반반씩 섞여 새로운 생명이 만들어지나요?\n", + "Processing question 3609/3952 : 서터 킬리가 클럽과 음주에 빠지게 된 계기를 제공한 인물은?_____________서터 킬리가 클럽과 술에 빠지게 된 계기를 제공한 인물은 누구인가요?\n", + "Processing question 3610/3952 : 전라남도의 농악 중 육지의 것들과는 다른 독자성을 지니고 있는 것은?_____________전라남도의 농악 중 육지의 것들과는 다른 특징을 가지고 있는 것은 무엇인가요?\n", + "Processing question 3611/3952 : 소련에 잡혀 있던 마지막 전쟁 포로가 돌아온 해는 언제인가요?_____________마지막 전쟁 포로가 소련에서 해방된 년도는 언제인가요?\n", + "Processing question 3612/3952 : \"수리야\"라는 단어가 일반 명사로 활용될 때 사용되는 또 다른 의미는?_____________\"'수리야'란 용어가 보통 명사로 사용될 때 다른 의미는 무엇입니까?\"\n", + "Processing question 3613/3952 : 샤를 오퀴스탱 생트뵈브에서 이폴리트텐, 에르네스트 르낭을 거쳐 모리스에게 역사적 영향력을 준 인물은?_____________누가 샤를 오퀴스탱 생트뵈브에서 이폴리트텐, 에르네스트 르낭을 거쳐 모리스에게 역사적 영향력을 준 인물인가요?\n", + "Processing question 3614/3952 : 브란트가 내각의 해산을 제안한 인물은?_____________브란트가 내각 해산을 제안한 사람은 누구인가요?\n", + "Processing question 3615/3952 : 멕시코군의 요새에 식량을 조달하는 기차가 기습 공격당한 사건은 무엇인가?_____________멕시코군의 요새에 식량을 조달하는 기차가 습격당한 사건은 무엇인가?\n", + "Processing question 3616/3952 : 다모류가 냄새를 인식하는 부위는 무엇인가?_____________다모류가 냄새를 감지하는 부위는 무엇입니까?\n", + "Processing question 3617/3952 : 스파르타에서 비밀 암호를 사용했다고 주장한 인물의 이름은?_____________스파륀에서 암호를 사용했다고 주장한 인물의 이름은 무엇인가요?\n", + "Processing question 3618/3952 : 러일 전쟁의 승전국은 어디인가?_____________러시아 전쟁의 승전국은 어디인가?\n", + "Processing question 3619/3952 : 야야티의 아들이자 파우라바 왕국을 건국한 민족의 선조는 누구인가?_____________파우라바 왕국을 세운 민족의 선조는 누구인가요?\n", + "Processing question 3620/3952 : 민족문제 연구소내에서 친일인사에 왕공족을 넣을지로 갑론을박하며 상당히 고심한 곳은?_____________'민족문제 연구소내에서 친일인사에 왕공족을 넣을지로 의견이 분분한 곳은 어디인가요?'\n", + "Processing question 3621/3952 : 영남 지방에서는 거의 발견할 수 없는 고인돌의 구조는 무엇인가?_____________고인돌의 형태는 무엇인가?\n", + "Processing question 3622/3952 : 조선제국대학은 원래 예정일보다 얼마나 늦게 개교하였는가?_____________조선제국대학은 언제 개교되었나요?\n", + "Processing question 3623/3952 : 바가 학살을 발생시킨 집단은?_____________바가 학살을 일으킨 집단은 누구인가요?\n", + "Processing question 3624/3952 : 유명 작곡가들의 교향곡이 9번에서 끝난 것을 표현하는 말은?_____________어떤 유명 작곡가들의 교향곡이 9번에서 마무리되었다는 용어는 무엇인가요?\n", + "Processing question 3625/3952 : 마르셀린이 자신의 감정을 보여주기 위해 쓴 음악의 제목은?_____________마르셀린이 감정을 드러내기 위해 작곡한 곡의 이름은 무엇인가요?\n", + "Processing question 3626/3952 : 마하트마 간디는 조만식의 어떤 활동에 긍정적이었나요?_____________마하트마 간디는 조만식의 어떤 활동에 찬성했습니까?\n", + "Processing question 3627/3952 : 2008년 FIBT 세계 선수권대회 개최국은?_____________2008년 FIBT 월드컵 선수권대회가 개최된 국가는 어디였나요?\n", + "Processing question 3628/3952 : 카일로를 무찌르는데 사용한 무기의 이름은?_____________'카일로를 이기는 데 사용된 무기는 무엇입니까?'\n", + "Processing question 3629/3952 : 신돈이 마침내 궁에 들어와 살게 된 때는?_____________신돈이 궁에 입주한 시기는 언제인가요?\n", + "Processing question 3630/3952 : 요시다 성을 건축한 인물이 승리한 전쟁은 무엇인가요?_____________어떤 전투에서 요시다 성을 세운 인물이 승리한 전쟁은 무엇입니까?\n", + "Processing question 3631/3952 : 《모터사이클 다이어리》는 무엇을 모티브로 한 작품인가요?_____________《모터사이클 다이어리》는 어떤 소재에 영감을 받아 만들어진 작품인가요?\n", + "Processing question 3632/3952 : 짚신을 걸어두었던 돌을 의미하는 단어는 무엇인가요?_____________'짚신을 걸어두었던 돌을 의미하는 단어는 무엇입니까?'\n", + "Processing question 3633/3952 : 빅뱅이 2012년에 열린 Mnet 아시안 뮤직 어워드에서 받은 것은?_____________빅뱅이 2012년에 열린 MAMA에서 받은 것은 무엇인가요?\n", + "Processing question 3634/3952 : 활발한 느낌으로 시작해 조용한 분위기로 끝나는 부분은?_____________시작은 활기차게 하지만 조용하게 마무리되는 부분은 무엇인가요?\n", + "Processing question 3635/3952 : 가힌샤 클럽에 두번째로 가입한 선수는?_____________가힌샤 클럽에 두 번째로 등록된 선수는 누구인가요?\n", + "Processing question 3636/3952 : 제주 4.3사건 당시 조병옥의 직책은?_____________조병옥이 제주 4.3사건 당시 지휘한 부대는 무엇입니까?\n", + "Processing question 3637/3952 : 도제의 변화가 있었던 시기는?_____________도제가 변화한 시기는 언제였습니까?\n", + "Processing question 3638/3952 : 김윤식에게 집행유예를 선고한 곳은?_____________'김윤식에게 유예된 곳은 어디인가요?'\n", + "Processing question 3639/3952 : 서민 귀족의 장르는?_____________'서민 귀족의 장르는 무엇인가요?'\n", + "Processing question 3640/3952 : 심희가 집을 나왔을 때의 나이는?_____________심희가 집을 나왔을 때 몇 살이었나요?\n", + "Processing question 3641/3952 : 16강 경기에서 알제리의 첫 골을 넣은 사람은?_____________알제리가 16강 경기에서 첫 골을 넣은 선수는 누구인가요?\n", + "Processing question 3642/3952 : 이토의 사망으로 위문사절단이 파견된 곳은?_____________'이토의 사망으로 조문단이 파견된 곳은 어디인가요?'\n", + "Processing question 3643/3952 : 가잔이 나우루즈의 굴복을 얻어낸 곳은?_____________가잔이 나우루즈를 굴복시킨 장소는 어디인가요?\n", + "Processing question 3644/3952 : 최정규는 예전에 어디 소속이었나?_____________최정규는 예전에 어떤 조직에 속해 있었나요?\n", + "Processing question 3645/3952 : 팔성사의 8개의 작은 절마다 사는 사람은?_____________팔성사의 8개의 작은 절마다 사는 사람은 누구인가요?\n", + "Processing question 3646/3952 : 대성전의 지붕을 옆에서 보면 무엇처럼 보이나?_____________대성전의 지붕을 옆에서 보면 어떻게 보이나요?\n", + "Processing question 3647/3952 : 레오니다스가 아카디아로 가기 전 머물렀던 곳은?_____________'레오니다스가 아카디아로 가기 전 방문한 장소는 어디였나요?'\n", + "Processing question 3648/3952 : 열펌프 보다 탄소배출량을 더 많이 배출하는 시스템은 어떤 연료를 사용하나요?_____________열펌프 대신에 더 많은 탄소배출량을 내는 시스템은 어떤 연료를 사용하나요?\n", + "Processing question 3649/3952 : 타티키오스가 비밀협상에 나선 것은 누구의 기록을 통해 알 수 있나요?_____________타티키오스가 비밀협상에 참여한 것은 누구의 기록을 통해 밝혀졌나요?\n", + "Processing question 3650/3952 : 피르 볼그라는 이름은 어떤 의미를 지니는가?_____________'피르 볼그라는 이름이 어떤 의미를 갖고 있나요?'\n", + "Processing question 3651/3952 : 1968년에 흑인으로서 최초로 연방 의원이 된 인물은 어느 도시 출신인가요?_____________1968년에 흑인으로서 최초로 연방 의원이 된 인물이 어느 도시에서 태어났나요?\n", + "Processing question 3652/3952 : 김세진의 죽음이 영향을 준 인물은?_____________'김세진의 사망이 영향을 미친 인물은 누구인가요?'\n", + "Processing question 3653/3952 : 이승조의 '평면과의 대결'을 높게 평가한 사람은?_____________이승조의 '평면과의 대결'을 높게 평가한 사람은 누구인가요?\n", + "Processing question 3654/3952 : 노리쓰네와 같이 히요리도리고에의 고지대를 지킨 사람은?_____________히요리도리고에의 고지대를 보호한 사람은?\n", + "Processing question 3655/3952 : 미하일 무루초스가 독일 선수에게 2번 모두 패배했던 해는?_____________미하일 무루초스가 독일 선수에게 2번 모두 패배한 해는 언제였나요?\n", + "Processing question 3656/3952 : 임신이 자연적으로 되지 않을 때 이용하는 방식은?_____________어떤 방법을 사용하여 임신을 유도하나요?\n", + "Processing question 3657/3952 : 넬리 킴이 금메달을 3개 획득한 올림픽은?_____________넬리 킴이 3개의 금메달을 딴 올림픽은 어디인가요?\n", + "Processing question 3658/3952 : 신체에서 만들어지지 않아 음식으로 보충해야 하는 지방산을 무엇이라고 하는가?_____________어떤 지방산을 신체에서 생산하지 않아서 음식을 통해 섭취해야 하는지 알고 계신가요?\n", + "Processing question 3659/3952 : 고권삼이 친일인명사전 수록예정자 명단 중 해외 부문에 포함된 이유는 무엇 때문인가?_____________'왜 고권삼이 친일인명사전 해외 부문에 수록될 예정이었는지 알고 계신가요?'\n", + "Processing question 3660/3952 : 구원이 취소될 수 없다는 신학 사상에 반문한 사람은?_____________'구원이 취소될 수 없다는 신학 사상에 반대하는 사람은 누구인가요?'\n", + "Processing question 3661/3952 : 송세호가 '삼신리 2호'를 운영했다고 보도한 곳은?_____________'송세호가 '삼신리 2호'를 경영했다고 보도된 장소는 어디인가요?'\n", + "Processing question 3662/3952 : 켄타우로스의 하체는 어떤 모습인가요?_____________켄타우로스의 하체는 어떻게 생겼습니까?\n", + "Processing question 3663/3952 : 미국 독립전쟁 이전까지 버몬트를 억압하고 있던 국가는?_____________미국 독립전쟁 이전까지 버몬트를 억압하고 있던 국가는 무엇이었습니까?\n", + "Processing question 3664/3952 : 토마스가 죽은 뒤 존 설리번이 오기 전에 군대를 이끌었던 사람은?_____________토마스가 사망한 후 존 설리번이 도착하기 전에 군대를 이끈 사람은 누구였습니까?\n", + "Processing question 3665/3952 : 니키아스가 27일을 기다리려고 하자 누가 공격했나요?_____________니키아스가 27일을 기다리려고 하자 누가 습격했나요?\n", + "Processing question 3666/3952 : 작가가 자신의 이상적인 자아상을 투영시킨 인물은?_____________어떤 인물이 작가의 이상적인 자아상을 반영하고 있나요?\n", + "Processing question 3667/3952 : 이스라엘의 음악단체들이 연주를 기피하는 작곡가는?_____________어떤 작곡가가 이스라엘의 음악단체들이 연주를 피하도록 만들어낸 작품은?\n", + "Processing question 3668/3952 : 10군단의 장교가 아퀼라를 들고 적진으로 향할 당시 군대를 통솔하던 인물은 누구인가?_____________10군단의 장교가 아퀼라를 들고 적진으로 향할 당시 군대를 지휘했던 인물은 누구였습니까?\n", + "Processing question 3669/3952 : 문제해결능력이 훌륭하면 결과적으로 최고로 향상되는 것은 무엇인가?_____________문제해결 능력이 우수하다면 어떤 이점이 발생하는가?\n", + "Processing question 3670/3952 : 퐁파루드 여후작은 원래 어떤 신분이었나?_____________퐁파루드 여후작은 과거에 어떤 사회적 지위를 가지고 있었습니까?\n", + "Processing question 3671/3952 : 그린란드의 기는 덴마크의 어떤 조직의 깃발과 똑같은가?_____________그린란드의 깃발은 덴마크의 어떤 단체의 깃발과 동일한가?\n", + "Processing question 3672/3952 : 기독교 제단을 유지하며 전통 신을 섬긴 인물은?_____________'전통 신을 섬기며 기독교 제단을 유지한 인물은 누구인가요?'\n", + "Processing question 3673/3952 : 1960년대 이전까지의 도시계획의 해결 대상이자 결과물이기도 한 것은?_____________도시계획의 해결 대상이자 결과물이기도 한 것은 무엇인가요?\n", + "Processing question 3674/3952 : 2019년 한일청구권 협정 제 3조에 의거하여 일본이 대한민국 정부에 설립을 요구한 부서는?_____________한일청구권 협정 제 3조에 따라 일본이 한국 정부에 설립을 요청한 부서는 어디인가요?\n", + "Processing question 3675/3952 : 보물찾기 게임을 할 때, 누구를 통해 집안 곳곳의 보물을 발견해야 하는가?_____________누구를 통해 집안 곳곳의 보물을 찾아야 하는가?\n", + "Processing question 3676/3952 : 배철이 모국에 돌아오기 전 활동했던 정당은 어디인가?_____________배철이 모국에 돌아오기 전 활동했던 정당은 어디였습니까?\n", + "Processing question 3677/3952 : 처녀가 태조를 만나기 전에 꾼 꿈에 나온 동물은 무엇인가요?_____________태조를 만나기 전 처녀가 꾼 꿈에 나온 동물은 무엇입니까?\n", + "Processing question 3678/3952 : 뉴크로부존이 날씨에 영향을 줄 수 있도록 해 준 수단은?_____________뉴크로부존이 날씨에 영향을 미칠 수 있는 방법은 무엇입니까?\n", + "Processing question 3679/3952 : 기동전사 건담 SEED 중 만화판과 다르게 묘사된 화는?_____________'기동전사 건담 SEED에서 만화판과 상이하게 묘사된 장면은 무엇인가요?'\n", + "Processing question 3680/3952 : 오토가 두 번째로 평신도 원장직을 맡은 수도원은 어디인가?_____________두 번째로 평신도 원장직을 맡은 수도원은 어디에 있습니까?\n", + "Processing question 3681/3952 : 추밀원이 영국 군주 앞에서 회의하는 것이 합법이라 주장한 사람은?_____________추밀원이 영국 군주 앞에서 회의하는 것이 합법이라 주장한 사람은 누구인가요?\n", + "Processing question 3682/3952 : 아말감이 충분한 강도를 띠게 되는 것은 충전 후 얼마 이내인가?_____________충전 후 얼마나 빨리 아말감이 충분한 강도를 갖추나요?\n", + "Processing question 3683/3952 : 도자와시가 아오키를 해고했던 날짜는?_____________아오키가 해고된 날짜는 언제였습니까?\n", + "Processing question 3684/3952 : 남조식물의 세포벽을 구성하는 주요 물질은?_____________남조식물의 세포벽을 형성하는 중요한 성분은 무엇입니까?\n", + "Processing question 3685/3952 : 모아치기에서 여러 키가 같이 입력되면 이들은 어떤 형태로 나타나나?_____________여러 키가 동시에 입력되면 이들이 어떻게 표시되나요?\n", + "Processing question 3686/3952 : 가장 최근에 윔블던과 프랑스 오픈에서 모두 우승을 거머쥔 남성 선수는?_____________두 대회에서 우승한 남성 선수는 누구인가요?\n", + "Processing question 3687/3952 : 가포 앞바다의 자연이 치료에 도움이 되는 병은?_____________가포 앞바다의 자연이 치료에 도움이 되는 질병은 무엇인가요?\n", + "Processing question 3688/3952 : 그리스와 협상을 시도한 인물의 이름은?_____________'그리스와 협상을 시도한 인물의 이름은 무엇인가요?'\n", + "Processing question 3689/3952 : 하산 쿠첵과의 싸움에서 진 하산 부즈루그가 결국 쫓겨간 곳은?_____________하산 쿠첵과의 전투에서 패한 하산 부즈루그가 마지막으로 피신한 곳은 어디였나요?\n", + "Processing question 3690/3952 : 상대성 이론을 전제로 할 때에도 성립하는 법칙을 정의로 규정한 사람은 누구인가?_____________상대성 이론을 기반으로 하여 성립하는 법칙을 정의로 규정한 사람은 누구인가요?\n", + "Processing question 3691/3952 : 상대적으로 노랫말 번역보다 자유로운 번역은?_____________자유로운 번역은 노랫말 번역보다 상대적으로 더 자유로운가요?\n", + "Processing question 3692/3952 : AMP-69에서 어댑터로 작동되는 부품은?_____________AMP-69에서 어댑터로 작동하는 부품은 무엇인가요?\n", + "Processing question 3693/3952 : 림스역에서 북군을 공격한 남군의 장군은?_____________림스역에서 북군을 공격한 남군의 장군은 누구였습니까?\n", + "Processing question 3694/3952 : 크렘린의 동쪽 벽 아래에 있는 해자의 길이는?_____________'크렘린 동쪽 벽 밑에 있는 해자의 길이는 얼마인가요?'\n", + "Processing question 3695/3952 : 네모토 가족의 종교는?_____________네모토 가족은 어떤 종교를 믿고 계신가요?\n", + "Processing question 3696/3952 : 마운트 버넌이 미국의 국립역사기념물로 선정된 해는 언제인가요?_____________마운트 버넌이 미국의 국립역사기념물로 선정된 연도는 언제인가요?\n", + "Processing question 3697/3952 : 군사력이 열세한 베트남에게 도움을 준 인물은?_____________베트남에 도움을 준 인물은 누구인가요?\n", + "Processing question 3698/3952 : 수정의 밤'사건으로 사망한 유대인들은 최소 몇 명인가요?_____________'수정의 밤'사건으로 사망한 유대인들은 적어도 몇 명이었나요?\n", + "Processing question 3699/3952 : 삼존불의 재질은?_____________삼존불의 재질은 무엇인가요?\n", + "Processing question 3700/3952 : 학생들이 공부하는 환경을 신경쓰지 못해 비난을 받은 인물의 직위는?_____________어떤 사람이 학생들의 학습 환경을 고려하지 않아서 비판을 받은 사람의 직책은 무엇인가요?\n", + "Processing question 3701/3952 : 아트워터흙파는쥐보다 더 작은 흙파는쥐는?_____________아트워터흙파는쥐와 비교했을 때 더 작은 흙파는쥐는?\n", + "Processing question 3702/3952 : 천원삼태리마애불은 1964년 9월 3일에 무엇으로 선정되었는가?_____________'천원삼태리마애불은 1964년 9월 3일에 어떤 이름으로 선정되었나요?'\n", + "Processing question 3703/3952 : 이연우가 교통사고 이후에 깨어난 곳은 어디인가?_____________이연우가 교통사고 이후에 의식을 회복한 장소는 어디입니까?\n", + "Processing question 3704/3952 : ≪이것이냐 저것이냐≫에 등장하는 A의 사랑의 대상은 누구인가?_____________A가 사랑하는 대상은 누구인가요?\n", + "Processing question 3705/3952 : 제너럴 셔먼호 사건 당시 조선은 어떠한 공격 방식으로 셔먼호의 항행을 불가능하게 만들었는가?_____________조선은 어떤 전술을 사용하여 제너럴 셔먼호의 항행을 방해했나요?\n", + "Processing question 3706/3952 : 가츠가 캐츠커의 안전을 위해 여행가기로 한 곳의 이름은 무엇인가?_____________가츠가 캐츠커의 안전을 위해 여행가기로 한 곳은 어디인가요?\n", + "Processing question 3707/3952 : 페르난도의 아내가 사망했던 해는?_____________페르난도의 부인이 사망한 해는 언제인가요?\n", + "Processing question 3708/3952 : 성현의 위패를 모시는 곳이 위치하는 방향은?_____________성현의 위패를 모시는 곳이 위치하는 방향은 어디인가요?\n", + "Processing question 3709/3952 : 표준형식 삼단논법에서는 소전제 전에 무엇이 먼저 나오나요?_____________표준형식 삼단논법에서는 소전제 전에 무엇이 먼저 등장하나요?\n", + "Processing question 3710/3952 : 동성상업학교 교장으로 직무를 수행하기 전 장면의 직장은?_____________'동성상업학교 교장으로 직무를 맡기 전에 일한 직장은 무엇이었나요?'\n", + "Processing question 3711/3952 : 다비드의 벨기에 망명 당시 '마라의 죽음'을 프랑스 어딘가로 감춘 인물은?_____________다비드의 벨기에 망명 당시 '마라의 죽음'을 프랑스 어딘가로 감춘 인물은 누구였나요?\n", + "Processing question 3712/3952 : 1800년대에 일본인들에게 가장 많은 영향을 준 서양의 나라는?_____________일본인들에게 가장 큰 영향을 준 서양의 국가는 무엇인가요?\n", + "Processing question 3713/3952 : 그리스의 고대 올림픽 경기에 참여할 수 있는 자격은 무엇인가?_____________그리스의 고대 올림픽 경기에 참가 자격은 어떻게 되나요?\n", + "Processing question 3714/3952 : 보로메오 가문의 문장은 어떤 의미를 지니고 있었나요?_____________보로메오 가문의 문장이 어떤 존재의 의미를 지니고 있었습니까?\n", + "Processing question 3715/3952 : 단순포진 각막염의 흰색 병변은 심한 경우에 무엇을 일으키나요?_____________단순포진 각막염의 흰색 병변이 심한 경우에 어떤 결과를 초래하나요?\n", + "Processing question 3716/3952 : 주인공에게 매번 살려달라는 간청을 받았던 인물은?_____________누군가가 계속해서 살려달라고 간청했던 인물은 누구인가요?\n", + "Processing question 3717/3952 : 위현의 아들중 작위를 이어받은 사람은?_____________위현의 아들 중 왕위를 계승한 사람은 누구입니까?\n", + "Processing question 3718/3952 : 오버헤드를 감소시키기 위해서는 무엇을 크게 만들면 되는가?_____________'오버헤드를 줄이기 위해 어떤 것을 증가시켜야 하는가?'\n", + "Processing question 3719/3952 : 선장과 선교사 토마스를 구타하여 살해한 사람들은 누구인가?_____________누가 선장과 선교사 토마스를 폭행하고 살해했습니까?\n", + "Processing question 3720/3952 : 12월 14일에 약 150명의 사상자가 나온 부대는?_____________12월 14일에 약 150명의 부상자가 발생한 부대는 무엇입니까?\n", + "Processing question 3721/3952 : 지브롤터 유나이티드가 리그에 남아있기 위해서는 언제까지 빚을 갚아야 했는가?_____________'지브롤터 유나이티드가 리그에 남아있기 위해서는 언제까지 부채를 상환해야 했습니까?'\n", + "Processing question 3722/3952 : 방어력이 다른 타입보다 좋은 포켓몬은?_____________어떤 포켓몬은 방어력이 다른 유형보다 우수한가요?\n", + "Processing question 3723/3952 : 펜이 대표적 정부를 설립한 해는 언제인가?_____________언제 펜은 주요한 국가를 세웠습니까?\n", + "Processing question 3724/3952 : 체력아이템이 없는 경우 둘리의 체력을 회복하려면 누구를 처치해야 하는가?_____________둘리의 체력을 회복하기 위해 누구를 물리쳐야 하는가?\n", + "Processing question 3725/3952 : 악한 동시에 선하다고 믿어진 여신은?_____________어두운 동시에 밝다고 믿어진 여신은 누구인가요?\n", + "Processing question 3726/3952 : 초등학생들에게 일본 원폭 투하 내용을 교육하고 있는 나라는?_____________어떤 국가가 초등학생들에게 일본 원폭 투하 내용을 가르치고 있는가요?\n", + "Processing question 3727/3952 : 세월호 유가족에게 사과하는 것을 거부한 사람은?_____________누가 세월호 유가족에게 사과를 거부했습니까?\n", + "Processing question 3728/3952 : 토하라어는 인도이란어와 켈트어 중에서 무엇과 더 유사한가?_____________토하라어는 인도어와 켈트어 중에서 어떤 언어와 더 비슷한가요?\n", + "Processing question 3729/3952 : 브루클린과 스태튼 아일랜드를 나누어지도록 한 다리가 있는 해안은?_____________어떤 해안에 브루클린과 스태튼 아일랜드를 나누어지도록 한 다리가 있나요?\n", + "Processing question 3730/3952 : 헬레네 바이겔의 남편은?_____________헬레네 바이겔의 배우자는 누구입니까?\n", + "Processing question 3731/3952 : 알 수 있는 사람을 사기꾼 또는 다른 사람으로 인식하는 증세의 병명은?_____________어떤 사람을 사기꾼으로 인식하거나 다른 사람으로 인식하는 증세의 병명은 무엇인가요?\n", + "Processing question 3732/3952 : 에끌레르가 주산도 남쪽에서 청나라 해군을 발견한 것은 언제인가요?_____________에끌레르가 주산도 남쪽에서 청나라 해군을 발견한 날짜는 언제였나요?\n", + "Processing question 3733/3952 : 회은은 어느 시대의 승려였나요?_____________'회은은 언제 살았나요?'\n", + "Processing question 3734/3952 : 제8호 열대저기압의 원천 파동이 안틸레스 제도에 도달한 날짜는?_____________안틸레스 제도에 도달한 제8호 열대저기압의 원천 파동 날짜는 언제인가요?\n", + "Processing question 3735/3952 : Cosmo's Factory를 제작해 판매한 팀은?_____________Creedence Clearwater Revival가 제작하고 판매한 'Cosmo's Factory'는 누구의 작품인가요?\n", + "Processing question 3736/3952 : 프레스코가 유명한 곳은 언제부터 세르비아 공화국이 보호해주었나요?_____________프레스코가 유명한 장소는 언제부터 세르비아 공화국이 보호해주었나요?\n", + "Processing question 3737/3952 : 폭동에 가담한 일부 조선인이 있다고 발표한 일본 정부 부처는?_____________어떤 일본 정부 기관이 일부 한국인이 폭동에 가담했다고 발표했습니까?\n", + "Processing question 3738/3952 : 갬블러 VS. 초능력자의 작가는 누구인가?_____________누가 '갬블러 VS. 초능력자'를 쓴 작가인가?\n", + "Processing question 3739/3952 : 카르티니는 아이를 낳고 며칠 뒤에 목숨을 잃었는가?_____________카르티니는 아이를 출산한 후 몇 일 뒤에 사망하셨나요?\n", + "Processing question 3740/3952 : 블루어 역의 설계를 바꾸게 만든 건물은 무엇인가요?_____________블루어 역의 디자인을 변경한 건물은 무엇입니까?\n", + "Processing question 3741/3952 : 오자와가 잃은 항공모함은 모두 몇 척인가?_____________오자와가 상실한 항공모함은 총 몇 척인가요?\n", + "Processing question 3742/3952 : 하정우가 학원 말고 연기를 배운 곳은?_____________하정우가 학원 이외에 연기를 배운 장소는 어디인가요?\n", + "Processing question 3743/3952 : 민족주의 민족전선의 의장으로 옹립된 사람은 몇 명인가?_____________민족주의 민족전선의 의장으로 지명된 사람은 몇 명인가요?\n", + "Processing question 3744/3952 : 너목보에 출연해 노래 실력을 뽐낸 배우는 누구인가?_____________'너목보에 등장해 가창 실력을 뽐낸 배우는 누구인가?'\n", + "Processing question 3745/3952 : 현미경 없이는 볼 수 없는 점에서 어떤 문구를 볼 수 있나?_____________어떤 문구를 볼 수 있는 것이 현미경 없이는 볼 수 없는 점에서는 무엇이 있나요?\n", + "Processing question 3746/3952 : 장수 개인의 특성 중 유일하게 다시 추가된 능력치는?_____________장수 개인의 특성 중 추가된 유일한 능력치는 무엇입니까?\n", + "Processing question 3747/3952 : 우리나라 고인돌의 형식 중 지석묘는 무엇에 해당하는가?_____________고인돌의 형식 중 지석묘는 무엇을 의미하나요?\n", + "Processing question 3748/3952 : 기력이 다한 듀라가 마지막 남은 힘을 쏟은 곳은?_____________듀라가 마지막으로 남은 힘을 쏟은 곳은 어디인가요?\n", + "Processing question 3749/3952 : 중세 시기 삼경법이 이루어지는 밭 중 세균이나 몇몇 식물의 질소 고정 작용이 일어나는 것은 몇 번째 밭인가?_____________'중세 시기 삼경법에서 세균이나 일부 식물의 질소 고정이 발생하는 밭은 몇 번째인가?'\n", + "Processing question 3750/3952 : 김민기의 자식들이 설립한 것은?_____________김민기의 자녀가 창설한 것은 무엇인가요?\n", + "Processing question 3751/3952 : 여러 명의 군사들이 각 부분을 나눠 옮겨야했던 포가 발명된 시기의 왕는?_____________포가 발명된 시기의 왕은 누구인가요?\n", + "Processing question 3752/3952 : 데이비드는 어떻게 정체를 숨겼나?_____________데이비드는 어떻게 자기 정체를 숨겼나요?\n", + "Processing question 3753/3952 : 1962년 이래 처음 몬 언어로 작성된 신문은?_____________어떤 언어로 처음으로 작성된 신문은 무엇인가요?\n", + "Processing question 3754/3952 : 슈트라우스의 음악에서 모차르트의 음악 형태를 띈 악장의 끝에 중심적으로 연주되는 악기는?_____________슈트라우스의 음악에서 모차르트의 음악 형태를 띈 악장의 끝에 중심적으로 연주되는 악기는 무엇인가요?\n", + "Processing question 3755/3952 : 중국 황제가 마지막으로 직접 군사를 이끌고 공격한 곳은?_____________중국 황제가 마지막으로 직접 군사를 이끌고 침략한 곳은 어디였나요?\n", + "Processing question 3756/3952 : 새로운 차르가 등용된 후 가짜 드미트리가 도망간 장소는?_____________가짜 드미트리가 도망간 장소는 어디인가요?\n", + "Processing question 3757/3952 : 마드리드 지하철 7호선에서 요금구역이 나누어지는 역은?_____________마드리드 지하철 7호선에서 지불 구역이 나누어지는 역은 어디인가요?\n", + "Processing question 3758/3952 : 토머스는 어떤 사건으로 인해 1년간의 보호 관찰을 받았나?_____________토머스가 왜 1년 동안 보호 관찰을 받았는가?\n", + "Processing question 3759/3952 : 자산가치를 높여 탑클래스 고객을 만족시키는 고품격 서비스를 하기 위해 운영하는 것은?_____________고가의 서비스를 제공하여 부유한 고객들을 만족시키기 위해 운영하는 것은 무엇인가요?\n", + "Processing question 3760/3952 : 7B선으로 환승하기 위해서는 어느 역으로 가야하나요?_____________7B선으로 환승하려면 어디로 가야합니까?\n", + "Processing question 3761/3952 : 볼드윈이 없는 것이 낫다고 표현한 사람은?_____________누가 볼드윈이 필요 없다고 말했습니까?\n", + "Processing question 3762/3952 : 예브게니야가 살았던 도시는?_____________예브게니야가 살았던 도시는 어디였습니까?\n", + "Processing question 3763/3952 : 학계는 인도가 언제부터 철을 주로 사용해 도구를 만들었다고 생각하나요?_____________인도가 언제부터 철을 주로 사용해 도구를 만들었다고 생각하십니까?\n", + "Processing question 3764/3952 : 사쿠라기고교 제50대 응원단의 고수장이 원래 속했던 동아리는 어디인가?_____________사쿠라기고교 제50대 응원단의 고수장이 속했던 동아리는 어디였습니까?\n", + "Processing question 3765/3952 : 코스모케라톱스의 갈고리 모양 장식은 대부분 어느 쪽으로 굽어 있는가?_____________코스모케라톱스의 갈고리 모양 장식은 주로 어느 방향으로 휘어있나요?\n", + "Processing question 3766/3952 : 새정부를 만드는데 가담하지 않은 사람은?_____________누구가 새로운 정부를 조직하는 데 참여하지 않았습니까?\n", + "Processing question 3767/3952 : 아서왕이 엑스칼리버 처리를 명령한 사람은?_____________누가 아서왕에게서 엑스칼리버를 받았습니까?\n", + "Processing question 3768/3952 : 사람들의 일상을 면밀히 지켜보며 신체기관의 기능을 파악하라고 얘기한 인물은?_____________누군가가 사람들의 생활을 면밀히 관찰하고 신체기관의 작동을 이해하도록 권유한 인물은 누구인가요?\n", + "Processing question 3769/3952 : 프랑스에서 누에 전염병이 돈 해는?_____________누에 전염병이 프랑스에서 번식하고 있나요?\n", + "Processing question 3770/3952 : 비트켄슈타인 가문을 혼혈로 인정한다는 내용이 담긴 문서에 서명한 자는 누구인가?_____________'비트켄슈타인 가문을 혼혈로 승인한다는 내용이 포함된 서류에 사인한 사람은 누구입니까?'\n", + "Processing question 3771/3952 : 웨이파인딩의 기원이 된 것은 어떤 사람들과 관련이 있나?_____________웨이파인딩의 기원이 된 것은 어떤 개인들과 관련이 있나?\n", + "Processing question 3772/3952 : 가스타우스 루미스 대령이 이끌지 않았던 군부대의 이름은 무엇인가?_____________가스타우스 루미스 대령이 지휘하지 않은 군부대의 명칭은 무엇입니까?\n", + "Processing question 3773/3952 : 요한 9세의 후임자는 누구인가?_____________요한 9세의 후임자는 누구입니까?\n", + "Processing question 3774/3952 : 로버트 모리스 수석의 아들이 태어난 곳은?_____________로버트 모리스의 아들이 태어난 장소는 어디인가요?\n", + "Processing question 3775/3952 : 샤우만이 총독을 저격할 때 사용한 총은?_____________샤우만이 총독을 저격할 때 사용한 총은 무엇이었나요?\n", + "Processing question 3776/3952 : 영자초를 진귀한 재화라 평가한 사람의 직업는?_____________'영자초를 귀중한 자산으로 평가한 사람은 무슨 직업을 가지고 있을까요?'\n", + "Processing question 3777/3952 : 왕궁의 재산을 처분할 권한이 없던 왕은?_____________누구에게 왕은 왕궁의 재산을 처분할 권한이 없나요?\n", + "Processing question 3778/3952 : 핀란드 원정대가 로데이노예폴레에 도달한 것은 몇 월인가?_____________핀란드 원정대가 로데이노예폴레에 도착한 것은 어느 달이었습니까?\n", + "Processing question 3779/3952 : 바이로플라즘이 주로 자리 잡고 있는 곳은?_____________바이로플라즘이 일반적으로 서식하는 지역은 어디인가요?\n", + "Processing question 3780/3952 : 미국이 여러 범죄의 본거지로 파악하던 지역은?_____________미국에서 범죄가 많이 발생하는 지역은 어디인가요?\n", + "Processing question 3781/3952 : 벤구리온은 누가 유엔결의안을 수용하지 않았다고 주장하였나?_____________벤구리온은 누가 유엔결의안을 받아들이지 않았다고 주장하였나?\n", + "Processing question 3782/3952 : 전후민주주의가 전통문화를 파괴했다고 비판했던 당은?_____________전후민주주의가 전통문화를 파괴했다고 비판한 정당은 무엇입니까?\n", + "Processing question 3783/3952 : 표면온도가 100만 켈빈 이하인 중성자별은?_____________중성자별의 표면온도가 100만 K 이하인 것은 무엇인가요?\n", + "Processing question 3784/3952 : 호미나 칼 낫등의 자루 속에 들어가는 일부는?_____________칼 낫의 손잡이 안에 들어가는 것은 무엇인가요?\n", + "Processing question 3785/3952 : 엄상궁이 의친왕을 밀어내었던 것은 누구를 위함인가?_____________누가 의친왕을 밀어내었던 것이 엄상궁에게 이익이 되었나요?\n", + "Processing question 3786/3952 : 흥법국사의 탑이 마지막으로 이동된 곳은 어디인가?_____________흥법국사의 탑이 마지막으로 이동된 장소는 어디인가요?\n", + "Processing question 3787/3952 : 뉴펠드 협회가 자리잡은 지역은?_____________뉴펠드 협회가 소재한 지역은 어디인가요?\n", + "Processing question 3788/3952 : 미스터파크는 강대구와 정순례가 누구의 시신을 옮길 것이라고 예상하였나?_____________미스터파크는 강대구와 정순례가 누구의 유해를 이동시킬 것으로 예상하였나요?\n", + "Processing question 3789/3952 : 한글판 스타크래프트 : 고스트에서 동양미를 갖추게 된 인물은?_____________스타크래프트 : 고스트 한글판에서 동양 미를 갖춘 인물은 누구인가요?\n", + "Processing question 3790/3952 : 스위니가 테네시에서 무엇을 도둑질 한 것으로 전해지나?_____________스위니가 테네시에서 무엇을 훔쳤다고 알려졌나요?\n", + "Processing question 3791/3952 : 2005년 에너지 정책법으로 인해 일광 절약 시간제의 기간이 바뀐 국가는?_____________어떤 국가에서 2005년 에너지 정책법으로 인해 일광 절약 시간제의 기간이 변경되었습니까?\n", + "Processing question 3792/3952 : 기욤 뮈소의 작품에서는 주로 서스펜스와 어떤 장르의 조합을 볼 수 있는가?_____________기욤 뮈소의 작품에서는 주로 스릴러와 어떤 장르의 조합을 볼 수 있는가?\n", + "Processing question 3793/3952 : 시마즈가 조선인 포로에 대한 조치를 취하지 못한 것은 무엇 때문인가?_____________시마즈가 조선인 포로에 대한 대책을 취하지 않은 이유는 무엇인가요?\n", + "Processing question 3794/3952 : 재일여대생이 여운형 이후에 만난 남자의 정체는?_____________재일여대생이 여운형 이후에 만난 남자는 누구인가요?\n", + "Processing question 3795/3952 : 유스티누스 1세는 어떤 사상을 따르는 성당을 전부 봉쇄하였나?_____________유스티누스 1세가 어떤 신앙을 따르는 성당을 전부 폐쇄했나요?\n", + "Processing question 3796/3952 : 뫼비우스가 도마뱀의 유전자를 이용하여 만든 인물은?_____________'뫼비우스가 도마뱀의 유전자를 이용하여 창조한 캐릭터는?'\n", + "Processing question 3797/3952 : 2019년 1년 법원장 탄핵소추안과 관련된 기자회견을 연 단체는?_____________2019년 법원장 탄핵소추안과 관련된 기자회견을 연 단체는 누구였나요?\n", + "Processing question 3798/3952 : 고종이 8월이 되서야 고구려를 공격했던 것은 어떤 조직 때문이었나요?_____________왜 고종이 8월이 되어서야 고구려를 침공했던 이유는 무엇이었나요?\n", + "Processing question 3799/3952 : 운장대가 문장대로 불리게 된 것은 어떤 왕과 관련있나?_____________운장대가 문장대로 불리게 된 것은 어떤 군주와 관련이 있는가?\n", + "Processing question 3800/3952 : 지석묘가 만들어진 시기는?_____________\"지석묘가 건립된 시기는?\"\n", + "Processing question 3801/3952 : 조소문화협회가 만들어진 시기는?_____________조소문화협회가 설립된 시기는 언제입니까?\n", + "Processing question 3802/3952 : 여소가 황제를 양보하려한 인물에 대해 부정적으로 말한 사람은?_____________누가 여소가 황제를 양보하려한 인물에 대해 비난했나요?\n", + "Processing question 3803/3952 : 엔트로피에서 배제하는 것은?_____________무질서도에서 배제하는 것은?\n", + "Processing question 3804/3952 : 암살자로부터 정몽주를 지키려다 죽은 사람은?_____________누가 암살자로부터 정몽주를 지키려다 죽었나요?\n", + "Processing question 3805/3952 : 두위밍이 창춘 시를 점령한 해는?_____________두위밍이 창춘 시를 점령한 연도는 언제였습니까?\n", + "Processing question 3806/3952 : 특수 상대성이론의 확장판을 발표한 사람은?_____________누가 특수 상대성 이론의 확장판을 발표했나요?\n", + "Processing question 3807/3952 : 보니파시오 4세가 사망한 해는?_____________보니파시오 4세가 사망한 해는 무엇입니까?\n", + "Processing question 3808/3952 : 1902년 쿠데타 사건에서 천장욱은 누구에게 돈을 대주었는가?_____________1902년 쿠데타 사건에서 천장욱이 누구에게 돈을 주었습니까?\n", + "Processing question 3809/3952 : 페르시아계 가문에서 가장 처음 알려진 인물은?_____________페르시아 제국의 최초의 지도자는 누구인가요?\n", + "Processing question 3810/3952 : 철기 시대에 인도유럽어족의 이란인들이 집권했던 곳은 어디인가?_____________인도유럽어족의 이란인들이 집권했던 곳은 어디였습니까?\n", + "Processing question 3811/3952 : A방의 온도가 높아진다면 무엇도 같이 높아지는가?_____________A방의 온도가 상승하면 무엇이 함께 증가하나요?\n", + "Processing question 3812/3952 : 제3세계와의 협력을 거부하고 고립주의적 전술을 택하는 단체는?_____________어떤 단체가 제3세계와의 협력을 거부하고 고립주의적 전술을 취하는가요?\n", + "Processing question 3813/3952 : 알아크사 방위대가 비공식적으로 권력을 배분하기로 협의한 단체는?_____________알아크사 방위대가 비공식적으로 권력을 배분하기로 협의한 조직은 무엇인가요?\n", + "Processing question 3814/3952 : 칠무늬토기의 별칭은?_____________칠무늬토기의 다른 이름은 무엇인가요?\n", + "Processing question 3815/3952 : 학교형태의 평생교육시설이 어떠한 목적으로 이용되는 것을 막아야 하는가?_____________학교유형의 평생교육시설이 어떤 이유로 사용되는 것을 방지해야 하는가?\n", + "Processing question 3816/3952 : 벳지가 부하들에게 '파더'로서 칭해지던 조직의 이름은?_____________'벳지가 그룹 내 멤버들에게 '파더'로 불리던 조직의 명칭은 무엇인가요?'\n", + "Processing question 3817/3952 : 코소보의 새 국기에 있는 하얀 별의 갯수는?_____________코소보의 새 국기에 있는 하얀 별의 수는 몇 개인가요?\n", + "Processing question 3818/3952 : 유수일에게 선교회에 대해 말해준 인물과 같이 다닌 학교는?_____________유수일에게 선교회에 대해 이야기한 사람과 함께 다닌 학교는 무엇인가요?\n", + "Processing question 3819/3952 : 두 번째 선거에서 빌 클린턴은 누구를 상대로 승리하였나?_____________'제2차 대통령 선거에서 빌 클린턴은 누구에 대해 이겼습니까?'\n", + "Processing question 3820/3952 : 니카라과 사건에 대해 내정간섭 여부를 판시한 주체는?_____________'니카라과 사건에 대해 내정간섭 여부를 밝힌 주체는 누구인가?'\n", + "Processing question 3821/3952 : 달 무지개는 어디서 가장 잘 보이는가?_____________달 무지개는 어느 곳에서 가장 아름답게 보이나요?\n", + "Processing question 3822/3952 : 수천부정에 봉작된 인물은?_____________누구가 수천부정에 봉작된 인물인가요?\n", + "Processing question 3823/3952 : 미국인들이 만지로를 부른 별명은?_____________'미국인들이 만지로를 부른 별명은?' -> '미국인들이 만지로를 부르는 다른 이름은 무엇인가요?'\n", + "Processing question 3824/3952 : 베토벤의 피아노 협주곡 5번이 베토벤의 살아생전 마지막으로 연주된 것은 몇 년인가?_____________베토벤의 피아노 협주곡 5번이 베토벤이 살아있을 때 마지막으로 공연된 연도는 몇 년이었습니까?\n", + "Processing question 3825/3952 : 프로비던스와 함께 가장 먼저 노예제를 없앤 곳은?_____________'프로비던스와 함께 가장 먼저 노예제를 없앤 곳은?' -> '프로비던스와 함께 가장 먼저 노예제를 폐지한 곳은 어디였나요?'\n", + "Processing question 3826/3952 : 장재헌의 조상이자 임진왜란 당시 선조의 피난을 도와 공을 세운 이는?_____________누가 장재헌의 조상이자 임진왜란 당시 선조의 피난을 도와 공을 세웠습니까?\n", + "Processing question 3827/3952 : 여러 유럽군대나 자위대에서 참모총장직을 수행하는 계급은?_____________참모장으로 알려진 계급은 여러 유럽 군대나 자위대에서 어떤 이름으로 불릴까요?\n", + "Processing question 3828/3952 : 지석묘는 언제 만들어졌나요?_____________'지석묘는 언제 건설되었습니까?'\n", + "Processing question 3829/3952 : 엘리자베스 \"베티\" 헤밍스의 손자이름은?_____________베티 헤밍스의 손자의 이름은 무엇인가요?\n", + "Processing question 3830/3952 : 삼한총왕설을 부정한 역사학자는 누구인가?_____________'삼한총왕설을 부인한 학자는 누구인가?'\n", + "Processing question 3831/3952 : 빅뱅 월드 투어 티켓 판매를 시작함과 동시에 티켓 품절 사태가 발생한 국가는?_____________어떤 국가에서 빅뱅 월드 투어 티켓이 판매되자마자 품절 사태가 발생했나요?\n", + "Processing question 3832/3952 : 우르바노 5세가 십자군동원을 명령한 연도는?_____________우르바노 5세가 십자군 동원을 지시한 해는 언제인가요?\n", + "Processing question 3833/3952 : 일반차가 역전 광장의 주차장에 들어올 수 없는 시기는 언제인가?_____________역전 광장의 주차장에 들어올 수 없는 시기는 언제인가?\n", + "Processing question 3834/3952 : 마을 전체를 불태운 것은?_____________어떤 마을이 전체적으로 불탔다고 할 때, 어떤 행동이 발생했는지 알고 계신가요?\n", + "Processing question 3835/3952 : 171기의 유구가 나온 시대보다 집터가 작았던 시기는?_____________어떤 시기에는 집터가 작았던 시기는 무엇인가요?\n", + "Processing question 3836/3952 : 사랑 또는 돈에 대한 변화를 의미하는 행성은?_____________어떤 행성이 사랑 또는 돈에 대한 변화를 상징하는가?\n", + "Processing question 3837/3952 : 일부 스토커들에게 이상현상지역에 접근했음을 알 수 있게 해주는 도구는?_____________이상현상지역에 접근했음을 알 수 있게 해주는 도구는 무엇인가요?\n", + "Processing question 3838/3952 : 보살상의 제작자를 알 수 있는 기록물이 발견된 곳은?_____________보살상의 제작자를 밝히는 기록물이 발견된 장소는 어디인가요?\n", + "Processing question 3839/3952 : 포룸에 있던 건물들을 보존하기 위해 노력한 사람들이 사는 곳은?_____________어떤 곳에서 포룸에 있던 건물들을 보존하기 위해 노력한 사람들이 살고 있는지 알고 계세요?\n", + "Processing question 3840/3952 : 루이지애나를 미국에 넘긴 나라는?_____________어떤 국가가 미국에 루이지애나를 양도했습니까?\n", + "Processing question 3841/3952 : 사쿠라기 고교에서 촉망받는 1학년 학생은?_____________사쿠라기 고교에서 주목받는 1학년 학생은 누구인가요?\n", + "Processing question 3842/3952 : 베네치아 공화국에서 법안 하나 발의할 때 원수 보좌관 절반 이상의 동의를 받아야 하는 직책은?_____________베네치아 공화국에서 법안 하나 발의할 때 원수 보좌관 절반 이상의 동의를 받아야 하는 직책은 무엇인가요?\n", + "Processing question 3843/3952 : 숫자 7698의 정체는?_____________'7698이란 숫자의 본질은 무엇인가요?'\n", + "Processing question 3844/3952 : 라오스가 프랑스로부터 형식적인 독립을 얻어낸 년도는?_____________라오스가 프랑스로부터 공식적인 독립을 얻은 연도는 언제입니까?\n", + "Processing question 3845/3952 : 1915년의 크리스마스의 정전이 1914년만큼 광범위하지 않았던 이유는?_____________1915년의 크리스마스의 정전이 1914년만큼 광범위하지 않았던 이유는 무엇인가요?\n", + "Processing question 3846/3952 : 강희제는 장병 간의 관계가 어떻다고 믿었나?_____________강희제는 장병 사이의 관계가 어떻다고 생각했나요?\n", + "Processing question 3847/3952 : 하녀의 청을 받고 팔라다를 죽인 사람은?_____________'하녀를 살해한 범인은?'\n", + "Processing question 3848/3952 : 양말공장을 경영했던 평양의 거장 기업가는?_____________평양에서 양말공장을 운영한 거장 기업가는 누구인가요?\n", + "Processing question 3849/3952 : 노예제도를 없애기 위해 법률을 만든 유일한 식민지는?_____________어떤 식민지가 노예제도를 폐지하기 위해 법률을 제정한 유일한 식민지는 무엇입니까?\n", + "Processing question 3850/3952 : 쿠바 혁명 이전 쿠바의 정치 체제는?_____________쿠바 혁명 전 쿠바의 정치 체제는 무엇이었나요?\n", + "Processing question 3851/3952 : 워너는 언제 재혼했는가?_____________워너가 결혼한 날짜는 언제인가요?\n", + "Processing question 3852/3952 : 이마무라와 다스다에게 참수형을 선고한 기관은?_____________이마무라와 다스다에게 참수형을 선고한 기관은 무엇입니까?\n", + "Processing question 3853/3952 : 북한은 개건 현대화를 위해 조립 라인과 함께 무엇을 복구하였나?_____________북한은 개건 현대화를 위해 조립 라인과 함께 어떤 것을 복구했습니까?\n", + "Processing question 3854/3952 : 높은 압축비의 엔진이 주의해야 하는 현상은?_____________높은 압축비를 갖는 엔진이 주의해야 하는 현상은 무엇인가요?\n", + "Processing question 3855/3952 : 조지가 런던탑에서 쫓겨난 해는?_____________조지가 런던탑에서 내쫓긴 해는 언제였나요?\n", + "Processing question 3856/3952 : HH 천체가 희미하게 나타나는 파장은?_____________어떤 파장에서 HH 천체가 희미하게 나타나나요?\n", + "Processing question 3857/3952 : 물이 잘 나오는 우물 9개가 있어서 생겨난 마을이 처음 불리게 되었던 명칭은 무엇인가?_____________어떤 명칭으로 처음 불리게 되었던 마을인가요?\n", + "Processing question 3858/3952 : 아반티파타의 지방 회계를 맡은 직책은?_____________'아반티파타의 지방 회계를 책임지는 업무를 맡은 직책은 무엇인가요?'\n", + "Processing question 3859/3952 : 채권투자전략을 둘로 나누었을 때 비교적 공격적인 전략은 무엇인가?_____________채권투자전략을 둘로 나누었을 때 공격적인 전략은 무엇인가?\n", + "Processing question 3860/3952 : 베르뇌 주교와 함께 정의배의 삶을 좋게 평가한 사람은?_____________베르뇌 주교와 함께 정의배의 삶을 좋게 평가한 사람은 누구인가요?\n", + "Processing question 3861/3952 : 신한국당이 의석 과반수를 차지하기 위해 필요했던 의석 수는?_____________'신한국당이 다수를 확보하기 위해 필요한 의석 수는 몇 개인가요?'\n", + "Processing question 3862/3952 : 메이지 시대 이후에 존재하던 마지막 원로는 누구인가요?_____________메이지 시대 이후에 존재하던 마지막 원로는 누구였습니까?\n", + "Processing question 3863/3952 : 잘못 표기된 표를 유효표로 처리할 수 있는 권한을 가진 기관은?_____________어떤 기관이 유효하지 않은 표를 유효표로 처리할 수 있는 권한을 갖고 있나요?\n", + "Processing question 3864/3952 : 부당이득 반환청구 소송 진행의 기초가 되는 법 영역은?_____________부당이득 반환청구 소송을 진행하기 위한 법적 근거는 어떤 법 영역에서 찾을 수 있나요?\n", + "Processing question 3865/3952 : 각 군단에서 황제의 이마고가 새겨진 창을 들고 다니는 장교를 일컫는 명칭은?_____________각 군단에서 황제의 이마고가 새겨진 창을 들고 다니는 장교를 일컫는 다른 용어는 무엇입니까?\n", + "Processing question 3866/3952 : 루페르칼리아 축제를 금지시킨 사람의 시신이 안치된 날짜는?_____________루페르칼리아 축제를 금지시킨 사람의 사인된 시신이 안치된 날짜는 언제인가요?\n", + "Processing question 3867/3952 : 꼬리마리오가 게이지 쿨타임이 없어질 때까지 계속해서 날기 위해서 채워야 하는 것은?_____________꼬리마리오가 게이지 쿨타임이 없어질 때까지 계속해서 날기 위해서 채워야 하는 것은 무엇인가요?\n", + "Processing question 3868/3952 : 탄수화물이 지방산으로 바뀌는 과정에서 가장 먼저 무엇으로 변화하는가?_____________탄수화물이 지방산으로 전환되는 과정에서 가장 먼저 어떤 물질로 변화하나요?\n", + "Processing question 3869/3952 : 강희제가 수녀제를 본받도록 만든 이는?_____________강희제가 수녀제를 본받도록 만든 사람은 누구인가요?\n", + "Processing question 3870/3952 : 인도네시아가 OPEC에서 빠진 까닭은?_____________인도네시아가 OPEC에서 탈퇴한 이유는 무엇인가요?\n", + "Processing question 3871/3952 : 가평으로 향하는 적군을 목격할 당시, 김근호 대위는 어디로 가고 있었나?_____________김근호 대위가 가평으로 향하는 적군을 목격했을 때, 어디로 향하고 있었나요?\n", + "Processing question 3872/3952 : 세계에서 가장 오랫동안 감옥에 있었던 인물은?_____________가장 오랫동안 감옥에서 복역한 사람은 누구인가요?\n", + "Processing question 3873/3952 : 매우 보편화된 신약성서의 텍스트는?_____________어떤 텍스트가 널리 퍼져 있는 신약성서의 텍스트인가요?\n", + "Processing question 3874/3952 : 《하유교목 아망천당》의 의미는 무엇인가?_____________'《하유교목 아망천당》이란 책의 의미가 무엇인가요?'\n", + "Processing question 3875/3952 : 1919년 독립 시위 주문을 한 인물이 능통했던 언어는?_____________누가 1919년 독립 시위 주도자로서 활동했으며, 유창하게 구사했던 언어는 무엇입니까?\n", + "Processing question 3876/3952 : 사람들은 왜 고양이처럼 생긴 바위를 지나갈 때마다 말에서 내려 걸어갔는가?_____________왜 사람들은 고양이처럼 생긴 바위를 지나갈 때마다 말에서 내려 걸어갔을까요?\n", + "Processing question 3877/3952 : 사사카와 료이치가 가장 오래 갇혀 있었던 곳은 어디인가?_____________사사카와 료이치가 가장 오랫동안 갇혀 있었던 장소는 어디였습니까?\n", + "Processing question 3878/3952 : 굿펠로우나무타기캥거루가 몸을 앞으로 숙여서 균형을 맞추려 하는 신체부위는?_____________카엄프거루가 몸을 앞으로 숙여서 균형을 맞추려 하는 신체부위는 어디인가요?\n", + "Processing question 3879/3952 : 모스테파이 본인과 집안이 정상적이었으며 특이한 점은 없었다고 말한 자들은?_____________'모스테파이가 본인과 가정이 정상이었고 특이한 점이 없었다고 주장한 사람들은 누구인가요?'\n", + "Processing question 3880/3952 : 서울 시민 4분의 1 가량이 여의도에서 구경했던 비행이 실시된 때는?_____________여의도에서 열린 비행이 진행된 시기는 언제였나요?\n", + "Processing question 3881/3952 : 오다와라 역에서 출발하는 하코네유모토 행 특급열차의 소인 좌석권은 얼마인가?_____________하코네유모토 행 특급열차의 일반 좌석권은 얼마인가?\n", + "Processing question 3882/3952 : 트리톤이 해왕성의 위성 궤도에 들어온 후 변화가 생긴 것으로 추측되는 것은?_____________해왕성의 위성 궤도에 들어온 후 변화가 생긴 것으로 추측되는 것은 무엇인가요?\n", + "Processing question 3883/3952 : 소수의 글로벌 회사가 유명 식품 회사를 관리하기 시작한 것은 언제부터인가?_____________언제부터 소수의 국제 기업이 유명한 식품 기업을 운영하기 시작했나요?\n", + "Processing question 3884/3952 : 라틴 동맹을 대표하는 신전은 누구를 위해 만들어졌는가?_____________라틴 동맹을 대표하는 신전은 어떤 인물을 위해 지어졌나요?\n", + "Processing question 3885/3952 : 프랑수아 뒤발리에를 뒤를 이어 대통령이 된 자는?_____________프랑수아 뒤발리에를 이어 대통령이 된 사람은 누구인가요?\n", + "Processing question 3886/3952 : 차오관희가 일본에서 다닌 대학은?_____________차오관희가 일본에서 다녔던 대학은 어디였나요?\n", + "Processing question 3887/3952 : 체력부족으로 은퇴한 인물이 손을 잡은 인물은?_____________누가 체력이 부족하여 은퇴한 후에 동료를 찾았나요?\n", + "Processing question 3888/3952 : 실버를 다시 조사하자고 말한 인물의 직업은?_____________실버를 재조사하자고 이야기한 사람의 직업은 무엇인가요?\n", + "Processing question 3889/3952 : 아미타불을 중심으로 우측 지장보살은 오른손에 어떤 물건을 쥐고 있는가?_____________우측 지장보살은 오른손에 어떤 물건을 쥐고 있나요?\n", + "Processing question 3890/3952 : 오드리 헵번과 그랜트의 나이 차이는?_____________오드리 헵번과 그랜트는 몇 살 차이인가요?\n", + "Processing question 3891/3952 : 대교파출소는 어떤 사람한테서 장난 전화를 받았는가?_____________대교파출소는 어떤 개인으로부터 괴롭힘 전화를 받았습니까?\n", + "Processing question 3892/3952 : 튀르크인이 영토를 빼앗아갈 무렵 유행하던 전염병은?_____________튀르크인이 영토를 빼앗아갈 무렵 유행하던 전염병은 무엇이었나요?\n", + "Processing question 3893/3952 : 1874년 주의회가 연달아 택한 법은 무엇에 대해 규정하고 있나요?_____________주요회가 연달아 채택한 법은 어떤 주제에 대해 규정하고 있나요?\n", + "Processing question 3894/3952 : 음모자들이 테오도어 코르트를 통해 접선하고자 한 나라는?_____________어떤 국가가 음모자들이 테오도어 코르트를 통해 영향력을 행사하려고 했습니까?\n", + "Processing question 3895/3952 : 흑표당이 실현하고자 했던 말콤X의 사상은?_____________말콤 X의 사상을 실현하고자 했던 흑인파워 운동은 무엇인가요?\n", + "Processing question 3896/3952 : 원진국사비가 만들어진 시기는?_____________원진국사비가 제작된 시기는 언제인가요?\n", + "Processing question 3897/3952 : 919년에 선출된 독일의 군주는 어디 출신이었나요?_____________919년에 선출된 독일의 군주는 어느 지역에서 출신이었습니까?\n", + "Processing question 3898/3952 : 빌리 선데이는 누구를 대상으로 종교적인 믿음을 활용해 희망적인 메시지를 전달하였나?_____________빌리 선데이는 누구에게 종교적인 신념을 이용하여 희망적인 메시지를 전달했나요?\n", + "Processing question 3899/3952 : 힌두어를 인도 공용어로 지정하는 것에 반대하는 민족은?_____________인도 공용어로 힌디어를 지정하는 것에 반대하는 민족은 무엇인가요?\n", + "Processing question 3900/3952 : 미디어 아트는 역동적인 전시물과 무엇의 상호작용을 중시하는 예술인가요?_____________미디어 아트는 동적 전시물과 어떤 것의 상호작용을 강조하는 예술인가요?\n", + "Processing question 3901/3952 : 징효국사의 스승은 누구인가?_____________징효국사의 스승은 누구입니까?\n", + "Processing question 3902/3952 : 금강산 개발 사업을 결정하게 한 시초가 된 정부의 정치적인 방책은?_____________금강산 개발 사업을 촉진시킨 정부의 정치적인 정책은 무엇이었나요?\n", + "Processing question 3903/3952 : 조선 전기의 양식을 반영해서 화강암으로 만든 것은?_____________'조선 전기의 스타일을 따라 만든 화강암은 무엇인가요?'\n", + "Processing question 3904/3952 : 한국어 야간 수업은 언제부터 시작되는가?_____________한국어 야간 강의는 언제부터 시작되나요?\n", + "Processing question 3905/3952 : <자랑거리>가 다시 극장에 나왔을 때 주인공을 맡은 여자는?_____________'<자랑거리>가 다시 영화관에 상영될 때 주연 여주인공은 누구인가요?'\n", + "Processing question 3906/3952 : 버러 마켓은 본래 어느 다리의 끝부분과 맞닿아 있었나요?_____________버러 마켓은 어떤 다리의 끝부분과 인접해 있었습니까?\n", + "Processing question 3907/3952 : 레닌의 전위당론을 엘리트주의라며 비판한 사람은?_____________레닌의 전위당론을 엘리트주의라고 비판한 사람은 누구인가요?\n", + "Processing question 3908/3952 : 칸 박사가 우라늄 농축에 사용되는 원심분리기를 보낸 나라는 어디인가?_____________칸 박사가 우라늄 농축에 사용되는 원심분리기를 보낸 국가는 어디인가요?\n", + "Processing question 3909/3952 : 개신교와 가톨릭 신자들이 수감되었던 시위는 어디에서 행해졌는가?_____________어느 장소에서 개신교와 가톨릭 신자들이 수감되었던 시위가 발생했습니까?\n", + "Processing question 3910/3952 : 복식이 무제에게 하사받은 직위는 무엇이었나요?_____________복식이 무제에게 부여받은 지위는 무엇이었습니까?\n", + "Processing question 3911/3952 : 헤라클레스의 아내가 그에게 주었던 것은?_____________헤라클레스의 아내가 그에게 선물한 것은 무엇이었나요?\n", + "Processing question 3912/3952 : 워렌 연방대법원장 시기의 정부 혹은 의회는 어떤 성향을 띄었는가?_____________워렌 연방대법원장 시기의 정부나 의회가 어떤 성향을 가지고 있었나요?\n", + "Processing question 3913/3952 : 뉴욕 필하모닉 최초의 미국인 상임 지휘자는 누구인가?_____________뉴욕 필하모닉 최초의 미국인 상임 지휘자는 누구인가?\n", + "Processing question 3914/3952 : 카탈루냐 지방에 다시 나타난 늑대는 어디서 왔는가?_____________늑대가 다시 나타난 곳은 어디인가요?\n", + "Processing question 3915/3952 : 진덕여왕은 누구 다음으로 왕의 자리를 차지하였는가?_____________누가 진덕 여왕 다음으로 왕의 자리를 물려받았습니까?\n", + "Processing question 3916/3952 : 여름방학동안 치에는 어디에서 지내기로 하였나요?_____________치에가 여름방학동안 어디에서 머무를 계획을 세우셨나요?\n", + "Processing question 3917/3952 : 제국과 메시나를 두고 전쟁을 벌인 민족은?_____________어떤 민족이 제국과 메시아 사이에서 전쟁을 벌인 것으로 알려져 있나요?\n", + "Processing question 3918/3952 : 차바하르항은 이란 항구 중 어느 국가의 제재를 유일하게 받지 않았나?_____________차바하르항은 이란 항구 중 어느 나라가 유일하게 제재를 받지 않았나요?\n", + "Processing question 3919/3952 : 개인적 요소와 상황적 요소로 설명되는 내집단 구성원의 행동 양식은 어디에 보고돼있나?_____________내집단 구성원의 행동 양식이 개인적인 특성과 상황적인 요소에 의해 설명되는 곳은 어디에 기록되어 있나요?\n", + "Processing question 3920/3952 : 부의 근원은 농업밖에 없다고 여기던 사상은?_____________농업이 부의 근원이라고 여기는 사상은 무엇인가요?\n", + "Processing question 3921/3952 : 현재 동구에서 가장 큰 동은?_____________'현재 동구에서 가장 큰 구역은 어디인가요?'\n", + "Processing question 3922/3952 : 의무교육과정이 끝나고도 아일랜드어를 쓰는 지역은?_____________어떤 지역에서는 의무교육과정이 끝나고도 아일랜드어를 사용하나요?\n", + "Processing question 3923/3952 : 밤이 되면 공기가 위로 올라가는 곳은 육지와 바다 중 어디인가?_____________밤에 대기가 상승하는 지역은 육지와 바다 중 어디에 위치하나요?\n", + "Processing question 3924/3952 : 캐나다 민요는 주로 어느 나라의 민요와 똑같은가?_____________'캐나다 국가의 민요는 어느 국가의 국가와 동일한가요?'\n", + "Processing question 3925/3952 : 섭정가의 경제 기반에 큰 타격을 준 명령이 발포된 시기는?_____________섭정가의 경제 기반에 큰 영향을 미친 명령이 발포된 시기는?\n", + "Processing question 3926/3952 : 리처드 2세가 왕권을 도발했다는 이유로 없애기 시작한 집단은?_____________리처드 2세가 왕권을 도발했다는 이유로 없애기 시작한 집단은 무엇인가요?\n", + "Processing question 3927/3952 : 니콜라오 2세가 장엄한 예식을 주재함으로써 우호관계를 형성한 세력은?_____________니콜라오 2세가 엄숙한 행사를 주최하여 동맹을 형성한 세력은 누구인가요?\n", + "Processing question 3928/3952 : 세이부 라이온스라는 구단명이 정해진 연도는?_____________세이부 라이온스라는 팀명이 결정된 연도는 언제인가요?\n", + "Processing question 3929/3952 : 창조론과 모순되어 출판 당시 큰 논란이 발생한 찰스 다윈의 저서는?_____________찰스 다윈의 책 중에서 창조론과 모순되어 출판 당시 큰 논란을 일으킨 책은 무엇입니까?\n", + "Processing question 3930/3952 : 토니 메이가 질산 암모늄 폭발물의 뚜렷한 특징이라고 밝힌 것은?_____________토니 메이가 질산 암모늄 폭발물의 명확한 특성을 언급한 것은 무엇인가요?\n", + "Processing question 3931/3952 : 카이사르가 도버에 상륙하려고 했던 근거를 제시한 인물은?_____________카이사르가 도버에 상륙하려고 했던 근거를 제시한 인물은 누구였나요?\n", + "Processing question 3932/3952 : 1379년에 이탈리아의 주요 거점지로 인정받았던 장소는?_____________1379년에 이탈리아의 주요 거점지로 인정받았던 장소는 어디였습니까?\n", + "Processing question 3933/3952 : 독립 국가로서 콩고의 첫 번째 총리는 누구였나?_____________콩고의 독립 국가에서 첫 번째 총리는 누구였나요?\n", + "Processing question 3934/3952 : 메이토구를 가로지르는 노선의 마지막 역은?_____________메이토구를 횡단하는 노선의 종착역은 어디입니까?\n", + "Processing question 3935/3952 : 종을 단순히 형태적 특징만으로 정의한것은 무엇인가?_____________'모양적 특징만으로 종을 정의한 것은 무엇인가?'\n", + "Processing question 3936/3952 : 링컨이 노예 해방 선언을 공표한 해는?_____________링컨이 노예 해방 선언을 발표한 해는 무엇인가요?\n", + "Processing question 3937/3952 : 쇼기대의 본관은 우에노로 이동하기 이전에 어디에 있었나요?_____________쇼기대의 본관이 우에노로 이전에 위치했던 곳은 어디였나요?\n", + "Processing question 3938/3952 : 오삼계는 무엇을 등 뒤에 부착하라고 명령했는가?_____________오삼계는 어떤 것을 등 뒤에 붙이라고 지시했습니까?\n", + "Processing question 3939/3952 : 아이작 뉴턴이 제1법칙에 대해 정의내린 저서는?_____________아이작 뉴턴이 제1법칙에 대해 정의한 책은 무엇인가요?\n", + "Processing question 3940/3952 : 별의 주요 작용 원리는 복사 에너지를 무엇으로 바꾸는 것인가?_____________별이 에너지를 무엇으로 변환하는가?\n", + "Processing question 3941/3952 : 아그노디케는 누구에 의해 오브스테트릭스라고 서술되었나요?_____________'아그노디케는 누구에 의해 오브스테트릭스로 불리기도 했나요?'\n", + "Processing question 3942/3952 : 와카바야시의 추계 리그 3번째 우승은 몇 년인가?_____________와카바야시의 추계 리그 3번째 우승은 몇 해에 이루어졌나요?\n", + "Processing question 3943/3952 : 부견의 동진 공격을 지지한 사람은?_____________부견의 동진 공격을 찬성한 사람은 누구인가요?\n", + "Processing question 3944/3952 : 2012년에 부일장학회의 주식반환에 대해 기각 결정을 내린 재판부는?_____________부일장학회의 주식반환에 대해 기각 결정을 내린 재판부는 누구인가요?\n", + "Processing question 3945/3952 : 역감시는 무엇의 보호를 위한 활동인가요?_____________역감시는 어떤 것을 보호하기 위한 조치입니까?\n", + "Processing question 3946/3952 : 알래스카 고속도로가 미국 본토에 수행하는 역할은?_____________알래스카 고속도로가 미국 본토에서 하는 일은 무엇인가요?\n", + "Processing question 3947/3952 : 영류왕이 천리장성의 건축 총괄 책임을 맡겼던 인물은 누구인가?_____________천리장성의 건축 총괄 책임을 맡겼던 인물은 누구인가?\n", + "Processing question 3948/3952 : 대부분의 이오의 산이 형성되는데 영향을 끼친 것은?_____________이오의 대부분의 산이 형성되는데 영향을 끼친 것은 무엇인가요?\n", + "Processing question 3949/3952 : 애니는 어디서 태어났는가?_____________애니는 어느 곳에서 출생했습니까?\n", + "Processing question 3950/3952 : 1854년에 니콜라이의 뒤를 이어 상임 지휘자로서 활동한 인물은?_____________1854년에 니콜라이의 뒤를 이어 상임 지휘자로서 활동한 사람은 누구였나요?\n", + "Processing question 3951/3952 : 드래곤의 암수 구분이 있는 신화는?_____________'드래곤을 남성과 여성으로 분류하는 신화는?'\n", + "Processing question 3952/3952 : 올레 폰 보이스트 이후에 시장으로 임명된 사람은 누구인가?_____________'올레 폰 보이스트 후에 시장으로 지명된 사람의 이름은 무엇입니까?'\n", + " title context \\\n", + "0 미국 상원 미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국... \n", + "1 미국 상원 미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국... \n", + "2 인사조직관리 '근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19... \n", + "3 인사조직관리 '근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19... \n", + "4 강희제 강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전... \n", + "... ... ... \n", + "7899 빈 필하모니 관현악단 1842년에 작곡가이자 지휘자인 오토 니콜라이가 빈 궁정 오페라극장 소속 관현악단을... \n", + "7900 드래곤 원어는 고대 그리스어까지 거슬러 올라간다. 영어 문헌에 이 말이 나타나기 시작한 것... \n", + "7901 드래곤 원어는 고대 그리스어까지 거슬러 올라간다. 영어 문헌에 이 말이 나타나기 시작한 것... \n", + "7902 2011년 함부르크 주의회 선거 2008년 2월 28일 실시된 2008년 함부르크 주의회 선거에서 기민련은 과반수 ... \n", + "7903 2011년 함부르크 주의회 선거 2008년 2월 28일 실시된 2008년 함부르크 주의회 선거에서 기민련은 과반수 ... \n", + "\n", + " document_id question id \\\n", + "0 18293 대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은? mrc-1-000067 \n", + "1 18293 미국의 행정부 견제권을 갖는 국가 기관은 무엇입니까? mrc-1-000067 \n", + "2 51638 현대적 인사조직관리의 시발점이 된 책은? mrc-0-004397 \n", + "3 51638 '현대적 인사관리의 원조서는 무엇인가요?' mrc-0-004397 \n", + "4 5028 강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가? mrc-1-000362 \n", + "... ... ... ... \n", + "7899 12730 1854년에 니콜라이의 뒤를 이어 상임 지휘자로서 활동한 사람은 누구였나요? mrc-0-003429 \n", + "7900 10924 드래곤의 암수 구분이 있는 신화는? mrc-0-003956 \n", + "7901 10924 '드래곤을 남성과 여성으로 분류하는 신화는?' mrc-0-003956 \n", + "7902 27803 올레 폰 보이스트 이후에 시장으로 임명된 사람은 누구인가? mrc-0-003589 \n", + "7903 27803 '올레 폰 보이스트 후에 시장으로 지명된 사람의 이름은 무엇입니까?' mrc-0-003589 \n", + "\n", + " answers augmented_question \n", + "0 {'answer_start': [235], 'text': ['하원']} False \n", + "1 {'answer_start': [235], 'text': ['하원']} True \n", + "2 {'answer_start': [212], 'text': ['《경영의 실제》']} False \n", + "3 {'answer_start': [212], 'text': ['《경영의 실제》']} True \n", + "4 {'answer_start': [510], 'text': ['백성']} False \n", + "... ... ... \n", + "7899 {'answer_start': [255], 'text': ['칼 에케르트']} True \n", + "7900 {'answer_start': [476], 'text': ['슬라브 신화']} False \n", + "7901 {'answer_start': [476], 'text': ['슬라브 신화']} True \n", + "7902 {'answer_start': [189], 'text': ['크리스토포 알하우스']} False \n", + "7903 {'answer_start': [189], 'text': ['크리스토포 알하우스']} True \n", + "\n", + "[7904 rows x 7 columns]\n" + ] + } + ], + "execution_count": 30 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-21T07:09:56.199471Z", + "start_time": "2024-10-21T07:09:56.184393Z" + } + }, + "cell_type": "code", + "source": [ + "from datasets import load_from_disk\n", + "import os\n", + "current_dir = os.getcwd()\n", + "parent_dir = os.path.dirname(current_dir)\n", + "\n", + "# Arrow 파일 경로 설정\n", + "train_file_path = os.path.join(parent_dir, 'data', 'train_dataset')\n", + "test_file_path = os.path.join(parent_dir, 'data', 'test_dataset')\n", + "dataset = load_from_disk(train_file_path)\n", + "test_dataset=load_from_disk(test_file_path)" + ], + "id": "335a456ef81942e2", + "outputs": [], + "execution_count": 34 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-21T07:09:56.616840Z", + "start_time": "2024-10-21T07:09:56.395449Z" + } + }, + "cell_type": "code", + "source": [ + "train_dataset = dataset[\"train\"]\n", + "valid_dataset = dataset[\"validation\"]\n", + "test_dataset=test_dataset['validation']\n", + "\n", + "train_df=pd.DataFrame(train_dataset)\n", + "valid_df=pd.DataFrame(valid_dataset)\n", + "test_df=pd.DataFrame(test_dataset)\n", + "\n", + "print(f\"Train length : {len(train_df)}\")\n", + "print(f\"Valid length : {len(valid_df)}\")\n", + "print(f\"Test length : {len(test_df)}\")" + ], + "id": "3fee5b5268a65880", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Train length : 3952\n", + "Valid length : 240\n", + "Test length : 600\n" + ] + } + ], + "execution_count": 35 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-21T07:09:58.155810Z", + "start_time": "2024-10-21T07:09:58.144664Z" + } + }, + "cell_type": "code", + "source": "train_df.head()", + "id": "369451dd34aea1e1", + "outputs": [ + { + "data": { + "text/plain": [ + " title context \\\n", + "0 미국 상원 미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국... \n", + "1 인사조직관리 '근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19... \n", + "2 강희제 강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전... \n", + "3 금동삼존불감 불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든... \n", + "4 계사명 사리구 동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기... \n", + "\n", + " question id \\\n", + "0 대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은? mrc-1-000067 \n", + "1 현대적 인사조직관리의 시발점이 된 책은? mrc-0-004397 \n", + "2 강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가? mrc-1-000362 \n", + "3 11~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요? mrc-0-001510 \n", + "4 명문이 적힌 유물을 구성하는 그릇의 총 개수는? mrc-0-000823 \n", + "\n", + " answers document_id \\\n", + "0 {'answer_start': [235], 'text': ['하원']} 18293 \n", + "1 {'answer_start': [212], 'text': ['《경영의 실제》']} 51638 \n", + "2 {'answer_start': [510], 'text': ['백성']} 5028 \n", + "3 {'answer_start': [625], 'text': ['중국']} 34146 \n", + "4 {'answer_start': [30], 'text': ['4개']} 47334 \n", + "\n", + " __index_level_0__ \n", + "0 42 \n", + "1 2873 \n", + "2 230 \n", + "3 992 \n", + "4 548 " + ], + "text/html": [ + "
\n", + "\n", + "\n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + " \n", + "
titlecontextquestionidanswersdocument_id__index_level_0__
0미국 상원미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국...대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은?mrc-1-000067{'answer_start': [235], 'text': ['하원']}1829342
1인사조직관리'근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19...현대적 인사조직관리의 시발점이 된 책은?mrc-0-004397{'answer_start': [212], 'text': ['《경영의 실제》']}516382873
2강희제강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전...강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가?mrc-1-000362{'answer_start': [510], 'text': ['백성']}5028230
3금동삼존불감불상을 모시기 위해 나무나 돌, 쇠 등을 깎아 일반적인 건축물보다 작은 규모로 만든...11~12세기에 제작된 본존불은 보통 어떤 나라의 특징이 전파되었나요?mrc-0-001510{'answer_start': [625], 'text': ['중국']}34146992
4계사명 사리구동아대학교박물관에서 소장하고 있는 계사명 사리구는 총 4개의 용기로 구성된 조선후기...명문이 적힌 유물을 구성하는 그릇의 총 개수는?mrc-0-000823{'answer_start': [30], 'text': ['4개']}47334548
\n", + "
" + ] + }, + "execution_count": 36, + "metadata": {}, + "output_type": "execute_result" + } + ], + "execution_count": 36 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-21T07:21:29.696616Z", + "start_time": "2024-10-21T07:21:29.454794Z" + } + }, + "cell_type": "code", + "source": [ + "\n", + "# 어그멘테이션된 CSV 파일 로드\n", + "augmentation_csv_path = 'mrc_augmented_questions_data.csv'\n", + "augmented_df = pd.read_csv(augmentation_csv_path)\n", + "\n", + "print(augmented_df.head())\n", + "\n", + "# type str -> object(dict)로 변환\n", + "augmented_df[\"answers\"] = augmented_df[\"answers\"].apply(lambda x: eval(x))\n" + ], + "id": "6bac30a020411b0a", + "outputs": [ + { + "name": "stdout", + "output_type": "stream", + "text": [ + " title context document_id \\\n", + "0 미국 상원 미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국... 18293 \n", + "1 미국 상원 미국 상의원 또는 미국 상원(United States Senate)은 양원제인 미국... 18293 \n", + "2 인사조직관리 '근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19... 51638 \n", + "3 인사조직관리 '근대적 경영학' 또는 '고전적 경영학'에서 현대적 경영학으로 전환되는 시기는 19... 51638 \n", + "4 강희제 강희제는 강화된 황권으로 거의 황제 중심의 독단적으로 나라를 이끌어 갔기에 자칫 전... 5028 \n", + "\n", + " question id \\\n", + "0 대통령을 포함한 미국의 행정부 견제권을 갖는 국가 기관은? mrc-1-000067 \n", + "1 미국의 행정부 견제권을 갖는 국가 기관은 무엇입니까? mrc-1-000067 \n", + "2 현대적 인사조직관리의 시발점이 된 책은? mrc-0-004397 \n", + "3 '현대적 인사관리의 원조서는 무엇인가요?' mrc-0-004397 \n", + "4 강희제가 1717년에 쓴 글은 누구를 위해 쓰여졌는가? mrc-1-000362 \n", + "\n", + " answers augmented_question \n", + "0 {'answer_start': [235], 'text': ['하원']} False \n", + "1 {'answer_start': [235], 'text': ['하원']} True \n", + "2 {'answer_start': [212], 'text': ['《경영의 실제》']} False \n", + "3 {'answer_start': [212], 'text': ['《경영의 실제》']} True \n", + "4 {'answer_start': [510], 'text': ['백성']} False \n" + ] + } + ], + "execution_count": 41 + }, + { + "metadata": { + "ExecuteTime": { + "end_time": "2024-10-21T07:21:31.401221Z", + "start_time": "2024-10-21T07:21:31.292275Z" + } + }, + "cell_type": "code", + "source": [ + "# Dataset으로 변환 (from pandas DataFrame)\n", + "train_dataset_augmented = Dataset.from_pandas(augmented_df)\n", + "\n", + "# 동일하게 validation과 test도 처리 가능\n", + "valid_dataset_augmented = Dataset.from_pandas(valid_df)\n", + "\n", + "# DatasetDict로 결합\n", + "dataset_dict = DatasetDict({\n", + " \"train\": train_dataset_augmented,\n", + " \"validation\": valid_dataset_augmented,\n", + "})\n", + "\n", + "# Arrow 파일로 저장\n", + "output_dir = os.path.join(parent_dir, 'data', 'augmented_dataset_syno')\n", + "dataset_dict.save_to_disk(output_dir)\n", + "\n", + "# 확인\n", + "print(f\"Augmented dataset saved to {output_dir}\")" + ], + "id": "1c74c05b0b866034", + "outputs": [ + { + "name": "stderr", + "output_type": "stream", + "text": [ + "Saving the dataset (1/1 shards): 100%|██████████| 7904/7904 [00:00<00:00, 556377.93 examples/s]\n", + "Saving the dataset (1/1 shards): 100%|██████████| 240/240 [00:00<00:00, 59553.51 examples/s]" + ] + }, + { + "name": "stdout", + "output_type": "stream", + "text": [ + "Augmented dataset saved to D:\\boost-camp\\07주_MRC\\pj\\level2-mrc-nlp-04\\data\\augmented_dataset_syno\n" + ] + }, + { + "name": "stderr", + "output_type": "stream", + "text": [ + "\n" + ] + } + ], + "execution_count": 42 + }, + { + "metadata": {}, + "cell_type": "code", + "outputs": [], + "execution_count": null, + "source": "", + "id": "fb995e9ea5c540ff" + } + ], + "metadata": { + "kernelspec": { + "display_name": "Python 3", + "language": "python", + "name": "python3" + }, + "language_info": { + "codemirror_mode": { + "name": "ipython", + "version": 2 + }, + "file_extension": ".py", + "mimetype": "text/x-python", + "name": "python", + "nbconvert_exporter": "python", + "pygments_lexer": "ipython2", + "version": "2.7.6" + } + }, + "nbformat": 4, + "nbformat_minor": 5 +} diff --git a/setup/requirements.txt b/setup/requirements.txt new file mode 100755 index 0000000..abff497 --- /dev/null +++ b/setup/requirements.txt @@ -0,0 +1,18 @@ +# Data manipulation and analysis +pandas +numpy==1.24.1 + +# Machine Learning libraries +scikit-learn +torch==1.13 +datasets==2.15.0 +transformers==4.25.1 +faiss-gpu + +# Progress and logging utilities +tqdm +wandb + +# Information retrieval libraries +rank_bm25 +elasticsearch diff --git a/setup/setup-elasticsearch.bash b/setup/setup-elasticsearch.bash new file mode 100644 index 0000000..bd6ac92 --- /dev/null +++ b/setup/setup-elasticsearch.bash @@ -0,0 +1,46 @@ +#!/bin/bash + +#################################################################################### +# elasticsearch 환경 세팅 스크립트 +# 실행 방법 (로그 남기기/남기지 않기 선택) +# sudo -u elasticsearch nohup /usr/share/elasticsearch/bin/elasticsearch > /dev/null 2>&1 & +# sudo -u elasticsearch nohup /usr/share/elasticsearch/bin/elasticsearch > /var/log/elasticsearch.log 2>&1 & +# 실행 상태 확인 +# curl -X GET "localhost:9200" +# Nori 플러그인 설치 확인 +# curl -X GET "localhost:9200/_analyze" -H 'Content-Type: application/json' -d '{ "tokenizer": "nori_tokenizer", "text": "동해물과 백두산이" }' +# 종료 방법 +# ps aux | grep elasticsearch | grep -v grep +# kill -9 [pid] +#################################################################################### + +# Update and install prerequisites +sudo apt update +sudo apt-get install -y wget apt-transport-https openjdk-11-jdk curl gnupg + +# Import the Elasticsearch public GPG key +wget -qO - https://artifacts.elastic.co/GPG-KEY-elasticsearch | sudo apt-key add - + +# Add the Elasticsearch APT repository +sudo sh -c 'echo "deb https://artifacts.elastic.co/packages/7.x/apt stable main" > /etc/apt/sources.list.d/elastic-7.x.list' + +# Install Elasticsearch +sudo apt-get update +sudo apt-get install -y elasticsearch + +# Install Nori Plugin +sudo /usr/share/elasticsearch/bin/elasticsearch-plugin install analysis-nori + +# Change Ownership of elasticsearch Directory +if id "elasticsearch" &>/dev/null; then + echo "User 'elasticsearch' already exists." +else + sudo adduser --system --no-create-home --group elasticsearch +fi + +sudo chown -R elasticsearch:elasticsearch /etc/elasticsearch +sudo chown -R elasticsearch:elasticsearch /usr/share/elasticsearch + +# Option: setting log file +sudo touch /var/log/elasticsearch.log +sudo chown elasticsearch:elasticsearch /var/log/elasticsearch.log diff --git a/setup/setup-git.bash b/setup/setup-git.bash new file mode 100644 index 0000000..be33a40 --- /dev/null +++ b/setup/setup-git.bash @@ -0,0 +1,38 @@ +#!/bin/bash + +########################################## +# 유저 디렉토리에 git 저장소 불러오기 +# 사용 예시 bash setup-git.bash "username" "git_username" "git_email@example.com" "your_git_token" +########################################## + +# Args +user=$1 +username=$2 +email=$3 +token=$4 + +# print args +echo "User: $user" +echo "Git Username: $username" +echo "Git Email: $email" +echo "Git Token: $token" + +# Check User +if id "$user" &>/dev/null; then + echo "User $user exists. Proceeding..." + + # 해당 유저의 홈 디렉토리로 이동 + user_home=$(eval echo ~"$user") + cd "$user_home" || { echo "Failed to change directory to $user_home"; exit 1; } + + # git config + sudo -u "$user" git config --global user.email "$email" + sudo -u "$user" git config --global user.name "$username" + sudo -u "$user" git config --global credential.helper "cache --timeout=360000" + + # git clone + sudo -u "$user" git clone https://"$token"@github.com/boostcampaitech7/level2-mrc-nlp-04.git +else + echo "User $user does not exist." + exit 1 +fi diff --git a/setup/setup-gpu-server.bash b/setup/setup-gpu-server.bash new file mode 100644 index 0000000..f60d410 --- /dev/null +++ b/setup/setup-gpu-server.bash @@ -0,0 +1,59 @@ +#!/bin/bash + +########################################## +# GPU 서버 인스턴스 생성 시 필요한 개발 환경 세팅 +# conda 미설치 환경에서는 conda 설치 과정을 추가 +# 유저명 / 디렉토리 / 권한 설정 등 수정하여 사용 +########################################## + +##################### Install ##################### +apt-get update +apt-get install -y sudo +sudo apt-get install -y wget git vim + +##################### conda ##################### +export PATH="/opt/conda/bin:$PATH" +conda init bash +conda config --set auto_activate_base false +source ~/.bashrc + +conda create -n main python=3.10.13 -y +conda activate main && pip install -r requirements.txt +conda deactivate + +sudo chmod -R 777 /opt/conda/env + +##################### Users: dir & permission ##################### +users=("yeseo" "sujin" "minseo" "gayeon" "seongmin" "seongjae") + +for i in "${!users[@]}"; do + user="${users[$i]}" + user_folder="/data/ephemeral/home/$user" + + # Create user with custom home directory and give sudo privileges + sudo mkdir -p $user_folder + sudo chmod 777 $user_folder + sudo adduser --disabled-password --home $user_folder --gecos "" $user + sudo chsh -s /bin/bash $user + echo "$user ALL=(ALL) NOPASSWD:ALL" | sudo tee /etc/sudoers.d/$user + +done + +##################### Users: conda ##################### +for user in "${users[@]}"; do + user_folder="/data/ephemeral/home/$user" + + # Add conda to each user's PATH and initialize conda + su - $user bash -c 'export PATH="/opt/conda/bin:$PATH"; conda init bash; conda config --set auto_activate_base false; source ~/.bashrc;' + echo "cd $user_folder" | sudo tee -a $user_folder/.bashrc + echo 'conda activate main' | sudo tee -a $user_folder/.bashrc + + # Add local bin path to each user's .bashrc + echo "export PATH=\$PATH:/data/ephemeral/home/$user/.local/bin" | sudo tee -a $user_folder/.bashrc + + sudo chmod -R 777 $user_folder + sudo chown -R $user:$user $user_folder + +done + +echo "Setup complete!" \ No newline at end of file