{
  "ASR": [
    {
      "ref": "몬터규는 자녀들이 사랑을 제대로 못 받고 크면 매우 심각한 결과가 초래된다는 결론을 내렸습니다",
      "hyp": "몬토 킬은 자녀들이 사랑을 제대로 못 받고 크면 매우 심각한 결과가 초래된다는 결론을 내렸습니다",
      "cer": 7.5
    },
    {
      "ref": "차 문이 종잇장처럼 얇지 않으니 문 두께 스물 센티미터를 빼면 실제 승 하차 여유 공간은 스물 센티미터라는 계산이 나옵니다",
      "hyp": "하지만 아직 이뤄지지 않았어요요 그리고 제가 말씀해 드렸는데 실제 승차 여유 공간은 스물 센티미터라는 계산이 나오는데요 그리고 제가 말씀해 드렸는데 실제 승차 여유 공간은 스물 센티미터라는 계산이 나오는데요 그리고 제가 말씀해 드렸는데 실제 승차 여유 공간은 스물 센티미터라는 계산이 나오는데요 그리고 제가 말씀해 드렸는데 실제 승차 여유 공간은 스물 센티미터라는 계산이 나오는데요 그리고 제가 말씀해 드렸는데 실제 승차 여유 공간은",
      "cer": 308.0
    },
    {
      "ref": "지난해 이들 크루즈관광객의 평균 체류기간은 오 쩜 구 사 시간",
      "hyp": "지난해 이들 크루즈 관광객의 평균 체류기간은 오 쩜 구 사 시간",
      "cer": 0.0
    },
    {
      "ref": "그리고 이 나무는 태즈메이니아 남부 지역에 부는 남극의 바람을 맞으면서도 또한 해안에 위치한 산간 지방의 안개가 많은 환경에서도 무성하게 자랍니다",
      "hyp": "그리고 이 나무는 태즈메이니아 남부 지역에 분노 남극의 바람을 맞으면서도 또한 해안에 위치한 산간 지방의 안개가 많은 환경에서도 무성하게 자랍니다",
      "cer": 3.23
    },
    {
      "ref": "평소 오전 아홉 시 에서 오후 일곱 시까지 일하면 하루 이 만원 정도를 번다",
      "hyp": "평소 오전 아홉 시에서 오후 일곱 시까지 일하면 하루 이 만 원 정도를 벌다",
      "cer": 3.45
    },
    {
      "ref": "박준영 돈 안 되는 공익사건 남들 다 박수쳐주는 사건은 제가 하고 당신네들은 사무실 운영해야 되니까 돈 버는 사건 당신네들이 해라",
      "hyp": "박준영 돈 안 되는 공익사건 남들 다 박수쳐주는 사건을 제외하고 당신 내들은 사무실 운영해야 되니까 돈 벌는 사건 당신 내들이 해라",
      "cer": 9.43
    },
    {
      "ref": "야권은 여당에서 분명한 입장을 표해야 한다고 연일 압박 수위를 높이고 있다",
      "hyp": "야권은 여당에서 분명한 입장을 표해야 한다고 연일 압박 수위를 높이고 있다",
      "cer": 0.0
    },
    {
      "ref": "독일을 보호하기 위하여 회스는 약 이백 만 명의 인명을 앗아 가는 일을 지휘하였는데 그중 대부분이 유대인이었습니다",
      "hyp": "독일을 보호하기 위해하여 헌서는 약 이백 만 명의 인명을 앗아가는 일을 주의하였는데 그 중 대부분이 유대인이었습니다",
      "cer": 10.42
    },
    {
      "ref": "젠슨 황은 엔비디아에서 매출의 삼십 퍼센트 이상을 연구개발에 투자한다",
      "hyp": "젠슨화는 엔비디아에서 매출의 삼십 퍼센트 이상을 영국 제조에 투자한다",
      "cer": 20.0
    },
    {
      "ref": "이번에 발견된 화석은 에우노토사우르스처럼 등딱지 배딱지가 없지만 등뼈 가슴뼈 등 골격구조는 오돈토켈리스를 닮았다",
      "hyp": "이번에 발견된 화석은 에우노토사우루스처럼 등뼈지 배뼈지가 없지만 등뼈 가슴뼈 등 골격 구조는 오돈토캘리스를 닮았다",
      "cer": 8.0
    }
  ],
  "AST_KO_EN": [
    {
      "ref": "romanticism had a large element of cultural determinism drawn from writers such as goethe fichte and schlegel",
      "hyp": "Nativism has been influenced by many factors in cultural determinism, including the ideas of philosophers such as Plato and Aristotle.",
      "bleu": 5.406502668979588
    },
    {
      "ref": "he did not set a figure for the cuts saying they will be made based on china's economic output",
      "hyp": "Although it is expected that the magnitude of this damage will be revealed based on China's economic production, the details were not disclosed.",
      "bleu": 4.899864500847875
    },
    {
      "ref": "alloys are basically a mixture of two or more metals don't forget that there are many elements on the periodic table",
      "hyp": "Hapkugum is basically a honeycomb with two or more layers. It is not surprising that there are many elements on the jugiulpa.",
      "bleu": 31.75144436186996
    },
    {
      "ref": "cochamó valley - chile's premier climbing destination known as the yosemite of south america with a variety of granite big walls and crags",
      "hyp": "Kochamo Valley, a valley in the American continent of the Yucatan Peninsula, is the largest in the world and is characterized by its large flowering trees and bay leaves.",
      "bleu": 1.7345617945636578
    },
    {
      "ref": "swirl the two dry powders together and then with clean wet hands squeeze them into a ball",
      "hyp": "After washing the two bunmal together, she hangs them on a dry and crisp son and hangs them on the gong.",
      "bleu": 4.504556737153658
    },
    {
      "ref": "the document according to the leak will refer to the borders dispute which palestine wants based on the borders before the 1967 mideast war",
      "hyp": "According to the leaked information, the mentioned news is related to the Palestinian's won national liberation war and the national liberation war.",
      "bleu": 5.118164602105636
    },
    {
      "ref": "you may also wish to consult the advice of governments other than your own but their advice is designed for their citizens",
      "hyp": "I don't have my own opinions, but I listen to the opinions of the government, and the support of each country's government matches the citizens.",
      "bleu": 2.0899410246084282
    },
    {
      "ref": "generally speaking two behaviors can emerge as managers begin to lead their former peers. one end of the spectrum is trying to remain  one of the guys” or gals",
      "hyp": "Generally, these two actions occur when the manager starts by killing the previous generation. On the other side of the spectrum, I try to name one person among the employees.",
      "bleu": 5.177813034788801
    },
    {
      "ref": "it may also be beneficial for one to buy a wild card which provides entry to either selections of parks in south africa or all of the south african national parks",
      "hyp": "It is appropriate to establish a special fund or a national fund within the Namibia Development Corporation to provide for the distribution of wild card cards.",
      "bleu": 3.5790312414926215
    },
    {
      "ref": "police superintendent chandra shekhar solanki said the accused appeared in court with covered faces",
      "hyp": "Chandra Shekhar Solanki, the police chief, said that the police officer turned his head and went to the law.",
      "bleu": 2.2731543567022867
    }
  ],
  "AST_KO_EN_COT": [
    {
      "ref": "romanticism had a large element of cultural determinism drawn from writers such as goethe fichte and schlegel",
      "hyp": "낙ман주의는 괴태나 피태 실례결과 같은 작가들로부터 영향을 받은 문화결정론에 많은 요소를 가지고 있었습니다。 <sep> Liberalism was influenced by many elements of cultural determinism, which was influenced by writers such as Goecke and Pitte.",
      "bleu": 6.483010295255653
    },
    {
      "ref": "he did not set a figure for the cuts saying they will be made based on china's economic output",
      "hyp": "그는 감상 규모는 중국의 경제 생산량을 바탕으로 정할 것이라면서 수치를 백하지 않았습니다。 <sep> He said that the scale of appreciation would be based on China's economic production, but he did not back it up.",
      "bleu": 8.668528067348738
    },
    {
      "ref": "alloys are basically a mixture of two or more metals don't forget that there are many elements on the periodic table",
      "hyp": "학금은 기본적으로 금속 두 개 이상의 혼합물이다 주기율표상의 원소가 많이 있다는 것을 읽지 말라 <sep> Scholarships are basically a mixture of two or more metals, and you don't have to read that the elements on the periodic table are a lot",
      "bleu": 26.603664899338703
    },
    {
      "ref": "cochamó valley - chile's premier climbing destination known as the yosemite of south america with a variety of granite big walls and crags",
      "hyp": "코차모베리 남아메리카의 요세미티 계곡으로 알려진 칠대 최고의 등반지이며 큰 화강암벽과 바위산이 다양하게 존재합니다。 <sep> Cotija Mori is the highest mountain in the Americas, known as the Yoseminiti Valley, and is characterized by large granite cliffs and limestone mountains.",
      "bleu": 5.869760893038728
    },
    {
      "ref": "swirl the two dry powders together and then with clean wet hands squeeze them into a ball",
      "hyp": "건조한 두 부마를 함께 휘전 후에 물에 젖은 깨끗한 손으로 공에 찬 넣는다。 <sep> After twisting the two dry boars together, he dips his clean hands in the water and puts them in the ring.",
      "bleu": 4.486776015336413
    },
    {
      "ref": "the document according to the leak will refer to the borders dispute which palestine wants based on the borders before the 1967 mideast war",
      "hyp": "누출된 정보에 따르면 해당 문서는 천 구백 육십 칠 년 중동전쟁 전 국경에 근거해 팔레스타인이 원하는 국경분쟁과 관련이 있을 것입니다。 <sep> According to the leaked information, the document is based on the borders of the Middle East before the Middle East War and is related to the borders that Palestinians want.",
      "bleu": 13.788941125887114
    },
    {
      "ref": "you may also wish to consult the advice of governments other than your own but their advice is designed for their citizens",
      "hyp": "자신의 의견이 아닌 정부의 의견을 듣고 싶을 수도 있지만 각국 정부의 조언들은 자국민에 맞춰져 있다。 <sep> You may want to listen to the government's opinion instead of your own, but the advice of each country's government is tailored to its own people.",
      "bleu": 4.308842033868296
    },
    {
      "ref": "generally speaking two behaviors can emerge as managers begin to lead their former peers. one end of the spectrum is trying to remain  one of the guys” or gals",
      "hyp": "일반적으로 두 가지 행동은 관리자가 이전 동료를 이끌기 시작하면서 나타날 수 있습니다 스펙트럼의 한쪽 끝에서 직원 중 한 사람으로 나무려고 노력합니다。 <sep> Generally, these two actions can occur as the manager begins to lead his former colleagues, trying to climb the tree as one of the employees at the end of the spectrum.",
      "bleu": 13.181313433495554
    },
    {
      "ref": "it may also be beneficial for one to buy a wild card which provides entry to either selections of parks in south africa or all of the south african national parks",
      "hyp": "남아프리카 공화국의 특별공원 또는 남아프리카 공화국 국립공원 전체에 입장할 수 있는 와일드카드를 구매하는 것이 이득일 수 있습니다。 <sep> It may be beneficial to purchase a wild card that allows you to visit South Africa's National Parks or South Africa's National Parks.",
      "bleu": 4.511748393095595
    },
    {
      "ref": "police superintendent chandra shekhar solanki said the accused appeared in court with covered faces",
      "hyp": "찬드라셰칼 솔란키 경찰서장은 피고인이 얼굴을 가린 채 법정에 나왔다고 말했다。 <sep> Chandrasekar Solanki, the police chief, said the defendant appeared in court with his face covered.",
      "bleu": 17.18152967132724
    }
  ],
  "AST_EN_KO": [
    {
      "ref": "낭만주의는 괴테나 피히테 슐레겔과 같은 작가들로부터 영향을 받은 문화 결정론의 많은 요소를 가지고 있었습니다",
      "hyp": "러омантиз미에는 문화 결정주의의 큰 요소가 포함되어 있으며 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로마인 그리스 로",
      "bleu": 1.5134287671907445
    },
    {
      "ref": "그는 감산 규모는 중국의 경제 생산량을 바탕으로 정해질 것이라면서 수치를 밝히지 않았습니다",
      "hyp": "그는 절약에 대해 숫자를 정하지 않았으며 중국의 경제 출력에 기반하여 이루어질 것이라고 말했다",
      "bleu": 11.188294598960788
    },
    {
      "ref": "합금은 기본적으로 금속 두 개 이상의 혼합물이다 주기율표 상에 원소가 많이 있다는 것을 잊지 마라",
      "hyp": " 합금은 기본적으로 두 개 또는 더 많은 금속의 혼합입니다。不忘해 주세요。有很多元素在元素周期表上。",
      "bleu": 12.876689524369931
    },
    {
      "ref": "코차모 밸리cochamó valley - 남아메리카의 요세미티 계곡으로 알려진 칠레 최고의 등반지이며 큰 화강암 벽과 바위산이 다양하게 존재합니다",
      "hyp": "코체모 뺌리 칼리의 최고 등반 목적지로 알려져 있으며 남아메리의 요즈미로 알려져 있으며 다양한 크기의 석질 벽과 크래그가 있습니다",
      "bleu": 2.9000744656730446
    },
    {
      "ref": "건조한 두 분말을 함께 휘저은 후에 물에 젖은 깨끗한 손으로 공에 짜 넣는다",
      "hyp": "두 개의 건조 쌓힌 파우더를 섞고 그런 다음 깨끗한 물 위 손에 넣어 그들을 공으로 쏟아낸다",
      "bleu": 4.089939525485047
    },
    {
      "ref": "누출된 정보에 따르면 해당 문서는 1967년 중동 전쟁 전 국경에 근거해 팔레스타인이 원하는 국경 분쟁과 관련이 있을 것입니다",
      "hyp": "이 문서는 내부 정보에 따르면 국경 분쟁에 Bezug을 둔 것으로 보인다는데 이 분쟁은 팔레스инки스트가 이전의 국경에 기반을 두려고 한다고 한다",
      "bleu": 10.146459445560989
    },
    {
      "ref": "자신의 의견이 아닌 정부의 의견을 듣고 싶을 수도 있지만 각국 정부의 조언들은 자국민에 맞춰져 있다",
      "hyp": "당신은 또한 자신의 정부 외의 정부의 조언을 찾으시려 하실 수 있지만 그들의 조언은 그들의 시민들 위해 설계되었습니다",
      "bleu": 6.744358029586599
    },
    {
      "ref": "\"일반적으로 두 가지 행동은 관리자가 이전 동료를 이끌기 시작하면서 나타날 수 있습니다. 스페트럼의 한쪽 끝에서 \"직원 중 한 사람\"\"으로 남으려고 노력합니다.",
      "hyp": " 일반적으로 말하면 두 가지 행동이 나타날 수 있으며 관리자들이 이전 동료들을 이끌기 시작하면 하나 끝의 스펙트는 그들이 한때 친구였던 사람들을 이끌려고 하는 것이다",
      "bleu": 11.842046122543803
    },
    {
      "ref": "남아프리카 공화국의 특정 공원 또는 남아프리카 공화국 국립공원 전체에 입장할 수 있는 와일드 카드를 구매하는 것이 이득일 수 있습니다",
      "hyp": "또한 사원이 쓸어놓을 수 있게 되는 카드로 구매하면 남아프리카 공화국의 공원 선택 또는 모든 공화국 공원에 입장할 수 있게 됩니다",
      "bleu": 18.758438209433944
    },
    {
      "ref": "찬드라 셰카르 솔랑키 경찰서장은 피고인이 얼굴을 가린 채 법정에 나왔다고 말했다",
      "hyp": "경찰 수석 셰나라 셰크하르 솔란스키는 혐의자인 수ourt에 숨은 얼굴로 나타났다며 말했다",
      "bleu": 7.483887206915211
    }
  ],
  "AST_EN_KO_COT": [
    {
      "ref": "낭만주의는 괴테나 피히테 슐레겔과 같은 작가들로부터 영향을 받은 문화 결정론의 많은 요소를 가지고 있었습니다",
      "hyp": "Romanticism had a large element of cultural determinism drawn from writers such as Goethe, Fichte, and Schlegel. <sep> 로마니즘에는 고틀스와 피히츠와 쾰른과 같은 작가에서 비롯된 문화 결정주의 큰 요소가 있었다",
      "bleu": 6.55556926587826
    },
    {
      "ref": "그는 감산 규모는 중국의 경제 생산량을 바탕으로 정해질 것이라면서 수치를 밝히지 않았습니다",
      "hyp": "\"He did not set a figure for the cuts, saying they will be made based on China's economic output.\" <sep> 그는 절약에 대해 숫자를 정하지 않았으며 중국의 경제 출력에 기반하여 절약이 이루어질 것이라고 말했다",
      "bleu": 10.373198738191457
    },
    {
      "ref": "합금은 기본적으로 금속 두 개 이상의 혼합물이다 주기율표 상에 원소가 많이 있다는 것을 잊지 마라",
      "hyp": "\"Alloys are basically a mixture of two or more metals. Don't forget there are many elements on the periodic table.\" <sep> 합금은 기본적으로 두 개 또는 더 많은 금속의 혼합입니다。不要忘记周期表には多くの元素があります。",
      "bleu": 7.175919359392756
    },
    {
      "ref": "코차모 밸리cochamó valley - 남아메리카의 요세미티 계곡으로 알려진 칠레 최고의 등반지이며 큰 화강암 벽과 바위산이 다양하게 존재합니다",
      "hyp": "\"Cochrimo Valley, Chile's premier climbing destination, known as the Yosemite of South America, with a variety of granite big walls and crags.\" <sep> 코히모 뺌라 칼리니아 칠리의 최고 등반지로 알려져 있으며 남아메리카의 요세미트로 알려져 있으며 다양한 광석 큰 벤드와 크래그가 있습니다",
      "bleu": 3.657993333229942
    },
    {
      "ref": "건조한 두 분말을 함께 휘저은 후에 물에 젖은 깨끗한 손으로 공에 짜 넣는다",
      "hyp": "Swirl the two dry powders together and then with clean wet hands squeeze them into a ball. <sep> 두 개의 건조 쾌식을 섞아 그 다음 깨끗한 물을 뿌린 손으로 쌓아 모으세요",
      "bleu": 2.9374336289654015
    },
    {
      "ref": "누출된 정보에 따르면 해당 문서는 1967년 중동 전쟁 전 국경에 근거해 팔레스타인이 원하는 국경 분쟁과 관련이 있을 것입니다",
      "hyp": "The document, according to the leak, will refer to the borders dispute, which Palestine wants based on the borders before the nineteen sixty seven mid east war. <sep> 이 문서는 내부 정보에 따르면 국경 분쟁에 Bezug을 둔 것으로 보이며 팔естinians이 중동 전쟁 이전의 국경에 기반을 두고 있다고 한다",
      "bleu": 11.731175160264002
    },
    {
      "ref": "자신의 의견이 아닌 정부의 의견을 듣고 싶을 수도 있지만 각국 정부의 조언들은 자국민에 맞춰져 있다",
      "hyp": "You may also wish to consult the advice of governments other than your own, but their advice is designed for their citizens. <sep> 당신은 또한 자신의 정부뿐만 아니라 다른 정부의 조언을 참고하고 싶을 수 있지만 그들의 조언은 그들의 시민들로부터 디자인됩니다",
      "bleu": 6.9627610030293186
    },
    {
      "ref": "\"일반적으로 두 가지 행동은 관리자가 이전 동료를 이끌기 시작하면서 나타날 수 있습니다. 스페트럼의 한쪽 끝에서 \"직원 중 한 사람\"\"으로 남으려고 노력합니다.",
      "hyp": "Generally speaking, two behaviors can emerge as managers begin to lead their former peers. One end of the spectrum is trying to remain one of the guys or gals. <sep> 일반적으로 말하면 관리자들이 이전 동료를 이끌기 시작하면 두 가지 행동이 나타날 수 있습니다。一端의 스펙트는 남자 또는 여자 중 하나로 남아야 한다는 것을 시도합니다",
      "bleu": 25.35025636816018
    },
    {
      "ref": "남아프리카 공화국의 특정 공원 또는 남아프리카 공화국 국립공원 전체에 입장할 수 있는 와일드 카드를 구매하는 것이 이득일 수 있습니다",
      "hyp": "It may also be beneficial for one to buy a wild card, which provides entry to either selections of parks in South Africa or all of the South African national parks. <sep> 남아프리카에서 선택된 공원 또는 모든 남아프리카 국립공원을 입장할 수 있도록 제공하는 윈드카드를 구매하는 것도 도움이 될 수 있다",
      "bleu": 12.630318292679513
    },
    {
      "ref": "찬드라 셰카르 솔랑키 경찰서장은 피고인이 얼굴을 가린 채 법정에 나왔다고 말했다",
      "hyp": "Police Superintendent Shahra Shankar Solanki said the accused appeared in court with covered faces. <sep> 경찰 수석 시하르 샘하르 솔안키는 피고인이 숨은 얼굴로 법원에 출庭했다고 말했다",
      "bleu": 13.334979932109196
    }
  ],
  "aggregated": {
    "ASR": 37.003,
    "AST_KO_EN": 6.653503432311251,
    "AST_KO_EN_COT": 10.508411482799206,
    "AST_EN_KO": 8.75436158957201,
    "AST_EN_KO_COT": 10.070960508190003
  }
}