무슨 일이 일어났나요?
BBC Future는 연구자들이 손으로 쓴 역사적 암호의 전사 및 해독을 가속화하기 위해 기계 학습을 사용하고 있다고 보고합니다. 스톡홀름 대학과 연계된 팀은 408페이지 분량의 보그 암호를 해독하는 데 도움을 주었고 Descrypt 프로젝트의 연구원들은 특이한 기호, 역사적인 필기체 및 알려지지 않은 문자를 처리할 수 있는 시스템을 개발하고 있습니다.
BBC 퓨처(BBC Future)는 바티칸 도서관이 보관하고 있는 408페이지 분량의 보그 암호가 34개의 특이한 기호와 일부 로마 문자, 아랍어 제목 페이지로 작성되었다고 보도했습니다. 보고서에 따르면 연구원들은 기계 학습을 사용하여 기본 대체 암호를 식별하고 적포도주 및 발효 육두구와 관련된 치료법을 포함하여 수천 가지의 치료법을 발견했습니다.
BBC에 따르면 이 원고는 Borg.lat.898이라는 참조번호로 바티칸 도서관을 통해 온라인으로 볼 수 있습니다. 보고서는 해당 치료법의 역사적 정확성이나 의학적 가치를 독립적으로 확립하지 않습니다. BBC는 이 작업을 전통적으로 상당한 인간 노력이 필요했던 여러 작업의 조합으로 설명합니다.
연구자들은 먼저 손으로 쓴 기호를 기계가 읽을 수 있는 형식으로 기록한 다음 암호 분석을 사용하여 기호가 문자나 단어와 어떻게 일치하는지 추론합니다. 기존 필기 시스템은 일부 역사적인 언어와 쓰기 스타일을 처리할 수 있지만 보고서에 따르면 고안된 기호, 점성술 기호, 특이한 숫자, 희미한 잉크 및 잘못된 필기로 인해 어려움을 겪는 경우가 많습니다. 1637년 Sigismund Heusner von Wandersleben이 보낸 편지는 AI 플랫폼 Transkribus의 도움을 받아 복사되었지만 연구자들은 여전히 수동으로 수정해야 했습니다.
Descrypt 프로젝트에 참여한 연구원들은 전사와 해독을 하나의 프로세스로 결합하기 위한 시스템을 개발하고 있습니다. BBC Future는 18세기 비밀 사회의 의식과 규칙을 설명하는 해독된 독일 원고인 105페이지 분량의 Copiale 암호에 대한 접근 방식을 테스트했다고 보도했습니다. 보고서에 따르면 이 시스템은 일반 손글씨, 암호문 이미지, 이에 상응하는 디코딩된 독일어 텍스트를 사용하여 훈련된 다음 이전에는 볼 수 없었던 부분을 정확하게 디코딩했다고 합니다. 또한 팀은 암호화 알고리즘, 역사적 언어 모델 및 이미지 인식 시스템을 결합한 챗봇과 유사한 도구를 구축했습니다. Borg 암호의 500개 기호 추출에 대해 보고된 테스트에서 이 도구는 단 29분 만에 해당 구절을 번역 및 디코딩하고 제안된 솔루션이 그럴듯해 보이는 이유를 문서화했습니다.
왜 중요한가요?
이 작업을 통해 이전에는 접근할 수 없었던 기록 자료를 역사가와 대중이 더 쉽게 연구할 수 있게 되었습니다. BBC는 이 시스템이 어려운 필기체, 손상된 페이지 또는 익숙하지 않은 암호화로 인해 읽지 않은 채로 남아 있는 외교 메시지, 의학 지식, 종교 관행 및 개인 서신을 조사하는 데 도움이 될 수 있다고 말했습니다.
실질적인 의미는 역사가들이 쉽게 검색하거나 해석할 수 없는 많은 양의 자료가 기록 보관소에 포함되어 있다는 것입니다. BBC Future는 전 세계 도서관 및 기록 보관소에 있는 자료의 약 1%가 부분적으로 또는 전체적으로 암호화되어 있다고 추정합니다. 추정치가 불확실하더라도 근본적인 문제는 구체적입니다. 문서는 대체 시스템, 한 문자에 대한 여러 기호, 고의적인 미끼 또는 더 이상 이해되지 않는 언어를 사용할 수 있습니다. 수동 작업은 느릴 수 있습니다. BBC는 신성 로마 황제 카를 5세의 3페이지짜리 편지를 해독하는 데 6개월이 걸렸다고 보도했습니다. 그 편지에는 120개의 서로 다른 암호 기호가 사용되었기 때문입니다.
AI 지원 디코딩은 연구에 사용할 수 있는 역사적 증거의 범위를 확장할 수 있습니다. BBC는 암호화된 문서에는 외교 서신, 의료 관행, 의식, 로맨스, 확립된 역사적 서술에서 생략된 일상적인 세부 사항이 포함될 수 있다고 말했습니다. 이는 스코틀랜드 여왕 메리가 쓴 편지를 가리키며, 그 편지의 내용을 해독하면 왕좌를 되찾으려는 음모와 그녀와 아들과의 관계가 밝혀진 것으로 알려졌습니다. 이 보고서는 또한 스웨덴 개신교 동맹국들 사이의 음모 의심에 대한 경고가 포함된 해독된 텍스트의 30년 전쟁 편지에 대해 설명합니다.
이러한 예는 해독이 단순히 기술적인 작업이 아닌 이유를 보여줍니다. 결과는 사람과 시대의 해석에 영향을 미칠 수 있습니다. 보고된 접근 방식은 기존 언어 가정이 실패하는 경우에도 중요할 수 있습니다. 대규모 언어 모델은 일반적으로 읽을 수 있는 엄청난 양의 텍스트 컬렉션을 대상으로 학습되는 반면, 과거 암호 데이터 세트는 훨씬 더 작고 조립하기가 어렵습니다. 따라서 Decrypt 연구원들은 19세기 후반과 20세기 초반의 암호화된 엽서 400장을 포함하여 암호화된 보관 자료를 편집하고 있습니다. BBC Future는 일부 해독된 단편이 독일의 러브레터인 것으로 보인다고 보도했습니다.
쌍을 이루는 암호 기호와 그 해독된 형태로부터 학습할 수 있는 시스템은 역사적 언어 지식을 단서의 소스로 사용하여 보관 작업의 우선순위를 정하는 데 도움이 될 수 있습니다. 그러나 소스는 도구가 광범위하게 사용 가능하고, 동료 검토를 거쳐 감독되지 않은 역사적 해석이 가능하다는 점을 입증하지 않습니다.
대화형 메커니즘: 실제로 작동하는 방식
이 개발의 이면에 있는 기본 기술을 대화식으로 살펴보세요.
A route planner searches possible journeys using explicit rules. What does this illustrate about AI?
다음에 무엇을 볼 것인가
중요한 테스트는 이러한 시스템이 답을 알 수 없는 문서에서 안정적으로 작동하는지, 그럴듯한 판독값과 조작된 판독값을 구별할 수 있는지, 연구자가 훈련을 위해 충분한 대표적인 역사적 데이터를 수집할 수 있는지 여부입니다. BBC가 보고한 결과는 여기의 주요 연구 자료에서 독립적으로 확인되지 않았습니다.
핵심 쟁점은 검증이다. 암호는 문법적으로는 설득력이 있지만 잘못된 판독을 생성할 수 있으며, 특히 기본 언어, 기호 체계 또는 역사적 맥락이 불확실한 경우 더욱 그렇습니다. BBC는 Descrypt 도구가 추론을 기록하고 솔루션이 그럴듯한 이유를 설명한다고 보고했으며, 연구자들은 이를 환각적 해석을 줄이는 방법으로 보고 있습니다. 해당 문서는 유용하지만 소스는 독립적인 정확도, 신뢰도 임계값, 알 수 없는 암호에 대한 벤치마크 결과 또는 시스템이 매력적이지만 잘못된 솔루션을 거부한 예를 제공하지 않습니다.
향후 평가에서는 연구자들이 이미 해독한 원고뿐만 아니라 내용이 알려지지 않은 문서도 테스트해야 합니다. 보고된 Copiale 및 Borg 실험은 기존 참고 자료의 이점을 활용하므로 유용한 시연이 가능하지만 시스템 자체가 실제로 해결되지 않은 텍스트를 해결할 수 있음을 입증하지는 않습니다. 또한 손상된 페이지, 희귀한 쓰기 시스템, 다중 암호화 계층, 고의적인 미끼 기호 또는 훈련 데이터에 없는 언어로 인해 성능이 어떻게 변하는지도 불분명합니다.
BBC는 팀이 문자, 알파벳, 상징적 레퍼토리 전반에 걸쳐 훈련을 확대함으로써 이러한 문제 중 일부를 해결하기를 희망한다고 말했습니다. 가용성과 거버넌스는 추가로 알려지지 않은 사항입니다. BBC Future는 연구원이나 대중이 결국 사용할 수 있는 연구 도구를 설명하지만 결합된 챗봇이 공개적으로 출시되거나 액세스 조건을 명시하지 않습니다. 더 폭넓게 사용하면 도서관과 독립적인 연구자에게 도움이 될 수 있으며, 잘못된 기계 판독은 전문가가 검토하기 전에 데이터베이스나 인기 역사에 입력될 수 있습니다.
이 평가는 BBC 보고서에만 의존합니다. 인용된 기술적 발견, 타이밍 주장 및 역사적 해석은 여기에서 독립적으로 확인되지 않았습니다. 다음으로 의미 있는 개발은 이전에 해독되지 않은 자료에 대한 재현 가능한 테스트, 오류 분석 및 전문가 검증을 보고하는 공공 시스템 또는 연구 논문이 될 것입니다.