IRONPROOF, COBOL 변환 동등성 검증

2분 COBOL파이썬SMT형식검증
최근 30일 조회수 — 좋아요 —

핵심 요약

COBOL을 파이썬으로 변환하고 SMT로 동등성을 검사했지만 실제 구현과의 일치와 입력 모델링에는 한계가 있다.

IRONPROOF, COBOL 변환 동등성 검증 — 기사 주제를 표현한 AI 생성 개념 삽화
AI 생성 개념 삽화 · 실제 사건을 촬영한 사진이 아닙니다.

IRONPROOF 연구진이 COBOL 코드를 파이썬으로 옮기면서 두 프로그램의 계산 결과가 같은지 SMT(Satisfiability Modulo Theories·이론 모듈로 만족 가능성) 방식으로 검사하는 변환 기법을 공개했다. 대규모 언어 모델(LLM)이 만든 번역만으로는 동등성을 보장할 수 없다는 문제를 겨냥했다. 논문은 2026년 10월 8일 arXiv에 제출됐다.1

IRONPROOF는 먼저 COBOL을 중간 표현으로 파싱한 뒤 파이썬 코드를 생성한다. 이어 COBOL 중간 표현과 파이썬을 공유 입력에 관한 Z3 논리식으로 각각 인코딩한다. 두 식의 차이를 만족하는 입력이 없으면 UNSAT과 함께 기계가 검사할 수 있는 동등성 인증서를 내놓고, 차이를 만드는 입력이 있으면 SAT과 반례를 반환한다. 단순히 그럴듯한 코드를 생성하는 데서 멈추지 않고, 변환 결과를 형식적으로 확인하는 절차까지 묶었다는 점이 핵심이다.

연구진은 GnuCOBOL 테스트, NIST CCVS85, 오픈소스 모음, 자체 작성·생성 프로그램을 합친 COBOL 파일 2,345개로 평가했다. 이 가운데 782개가 검증 경로에 들어갔으며, 606개(77.5%)는 동등성이 증명됐다. 101개는 일부만 검증됐고 75개는 파이프라인 내부에서 실패했으며, 반례가 나온 사례는 없었다. 실패한 75개도 분모에 포함한 결과다.1

하지만 자체 작성 프로그램과 외부 프로그램 사이의 격차가 컸다. 연구진이 작성한 프로그램의 증명률은 92.3%였지만, 독립적으로 작성된 프로그램은 291개 중 153개인 52.6%에 그쳤다. 2026년 4월의 LLM 단독 기준선은 독립 작성 프로그램 94개 가운데 54개에서 실패했다. 여기에는 IRONPROOF 인코더가 검증하지 못한 번역도 포함됐다.

검증 범위도 제한적이다. 독립 프로그램 증명 153건 중 37건은 인코더가 모델링하지 않는 입력을 읽는 프로그램의 단일 실행만 다뤘다. 전체 증명 606건 가운데 증명된 출력이 의존하는 입력을 정량화한 사례는 14건뿐이다. AWS CardDemo와 IBM GenApp 등 공개 업무용 애플리케이션 말뭉치에서는 프로그램 전체를 모델링한 사례가 없었다.

무엇보다 이 증명은 생성된 파이썬이 IRONPROOF의 중간 표현과 같은 계산을 한다는 뜻이지, 실제 COBOL 구현과 같다는 보장은 아니다. 앞선 GnuCOBOL 3.2.0 비교에서는 실행 가능한 독립 증명 49건 중 24건이 증명 범위 안의 변수에서 런타임 결과와 달랐다. 따라서 IRONPROOF의 성과는 COBOL 현대화의 완전한 해답보다, 번역기 내부 의미 모델을 기준으로 검증 가능한 결과와 한계를 함께 제시한 데 있다.

Footnotes

  1. arXiv, “IRONPROOF: COBOL-to-Python Transpilation with SMT-Based Equivalence Checking” ↩ ↩2

읽기 목록은 이 브라우저에 저장됩니다.

출처

  1. IRONPROOF: COBOL-to-Python Transpilation with SMT-Based Equivalence Checking — arXiv (cs.SE)

이 글은 위 출처를 근거로 자동 생성된 뒤 발행됐습니다. 원문을 함께 확인해 주세요. 교차 보도 없이 단독 출처로 작성됐습니다.