HiFlow: Hierarchical Feedback-Driven Optimization for Constrained Long-Form Text Generation

이 논문은 복잡한 제약 조건 하의 긴 텍스트 생성 문제를 해결하기 위해, 전역 구조 계획과 국소 텍스트 생성 간의 폐루프 피드백을 통해 두 수준을 공동으로 최적화하는 계층적 피드백 기반 프레임워크인 HiFlow 를 제안합니다.

Yifan Zhu, Guanting Chen, Bing Wei, Haoran Luo

게시일 2026-03-06
📖 3 분 읽기☕ 가벼운 읽기

Each language version is independently generated for its own context, not a direct translation.

🏗️ 비유: "고층 빌딩 짓기 vs. HiFlow"

인공지능이 긴 글을 쓸 때의 문제는 마치 아무 생각 없이 벽돌을 쌓아 고층 빌딩을 짓는 것과 비슷합니다.

  • 기존 AI 의 문제점:

    • 처음에는 잘 쌓아도, 100 층이 넘어가면 구조가 흔들리거나 (일관성 부족),
    • "10 층에는 반드시 수영장"이라는 규칙을 까먹거나 (규칙 위반),
    • 전체적인 디자인과 맞지 않는 방을 만들어 버립니다.
    • 기존 방법들은 "일단 먼저 큰 그림을 그리고, 그걸 바탕으로 글을 써라"라고만 했을 뿐, 쓰는 도중 규칙이 깨지면 바로잡아 주는 시스템이 부족했습니다.
  • HiFlow 의 해결책:

    • HiFlow 는 **"현명한 건축 감독관"**이 항상 옆에 붙어서 일하는 시스템입니다.
    • 단순히 "쓰라"가 아니라, **"계획 → 검토 → 수정 → 다시 쓰기"**를 반복하며 규칙을 철저히 지키게 합니다.

🚀 HiFlow 가 어떻게 작동할까요? (3 단계 과정)

HiFlow 는 글을 쓸 때 세 가지 핵심 단계를 거칩니다.

1. 단계: "현명한 설계도 그리기" (계획 수립)

  • 비유: 집을 짓기 전에 "1 층은 거실, 2 층은 침실, 3 층은 수영장"이라는 상세한 설계도를 먼저 그립니다.
  • HiFlow 의 특징: 단순히 설계도를 한 번만 그리는 게 아니라, "규칙 위반이 없는지" 확인합니다. 만약 "수영장이 2 층에 있어야 한다"는 규칙을 어기는 설계도가 나오면, 그 부분만 잘라내고 다시 그립니다. (전체 구조는 유지하면서 부분만 고치는 '국소적 수정' 기술)

2. 단계: "질 좋은 설계도만 골라내기" (필터링)

  • 비유: 설계사가 여러 가지 설계안을 냈을 때, 감독관이 "이건 너무 비싸다", "이건 규칙에 안 맞다"라고 바로 걸러냅니다.
  • HiFlow 의 특징: AI 가 만든 여러 개의 계획안 중, 규칙을 가장 잘 지키고 질이 좋은 계획만 최종적으로 선택합니다. 나쁜 계획은 아예 시작도 안 시킵니다.

3. 단계: "쓰면서 바로바로 피드백 받기" (최적화)

  • 비유: 벽돌을 쌓을 때마다 감독관이 "아, 이 벽돌 색깔이 다르네? 다시 쌓아!"라고 말합니다.
  • HiFlow 의 특징: 글을 쓰면서 규칙을 잘 지켰는지 점수를 매깁니다. 점수가 높은 글은 "잘했어, 이 방식대로 계속 써!"라고 장려하고, 점수가 낮은 글은 "이건 다시 써야 해"라고 가르칩니다. 이렇게 쓰는 과정 자체가 학습이 되어 점점 더 똑똑해집니다.

🌟 왜 HiFlow 가 특별한가요?

기존 방법들은 "계획"과 "글쓰기"를 따로따로 했다면, HiFlow 는 이 둘을 한 팀으로 묶어서 함께 움직입니다.

  • 기존 방식: 계획서를 쓰고 → 글을 씁니다. (계획이 틀려도 글쓰기 중에는 고치기 힘듦)
  • HiFlow 방식: 계획을 세우면서 규칙을 확인하고 → 글을 쓰면서 다시 확인하고 → 잘못된 부분은 바로 고칩니다.

이 덕분에 HiFlow 는 긴 글을 쓸 때도:

  1. 규칙을 철저히 지킵니다: (예: "매주 토요일에 운동해야 한다"는 규칙을 52 주 내내 잊지 않음)
  2. 글의 흐름이 자연스럽습니다: (앞뒤가 맞지 않는 내용이 없음)
  3. 어떤 모델이든 잘 작동합니다: (작은 모델이든 큰 모델이든 HiFlow 를 입히면 성능이 좋아짐)

📝 한 줄 요약

HiFlow 는 인공지능이 긴 글을 쓸 때, "현명한 감독관"이 옆에서 설계도부터 마지막 문장까지 규칙을 체크하고 바로잡아 주어, 실수 없이 규칙을 지키는 완벽한 글을 만들어주는 기술입니다.

이 기술은 앞으로 AI 가 보고서, 소설, 계획서 등 길고 복잡한 글을 쓸 때, 우리가 원하는 대로 정확하고 질 높은 결과를 얻을 수 있게 해줄 것입니다.