'앞에 둬' 너머
Position bias 받아들이면 의도적으로 싸울 수 있어. 표준 전술: edge-place authority(앞과 끝), 정말 중요하면 critical rule을 양 끝에 duplicate, distinctive delimiter로 section 분리해 모형이 다시 위치 찾게, 관련 사실 멀리 흩지 마.
Duplication이 맞을 때도 있다
엔지니어는 duplication 싫어해. 하지만 한 문장이 전체 task를 결정할 때('do not push without confirmation'), long context 끝에 한 번 더 반복하면 position-bias loss 대부분 회복돼. token 비용은 trivial, alignment 이득은 real.
Section marker
distinctive marker(XML tag, all-caps header, --- separator) 써서 모형이 long input 가운데에서도 rules section 다시 찾을 수 있게. 모형이 attention 동안 이 marker를 structural anchor로 쓴다.
가운데 둬야 한다면, 모형이 다시 navigate할 수 있을 만큼 boundary 큰소리로 표시.