Why
The PoC compares direct and chain-of-thought answers on a reasoning benchmark and the token/accuracy tradeoff, cautioning that the trace explains less than it appears to.
How it works
Not yet built.
Workspace Index › Dev Notes › Chain-of-thought — reasoning out loud buys accuracy and tokens
#193PoC
Chain-of-thought — reasoning out loud buys accuracy and tokens
Prompting a model to reason step by step raises accuracy on multi-step problems, at the cost of latency and tokens — and the written reasoning is a rationalization, not a faithful trace of the computation.
생각의 사슬 — 소리 내어 추론하면 정확도와 토큰을 함께 산다
모델에게 단계별로 추론하게 하면 다단계 문제의 정확도가 오르지만, 지연시간과 토큰을 대가로 하며 — 적힌 추론은 계산의 충실한 흔적이 아니라 사후 합리화입니다.
왜
이 PoC는 추론 벤치마크에서 직접 답과 생각의 사슬 답, 그리고 토큰/정확도 트레이드오프를 비교하며, 그 흔적이 보이는 것만큼 설명하지 않는다는 점을 경고합니다.
동작 방식
아직 만들지 않음.