MOVEINDUSTRIES

KỸ THUẬT PROMPTING MỚI LANGUAGE-OF-THOUGHTS: ĐÀO THÔNG TIN ẨN
LLMs hót hay nhưng tư duy kém: mỗi lần được giao reasoning phức tạp, kiểu như suy luận đa bước hay xử lý thông tin ẩn, thì tái mặt ấp úng. Paper này chỉ ra cái gọi là thinking-language modeling gap.
Nói đơn giản, LLMs học ngôn ngữ (từ cách con người viết, nói) chứ không học cách con người nghĩ. Do đó chúng nó chỉ bắt chước cách diễn đạt ngôn ngữ chứ chưa thực sự nắm được logic cốt lõi.
Ví dụ hỏi LLM “Nếu A lớn hơn B, B lớn hơn C, thì A với C thế nào?”. Con người sẽ nghĩ ngay: “Ok, A > B, B > C, vậy A > C”. Nhưng nếu câu hỏi được diễn đạt lằng nhằng, kiểu “Trong một cuộc thi, Anna đứng trước Bob, còn Bob đứng trước Charlie, ai đứng đầu?”,

thì LLM đôi khi sẽ bị rối vì cách diễn đạt. Nó không nghĩ theo logic mà chỉ cố match pattern ngôn ngữ từ dữ liệu training. Đây chính là cái gap mà paper đào sâu.