TechFlow Logo
Đăng nhập/ Đăng ký
ETH Gas
Gwei
Sợ hãi
gas
7x24hTin nhanh

Giám đốc khoa học OpenAI phản hồi về tranh cãi Astra: Giám sát Chain of Thought vẫn là trọng tâm nghiên cứu

2026.09.02 - 06:20
Chia sẻ đến

Theo TechFlow, ngày 02 tháng 9, Giám đốc Khoa học của OpenAI Jakub Pachocki cho biết hy vọng tránh cuộc đua khiến các mô hình trở nên “không thể giám sát” do các báo cáo sai lệch gây ra. Ông cho hay độ sâu sơ đồ tính toán trên các mô hình tiên tiến hiện tại, bao gồm Astra, không chênh lệch quá hai lần so với GPT-4. Kể từ các mô hình suy luận đầu tiên, OpenAI luôn duy trì và áp dụng giám sát suy luận chuỗi, cho rằng kỹ thuật này hỗ trợ quan sát cách khả năng căn chỉnh của mô hình được tổng quát hóa từ phân phối huấn luyện.

Pachocki cũng nêu rõ giám sát suy luận chuỗi khá mong manh và xu hướng hiện tại không mấy lạc quan, nhưng vẫn có thể được củng cố thông qua nghiên cứu, đồng thời đã trở thành trọng tâm trong kế hoạch nghiên cứu hiện tại của OpenAI.

Trước đó, The Information đưa tin Astra sử dụng độ sâu tuần hoàn (recurrent depth), cho phép cùng một nhóm lớp Transformer thực hiện tính toán lặp lại. Nhờ đó, một phần quá trình suy luận diễn ra trực tiếp trong mô hình mà không cần mã hóa thành chuỗi suy nghĩ, dấy lên mối lo ngại về việc các mô hình sẽ ngày càng khó giám sát hơn.

Thêm vào mục ưa thích
Chia sẻ lên mạng xã hội

Tin nhanh 7x24h