Anthropic cho biết đã huấn luyện Claude nhận diện nguy cơ lạm dụng trong các cuộc hội thoại bằng kỹ thuật “tự đánh giá”. Sau mỗi câu trả lời, Claude ngay lập tức đưa ra đánh giá sơ bộ về mức độ an toàn của cuộc hội thoại.
Theo Anthropic, kể từ khi triển khai kỹ thuật này vào tháng 6, hệ thống đã phát hiện các trường hợp lạm dụng mà những lớp bảo vệ an toàn khác không bao quát được.
Anthropic cho biết phương pháp này hiệu quả vì Claude đã đọc nội dung cuộc hội thoại. Khác với các bộ phân loại nhắm đến từng loại tác hại cụ thể, kỹ thuật tự đánh giá dựa vào nhận định của Claude; theo công ty, độ chính xác của phương pháp sẽ cải thiện khi năng lực của mô hình tiến bộ.