Đường cong đặc trưng hoạt động của bộ thu (Receiver Operating Characteristic Curve)

Đường cong đặc trưng hoạt động của bộ thu (ROC) biểu thị độ nhạy của một xét nghiệm so với tỷ lệ dương tính giả (một trừ đi độ đặc hiệu) trên mọi ngưỡng quyết định có thể. Nó tóm tắt cách một xét nghiệm được xây dựng dựa trên phép đo liên tục hoặc thứ tự phân biệt giữa những người có và không có tình trạng bệnh, độc lập với bất kỳ điểm cắt cụ thể nào, và diện tích được bao quanh bởi đường cong này cô đọng khả năng phân biệt đó thành một con số duy nhất.

Definition

Đường cong đặc trưng hoạt động của bộ thu là đồ thị của độ nhạy (tỷ lệ dương tính thật) so với tỷ lệ dương tính giả (một trừ đi độ đặc hiệu) được vẽ ra khi ngưỡng quyết định của một xét nghiệm được thay đổi trên toàn bộ phạm vi của nó.

Scope

Mục này định nghĩa đường cong ROC, giải thích cách nó được tạo ra bằng cách quét ngưỡng chẩn đoán, mô tả diện tích dưới đường cong (AUC) như một bản tóm tắt về khả năng phân biệt độc lập với ngưỡng, và ghi nhận nguồn gốc của nó trong lý thuyết phát hiện tín hiệu. Đây là một chủ đề về phương pháp luận và không đưa ra lời khuyên về việc sử dụng bất kỳ xét nghiệm hoặc ngưỡng cụ thể nào.

Key concepts

• Sự đánh đổi giữa độ nhạy và tỷ lệ dương tính giả
• Ngưỡng quyết định (điểm cắt)
• Diện tích dưới đường cong (AUC)
• Khả năng phân biệt độc lập với ngưỡng
• Lý thuyết phát hiện tín hiệu
• So sánh các xét nghiệm cạnh tranh

Mechanisms

Đối với một xét nghiệm tạo ra điểm số liên tục hoặc thứ tự, mỗi ngưỡng ứng viên sẽ tạo ra một cặp độ nhạy và tỷ lệ dương tính giả; việc nối các cặp này trên tất cả các ngưỡng sẽ vẽ nên đường cong ROC trong hình vuông đơn vị. Một đường cong ôm sát góc trên bên trái cho thấy khả năng phân biệt mạnh mẽ, trong khi đường chéo tương ứng với một xét nghiệm không tốt hơn cơ hội ngẫu nhiên. Diện tích dưới đường cong tóm tắt hiệu suất trên tất cả các ngưỡng và có thể được hiểu là xác suất mà xét nghiệm gán điểm cao hơn cho một đối tượng mắc bệnh được chọn ngẫu nhiên so với một đối tượng không mắc bệnh được chọn ngẫu nhiên. Bởi vì nó được tính toán từ độ nhạy và độ đặc hiệu chứ không phải từ các số đếm theo hàng, đường cong và diện tích của nó mô tả khả năng phân biệt độc lập với tỷ lệ mắc bệnh, mặc dù việc chọn một ngưỡng hoạt động để sử dụng vẫn đòi hỏi phải cân nhắc chi phí của dương tính giả so với âm tính giả. Khung lý thuyết này bắt nguồn từ lý thuyết phát hiện tín hiệu, nơi sự đánh đổi tương tự giữa các lần phát hiện đúng và báo động giả được phân tích.

Clinical relevance

Phân tích ROC là một công cụ tiêu chuẩn để so sánh các xét nghiệm chẩn đoán và để kiểm tra mức độ phân biệt giữa các đối tượng mắc bệnh và không mắc bệnh của một dấu hiệu liên tục trước khi bất kỳ điểm cắt nào được cố định. Khái niệm này hỗ trợ việc đánh giá nghiêm túc các bằng chứng chẩn đoán; nó đặc trưng cho khả năng phân biệt của xét nghiệm và không phải là cơ sở cho các quyết định chẩn đoán hoặc điều trị cá nhân.

Epidemiology

Đường cong ROC và diện tích dưới chúng được sử dụng rộng rãi để báo cáo và so sánh hiệu suất phân biệt của các dấu hiệu chẩn đoán và mô hình dự đoán. Bởi vì diện tích tóm tắt khả năng phân biệt nhưng không phải hiệu chuẩn hoặc hậu quả thực tế của một ngưỡng đã chọn, các tiêu chuẩn báo cáo như STARD khuyến khích mô tả rõ ràng cách xác định ngưỡng và độ chính xác.

Evidence & guidelines

Tuyên bố STARD bao gồm việc báo cáo độ chính xác chẩn đoán, bao gồm cách xác định và báo cáo các ngưỡng xét nghiệm và các thước đo độ chính xác như diện tích dưới đường cong ROC.

History

Phân tích ROC có nguồn gốc từ lý thuyết phát hiện tín hiệu được phát triển vào giữa thế kỷ 20 để đặc trưng hóa sự đánh đổi giữa các lần phát hiện đúng và báo động giả, và nó đã được điều chỉnh cho việc ra quyết định y tế và chẩn đoán hình ảnh vào những năm 1970. Bài trình bày năm 1978 của Metz đã đưa ra các nguyên tắc cơ bản của nó cho y học, bài báo năm 1982 của Hanley và McNeil đã làm rõ ý nghĩa và cách xử lý thống kê của diện tích dưới đường cong, và tổng hợp năm 1988 của Swets đã định hình các phương pháp ROC như một cách tiếp cận chung để đo lường độ chính xác chẩn đoán.

Debates

Liệu diện tích dưới đường cong có phải là một bản tóm tắt đầy đủ về hiệu suất xét nghiệm không?

Diện tích cô đọng khả năng phân biệt trên tất cả các ngưỡng nhưng bỏ qua hiệu chuẩn và các chi phí khác nhau của dương tính giả và âm tính giả, vì vậy nó có thể là một tiêu chí duy nhất gây hiểu lầm khi một điểm hoạt động cụ thể là quan trọng.

Key figures

• Charles Metz
• James Hanley
• Barbara McNeil
• John Swets

Seminal works

• metz-1978
• hanley-mcneil-1982
• swets-1988

Frequently asked questions

Diện tích dưới đường cong ROC có ý nghĩa gì?

Đó là xác suất mà xét nghiệm cho điểm cao hơn đối với một đối tượng mắc bệnh được chọn ngẫu nhiên so với một đối tượng không mắc bệnh được chọn ngẫu nhiên; 0.5 cho thấy không có khả năng phân biệt và 1.0 cho thấy sự phân tách hoàn hảo.

Tại sao lại sử dụng đường cong ROC thay vì một độ nhạy và độ đặc hiệu duy nhất?

Một cặp duy nhất cố định một ngưỡng, trong khi đường cong ROC cho thấy toàn bộ sự đánh đổi trên tất cả các ngưỡng, cho phép so sánh các xét nghiệm và lựa chọn một điểm hoạt động một cách có chủ ý.