Lợi nhuận cao nhất trong bảng thông số chỉ cho biết lựa chọn nào thắng trong lần so sánh đó. Nó không cho biết lựa chọn nào sẽ hiệu quả tiếp theo. Khi thử đủ nhiều phương án, phương án dẫn đầu có thể khớp với những nét ngẫu nhiên của dữ liệu, bên cạnh bất kỳ quy luật hữu ích nào. Đó là vấn đề thực tế đằng sau hiện tượng khớp quá mức khi chọn thông số chỉ báo.
Bài viết dùng một bảng thông số hư cấu để xem xét quá trình lựa chọn. Đây không phải khuyến nghị thông số RSI, kết quả giao dịch crypto đo được hay tín hiệu giao dịch. Để hiểu chỉ báo, hãy bắt đầu với hướng dẫn RSI.
Xác định quy tắc trước khi so sánh thông số
Thông số là một đầu vào được chọn, như độ dài chu kỳ tính chỉ báo hoặc ngưỡng dùng trong quy tắc giao dịch. Chu kỳ 14 nghĩa là số kỳ trên biểu đồ, không nhất thiết là số ngày. Ngưỡng RSI là giá trị chỉ báo, không phải phần trăm xác suất đảo chiều.
Một thông số riêng lẻ chưa phải chiến lược. Điều kiện kích hoạt chính xác, thời điểm thông tin có sẵn, cách thực hiện lệnh vào, quy tắc thoát, quy mô vị thế và chi phí đều ảnh hưởng kết quả. Ghi lại công cụ giao dịch, sàn, khung thời gian, giai đoạn kiểm thử và các quy tắc ấy trước khi so sánh. Nếu không, con số đẹp hơn có thể đến từ việc đổi nhiều giả định cùng lúc.
Hướng dẫn kiểm thử lịch sử và kết quả thực tế giải thích sự khác biệt này. Ở đây, câu hỏi cụ thể hơn là bạn đã chọn cấu hình xuất hiện trong báo cáo bằng cách nào.
Đọc một bảng thông số hư cấu
Hãy hình dung bảng so sánh ba độ dài chu kỳ RSI với ba ngưỡng của cùng một quy tắc, trong khi các yếu tố khác giữ nguyên. Mọi tỷ lệ dưới đây đều được đặt ra để minh họa; không có chiến lược nào được chạy, cũng không có dữ liệu thị trường hay nhật ký giao dịch tạo ra bảng này. Các ô biểu thị lợi nhuận ròng giả định của tài khoản sau phí và trượt giá giả định. Chúng không phải chỉ số RSI hay dự báo. Giả định chi phí được áp dụng nhất quán giữa các phương án; bảng này không phải đặc tả đầy đủ của một kiểm thử lịch sử.
| Chu kỳ | 25 | 30 | 35 |
|---|---|---|---|
| 10 | +1% | +2% | +1% |
| 14 | +2% | +9% | +2% |
| 18 | 0% | +3% | +1% |
Cặp 14/30 dẫn đầu trong bảng hư cấu này. Giữ chu kỳ ở 14 và đổi ngưỡng sang 25 hoặc 35 làm kết quả từ +9% thành +2%. Giữ ngưỡng ở 30 và đổi chu kỳ sang 10 hoặc 18 cho kết quả +2% hoặc +3%. Đây là so sánh độ nhạy: đổi một đầu vào và giữ nguyên đầu vào còn lại.
Đỉnh nổi bật đơn lẻ là lý do để tìm hiểu, chưa phải bằng chứng khớp quá mức. Số giao dịch khác nhau, một giao dịch bất thường hoặc tác động thực sự của ngưỡng đều có thể tạo ra thay đổi mạnh. Bảng không phân biệt được các nguyên nhân này vì không có dữ liệu từng giao dịch. Tương tự, một vùng rộng với kết quả gần nhau cũng chưa chứng minh lợi thế bền vững.
Đếm quá trình tìm kiếm đã tạo ra phương án dẫn đầu
Ba chu kỳ nhân ba ngưỡng là 3 × 3 = 9 cấu hình. Nếu lặp lại toàn bộ bảng trên 10 thị trường và 4 khung thời gian, bạn có 9 × 10 × 4 = 360 phép so sánh, trước cả khi đổi quy tắc thoát hoặc giai đoạn kiểm thử. Các phép so sánh không nhất thiết độc lập, nên số lượng này không phải xác suất khớp quá mức.
Báo cáo chỉ đưa ô tốt nhất sẽ che khuất quá trình tìm kiếm. Lưu mọi cấu hình đã thử, biến thể bị loại và giả định đã đổi, kể cả những lần thử không chính thức trên biểu đồ. Chọn phương án thắng sau khi xem nhiều kết quả khác với việc chỉ định một thông số trước khi nhìn dữ liệu.
Nghiên cứu về khớp quá mức trong kiểm thử lịch sử của Bailey, Borwein, López de Prado và Zhu xem xét cách tìm kiếm cấu hình trên dữ liệu hữu hạn có thể chọn trúng nhiễu. Nghiên cứu cũng giải thích vì sao chỉ riêng tập dữ liệu giữ lại chưa tính đến toàn bộ quá trình tìm kiếm. Bài này không tính thước đo xác suất của các tác giả.
Giữ dữ liệu kiểm định ngoài vòng tinh chỉnh
Dữ liệu phát triển dùng để thiết kế và so sánh các phương án. Dữ liệu kiểm định cần kiểm tra lựa chọn đã chốt mà không tinh chỉnh thêm. Quyết định cách chia theo thời gian, quy tắc lựa chọn, thước đo đánh giá và tiêu chí loại bỏ trước khi xem kết quả kiểm định. Chỉ dùng thông tin đã có tại từng thời điểm quyết định; giao dịch hoặc nhãn kết quả kéo dài qua ranh giới chia tập có thể làm việc phân tách phức tạp hơn.
Tiếp tục ví dụ hư cấu: giả sử cặp 14/30 được chọn từ dữ liệu phát triển theo quy tắc định trước, rồi đạt −2% trong giai đoạn kiểm định chưa từng dùng. Kết quả đó phải được lưu lại. Đổi sang thông số khác sau khi thấy nó, rồi gọi chính giai đoạn ấy là kiểm định độc lập lần nữa, tức là đang dùng dữ liệu kiểm định để phát triển.
Kết quả đáng thất vọng chưa chứng minh chiến lược khớp quá mức; điều kiện thị trường thay đổi và biến động do lấy mẫu cũng có thể ảnh hưởng. Tìm hiểu, ghi nhận mọi sửa đổi và dành dữ liệu thực sự chưa xem cho lần đánh giá sau. Đừng tìm kiếm cho đến khi một bản sửa vượt qua chính giai đoạn cũ.
Tài liệu chiến lược của TradingView mô tả việc kiểm tra thông số đã tối ưu trên dữ liệu ngoài mẫu tối ưu, không tinh chỉnh thêm. Đây là kỷ luật nghiên cứu, không phải bảo đảm lợi nhuận tương lai hay phép hiệu chỉnh thống kê đầy đủ cho việc thử lặp lại.
Xem các giao dịch phía sau con số nổi bật
Với nghiên cứu thực tế, xem toàn bộ nhật ký giao dịch, cỡ mẫu, mức sụt giảm vốn, vòng quay giao dịch và độ nhạy với chi phí bên cạnh mục tiêu đã chọn. Một vài lần khớp lệnh may mắn có thể chi phối tổng kết quả. Thông số lân cận có thể giao dịch thường xuyên hơn nhiều và chịu tổng chi phí khác, dù áp dụng cùng tỷ lệ phí.
Nêu rõ giả định thực thi. Thứ tự chạm dừng lỗ và mục tiêu trong một nến có thể đổi kết quả mô phỏng dù thông số không đổi. Thiên lệch lựa chọn và sự không rõ ràng trong thực thi là hai vấn đề khác nhau; sửa một vấn đề không tự sửa vấn đề còn lại.
Lưu quyết định để sau này có thể kiểm tra
Ghi chú rà soát cần nêu giả thuyết, ranh giới dữ liệu, cấu hình đã thử, quy tắc lựa chọn, phiên bản đã chốt, kết quả kiểm định và lý do loại bỏ hoặc nghiên cứu tiếp. Giữ cả các biến thể thua. Nếu bằng chứng chưa đủ, “không giao dịch” là quyết định hợp lệ.
Mục tiêu không phải tìm thông số làm quá khứ trông hoàn hảo. Mục tiêu là hiểu bằng chứng nào còn đứng vững sau những lựa chọn trong nghiên cứu. Đây là thông tin giáo dục, không phải tư vấn tài chính; kiểm thử lịch sử và kiểm định cẩn thận không bảo đảm lợi nhuận hay ngăn được thua lỗ.
