내 암호화폐 신호가 진짜인지 아닌지 알아내려는 중 🤔

최근 체계적인 암호화폐 매매 전략 개발에 몰두하고 있는데, 그 과정에서 아무 의미 없는 백테스트 결과가 쉽게 나오는 점이 고민입니다. 앞서가는 테스트 방식이나 기본 거래 비용 가정을 적용해도, 여전히 안정적으로 보이는 결과조차 특정 시장 상황이나 데이터 특성에만 맞춰진 것일 가능성이 높습니다.

요즘은 신호 검증 단계에 더 중점을 두고 있는데, 여러 자산에 같은 신호를 튜닝 없이 적용해보고, 신호가 작은 변수 변화에 얼마나 민감한지 살펴보는 식으로 접근하고 있습니다. 또한, 알파노바 같은 플랫폼에서 본 적 없는 데이터에 신호를 적용해보고, 누메라이(Numerai) 같은 제한된 환경과 비교해 일반화 가능성을 검증하려고 시도합니다.

그런데 결국 신호를 만드는 것보다, 그 신호가 진짜 유효한지 판별하는 게 가장 어려운 문제인 것 같습니다. 조언이 필요합니다, 감사합니다.