ANN 백 프로덕션 구현 테스트

Question

백 프로게션을 사용하는 인공 신경망을 조립할 때 알고리즘은 복잡하며 테스트를위한 안정된 참조 점이 없습니다.

구현 된 알고리즘의 정확성을 디버깅하는 가장 좋은 방법은 무엇입니까?

나는 train/validation/test 단계에 대해서 말하고있는 것이 아니라, 일종의 계기를 원하거나 단계별 교육 결과/무게 값을 네트워크의 내부 작동에 대해 확인하고 싶습니다. 주어진 구성 및 교육 데이터.

Answer 1

나는 힘의 도움을 생각하는 것 :

1. 자동 분화 프레임 워크 (같은 Theano 또는 Tensor Flow)와 모듈을 사용하고 당신과 같은 구성으로 네트워크를 정의 - 자신의 내부의 분화 프레임 워크를 사용하여 결과를 확인.
2. numerical gradient 계산을 사용하십시오.
3. 당신 자신의 적절한 그라데이션을 계산하고 결과를 비교하십시오.