I silently break training codes or configs so I made pybench [P]

pybench는 통계적 테스트를 위한 pytest와 유사한 도구입니다.

pybench는 통계적 수준에서 메트릭의 회귀를 보장하는 도구로, pytest와 유사한 CLI를 통해 사용할 수 있습니다. 이 도구는 시드 관리와 이전 벤치마크 결과 등을 처리하며, 베이스라인을 설정하고 이를 기준으로 통과/실패를 평가합니다. 코드를 간편하게 테스트하고 관리할 수 있는 기능을 제공합니다.

pybench is a tool similar to pytest for statistical testing.

pybench is a tool that ensures no regression of metrics at a statistical level, similar to pytest. It manages tedious tasks like seed handling and past benchmark results. It provides a simple CLI for setting baselines and evaluating pass/fail status based on benchmarks, making it easier to manage code testing.