알고리즘 비교를 위한 통계 테스트 - JMP Pro안녕하세요,
두 가지 다른 알고리즘의 효율성을 테스트하고 싶습니다.
동일한 모집단에서 두 개의 무작위 표본이 있습니다. 한 샘플에서는 알고리즘 X를 실행했습니다. 다른 샘플에서는 알고리즘 Y를 실행했습니다. 각각 30개의 레코드가 있습니다. 변수 유형은 연속형입니다.
최고의 알고리즘을 찾기 위해 어떤 통계 테스트를 할 수 있고 어떤 매개변수를 비교해야 합니까?
자세한 내용이 필요하면 알려주시기 바랍니다.
감사해요
건강 상태
고급 통계 모델링데이터 혼합 및 정리Re: 알고리즘 비교를 위한 통계 테스트 - JMP Pro고마워요 마크.
Re: 알고리즘 비교를 위한 통계 테스트 - JMP Pro통계적 추론은 모집단 전체를 관찰하는 것이 불가능할 때 도움이 됩니다. 귀하의 게시물에는 인구가 정의되어 있지 않습니다. 통계적 추론은 모집단 샘플링으로 인한 매개변수 추정의 불확실성을 평가합니다. 동일한 데이터 샘플을 사용하여 처리 시간 또는 처리 단계와 같은 효율성 측정을 기반으로 두 알고리즘을 비교합니다. 이 사례는 각 알고리즘의 연속적인 결과에 대해 paired t-test를 사용할 수 있는 paired 비교입니다.
데이터는 다음 표와 같습니다.
일부 데이터를 조롱했습니다. 동일한 모집단에서 100개의 데이터 샘플이 있습니다. 샘플은 리샘플링이나 부트스트래핑을 통해 생성될 수 있습니다. 결과는 알고리즘을 완료하는 데 걸리는 시간(초)입니다.
다음을 사용하여 이러한 결과를 분석할 수 있습니다. 분석 > 전문 모델링 > 일치 쌍 .
이 예는 약 10초의 두 알고리즘 간의 통계적으로 유의미한 차이를 보여줍니다.
당신을 위해 모형을 첨부했습니다.
Re: 알고리즘 비교를 위한 통계 테스트 - JMP Pro질문은 많지만 추가 정보가 없으면 답변이 거의 없습니다.
1. '효율성'을 평가하기 위해 어떤 특성을 사용하고 싶습니까?
2. '최고'를 평가하기 위해 어떤 특성을 사용하고 싶습니까? '최고'에 대한 귀하의 특성이 무엇이든, '최고'라고 선언하기 전에 결과는 얼마나 달라야 합니까?
3. 해당 모집단의 '무작위 표본'에서 평가할 수 있는 수많은 모집단 '매개변수'가 있습니다. 이러한 매개변수를 추정하려고 하시나요? 그렇다면 어떤 방법으로? 신뢰 구간, 공차 구간, 다른 것? 데이터나 의사결정에 시계열 구성요소가 있나요?
4. 이것은 학문적 활동인가요, 아니면 그 뒤에 실질적인 결정이 있는 활동인가요? 후자의 경우, 실제적인 문제, 샘플링 방법(완전 무작위... 또는 다른 것) 및 실제 결정에 대해 더 자세히 설명해주세요.
5. 진행 중인 프로세스와 관련된 측정 노이즈/변동에 대해 무엇을 알고 있습니까?
6. 수치 분석을 수행하기 전에 데이터를 그래픽으로 검토하시기 바랍니다. 샘플 데이터 세트에는 특정 수치 분석 접근 방식을 대체 접근 방식보다 더 문제하게 만드는 이상치, 의심스러운 관찰 또는 기타 특징이 있을 수 있습니다.
아마 모든 것을 다루지는 않았을 것입니다. 그러나 위의 내용이 시작입니까?
