JMP에서 F 1 점수를 확인할 수 있나요?안녕! 다양한 모델을 비교할 때 JMP pro에서 F1 점수를 확인할 수 있는지 궁금합니다.
또한 JMP는 모델에 대한 정밀도 또는 재현율 값을 제공합니까?
정말 감사합니다!!
Re: JMP에서 F 1 점수를 확인할 수 있나요?F1은 모델 비교 아래의 결정 임계값 섹션에 보고됩니다.이를 사용하려면 예측 수식을 데이터 테이블에 저장한 다음 실행해야 합니다. 분석 > 예측 모델링 > 모델 비교 .그런 다음 선택 결정 임계값 작은 빨간색 삼각형 아래에 있습니다.
Re: JMP에서 F 1 점수를 확인할 수 있나요?안녕하세요 @올렉 ,
@제니 썼다:
...모델 비교에서 정밀도와 재현율을 찾지 못했습니다. JMP에 이러한 값이 있는지 궁금합니다.
JMP에는 기본적으로 대부분의 플랫폼(JMP 16.2 릴리스 기준)에서 이러한 값이 없습니다. @Duane_Hayes 2017년에 답변되었지만 현재 제공되는 출력을 통해 계산할 수 있습니다.
@제니 썼다:
제가 이해한 바에 따르면, 우리는 때때로 다음에 대해 더 관심을 가질 수 있습니다. 정도 또는 다양한 상황에서 오분류율보다 회상률이 높죠? .
예, 이것이 제가 이해한 것입니다.
이를 위해,
쉽게 찾을 수 있는 공식을 사용하여 Accuracy, F1-Score, Precision 및 Recall이 계산되는 JMP의 열 공식 계산 예제를 첨부합니다. 정밀도와 재현율에 대한 기준은 다음과 일치합니다. @제니 제공됩니다(Josh Starmer 박사의 "기계 학습에 대한 StatQuest 일러스트 가이드!!!"의 144페이지 참조, © 2022).정확도 및 F1 점수 공식은 여기(Wikipedia)에서 찾을 수 있습니다. https://neptune.ai/blog/f1-score-accuracy-roc-auc-pr-auc .이 예는 JMP의 무료 온라인 응용 통계 과정의 일부로 제공되는 VSSTeamData.jmp 샘플 데이터 파일에서 가져온 것입니다. STIPS . 계산은 여기에서 생성되어 저장된 데이터 테이블 스크립트로 저장된 파티션 모델과 관련된 혼동 행렬 출력에서 JMP가 보고한 내용과 일치합니다.
.jmp 데이터 테이블을 연 후 모델을 재생성하려면 스크립트 이름 옆에 있는 녹색 재생 버튼을 클릭하세요.
이 정보가 도움이 되기를 바랍니다!- 패트릭 줄리아노( @JMP 기술 지원)
Re: JMP에서 F 1 점수를 확인할 수 있나요?안녕하세요 Ian, 공식을 요청하셨습니다.Jenny가 하나를 제공했습니다.여전히 해결책은 없지만 토론은 500회 이상 조회되었습니다. 그래서 질문에는 무게가 있습니다.
Re: JMP에서 F 1 점수를 확인할 수 있나요?이 토론에서 의견을 버리는 대신 Jenny의 답변에 명확하고 간결한 답변을 제공할 수 있는 사람이 있습니까? 이것은 블로그가 아닙니다. 질문, 질문 답변. 미리 감사드립니다.
Re: JMP에서 F 1 점수를 확인할 수 있나요?F1 점수(및 기타 인기 있는 정확도 측정값)는 편견에 따른 성능 때문에 기계 학습 커뮤니티의 일부 구석에서 더 이상 사용되지 않습니다. 수신기 작동 곡선의 유용성과 기타 측정 방법을 제안하는 첨부 파일을 참조하십시오.
JMP에는 일부 플랫폼에 ROC(및 리프트 곡선)가 포함되어 있습니다.
Re: JMP에서 F 1 점수를 확인할 수 있나요?이러한 유형의 질문은 다음으로 연결될 수 있습니다. JMP 기술 지원 그래서 우리는 참여할 수 있습니다.
질문의 경우 JMP는 "ROC 곡선" 메뉴 항목을 선택하면 ROC 테이블에 참양성, 참음성, 거짓양성, 거짓음성과 함께 민감도 및 1-특이도 측정값을 제공합니다.F1은 구체적으로 나열되어 있지 않지만 설명에서 이러한 측정값을 사용하여 계산할 수 있습니다.
Re: JMP에서 F 1 점수를 확인할 수 있나요?한 현명한 사람이 '유일하게 희소한 상품은 시간'이라고 말한 적이 있습니다. 커뮤니티가 (사용자와 JMP 직원 모두의) 크라우드소싱 지식에 의존하고 소규모 그룹에 의존하면 효과적으로 운영될 수 없다는 점을 이해했다고 생각합니다.
커뮤니티 외에도 공식 지원 채널 , SAS 제품 라이선스를 받은 사람은 누구나 사용할 수 있습니다. 한 가지 주요 차이점은 응답 시간에 대한 서비스 수준 계약과 만족스러운 해결을 달성하기 위한 에스컬레이션을 위한 내부 프로세스가 있다는 것입니다. 이는 의심되는 버그를 표면화할 뿐만 아니라 새로운 기능을 요청하는 데에도 확실히 최고의 메커니즘입니다. 게다가 '어떻게 하면 되지?' 질문 또는 '소프트웨어 X에는 익숙하지만 JMP에서는 같은 작업을 수행할 수 없습니다.'라는 질문에도 답변이 제공되지만 보다 엄격하고 예측 가능한 프레임워크 내에서 이루어집니다.
따라서 버그와 기능이 있거나 커뮤니티가 응답하지 않는 것으로 보이면 이 채널도 고려할 것입니다. 그리고 아마도 당연한 말을 하자면, '둘 중 하나'일 필요는 없습니다. 많은 커뮤니티 스레드가 지원 트랙으로 이어졌습니다.
Re: JMP에서 F 1 점수를 확인할 수 있나요?안녕하세요 이안님,
나는 당신의 대답에 조금 놀랐습니다. 웹에서 "F1 점수"를 검색하고 스스로 교육한 후 사용자에게 의미 있는 답변을 제공하는 것은(특히 JMP 전문가의 경우) 그다지 많은 노력이 필요하지 않습니다. 게다가 문의자는 추가 정보를 제공했지만 의미 있는 지원을 받지 못했습니다. 그것도 놀랍습니다.
귀하 또는 적절한 전문 지식을 갖춘 다른 분이 이 질문에 대해 JMP 커뮤니티에 도움을 주실 수 있습니까? F1 점수 로지스틱 회귀(또는 명목형 응답이 있는 모든 모델) 및 불균형 응답 수준(참양성보다 훨씬 더 많은 참음성)의 주요 측정값입니다. 대단히 감사합니다. 앞서 언급했듯이 Wikipedia에서는 이러한 개념을 자세히 설명합니다.
제공하신 모델 비교 링크는 정교하지만 F1 점수 계산이 누락된 것 같습니다. 이 작업은 수동으로 수행할 수 있다고 확신하지만 JMP에 없는 경우 기능으로 강력히 고려해야 합니다. 미리 감사드립니다.
Re: JMP에서 F 1 점수를 확인할 수 있나요?안녕! 답장을 보내 주셔서 감사합니다. F1 점수는 테스트 정확도를 측정하는 척도입니다. F1 점수에 대한 wilipedia 링크는 다음과 같습니다. https://en.wikipedia.org/wiki/F1_score
두 번째 질문에 대해서는 예, 예측값에 대해 생각하고 있습니다.
정도 =참 긍정/(참 긍정 +거짓 긍정)
그리고 회상= 참 긍정 /( 참 긍정 +거짓 부정)
모델 비교에서 정밀도와 재현율을 찾지 못했습니다. JMP에 이러한 값이 있는지 궁금합니다. 제가 이해한 바에 따르면, 우리는 때때로 다양한 상황에서 오분류율보다 정밀도나 재현율에 더 관심을 가질 수 있습니다. 그렇죠?
Re: JMP에서 F 1 점수를 확인할 수 있나요?나는 당신이 본 것 같아요 모델 비교 JMP Pro의 플랫폼. 아쉽게도 'F1 점수'에 대해 잘 알지 못하는데, 자세한 내용이나 링크를 알려주실 수 있나요? 두 번째 질문에 관해서는 예측된 값과 이에 대한 불확실성에 대해 생각하고 있습니까?
