JMPでF1スコアを確認できますか?こんにちは！ さまざまなモデルを比較しているときに、JMP pro で F1 スコアを確認できるかどうか疑問に思っています。
また、JMP はモデルの精度や再現率の値を提供しますか?
どうもありがとう！！
Re: JMP で F 1 スコアを確認できますかF1 は、「モデル比較」の「決定しきい値」セクションで報告されます。これを使用するには、予測式をデータ テーブルに保存してから実行する必要があります。分析 > 予測モデリング > モデルの比較。次に選択します判定閾値小さな赤い三角形の下にあります。
Re: JMP で F 1 スコアを確認できますかこんにちは@オレグ、
@ジェニー書きました：
...モデル比較で精度と再現率が見つかりませんでした。 JMP にこれらの値があるかどうか疑問に思っています。
JMP には、ほとんどのプラットフォーム (JMP 16.2 のリリース時点) ではこれらの値がネイティブに存在しません。 @デュアン・ヘイズ回答は 2017 年に行われましたが、現在提供されている出力から計算できます。
@ジェニー書きました：
私の理解では、私たちは時々、次のことをもっと気にするかもしれません精度さまざまな状況での誤分類率よりも再現率が高いですよね? 。
はい、これが私の理解です。
この目的を達成するために、
すぐに見つけた式を使用して、精度、F1 スコア、精度、再現率が計算される JMP の列式の計算例を添付します。 Precision と Recall の値は以下と一致しています。 @ジェニー提供されています (Josh Starmer 博士による「The StatQuest Illustrated Guide to Machine Learning!!!」の 144 ページも参照、© 2022)。精度と F1 スコアの公式は、特にここで見つけることができます (Wikipedia): https://neptune.ai/blog/f1-score-accuracy-roc-auc-pr-auc 。この例は、JMP の無料オンライン応用統計コースの一部として利用できる VSSTeamData.jmp サンプル データ ファイルからのものです。スティック。 この計算は、ここで生成され、保存されたデータ テーブル スクリプトとして保存されたパーティション モデルに関連付けられた混同マトリックス出力で JMP によって報告されるものと一致します。
.jmp データ テーブルを開いた後、スクリプト名の横にある緑色の再生ボタンをクリックしてモデルを再生成します。
この情報がお役に立てば幸いです!- パトリック・ジュリアーノ ( @JMP テクニカル サポート)
Re: JMP で F 1 スコアを確認できますかこんにちは、イアン、数式を求められました。ジェニーがそれを提供してくれました。まだ解決策はありませんが、ディスカッションは 500 回以上閲覧されました。 したがって、この質問には重みがあります。
Re: JMP で F 1 スコアを確認できますかこのディスカッションで意見を述べる代わりに、ジェニーの答えに対して明確で簡潔な答えを提供できる人はいますか? これはブログではありません。 質問がされ、質問が回答されました。 前もって感謝します。
Re: JMP で F 1 スコアを確認できますかF1 スコア (およびその他の一般的な精度の尺度) は、バイアスの下でのパフォーマンスを理由に、機械学習コミュニティの一部で非推奨になりました。 受信者動作曲線やその他の尺度の有用性を提案する添付ファイルを参照してください。
JMP には、一部のプラットフォームに ROC (およびリフト カーブ) が含まれています。
Re: JMP で F 1 スコアを確認できますかこの種の質問は次の宛先に送信できます。 JMPテクニカルサポート私たちが参加できるように。
質問に関しては、JMP は、「ROC 曲線」メニュー項目が選択されている場合に、真陽性、真陰性、偽陽性、および偽陰性とともに、ROC テーブルの感度と 1 特異度の尺度を提供します。F1 は特に記載されていませんが、説明から、これらの尺度で計算できることがわかります。
Re: JMP で F 1 スコアを確認できますかある賢人は「唯一の希少品は時間である」と言いましたが、コミュニティはクラウドソーシングの知識 (ユーザーと JMP スタッフの両方からの) に依存しており、少人数のグループに依存すると効果的に運営できないことが理解されていると思います。
コミュニティに加えて、公式サポートチャンネル、SAS 製品のライセンスを取得した人は誰でも使用できます。 重要な違いの 1 つは、応答時間に関するサービス レベル アグリーメントと、満足のいく解決を達成するためのエスカレーションのための内部プロセスがあることです。 これは間違いなく、バグの疑いを明らかにするためだけでなく、新しい機能のリクエストを行うための最良のメカニズムです。 さらに、「どうすればいいですか？」 「ソフトウェア X には慣れているが、JMP では同じことができない」という質問にも答えられますが、このより厳密で予測可能なフレームワーク内で行われます。
したがって、バグや機能について、またはコミュニティが反応しないように見える場合には、このチャンネルも検討するでしょう。 そして、おそらく明白なことを述べますが、「どちらか一方」である必要はありません。 多くのコミュニティ スレッドがサポート トラックにつながりました。
Re: JMP で F 1 スコアを確認できますかこんにちは、イアンさん
あなたの返事には少し驚いています。 Web で「F1 スコア」を検索し、自己学習し、有意義な回答をユーザーに返信するのは (特に JMP 専門家にとって) それほど手間ではありません。 さらに、質問者は追加情報を提供しましたが、有意義なサポートは得られませんでした。 それも驚きです。
あなたまたは適切な専門知識を持つ他の誰かがこの質問について JMP コミュニティを手伝ってくれませんか。 F1スコアは、ロジスティック回帰 (または名目上の応答を持つモデル) および不均衡な応答レベル (真陽性よりも真陰性が大幅に多い) における重要な尺度です。 大変感謝しております。 前述したように、Wikipedia ではこれらの概念が詳細に説明されています。
あなたが提供したモデル比較リンクは精巧ですが、F1 スコアの計算が欠けているようです。 これは手動で実行できると確信していますが、JMP にない場合は、機能として強く考慮する必要があります。 前もって感謝します。
Re: JMP で F 1 スコアを確認できますかこんにちは！ ご返信ありがとうございます。 F1 スコアはテストの精度の尺度です。 F1スコアに関するwilipediaのリンクはこちらです。 https://en.wikipedia.org/wiki/F1_score
2 番目の質問については、はい、予測値について考えています。
精度=真陽性/(真陽性 +偽陽性)
そして思い出してください=真陽性/(真陽性+偽陰性)
モデル比較では精度と再現率が見つかりませんでした。 JMP にこれらの値があるかどうか疑問に思っています。 私の理解では、さまざまな状況において、誤分類率よりも精度や再現率を重視することがありますよね。
Re: JMP で F 1 スコアを確認できますかご覧になったと思いますが、モデルの比較JMP Pro のプラットフォーム。 残念ながら、「F1 スコア」については詳しくないので、詳細またはリンクを教えていただけますか。 2 番目の質問については、予測値とその不確実性について考えていますか。
