素敵なブログ。 バージョン16を楽しみにしています!
ありがとう、 @PCS ! 近い将来、JMP16を公開できることをうれしく思います。
興味深い機能。
スコア計算についての好奇心:これは単語の順序を考慮に入れていますか?
たとえば、「本当に良くない」と「本当に良くない」は何か違うことを意味します。 これらの式は異なるスコアを取得しますか?
@matthias_bruchh 、これら2つの例のスコアは異なります。 「not」のような否定は、感情フレーズの途中では許可されないため、「本当に良くない」は強められてから否定され、「本当に良くない」は否定されますが強められません。 これは、自然言語でしばしば乱雑なフレーズや文の構造を処理することを目的とした、システムに組み込まれている多くのルールの1つを反映しています。 良い点:「本当に良くない」のようなフレーズに遭遇し、アルゴリズムが割り当てたもの以外の特定のスコアを付けたい場合は、それを強調表示して独自のスコアを割り当て、アルゴリズムをオーバーライドできます(「あまりにも」のように上記の「強力な」例)。 ユーザーは最終的に最終決定権を取得します。
新しい映画のストリーミングを考えているとします。 あらすじを読んでください。「未来の支配者は、親友のビルとテッドに、私たちが知っているように命を救うために新しい曲を作曲しなければならないと言います。 しかし、それを書く代わりに、彼らは時間をかけて旅をして、古い自分からそれを盗むことにしました。」それは聞こえますが最も優れている、視聴者のコメントも読んでいます。 "たくさんの楽しみ。" 「私たちが人間としている場所にぴったりの映画です。」 「弱い陰謀に非常に失望した。」 「お願い、もうやめなさい。」などなど。 あなたはポジティブなコメントとネガティブなコメントを比較検討し、見ることにしましたビルとテッドは音楽に直面している。 (この時点で、Netflixに実際に残っている未視聴のコンテンツはどれくらいですか?)
このような状況で視聴者のコメントを読むのは、人々の意見、態度、感情など、一般的に呼ばれるものについて教えてくれるからです。感情–多くの場合比較的少ない言葉で。 次のような1つの単語またはフレーズ楽しい、完璧な映画また非常に貧しい感情を非常に効果的に伝えることができ、人々の感情を知ることは非常に重要です。 お客様は私たちの新製品が好きですか? Twitterverseは最新ニュースについてどう思いますか? 新しい法律のどの条項が最も人気がありますか、それとも最も人気がありませんか? 感情は答えの核心であり、言語は私たちがそれを測るのに役立ちます。
単にテキストを読むことは、感情を測る最良の方法です。 しかし、読むべきテキストが数百、数千、さらには数百万ある場合はどうなりますか? そのためにはコンピューターが必要です。 コンピューターは人間のように言語を理解することはできませんが、感情を伝えると思われる単語やフレーズを検索し、それらの感情の単語に基づいてテキストにスコアを付け、そのスコアを役立つ方法で提示することができます。 これにより、他の方法では実現できなかった感情の大規模な画像を得ることができます。
これがの本質です感情分析、JMP Pro16のテキスト分析手法。 それがどのように機能するか見てみましょう。
あなたはコーヒーポッドが好きですか?
おそらくもっと日常的な例を支持して、最新のビルとテッドの映画について深く掘り下げます:コーヒーポッド、休憩室、コンチネンタルブレックファースト、または一部の人々の中で時々見られるシングルサービングコーヒーマシンで使用される小さなカプセルキッチン。 消費者はコーヒーポッドについてどう思いますか?
見つかったAmazonレビューのより大きなデータセットから取得したAmazonの9,133件のコーヒーポッドレビューを分析しますここ。 論争を避けるために、私たちは多くの異なるブランドのポッドのレビューをまとめて分析し、特定の製品を選び出すことはしません。 ただし、実際には、ドメイン私たちの分析をしっかりと分析します。おそらく、自社製品の1つ、または競合他社の製品の1つだけのレビューを分析します。これは、すべてのコーヒーポッドを見るよりも有益です。 また、コーヒーメーカーやアクセサリーなどの関連するレビューや、パッケージや配送サービスなどの二次的な問題に焦点を当てたレビューは、1つのドメインで肯定的な感情を表すため、必ず除外します(配達は安い)別の(味わったコーヒー安い)。
先に進む前に、「スターのレビューだけを見てみませんか?」と尋ねる読者がいます。もちろん、私たちはスターのレビューを見ることができ、実際に見るでしょうが、(a)テキストははるかに豊富な情報源であり、(b)多くの状況(例:公開フォーラムへの投稿)ではテキストはそれだけ利用可能な情報。 感情分析に焦点を当て続けるために、今のところスターレビューは無視します。
感情分析がやってくるJMPプロ'NSテキストエクスプローラープラットフォーム、そしてそれは実行するのはかなり簡単です。 感情分析オプションを選択するだけで、JMPは感情単語を自動的に検出し、各レビューにスコアを付け、分析を微調整して結果を調査するためのさまざまな出力を生成します。
感情分析の開始
分析の微調整
その出力を詳しく見てみましょう。いくつかの個別のレビューから始めて、感情スコアがどのように計算されるか、そして重要なことに、分析を微調整する理由と方法を確認します。
レビュー#4297は比較的肯定的で、次のようなことを言っています優れた、便利と満足し全体で+60のスコア(-100から100のスケールで、ゼロは中立的な感情)。 JMP Proはこのスコアをどのように計算しましたか? 感情の単語と関連するスコアの組み込みリストを参照しました(感情辞書)そして、3つの感情語のスコアを平均しました。 かなり簡単です。 (必要に応じて、最小-最大スコアリングオプションは、コメント内の最も肯定的な単語と最も否定的な単語の差として全体的なスコアを計算します。)
レビュー#4297は比較的肯定的です
テキストを解析するアルゴリズムは、ネゲーターを自動的に処理します(例:いいえ)および強意語(例、非常に)。 レビュー#6034は良い例です。 言葉良いデフォルトで+60のベースラインスコアを取得し、そのスコアは、インテンシファイアが先行すると+84に増加します。本当しかし、によって否定されると-60になりますいいえ。
JMP Proは、否定語または強意語が存在する場合に感情語のスコアを調整します
JMP Proの組み込みの感情辞書は完全にカスタマイズ可能であり、ドメインに合わせて調整することをお勧めします。 以下のレビュー#910をご覧ください。 良いと良い明らかな感情の言葉ですが、どうですか強すぎる、コーヒーポッドの領域では明らかに否定的ですか? 多くの単語の感情がドメイン固有であることを認識します(例:堅実車にはプラスかもしれませんが、マットレスにはマイナスかもしれません)、JMP Proの組み込み辞書は比較的少ない仮定を行い、辞書に追加、削除、変更して、ドメインに合わせて分析を調整できます。
「強すぎる」などのドメイン固有の感情の単語やフレーズを含めるように分析を調整できます
辞書のカスタマイズは簡単です。 たす強すぎる否定的なフレーズとして、フレーズを強調表示し、ボタンをクリックしてスコアを割り当てます。ここでは-30です。 完全な分析は自動的に更新され、のすべてのインスタンスが検出されます強すぎるそれに応じてそれを採点します。 これにより、レビュー#910のスコアが+43から+18に下がり、改善されたようです。
新しい感情フレーズを追加するのはかなり苦痛がありません
分析をカスタマイズするためのさまざまな追加ツールがあります。これには、辞書に追加する可能性のある潜在的な感情単語のリストが含まれます(ここでは、次のような単語に自動的にフラグが付けられます)。強い、弱い、苦い、高価な)、単語のスコアを好きなように変更する機能、否定語と強意語のカスタマイズなど。 感情分析はすべきですいつも適用される特定のコンテキストに合わせて調整する必要があるため、感情分析にJMP Pro 16を使用することになった場合は、これらのツールに精通する必要があります。
結果の調査
分析の調整が完了したら、これらのデータから何を見つけることができますか? まず、要約は、感情が比較的正に歪んでおり、平均スコアが+39.5であることを示しています。 平均スコアが+56.9の6,856件の正味の肯定的なレビューがあります。 1,277ネットネガティブ、平均スコア-38.7。 人々はコーヒーポッドについて比較的肯定的であるように見え、平均的な肯定的なレビューは平均的な否定的なレビューが否定的であるよりも肯定的です。 これらのスコアを詳しく調べるためのツールがいくつかありますが、すべてのレビューの感情スコアをデータテーブルに保存して、他のツールで視覚化および分析できるようにすることができます。
要約表は、ポジティブな感情とネガティブな感情の集約されたビューを提供します
付随するヒストグラムは、感情スコアの分布を視覚化します
結果をさらに掘り下げたいと思うかもしれないいくつかの異なる方法があります。 まず、どの感情用語が最も頻繁に表示されていますか? リストを見下ろすと、最も頻繁に使用される単語は一般的に肯定的であり、次のような単語があります。すごい、大胆なと強い高いランキング。 下にスクロールすると、最も頻繁に否定的な言葉が弱いと苦い。 これらのいずれかをクリックすると、コンテキストでの使用法を確認して、人々の苦情をより深く理解することができます。
頻繁な感情の言葉でコメントを調べることは非常に有益です
最も頻繁な感情の言葉で探索した後、私たちは特定のことに興味があるかもしれません特徴コーヒーポッドの。 つまり、コーヒーポッドを全体的に見るのではなく、フレーバーなどの特定のものに焦点を当てましょう。 フィーチャーファインダーに目を向けると、 JMPプロ感情用語と頻繁に共起する単語のリストを提供するので、それらの単語だけに関連する感情を調べることができます。 ここでは、フレーバーリストから、人々がそれについて何を言っているかを確認します。 [選択した機能のスコアリング]をクリックして、フレーバーのみに固有のすべてのコメントを再スコアリングするようJMPProに依頼することもできます。 これは、最も関心のあるサブドメインにドリルダウンするための優れた方法です。
Feature Finderは、コーヒーフレーバーなどの特定の機能に関連する感情にドリルダウンします
JMP Pro16での感情分析
JMP Pro 16に搭載されている感情分析を使用すると、書かれたコメントに基づいて、人々が何かについて肯定的または否定的にどのように感じているかを測定できます。 分析は常に特定のコンテキストに合わせて調整する必要があるため、ツールには、データを探索するときに感情辞書とスコアリングシステムを簡単にカスタマイズするためのさまざまな機能が含まれています。
分析が完全に調整されると、インタラクティブなツールを使用して、さまざまな方法で結果にドリルダウンし、特定の質問に答えることができます。 私たちの場合、人々はアマゾンで入手するコーヒーポッドにほとんど前向きであるように見えます、そして彼らは特にコーヒーのファンです大胆なと強いそれよりも弱いまた苦い。
人々の気持ち、意見、態度を明らかにしたいですか? いくつかのコメントを集めて、感情分析を緩め、あなたが見つけた答えを見てください。