Site de partage de guides "JMP Public"
Dans JMP, les rapports analytiques peuvent être partagés sur le site Web. JMP Public Nous fournissons un site appelé.
Dernière version de JMP publiée fin 2018 Dans JMP 14.2, vous pouvez télécharger un rapport d'analyse HTML interactif sur ce public JMP en sélectionnant [Fichier] → [Publier] dans la fenêtre du rapport.
Vous pouvez définir la portée du rapport de sorte que seul le mandant qui a téléchargé ou toutes les personnes puissent le visualiser (vous devez vous connecter au site JMP Public à l'aide du profil SAS pour le téléchargement).
De nombreux rapports d'analyse sont téléchargés sur JMP Public.
Comme un rapport a été soumis par l’ingénieur de JMP Japan Division, veuillez en profiter avec des articles décrivant le contenu de ce rapport.
|
Quand le texte fouille la musique du groupe "Queen"
Film sorti à la fin de l'année dernière "Bohemian Love Sody" L'avez-vous vu?
Il semble qu’un large éventail de générations soit regardé, de la génération entendue pendant la période où Queen était active, à la jeune personne qui ne connaît pas grand chose de Queen, car le plaisir du film est devenu un sujet brûlant immédiatement après la sortie.
Bien que j'apprécie aussi cela, j'ai été frappé par les chansons que je ne peux pas oublier, même en les écoutant, tout en écoutant l'histoire.Après cela, de l’idée de vouloir en savoir plus sur la poésie de Queen, tout à coup (?J'ai essayé l'extraction de texte.
Avant d’analyser, je ne connaissais que la chanson représentative de Queen, mais j’ai appelé le mot "Bicycle" et appelé "Killed a man" comme une chanson "Bohemian Rhapsody" Parce qu'il y a des paroles et des paroles caractéristiques de la partie d'opéra, j'ai pensé que des résultats intéressants pourraient être obtenus.
Nous allons présenter les trois résultats suivants de l'extraction de texte.
- Quel genre de mots sont beaucoup utilisés?
- Et si j'essaie de trier les chansons en fonction des mots que j'utilise?
- Pouvez-vous distinguer les paroles des mots contenus dans les paroles?
Les sujets d'analyse étaient des chansons enregistrées dans l'album de 1973 à 1991, et les chansons (instrumentales) sans paroles étaient exclues.Ce n'est qu'en 1991 que je voulais que Freddie Mercury, à la voix de la voix, cible les chansons qui ont été publiées au cours de leur vie.
Quel genre de mots sont beaucoup utilisés?
Quels types de mots sont utilisés plus fréquemment pour que les chansons soient analysées?La réponse est affichée dans le nuage de mots.Le nuage de mots est une méthode de visualisation souvent utilisée dans l'exploration de texte. Il est affiché en grosses lettres lorsque la fréquence d'apparition des mots augmente.
Nuage de mots (fréquence d'apparition des mots)
Veuillez noter les trois points suivants concernant le nuage de mots affiché en cliquant ci-dessus.
Nous effectuons une extraction de mot et affichons des mots avec une fréquence de 10 ou plus
Extraire le radical de mot est un moyen d’éliminer le changement dans la fin d’un mot et d’assembler des mots avec des radicaux communs.Le mot "tige" est marqué avec "·" à la fin du mot.Par exemple, "know ·" est affiché dans le mot nuage, mais il contient trois mots "know", "know", "know".
- Nous excluons les mots considérés comme des articles, des verbes auxiliaires, des pronoms, des verbes, des prépositions.
- Pour les mots, nous avons une gradation allant du bleu (année de sortie moyenne en avance) au rouge (année de sortie moyenne en retard).En d’autres termes, un mot de couleur bleue est un mot utilisé plus souvent dans les premières chansons, et un mot de couleur rouge indique que c’est un mot utilisé davantage dans les chansons suivantes (à la fin de 1991).
Et si j'essaie de trier les chansons en fonction des mots que j'utilise?
Classons (groupons) les chansons cibles en chansons qui utilisent des mots similaires.À cette fin, d'abord, Matrice de mots de document Je vais présenter le concept.
La matrice de mots du document est une représentation matricielle indiquant si chaque mot apparaît ou non.Une ligne indique la musique et chaque colonne indique chaque mot. Pour une chaîne de mots, attribuez une valeur de 1 à la chanson (ligne) dans laquelle le mot apparaît et attribuez une valeur de 0 à la pièce musicale qui n'apparaît pas. Je le feraiBien qu’il soit simple de créer une matrice de mots de document qui prend une valeur de 1 ou 0, nous créons ici une matrice de mots de document pondérée avec l’importance du mot "TF IDF" prise en compte .
Bien que des définitions détaillées soient omises, nous allons réduire l’importance des mots figurant dans de nombreuses chansons et les pondérer afin d’augmenter l’importance des mots figurant uniquement dans certaines chansons.
Prenons deux exemples de "vie ·" (vie, la vie), "bicyclette ·" (vélo, vélo) extrait sous forme de tige de mot.
Le tableau ci-dessous fait partie de la matrice de mots de document pondérée.
Lorsqu'une valeur autre que 0 est contenue, cela signifie que le mot (mot du nom de la colonne) correspondant à cette chanson est inclus, et si ce mot a été utilisé plusieurs fois, la valeur sera grande.
Par exemple, "life ·" est utilisé dans de nombreuses chansons, ce qui en fait une valeur faible.
D'autre part, "bicyclette" est une valeur importante car il n'est utilisé que par deux chansons "Bicycle Race" et "More Of That Jazz".De plus, "Bicycle Race" est une chanson qui retient souvent "bicyclette". Le mot "bicyclette" a donc une valeur supérieure (46,557) à celle de "More Of That Jazz" qui apparaît une seule fois.
En utilisant une technique appelée SVD (Singular Value Decomposition) pour cette matrice de mots de document, il est possible de réduire les informations de la matrice à de faibles dimensions, et en mappant les chansons et les mots eux-mêmes avec des mots similaires. Vous pouvez les regrouper.
Sur le côté gauche de la figure ci-dessous, la similarité de la musique est visualisée et sur le côté droit, la similarité des mots est visualisée.
Sur le côté gauche de la figure ci-dessus, les chansons à proximité sont similaires, les choses lointaines ne le sont pas.
De nombreux points sont situés à proximité de l'origine (0, 0), mais des étiquettes sont attachées aux points (chansons) plus éloignés de ces rassemblements.Les chansons avec ces labels seront quelque chose avec des mots uniques dans toutes les chansons de la reine, mais ici nous allons nous concentrer sur les deux chansons "Bohemian Rhapsody" et "Great King Rat". .
Les deux sont situés loin de l'origine, mais en regardant la similitude des mots de la figure de droite, "mama ·", "tell ·", "die ·" sont situés à la même distance des deux chansons. Il est situé * 1.
Ces mots sont des mots quelque peu particuliers dans le sens où ils ne sont pas utilisés dans d'autres chansons car ils sont situés assez loin de l'origine, mais "Bohemian Rhapsody" et "Great King Rat". Il est utilisé dans une certaine mesure.
En rapport avec ces questions, deux chansons sont situées dans un tel lieu * 2.
À propos, Freddie Mercury écrit des chansons des deux.
* 1 La valeur minimale et la valeur maximale de chaque coordonnée sont différentes dans les figures de gauche et de droite, mais vous pouvez l'ignorer.
* 2 En fait, je considère également l'utilisation d'autres mots.
En tant qu’analyse connexe, nous allons essayer l’analyse par groupes (hiérarchique) en utilisant des informations décomposées en valeurs singulières (vecteur singulier).Dans l'analyse par grappes, les chansons contenant des mots similaires (précisément les chansons les plus proches de la distance) sont regroupées une par une et des arborescences peuvent être créées.
A partir de ce résultat, vous pouvez grouper des chansons en déterminant le nombre de groupes (clusters), mais nous allons vous montrer ici le résultat de la coloration de chaque groupe.
Cartographie par décomposition en valeurs singulières de la matrice de mots du document, analyse par grappes
Pouvez-vous distinguer les paroles des mots contenus dans les paroles?
À l'époque, de 1973 à 1991, quatre membres de Queen étaient concernés par cette analyse: Freddie Mercury, Brian May, Roger Taylor et John Deacon, mais tous étaient impliqués dans les paroles et la composition. Chaque chanson à succès est envoyée au monde.
Comme dans les textes, il y a des mots que les paroles utilisent fréquemment pour les paroles, et d'autres ne les utilisent pas beaucoup, mais des mots spécifiques à ce parolier.
Que diriez-vous du cas de la reine.
Ici, nous examinerons si les auteurs-compositeurs peuvent être distingués en utilisant l'analyse discriminante centrée sur les chansons qui ne sont qu'un chanteur spécifique et en utilisant la matrice de mots de document décrite ci-dessus.
Nous utilisons une matrice de mots de document (poids TF IDF) avec la fréquence d'utilisation maximale de 100 mots pour vérifier si les paroles prédites correspondent aux paroles réelles.
Discrimination
Lisez le résultat affiché en cliquant sur le lien ci-dessus, comme suit.
En dessous du résultat, vous trouverez un tableau semblable au suivant, qui est un tableau croisé du compositeur réel (Actual) et du parolier (Prédite) prédit par une analyse discriminante.
| Réel |
Nombre prévu |
|---|
| Auteur |
Mercure |
Mai |
Taylor |
Diacre |
|---|
| Mercure |
42 |
1 |
0 |
0 |
|---|
| Mai |
0 |
36 |
0 |
0 |
|---|
| Taylor |
0 |
0 |
17 |
0 |
|---|
| Diacre |
1 |
0 |
0 |
11 |
|---|
La première ligne est Freddy Mercury, mais lors de la prédiction des paroles en utilisant les informations des 100 meilleurs mots, il y a 42 chansons prédites de manière prévisible.D'autre part, bien qu'une seule chanson ait été écrite par Freddie Mercury, il a prédit qu'il s'agissait de Brian May, c'est-à-dire qu'elle devait être sortie.
"Pourcentage de classifications incorrectes" affiché au-dessus du tableau est un indice du taux de classification erronée, qui correspond à une proportion prédite de manière incorrecte (calculée par nombre prédit par erreur / nombre de chansons à analyser).
"Tracé canonique" est appelé un complot canonique et est une représentation visuelle de la situation de discrimination avec des coordonnées bidimensionnelles.
Quatre personnes sont positionnées sur le graphique, mais Roger Taylor est loin des trois autres.Par conséquent, on peut dire que la tendance des mots utilisés pour le poème de Roger Taylor est très différente de celle des trois autres.
En fait, lorsque nous vérifions le tableau croisé présenté ci-dessus, toutes les chansons (17 chansons) composées par Roger Taylor sont prédictives et les chansons de trois autres paroles sont confondues avec les compositions de Roger Taylor. Je comprends aussi qu'il n'y a rien.À propos, le point marqué sur le graphique est une chanson mal identifiée.
Mon rapport d'analyse, y compris l'analyse introduite cette fois, est sauvegardé à l'emplacement suivant.
https://public.jmp.com/users/259
À partir de maintenant, je publierai des résultats d'analyse intéressants si j'en ai envie, alors restez à l'écoute.
