フレーズを追加したり、ストップワードを追加したり、再コード化アクションを追加したりするたびに、テキストエクスプローラの再実行を停止できますか?こんにちは、みんな、
私が管理している大規模なコーパスには、かなりの作業が必要です。アクションを完了するたびにテキストエクスプローラーが自動的に再実行されると、プロセスが頻繁に行き詰まることがわかりました。たとえば、1つの用語を再コード化すると、標準のテキストエクスプローラースクリプトが実行され(トークン化、フレージング、ステミングなど)、毎回20〜40秒かかることがあります。テキストファイルの作成中にOCRエラーが発生した数百の用語を再コード化する必要があります。この動作をオフにして、たとえば100回の再コード化を行ってからスクリプトを再実行させる方法はありますか?
Re:フレーズを追加したり、ストップワードを追加したり、コードを変更したりするたびに、テキストエクスプローラの再実行を停止できますか?赤い三角形を使用->期間オプション->管理... オプション。
ストップワードを管理するためのダイアログ
Re:フレーズを追加したり、ストップワードを追加したり、コードを変更したりするたびに、テキストエクスプローラの再実行を停止できますか?返信いただきありがとうございます。おそらく私はここで何か間違っているのですが、私の現在のワークフローは次のとおりです:
1)テーブルを開いて、最近保存したテキストエクスプローラースクリプトを実行します。
2)フレーズのリストをスクロールして、さらに調べたいフレーズを選択し、「フレーズの追加」を使用してそれらを用語リストに追加します。
3)用語リストをスクロールして、ストップワードとして使用したい用語または最近追加したフレーズを選択し、「ストップワードの追加」を使用してストップワードリストに追加します。
4)用語リストをスクロールして、再コード化する用語を選択し、再コード化ダイアログを使用してこれを実行します。
2、3、または4のアクションの1つを完了するたびに、テキスト分析スクリプトが実行され、時間がかかります。
コーパスキュレーションのセッションを終了したら、ストップワードの管理、フレーズの管理、または再コーディングされた対話の管理に移動し、「ローカル」列に保存されているすべての用語またはフレーズを取得して、列のプロパティ列に送信します。。私がこれを行うたびに、テキスト分析はさらにいくつかをチャーンします。これを行わないと、次にJMPを開いたときにすべての作業が失われます。
これを行ったら、テキストエクスプローラーをデータテーブルスクリプトとして保存し、データテーブルを保存します。
ここでの厄介な部分は、「再管理」、「ストップワードの追加」、「フレーズの追加」、または「Manage x」の「ローカル」ビンからの一時的な結果を送信するたびに、テキストエクスプローラーが再実行されるのを待つ必要があることです。」は、列のプロパティビンへのダイアログです。
私のコーパスには約5,000の全文ジャーナル記事があり、多くのテキストインポートエラー、比較的長いドキュメント(6〜20ページのテキスト)、および結果として生成される長期およびフレーズリストにより、何時間も前からキュレーションが行われています。
その日はオフィスを離れますが、明日はデータテーブルをサブセット化して最大サイズの制限を満たし、この投稿にドロップして、誰でも試してみて、私の意味を確認します。
キュレーションアクションのたびにテキストエクスプローラーが再実行されないようにし、リストを更新するときに定期的に実行するだけで、時間を大幅に節約できます。
私はまだテキストエクスプローラーの初心者なので、多分、コーパスキュレーションの私のプロセスは完全に間違っています。どんな提案も大歓迎です!Re:フレーズを追加したり、ストップワードを追加したり、コードを変更したりするたびに、テキストエクスプローラの再実行を停止できますか?@ErnestPasour
Re:フレーズを追加したり、ストップワードを追加したり、コードを変更したりするたびに、テキストエクスプローラの再実行を停止できますか?私はこの問題を(ほとんど)解決できたと思います。少なくとも私にとってはうまくいくように思えます。重要なのは、用語リスト、フレーズリスト、ステミングレポートをデータテーブルとして保存することでした。次に、これらのテーブルを操作して、用語、語句、または語幹を「ストップワードの管理」または「語句の管理」インターフェイスに追加するかどうかのインジケーター列を追加します。これらのテーブルで用語、語句、または語幹にフラグを付けたら、「yes」でそれらのサブセットを作成し、これらを「Manage x」インターフェースの列プロパティボックスに直接貼り付けます。このように、私はそれぞれの決定をした後、更新を待つ時間を失うことはありません。
また、この作業を行う前に、より大きなコーパスから1000レコードのランダムサンプルを取得しました。このサンプルでキュレーションを行い、最後の列のプロパティを完全なデータセットにコピーしました。この方法では、更新が実行されたときに、それほど時間がかかりませんでした。まだ... 自動更新をオフにして、必要な場合にのみ実行するように、プラットフォーム設定で、おそらく単純な更新ボタンとして使用できると便利です。