JMP를 사용하여 전체 텍스트 저널 기사를 방법, 결과, 토론에 대한 별도의 열로 구문 분석할 수 있습니까?여러분 안녕하세요,
과학 저널 기사의 주제 섹션 간에 키워드/구문이 어떻게 다른지에 대한 텍스트 분석에 관심이 있습니다. pdf로 시작한 다음 기사 구조의 식별 가능한 각 섹션에 포함된 텍스트 청크에 대해 별도의 열을 생성할 수 있는지 궁금합니다. 예를 들어 제목, 초록, 키워드, 소개, 방법, 결과, 토론 및 문헌 인용 섹션의 텍스트 청크로 8개의 다른 열을 만들 수 있습니까?
이에 대한 나의 출발점은 a) pdf 폴더 또는 b) 각 행이 기사이고 내가 JMP에서 이미 생성한 각 기사의 모든 텍스트를 포함하는 열이 있는 jmp 테이블일 수 있습니다. 어떤 제안? 참고: JMP Pro가 아닌 JMP만 있으므로 이 제약 조건을 사용하여 이 작업을 수행하는 방법을 찾아야 합니다.
통찰력을 제공할 수 있는 사람에게 감사합니다.
Re: JMP를 사용하여 전체 텍스트 저널 기사를 방법, 결과, 토론에 대한 별도의 열로 구문 분석할 수 있습니까? JMP 테이블 첨부그렇게 많은 문서를 수동으로 처리하는 것은 실현 가능하지 않다고 생각합니다!
너무 빨리 포기하지 마십시오. 커뮤니티는 도전을 좋아합니다!
Re: JMP를 사용하여 전체 텍스트 저널 기사를 방법, 결과, 토론에 대한 별도의 열로 구문 분석할 수 있습니까? JMP 테이블 첨부감사, @Mark_Bailey . 그 쪽이 맞는 거 같아요. 제가 가지고 있지 않은 많은 도메인 경험이 있어도 아마 어려운 프로젝트일 것입니다. 제 경우에는 약 5,700개의 pdf가 있습니다. 무차별 대입(대부분 수동) 방식으로 이를 통해 내 길을 원숭이로 만드는 것이 아마도 지금 당장 나에게 가장 실현 가능한 대안일 것입니다. 시간을 내어 응답해 주셔서 감사합니다.
Re: JMP를 사용하여 전체 텍스트 저널 기사를 방법, 결과, 토론에 대해 별도의 열로 구문 분석할 수 있습니까? JMP 테이블 첨부이 프로젝트가 쉽지는 않을 거라고 생각합니다. 문제의 길이와 복잡성으로 인해 여기에서 논의하는 것이 적절하지 않을 수 있습니다. 그러나 우리가 무엇을 할 수 있는지 봅시다.
텍스트 분석에 대한 나의 경험은 항상 단일 모집단의 말뭉치에 관한 것이었습니다. 예를 들어, 2년 전 FDE를 기반으로 한 과정을 작성하기 위해 100개 병원의 응급실에 입원한 환자에 대한 내러티브를 사용했습니다. 그 사례는 수많은 문제를 제시했지만 최소한 정규식 세트를 달성할 수 있도록 문서 전체에 걸쳐 충분한 일관성이 있었습니다. 그 텍스트 분석의 목표. 이 시점에서 텍스트 분석(즉, 문서 용어 행렬)을 원하지 않습니다. 문서를 해당 섹션으로 구문 분석하려고 합니다.
솔루션에는 상당한 도메인 전문 지식이 필요하다고 생각합니다. 나는 무작위로 여러 문서를 골랐고 원하는 섹션을 구문 분석하기 위한 기초로 사용할 수 있는 소수의 문서에서 아무 것도 찾을 수 없었습니다. 직장에는 많은 관례가 있고 어떤 관례도 전혀 따르지 않는 것처럼 보이는 많은 경우가 있는 것 같습니다.
이 경우 정규식은 올바른 처리 수준이 아닐 수 있습니다. JMP 패턴은 매우 강력합니다. 기본적인 수준에서는 이해하지만 전문가는 아닙니다.아마도 커뮤니티의 다른 사람들은 그것을 분해하는 데 필요한 경험을 가지고 있을 것입니다.
Re: JMP를 사용하여 전체 텍스트 저널 기사를 방법, 결과, 토론에 대해 별도의 열로 구문 분석할 수 있습니까? JMP 테이블 첨부안녕하세요 여러분,
이 시점에서 내가 어디에 붙어 있는지 보여주는 JMP 테이블을 이 게시물에 첨부했습니다. "소문자 및 축소된 공백 텍스트" 열의 텍스트를 사용하여 빈 열에 텍스트 청크를 만들고 싶습니다.
나는 이 과정이 아마도 어려울 것이며 많은 특별한 경우를 다루어야 한다는 것을 이해합니다(예: 섹션 제목이 다른 논문, 예를 들어 "소개" 대 "배경").나는 꽤 유망해 보이는 캐릭터와 캐릭터 패턴 공식을 보기 시작했고 꽤 빨리 압도당했습니다. 내 배경은 텍스트가 아닌 숫자를 분석하는 것이므로 여전히 따라잡고 있습니다. 여기에서 특히 유용할 수 있는 몇 가지 문자 수식을 알려주시면 감사하겠습니다.
Re: JMP를 사용하여 전체 텍스트 저널 기사를 방법, 결과, 토론에 대해 별도의 열로 구문 분석할 수 있습니까?안녕 @Mark_Bailey 답변 감사합니다. 귀하의 응답 중 일부를 이해했지만 전부는 아닐 수도 있습니다. 다음은 내가 이미 알고 있는 방법입니다. 1) 많은 pdf를 jmp 테이블로 가져와서 각 기사가 한 행이고 기사의 모든 텍스트가 단일 열에 있도록 합니다. 2) 표준 텍스트 탐색기 기능을 사용하여 이 말뭉치를 탐색합니다(용어 목록에 구문 추가, 단어 구름 생성, 문서 용어 매트릭스 생성 등).
내가 어떻게 해야 할지 모르는 것은 이 한 열의 각 문서 텍스트를 여러 열로 분리하는 것입니다. 예를 들어 Introduction(기사 소개의 텍스트만 포함), Abstract(기사 요약의 텍스트만 포함 ), 등등. 저는 Text to Columns를 사용하여 이 작업을 수행할 수 있는 잠재적인 방법을 실험 중이었습니다. 여기서 "Introduction"이라는 단어를 찾아서 교체했습니다. 그런 다음 이상한 문자를 사용하여 텍스트를 열로 분할합니다. 이것은 "소개" 또는 "결과"라는 단어가 각 문서에서 한 번만 나오는 경우에 효과적입니다. 두 번 이상 발생하면 기사에서 열이 잘못 정렬됩니다. 이 문제를 해결할 수 있는 유일한 방법은 찾기 및 바꾸기 작업 중에 "Introduction"이라는 단어의 각 경우를 평가하고 Introduction이라는 단어가 진정한 섹션 나누기로 사용될 때만 구분 기호 문자를 삽입하는 것입니다. 저는 생태학자이고 텍스트 분석을 처음 접하기 때문에, 이것은 제가 이와 같은 문제에 대해 배심원 조작해 온 일종의 비효율적인 접근 방식의 전형적인 예입니다.
다른 테이블 명령이나 정규식을 사용하여 모든 텍스트가 포함된 단일 열을 다양한 콘텐츠 섹션에 대한 텍스트가 포함된 여러 열로 구문 분석하는 방법에 대한 예를 들어 주시겠습니까? 참고: 저는 정규식의 진정한 초보자이므로 이 주제에 대한 지식이 거의 없다고 가정하고 읽기 시작하겠습니다.
다시 한번 감사합니다. 케이시
Re: JMP를 사용하여 전체 텍스트 저널 기사를 방법, 결과, 토론에 대해 별도의 열로 구문 분석할 수 있습니까?예, 다중 파일 가져오기 명령과 텍스트 탐색기를 사용합니다.
용어 목록의 구성은 기본 단어(쉽지만 간단) 또는 정규식(더 어렵지만 더 구체적)을 기반으로 합니다. 문서에서 특정 정보를 찾는 데 정규식 방법이 더 좋습니다. 문서에 적용되는 정규식을 사용자 정의할 수 있습니다. 문구를 선택하여 용어 목록에 추가할 수 있습니다. 그런 다음 지표 또는 빈도 열을 원래 데이터 테이블에 다시 저장할 수 있습니다.
이 데이터 테이블은 정규식, JMP 텍스트 패턴 및 기타 문자열 기능을 사용하는 테이블 명령 및 열 공식으로 만들 수도 있습니다.
