'거의 완벽한' 사용자 인터페이스로서의 대규모 언어 모델(LLM)
최근에 참석한 컨퍼런스에서는 예상대로 LLM에 대한 여러 발표가 있었습니다. 몇 가지 사실이 분명해졌습니다.
- 모두가 언제쯤 LLM을 100% 신뢰할 수 있을지 궁금해하고 있습니다.
- 사람들은 LLM을 실행하기 어려운 작업을 위한 자연어 사용자 인터페이스로 사용하고 있습니다.
통계 모델링의 맥락에서 제가 흥미롭게 생각하는 것은 다음과 같습니다.
- 이미 우리는 예측 가능하고 100% 신뢰할 수 있는 도구를 보유하고 있으며, 특히 해당 도구가 철저한 테스트를 거쳤다면 더욱 그렇습니다.
- JMP와 같은 소프트웨어는 복잡한 작업을 위한 사용하기 쉬운 인터페이스를 설계하는 데 많은 시간을 투자합니다!
대표적인 예: 구조방정식 모델링(SEM)에서의 종단 분석
구조방정식 모델(SEM)에서 종단적 모델을 정확하게 명시하는 것은 오랫동안 어려운 과제로 여겨져 왔습니다. 워크숍, 튜토리얼 비디오, 웹사이트, 학술 논문, 서적 등 관련 자료는 넘쳐납니다! 실제로 연구자가 기존 소프트웨어에서 자신만의 스크립트를 작성하려면 SEM에 대한 탄탄한 기초 지식이 필수적입니다. 하지만 JMP Pro의 SEM 플랫폼은 이러한 어려움을 해소하도록 설계되었습니다.
JMP Pro의 SEM 플랫폼에 있는 모델 바로가기 메뉴에는 종단 모델(및 횡단 모델)을 지정(및 적합)하는 데 사용할 수 있는 다양한 옵션이 있습니다. 이 메뉴의 목표는 사용자가 가장 중요하게 생각하는 것, 즉 연구 질문을 효율적이고 직관적으로 탐구하는 데 집중할 수 있도록 하는 것입니다.
관심 있는 10가지 구성 개념을 측정하는 10개의 짧고 정상적인 시계열 데이터가 있다고 가정해 보겠습니다. 각 구성 개념을 A부터 J까지로 명명하고, 측정 시점을 "시간 t"로 나타내겠습니다. 표본은 동일한 시점에서 6회에 걸쳐 반복적으로 평가되었으며, 종단 연구 설계에서 흔히 그렇듯이 일부 결측값이 존재한다고 가정합니다.
첫 번째와 두 번째 구성 요소에 대한 반복 측정값을 보여주는 데이터 표의 스크린샷은 다음과 같습니다.
LauraCS_0-1783541595957.png
JMP Pro의 SEM 플랫폼은 분석 메뉴를 클릭한 다음 다변량 방법 > 구조방정식 모델을 클릭하여 실행할 수 있습니다. 실행 대화 상자에서 모든 반복 측정값을 선택하고 모델 변수 클릭 후 확인을 클릭합니다.
LauraCS_1-1783541595980.png
SEM 플랫폼 보고서에는 기본 독립성 모델이 표시됩니다. 모델 바로가기 버튼 옆에 있는 빨간색 삼각형 메뉴를 확인하세요. 이곳에서 복잡한 모델을 가장 쉽게 지정할 수 있습니다.
LauraCS_2-1783541595998.png
빨간색 삼각형을 클릭하면 종단 분석 > 교차 지연 패널 모델을 선택할 수 있습니다.
LauraCS_3-1783541596009.png
참고로, 이 옵션에서는 무작위 절편을 포함하는 모델이나 측정 오차를 설명하기 위한 잠재 변수를 포함하는 모델을 포함하여 다양한 유형의 다변량 자기회귀 모델을 적합시킬 수 있습니다.
이 시점에서 중요한 정보가 필요합니다. SEM 플랫폼은 측정값의 시간 순서를 알아야 합니다. 변수 이름에 "TimeT"를 포함했기 때문에 "이름으로 추측" 버튼을 클릭하면 이 정보를 즉시 얻을 수 있습니다!
LauraCS_4-1783541596017.png
아래로 스크롤하여 맨 아래에 있는 '확인'을 클릭하면 60개의 시간 값이 모두 처리됩니다. 이제 다양한 유용한 옵션이 포함된 메뉴가 나타납니다. 이 예시에서는 1) 자기회귀 효과, 2) 교차지연 효과, 3) 잔차 분산, 4) 잔차 공분산에 대해 등식 제약 조건을 적용하는 몇 가지 옵션을 선택합니다.
LauraCS_5-1783541596035.png
확인 버튼을 클릭하면 복잡한 SEM이 지정됩니다. 경로 다이어그램에서 등식 제약 조건과 공분산을 숨기면(다이어그램의 컨텍스트 메뉴에서 가능) 이 다변량 시스템이 얼마나 복잡한지 확인할 수 있습니다.
LauraCS_6-1783541596082.png
이 글에 설명된 모든 단계를 여유롭게 수행하면서 시간을 측정해 보니 46초가 걸렸습니다. 이 단계를 몇 번을 반복하더라도 최종 모델은 100% 정확하게 명시될 것입니다.
LLM 과정 학생이 이와 같은 과제를 수행할 수 있도록 과제 주제를 작성하는 데 얼마나 걸릴까요?
이 작업을 여러 번 반복하면 LLM 결과의 정확도는 얼마나 될까요?
LLM 결과가 제대로 수행되었는지 확인하기 위해 검토하는 데 얼마나 걸릴까요?
저는 LLM(리듬 관리 모듈)을 반대하는 입장은 절대 아닙니다. LLM은 활용도가 매우 높죠! 하지만 주어진 상황에 맞는 최적의 도구를 사용하는 것이 중요합니다. 효율적인 SEM(구조 정보 모듈) 명세 작성에 있어서는 JMP Pro가 단연 최고의 선택이라고 생각합니다. 물론 JMP는 모든 기능을 사용자 경험 최적화를 최우선으로 고려하여 설계되었습니다.
이 모델처럼 빠르게 지정하고 싶은 모델이 있는데 아직 SEM 모델 바로가기 목록에 없다면 알려주세요!
