Matches in SemOpenAlex for { <https://semopenalex.org/work/W4387029657> ?p ?o ?g. }
Showing items 1 to 52 of
52
with 100 items per page.
- W4387029657 endingPage "431" @default.
- W4387029657 startingPage "427" @default.
- W4387029657 abstract "최근 딥러닝을 이용한 자연어처리 분야에서 다양한 모델이 소개되는 가운데 BERT와 GPT 등 트랜스포머(Transformer) 기반의 사전훈련 언어모델(Pre-trained model)이 기본이 되고 있다. 트랜스포머 기반 모델의 파인-튜닝(Fine-tuning)은 전체 모델의 파라미터가 업데이트되어 우수한 성능을 보여주고 있다. 최근에는 적은 양의 파라미터를 업데이트하여 성능을 개선하는 P-tuning 방식이 등장하였다. 본 논문에서는 모델의 파라미터의 학습을 동결하여 적은 양의 파라미터만 업데이트하더라도 기존의 파인-튜닝과 비슷한 성능을 달성할 수 있는 피-튜닝 방식에서 프롬프트 인코더(Prompt-encoder)를 변경한 방법을 제안하였다. 성능 검증을 위하여 GPT-2 모델은 KoGPT2를 사용하였다. NSMC와 KorNLI 데이터셋을 이용한 분류 결과, 제안한 방법은 기존의 피-튜닝 방식과 비교하여 NSMC와 KorNLI 데이터셋으로 각각 4.56%와 11%의 정확도가 향상된 성능 향상 결과를 보였다." @default.
- W4387029657 created "2023-09-26" @default.
- W4387029657 creator A5057933917 @default.
- W4387029657 creator A5092938398 @default.
- W4387029657 creator A5092938399 @default.
- W4387029657 creator A5092938400 @default.
- W4387029657 date "2023-09-30" @default.
- W4387029657 modified "2023-09-26" @default.
- W4387029657 title "An Effective Method of Improving P-tuning Performance Using KoGPT2" @default.
- W4387029657 doi "https://doi.org/10.5626/ktcp.2023.29.9.427" @default.
- W4387029657 hasPublicationYear "2023" @default.
- W4387029657 type Work @default.
- W4387029657 citedByCount "0" @default.
- W4387029657 crossrefType "journal-article" @default.
- W4387029657 hasAuthorship W4387029657A5057933917 @default.
- W4387029657 hasAuthorship W4387029657A5092938398 @default.
- W4387029657 hasAuthorship W4387029657A5092938399 @default.
- W4387029657 hasAuthorship W4387029657A5092938400 @default.
- W4387029657 hasConcept C111919701 @default.
- W4387029657 hasConcept C118505674 @default.
- W4387029657 hasConcept C119599485 @default.
- W4387029657 hasConcept C127413603 @default.
- W4387029657 hasConcept C165801399 @default.
- W4387029657 hasConcept C41008148 @default.
- W4387029657 hasConcept C66322947 @default.
- W4387029657 hasConceptScore W4387029657C111919701 @default.
- W4387029657 hasConceptScore W4387029657C118505674 @default.
- W4387029657 hasConceptScore W4387029657C119599485 @default.
- W4387029657 hasConceptScore W4387029657C127413603 @default.
- W4387029657 hasConceptScore W4387029657C165801399 @default.
- W4387029657 hasConceptScore W4387029657C41008148 @default.
- W4387029657 hasConceptScore W4387029657C66322947 @default.
- W4387029657 hasIssue "9" @default.
- W4387029657 hasLocation W43870296571 @default.
- W4387029657 hasOpenAccess W4387029657 @default.
- W4387029657 hasPrimaryLocation W43870296571 @default.
- W4387029657 hasRelatedWork W1547494151 @default.
- W4387029657 hasRelatedWork W2014589784 @default.
- W4387029657 hasRelatedWork W2275988210 @default.
- W4387029657 hasRelatedWork W2385621972 @default.
- W4387029657 hasRelatedWork W2547835662 @default.
- W4387029657 hasRelatedWork W2589098947 @default.
- W4387029657 hasRelatedWork W2771022762 @default.
- W4387029657 hasRelatedWork W2807289511 @default.
- W4387029657 hasRelatedWork W3157910026 @default.
- W4387029657 hasRelatedWork W4231964008 @default.
- W4387029657 hasVolume "29" @default.
- W4387029657 isParatext "false" @default.
- W4387029657 isRetracted "false" @default.
- W4387029657 workType "article" @default.