Posts tagged with

GPT-2 ꡬ쑰 뢄석과 νŒŒμΈνŠœλ‹μ„ ν•΄λ³΄μž

GPT-2λŠ” GPT-1보닀 높은 μ„±λŠ₯을 μžλž‘ν•˜λŠ” 사전 ν•™μŠ΅λͺ¨λΈλ‘œ, GPT-2λŠ” νŒŒμΈνŠœλ‹ 없이도 μ—¬λŸ¬ μž‘μ—…λ“€μ„ μˆ˜ν–‰ν•  수 μžˆλ‹€λŠ” μž₯점이 μžˆμŠ΅λ‹ˆλ‹€. μ–΄λ–»κ²Œ 이것이 κ°€λŠ₯ν•˜μ˜€κ³ , GPT-2λ₯Ό νŒŒμΈνŠœλ‹ν•˜λ©΄ μ–΄λ–»κ²Œ λ˜λŠ”μ§€ μ•Œμ•„λ³΄μ•˜μŠ΅λ‹ˆλ‹€.

GPT와 BERT, 트랜슀포머 λͺ¨λΈμ˜ 2인자

GPT와 BERTλͺ¨λΈμ€ ν˜„λŒ€ 트랜슀포머의 μ‹œλŒ€μ˜ μ‹œμž‘μ„ μ•Œλ¦° 기념비적인 λͺ¨λΈμž…λ‹ˆλ‹€. μ΄λŸ¬ν•œ 트랜슀포머의 λ°œμ „μ„ 이끈 GPT와 BERT λͺ¨λΈμ΄ μ–΄λ–€ ꡬ쑰λ₯Ό κ°€μ§€λŠ”μ§€ μ‚΄νŽ΄λ³΄μ•˜μŠ΅λ‹ˆλ‹€.