디퓨전모델
코드 작성 AI가 2.3배 빨라진다: 디퓨전 모델의 구조화 마법
텍스트 디퓨전 모델이 코드 생성 시 기존 방식보다 2.33배 빠른 이유. 구조화된 출력과 병렬 디코딩의 관계를 실험 데이터로 분석합니다.
Written by
BERT는 텍스트 디퓨전 모델이었다: RoBERTa로 30분 만에 만든 생성 AI
BERT의 마스크 언어 모델링이 사실 디퓨전 모델의 한 형태였다는 발견과, RoBERTa를 30분 학습으로 텍스트 생성 모델로 전환한 실험을 소개합니다.
Written by
