[OpenAI Dev Day] ① GPT-4.0터보 "책을 통째로 이해한다" (128k 토큰) 챗GPT
[2023년11월7일] 오픈AI가 6일(현지시간) 미국 샌프란시스코 본사에서 '오픈AI 개발자 회의(OpenAI Dev Day)'를 열고 챗GPT 업데이트를 발표했다. 다음은 Dev Day 내용에 대한 시리즈 작성을 한다. "책 통째로 이해한다" 프롬프터 엔지니어로 이번 발표에서 가장 고마운 것은 토큰 입력 확대다. 그 다음으로 2023년 4월까지 내용을 학습한 것이다. 챗GPT의 답변은 모델 버전과 설정에 따라 다르지만, 일반적으로 한 번의 답변에서 처리할 수 있는 최대 토큰 수는 대략 4,096토큰이다. 영어 단어: 토큰과 영어 단어의 비율은 정확하게 1:1이 아니다. 토큰은 때에 따라 한 단어를 여러 토큰으로 나눌 수 있다. 예를 들어, "very"는 하나의 토큰이지만 "unexpectedly"는 ..
Tech news
2023. 11. 7. 11:30