ai 3세대
-
데이터 품질과 생성형 AI 기술 동향주간기술동향 2024. 9. 22. 12:17
ITFIND 주간기술동향 2130호 본 내용의 경우 IITP의 주간기술동향에 대해서 요약한 내용으로 원문은 아래의 링크를 참고 부탁드립니다.https://www.itfind.or.kr/streamdocs/view/sd;streamdocsId=W8XLa3T5c9i2aswHzvNAk-Jq857zfbGxS87bB4aZXjg 발행일: 2024-04-17 서론2023년 마이크로소프트는 데이터의 품질과 성능의 연관성을 위해 실험을 하였으며, 실험 결과에서 놀랍게도 교과서로 학습한 모델이 더 많은 데이터를 사용한 거대한 모델의 성능을 뛰어 넘는다는 것을 보여주었다. 아래 그림처럼 Vicuna 모델, 7억 개의 파라메터를 가지는 Llama2, MPT, Falcon보다 1.3억 개의 파라메터를 가지는 phi-1.5 ..