대형 언어 모델에 저작권 소유 자료의 영향: 노르웨이 관점
The Impact of Copyrighted Material on Large Language Models: A Norwegian Perspective
December 12, 2024
저자: Javier de la Rosa, Vladislav Mikhailov, Lemei Zhang, Freddy Wetjen, David Samuel, Peng Liu, Rolv-Arild Braaten, Petter Mæhlum, Magnus Breder Birkenes, Andrey Kutuzov, Tita Enstad, Svein Arne Brygfjeld, Jon Atle Gulla, Stephan Oepen, Erik Velldal, Wilfred Østgulen, Liljia Øvrelid, Aslak Sira Myhre
cs.AI
초록
저작권 자료를 사용하여 생성 언어 모델을 훈련시키는 것은 중요한 법적 및 윤리적 문제를 제기합니다. 본 논문은 노르웨이어 대규모 언어 모델 (LLM)의 성능에 저작권 자료가 미치는 영향을 경험적으로 평가하는 프레임워크와 결과를 제시합니다. 우리는 모델을 다양한 노르웨이 벤치마크에서 평가할 때 책과 신문이 양성으로 기여하는 반면, 소설 작품은 성능 저하로 이어질 수 있다는 것을 발견했습니다. 우리의 실험은 AI 개발에 기여하는 작품의 저자들을 위한 보상 체계의 구축에 도움을 줄 수 있습니다.
English
The use of copyrighted materials in training generative language models
raises critical legal and ethical questions. This paper presents a framework
for and the results of empirically assessing the impact of copyrighted
materials on the performance of large language models (LLMs) for Norwegian. We
found that both books and newspapers contribute positively when the models are
evaluated on a diverse set of Norwegian benchmarks, while fiction works
possibly lead to decreased performance. Our experiments could inform the
creation of a compensation scheme for authors whose works contribute to AI
development.