OPT - Meta'nın yayımladığı GPT-3 ölçeğinde (175B) dil modeli

 (arxiv.org)
7 puan yazan xguru 2022-05-04 | 1 yorum | WhatsApp'ta paylaş

"Open Pre-trained Transformer Language Model"

  • Bu tür büyük ölçekli dil modellerini oluşturmak ciddi sermaye gerektirir ve yalnızca API erişimi sunulduğunda araştırma yapmak zordur
  • İlgilenen araştırmacılar için modelin tamamı, deneysel kodlar ve logbook indirilebilir şekilde yayımlandı
  • GPT-3'e kıyasla karbon ayak izi yalnızca 1/7 düzeyinde

İlgili okumalar