Yapay zeka eğitimi için metin veri koleksiyonu

 (the-eye.eu)
15 puan yazan xguru 2020-10-26 | 2 yorum | WhatsApp'ta paylaş

OpenAI'nin GPT-3'te kullandığı verilere benzer kaynaklar

  • books3.tar.gz : 37GB, yaklaşık 197.000 kitabın txt olarak çıkarılmış hali

  • github.tar.gz : 106G, GitHub'daki çeşitli repoların derlenmiş hali

  • stackexchange_dataset.tar : 34G, Stack Exchange'in soru-cevap verileri

Bunların dışında da çok sayıda farklı kaynak var

İlgili okumalar

2 yorum

 
ffdd270 2020-10-27

Biraz alakasız gelebilir ama, böyle eğitim amaçlı arşivleri ve arşivleri görünce dijital dünyada unutulma özgürlüğünün olmadığını yeniden fark ediyor insan.
 
xguru 2020-10-26

Bu materyalle ilgili açıklama için aşağıdaki Twitter zincirine bakın

https://threadreaderapp.com/thread/1320282149329784833.html