Show HN: Countless.dev – Tüm yapay zeka modellerini karşılaştıran web sitesi: LLM'ler, TTS'ler, STT'ler

Yapay zeka model karşılaştırmasına giriş

• Yapay zeka model karşılaştırması: Çeşitli yapay zeka modellerini kolayca karşılaştırmayı sağlayan açık kaynaklı bir proje. Ücretsiz sunuluyor ve her modelin girdi ve çıktı uzunluğu, fiyatı gibi bilgileri karşılaştırılabiliyor.

Fiyat karşılaştırması

• Model bazında fiyatlandırma: OpenAI, Azure, Anthropic, Google gibi çeşitli sağlayıcıların modelleri yer alıyor ve her model için girdi ve çıktı uzunluğuna göre fiyat belirtiliyor.

Model özelliklerinin karşılaştırılması

• Desteklenen özellikler: Modellerin desteklediği özellikler arasında Vision, Chat, Embedding, Image generation, Completion, Audio transcription, TTS gibi seçenekler bulunuyor.

Başlıca modeller ve fiyatları

• OpenAI: gpt-4, gpt-3.5-turbo gibi çeşitli modeller bulunuyor; girdi ve çıktı uzunlukları ile fiyatları değişiklik gösteriyor.
• Azure: gpt-4o, gpt-4-turbo gibi çeşitli modeller bulunuyor ve bazı modeller Vision özelliğini destekliyor.
• Anthropic: Claude serisi modeller bulunuyor ve çeşitli girdi ve çıktı uzunluklarını destekliyor.
• Google: Gemini, Chat-bison gibi çeşitli modeller bulunuyor ve bazı modeller Vision özelliğini destekliyor.

Model seçerken dikkat edilmesi gerekenler

• Fiyat: Modelin girdi ve çıktı uzunluğuna göre fiyatı dikkate alınmalı.
• Özellik desteği: İhtiyaç duyulan özellikleri destekleyen bir model seçilmeli.
• Sağlayıcı: OpenAI, Azure, Anthropic, Google gibi farklı sağlayıcılar arasından seçim yapılabiliyor.

[GN⁺]

Hacker News görüşleri

• LLM karşılaştırma aracından ilham alınıp alınmadığını merak ediyor. Tablo çok benzer, ancak özel hesap makinesi eklenmiş olması hoşuna gitmiş.

  • Versus Comparison'a, her LLM'in öne çıkan alanlarını vurgulayan bir onay kutusu eklenmesinin iyi olacağını düşünüyor.

• Model karşılaştırma fikrini beğeniyor. Bağımsız analiz ekleme planı olup olmadığını, yoksa bunun sadece girdi limitlerinin bir derlemesi mi olduğunu merak ediyor.

  • Bunun diğer analizlerden nasıl farklılaştığına veya onlara ne kattığına dair görüş soruyor.
  • Web sitesinin gezinmesi kolay.

• "bang to buck" değerini istiyor. Yapılandırılmamış metinden yapılandırılmış veriyi güvenilir şekilde üretebilen en ucuz modeli bilmek istiyor.

  • Şu anda gpt4o-mini kullanıyor, ancak daha ucuz bir alternatif olup olmadığını merak ediyor.

• ChatGPT'nin varsayılan istemcisinden daha iyi bir masaüstü uygulaması olup olmadığını soruyor.

  • macOS/Linux uyumluluğunu tercih ediyor.

• UI ve tablo düzenini beğeniyor. Modellerin VRAM gereksinimlerini göstermeyi düşünüp düşünmediğini merak ediyor.

• Google'ın Gemini'sinin çoğu rakibinden 10 kattan daha büyük bir context window sunduğunu iddia ettiğini belirtiyor.

  • Bunun pratikte gerçekten faydalı olup olmadığını deneyen biri olup olmadığını merak ediyor.
  • Kendi testlerinde, yaklaşık 10 konuşmadan sonra akışı kaybetme eğiliminde olduğunu söylüyor.
  • Gemini'nin gerçekten farklı çalışıp çalışmadığını, yoksa bunun pazarlama abartısı mı olduğunu merak ediyor.

• Yalnızca iki ses transkripsiyon modeli var. Açık kaynak transkripsiyon modeli olmadığı için mi böyle olduğunu, yoksa veri kümesinin küçük mü olduğunu merak ediyor.

• llmprices.dev'i öneriyor. Her 24 saatte bir otomatik olarak en güncel bilgilerle yenileniyor.

• Build sırasında üretilen loglar, test sonuçları ve metrikler build çıktısı olabilir.

  • Bazen "deployment", başka depolardaki sürüm dizelerini ve image referanslarını güncellemek anlamına gelebilir.
  • SSH anahtarı gerektiğini, ancak bunu manuel olarak halletmeyi tercih ettiğini söylüyor.

• Bu projenin bir hackathon için yapıldığını görüp büyük övgü gönderiyor.