Your LLM Evaluation
Is Lying to You ∘ İrem Ergun

AI Connect Istanbul olarak sizi yeni etkinliğimize davet ediyoruz! 🎉

AI Connect Istanbul, yapay zeka alanında bilgi paylaşımını artırmak ve teknoloji ekosistemine katkı sağlamak amacıyla Kommunity organizatörlüğünde kurulmuş bir topluluktur.

30 Eylül tarihinde gerçekleşecek bu etkinlikte, deneyimlerimizi paylaşmak için online olarak bir araya geliyoruz.

Cohere ekibinde Senior Machine Learning Engineer olarak görev alan İrem Ergun, "Your LLM Evaluation
Is Lying to You" sunumu ile deneyimlerini paylaşmak üzere bizimle olacak.

Bugün çoğumuz LLM tabanlı özellikleri hızla geliştirip prod’a alabiliyoruz. Ancak bu özelliklerin sahada gerçekten değer yarattığını somut verilerle ortaya koyabilmek hepimiz için hala en büyük zorluk. Benchmark’lar manipüle edilmeye açıktır, demolar sadece en iyi senaryolar cımbızlanarak sunulur, çıktıyı değerlendirmesi için görevlendirdiğimiz LLM'in bile kendine göre önyargıları vardır.

Bu konuşma, bir sonucun "iyi görünmesi" ile "gerçekten iyi olması" arasındaki o kritik farkı ve bu farkı nasıl kapatacağımızı anlatıyor.

Canlıdaki modellerin değerlendirme süreçlerinden yola çıkarak LLM kalitesini ölçerken düşülen yaygın tuzakları henüz kullanıcılarınız fark etmeden yakalamanızı sağlayacak pratik, düşük maliyetli alışkanlıklar hakkında  konuşacağız.

Oturumun sonunda gürültüyü gerçek sinyalden ayırabilen ve benchmark’ları eleştirel gözle okuyabilen bir bakış açısı kazanacaksınız.

Eğer siz de yapay zeka teknolojilerini öğrenmek, projeler geliştirmek, fikirlerinizi paylaşmak ve bu alanda güçlü bir topluluğun parçası olmak istiyorsanız bize katılabilirsiniz. Topluluğumuz herkese açık ve ücretsizdir.

Önerilerinizi dinlemek istiyoruz 💙
AI Connect Istanbul’da önümüzdeki etkinlikleri topluluğumuzun ilgi ve beklentilerine göre şekillendirmek istiyoruz. Görmek istediğiniz konuları, dinlemek istediğiniz konuşmacıları ve sizin için uygun etkinlik saatlerini anket üzerinden bizimle paylaşabilirsiniz.

Her seviyeden geliştirici, öğrenci, araştırmacı ve teknoloji meraklısını topluluğumuza bekliyoruz. 
Birlikte öğrenelim, birlikte üretelim ve yapay zekanın geleceğini birlikte şekillendirelim!