Prompt-Engineering-Guide/pages/risks/biases.tr.mdx

98 lines
3.0 KiB
Plaintext
Raw Normal View History

2023-08-29 21:34:46 +00:00
# Önyargılar
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
LLM'ler, modelin aşağıdaki görevlerdeki performansını bozabilecek ve potansiyel olarak zararlı olabilecek ve önyargılar sergileyebilecek sorunlu üretimler yapabilir. Bunların bazıları etkili istem stratejileri ile hafifletilebilirken, daha ileri düzey çözümler gerektirebilir, örneğin düzenleme ve filtreleme.
2023-04-08 08:23:03 +00:00
### Örneklerin Dağılımı
2023-08-29 21:34:46 +00:00
Az örnekli öğrenme yaparken, örneklerin dağılımı modelin performansını etkiler mi veya modeli bir şekilde önyargılı hale getirir mi? Burada basit bir test yapabiliriz.
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
*İstem:*
2023-04-08 08:23:03 +00:00
```
2023-08-29 21:34:46 +00:00
S: En iyi haberlerim oldu!
Y: Pozitif
2023-04-08 08:23:03 +00:00
S: İş yerinde zam aldık!
2023-08-29 21:34:46 +00:00
Y: Pozitif
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
S: Bugün başardıklarımdan çok gururluyum.
Y: Pozitif
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
S: Bugün hayatımın en güzel günü!
Y: Pozitif
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
S: Hafta sonunu dört gözle bekliyorum.
Y: Pozitif
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
S: Harika bir hediye aldım!
Y: Pozitif
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
S: Şu anda çok mutluyum.
Y: Pozitif
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
S: Bu harika aileye sahip olduğum için çok şanslıyım.
Y: Pozitif
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
S: Hava dışarıda çok kasvetli.
Y: Negatif
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
S: Çok kötü bir haber aldım.
Y: Negatif
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
S: Bu kötü bir tat bıraktı.
Y:
2023-04-08 08:23:03 +00:00
```
ıktı:*
```
2023-08-29 21:34:46 +00:00
Negatif
2023-04-08 08:23:03 +00:00
```
2023-08-29 21:34:46 +00:00
Yukarıdaki örnekte, örneklerin dağılımının modeli önyargılı hale getirmediği görülüyor. Bu iyi. Sınıflandırılması daha zor bir metinle başka bir örnek deneyelim ve modelin nasıl performans gösterdiğini görelim:
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
*İstem:*
2023-04-08 08:23:03 +00:00
```
S: Buradaki yemek lezzetli!
2023-08-29 21:34:46 +00:00
Y: Pozitif
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
S: Bu kurs işinden çok sıkıldım.
Y: Negatif
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
S: Sınavı başaramadığıma inanamıyorum.
Y: Negatif
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
S: Bugün harika bir gün oldu!
Y: Pozitif
2023-04-08 08:23:03 +00:00
S: Bu işten nefret ediyorum.
2023-08-29 21:34:46 +00:00
Y: Negatif
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
S: Buradaki hizmet berbat.
Y: Negatif
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
S: Hayatımdan çok bunaldım.
Y: Negatif
2023-04-08 08:23:03 +00:00
S: Hiç ara vermiyorum.
2023-08-29 21:34:46 +00:00
Y: Negatif
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
S: Bu yemek kötü tadıyor.
Y: Negatif
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
S: Patronuma tahammül edemiyorum.
Y: Negatif
2023-04-08 08:23:03 +00:00
S: Bir şey hissediyorum.
2023-08-29 21:34:46 +00:00
Y:
2023-04-08 08:23:03 +00:00
```
ıktı:*
```
2023-08-29 21:34:46 +00:00
Negatif
2023-04-08 08:23:03 +00:00
```
2023-08-29 21:34:46 +00:00
Son cümle biraz subjektifken, dağılımı tersine çevirdim ve bunun yerine 8 pozitif örnek ve 2 negatif örnek kullandım ve ardından aynı cümleyi tekrar denedim. Modelin ne yanıt verdiğini tahmin edin mi? "Pozitif" yanıtını verdi. Modelin duygu sınıflandırılması hakkında çok fazla bilgisi olabilir, bu yüzden bu problem için önyargı sergilemesi zor olacak. Buradaki tavsiye, dağılımı çarpıtmamak ve bunun yerine her etiket için daha dengeli bir örnek sayısı sağlamaktır. Modelin fazla bilgiye sahip olmadığı daha zor görevlerde, muhtemelen daha çok zorlanacaktır.
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
### Örneklerin Sırası
Az örnekli öğrenme yaparken, sıra modelin performansını etkiler mi veya modeli bir şekilde önyargılı hale getirir mi?
2023-04-08 08:23:03 +00:00
2023-08-29 21:34:46 +00:00
Yukarıdaki örnekleri deneyebilir ve sırayı değiştirerek modelin bir etikete önyargılı hale gelip gelmediğini görebilirsiniz. Tavsiye, örnekleri rastgele sıralamaktır. Örneğin, tüm pozitif örneklerin önce ve daha sonra negatif örneklerin son olmasını önleyin. Bu sorun, etiketlerin dağılımı çarpık olduğunda daha da artar. Bu tür bir önyargıyı azaltmak için her zaman çok deney yapmaya dikkat edin.