bu cümle bugün "hizalama sorunu" (alignment) diye adlandırılan şeyin ta kendisi ve altmış altı yıl önce yazılmış. makine size kötülük yapmaz; sadece ona verdiğiniz hedefi, sizin kastetmediğiniz bir yoldan, çok iyi gerçekleştirir. tıklanma sayısını artır dersiniz, öfke üretir. maliyeti düşür dersiniz, kaliteyi keser. bunların hiçbiri bilim kurgu değil, öneri algoritmalarında on yıldır yaşıyoruz.
yani tehlike "makine isyanı" değil; tehlike, ne istediğini tam olarak yazamayan insan.


@mean