METR: Anthropic, 100 sayfalık raporun 'en bilgilendirici' kanıtlarının çoğunu halka açık sürümden çıkardı
Orijinal başlık: METR: Anthropic redacted much of the "most informative" evidence from METR's 100-page report, so readers "must rely on our judgment more than we consider ideal" (@metr_evals)
Kısaca
METR, Anthropic'in model değerlendirmesine dair yaklaşık 100 sayfalık tam raporu şirkete sundu, ancak halka açık sürümde en aydınlatıcı bulduğu kanıtların çoğunluğu çıkarıldı. Kurum, bu nedenle okurların sonuçlarına kurumun yargısı üzerinden, istediğinden daha fazla güvenmek zorunda kaldığını söyledi.
Ne oldu?
- METR, Anthropic'e sunduğu yaklaşık 100 sayfalık değerlendirme raporunun halka açık sürümünde, en bilgilendirici bulduğu kanıtların çoğunluğunun çıkarıldığını açıkladı.
- Kurum, bu durumun okurları sonuçları değerlendirirken METR'in yargısına 'ideal bulduğumuzdan daha fazla' dayanmaya ittiğini belirtti.
Neden önemli?
Üçüncü taraf yapay zeka güvenlik denetimlerine dayanan şirketler ve ekipler için, model geliştiricinin denetim raporunun kritik bölümlerini sansürleyebilmesi denetimlerin bağımsızlığı ve doğrulanabilirliği konusunda ciddi bir güven sorununu işaret ediyor.
100 sayfalık rapor


