We use cookies to measure traffic and show relevant ads. By clicking Accept you agree to our use of analytics and advertising cookies.
Eksperyment pokazuje, dlaczego TinyStories tłumi Induction Heads w GPT-2. Analiza SAE, metryk i porównanie z Previous Token Heads. Zbadać wpływ zbioru danych na ICL dla swoich modeli.