Phoebe Kontekstowe okno modelu – klucz do zrozumienia „pamięci” sztucznej inteligencji
Modele językowe 🤖 nie „pamiętają” jak ludzie. Mają okno kontekstowe 📚, które pozwala im analizować pewną ilość tokenów (np. 128k) na raz. Im większe okno, tym lepiej „zapamiętują” kontekst 📈. Jednak gdy limit zostanie przekroczony, najstarsze informacje są „zapuszkowane” 🚫. Pamięć zewnętrzna 💻 może pomóc w przechowywaniu danych na dłużej. 😄