TI/LLM

Z Brain-wiki

Duże modele językowe — Large language models, LLM

Na wykładzie o sztucznych sieciach neuronowych zapoznaliśmy się z procesem uczenia sieci. Uczenie i używanie dużych modeli językowych opiera się na tych samych podstawach, wprowadzając jednocześnie wiele nowości.

Korpus

https://huggingface.co/spaces/HuggingFaceFW/blogpost-fineweb-v1 noborder


Tokenizacja

https://tiktokenizer.vercel.app/ noborder


Działanie

https://poloclub.github.io/transformer-explainer/