TI/LLM

Z Brain-wiki

Duże modele językowe — Large language models, LLM

Na wykładzie o sztucznych sieciach neuronowych zapoznaliśmy się z procesem uczenia sieci. Uczenie i używanie dużych modeli językowych opiera się na tych samych podstawach, wprowadzając jednocześnie wiele nowości.

Korpus

noborder

https://huggingface.co/spaces/HuggingFaceFW/blogpost-fineweb-v1

Tokenizacja

noborder

https://tiktokenizer.vercel.app/