TI/LLM: Różnice pomiędzy wersjami

Z Brain-wiki
Linia 2: Linia 2:
 
Na wykładzie o [[TI/Sztuczne_sieci_neuronowe|sztucznych sieciach neuronowych]] zapoznaliśmy się z procesem uczenia sieci. Uczenie i używanie dużych modeli językowych opiera się na tych samych podstawach, wprowadzając jednocześnie wiele nowości.
 
Na wykładzie o [[TI/Sztuczne_sieci_neuronowe|sztucznych sieciach neuronowych]] zapoznaliśmy się z procesem uczenia sieci. Uczenie i używanie dużych modeli językowych opiera się na tych samych podstawach, wprowadzając jednocześnie wiele nowości.
  
==Dane==
+
==Korpus==
 
[[Plik:Fineweb.png|noborder|800px]]
 
[[Plik:Fineweb.png|noborder|800px]]
  
 
https://huggingface.co/spaces/HuggingFaceFW/blogpost-fineweb-v1
 
https://huggingface.co/spaces/HuggingFaceFW/blogpost-fineweb-v1
 
  
 
==Tokenizacja==
 
==Tokenizacja==

Wersja z 11:15, 27 paź 2025

Duże modele językowe — Large language models, LLM

Na wykładzie o sztucznych sieciach neuronowych zapoznaliśmy się z procesem uczenia sieci. Uczenie i używanie dużych modeli językowych opiera się na tych samych podstawach, wprowadzając jednocześnie wiele nowości.

Korpus

noborder

https://huggingface.co/spaces/HuggingFaceFW/blogpost-fineweb-v1

Tokenizacja

noborder

https://tiktokenizer.vercel.app/