lehrkraefte:sbt:informatik-glf2-23:llm_gpt [https://fginfo.ksbg.ch Fachgruppe Informatik der KSBG]

This page is read only. You can view the source, but not change it. Ask your administrator if you think this is wrong.
===== Starter Lektion LLM und GPT =====
==== Einführung ====

<WRAP left round box 100%>
'''me:'''
Schreibe eine Einfürhung zu LLM und GPT mit Erklärung der Abkürzungen.

'''ChatGPT:''' 
Selbstverständlich! Hier ist eine Einführung zu LLM (Large Language Models) und GPT (Generative Pre-trained Transformer) mit Erklärungen der Abkürzungen:

<WRAP left round tip 60%>
'''Einführung in Large Language Models (LLM) und GPT'''

In der heutigen Ära der künstlichen Intelligenz (KI) spielen Large Language Models (LLM) eine herausragende Rolle. LLM beziehen sich auf eine spezielle Klasse von maschinellen Lernmodellen, die darauf abzielen, natürliche Sprache zu verstehen, zu generieren und darauf zu reagieren. Ein prominentes Beispiel für ein solches LLM ist das Generative Pre-trained Transformer (GPT).

'''Generative Pre-trained Transformer (GPT)'''

GPT, was für Generative Pre-trained Transformer steht, ist eine Art von LLM, das von OpenAI entwickelt wurde. Der Name “Transformer” bezieht sich auf eine bestimmte Architektur von neuronalen Netzwerken, die bei der Verarbeitung von Sequenzen, wie beispielsweise Sätzen oder Texten, äußerst effektiv ist. Das Adjektiv “Pre-trained” deutet darauf hin, dass das Modell zuvor auf einer großen Menge von Textdaten vortrainiert wurde, bevor es für spezifischere Aufgaben feinabgestimmt oder verwendet wird. “Generative” bedeutet, dass das Modell in der Lage ist, neue Texte zu erstellen, die auf den Eingaben basieren, die es erhält.

'''Abkürzungen:'''

  * '''LLM''': Large Language Models - Große Sprachmodelle. Diese Modelle sind darauf ausgelegt, natürliche Sprache zu verstehen, zu generieren und zu verarbeiten.
  * '''GPT''': Generative Pre-trained Transformer - Ein spezifisches LLM, das von OpenAI entwickelt wurde. Es basiert auf der Transformer-Architektur und ist darauf ausgelegt, Text zu generieren.
 
Die Fortschritte in LLM, insbesondere in Modellen wie GPT, haben zu bedeutenden Entwicklungen in der natürlichen Sprachverarbeitung geführt und ihre Anwendungsbereiche umfassen Textgenerierung, Übersetzung, Zusammenfassung, Dialogsysteme und vieles mehr. Diese Modelle haben das Potenzial, menschenähnliche Interaktionen mit Computern zu ermöglichen und die Art und Weise zu verändern, wie wir mit digitalen Systemen kommunizieren.

</WRAP>
</WRAP>
soweit der Shootingstar '''ChatGPT'''
-----

==== Neuronale Netze ====

  * [[https://www.youtube.com/watch?v=1uVWCSmUi7g | Neuronales Netz Erklärvideo]]
  * [[https://lena-voita.github.io/nlp_course/language_modeling.html|Language Modelling]]

==== Unterricht ====
=== Schüler ===

  * [[https://www.soekia.ch/gpt.html | Intro SoekiaGPT]]
  * [[https://www.soekia.ch/GPT |  Direktstart SoekiaGPT]] ⬅️ ja, dass ist wirklich eine GPT❗
  * [[https://www.soekia.ch/GPT/SoekiaGPT-Video.mp4 | Erklärvideo SoekiaGPT]]

<span id="lehrperson"></span>
=== Lehrperson ===

  * [[https://www.soekia.ch/SoekiaGPT_Handreichung_f%C3%BCr_Lehrpersonen.pdf | Handreichung]]
  * [[https://www.soekia.ch/IBiS_1-1_PB-2_Hielscher_SoekiaGPT.pdf | SoekiaGPT-Beschreibung]]

==== Zusatzmaterial ====
=== ABC-Noten-Notation ===

  * [[https://notabc.app/abc/what/ | ABC What?]]
  * [[https://abcnotation.com/ | ABC Notennotation]]
  * [[https://abc.rectanglered.com/ | ABC Notenplayer]]
  * **[[https://editor.drawthedots.com/ | ABC Notenplayer]]: good player**

=== Musik in ABC-Notation finden: ===

  * [[http://trillian.mit.edu/~jc/cgi/abc/tunefind ABC Library 1]]
  * [[https://abcnotation.com/ | ABC Library 2]]
  * [[https://flat.io/community/challenges/2024-02 | Challanges]]
  * ABC-Editor und Player [[https://github.com/jwdj/EasyABC | EasyABC]]