Neuronové sítě pro zpracování přirozeného jazyka
| dc.contributor.advisor | Bulín Martin, Ing. M.Sc. | |
| dc.contributor.author | Čedík, Jan | |
| dc.contributor.referee | Frémund Adam, Ing. | |
| dc.date.accepted | 2023-6-20 | |
| dc.date.accessioned | 2024-01-15T23:11:14Z | |
| dc.date.available | 2022-10-17 | |
| dc.date.available | 2024-01-15T23:11:14Z | |
| dc.date.issued | 2023 | |
| dc.date.submitted | 2023-5-22 | |
| dc.description.abstract | Tato bakalářská práce se zabývá zpracováním přirozeného jazyka pomocí neuronových sítí. V současnosti dochází k rychlému rozvoji neuronových sítí v tomto oboru, přičemž společnost OpenAI je hlavním průkopníkem s jejími velkými modely založenými na architektuře Transformer. Teoretická část se zaměřuje právě na tuto architekturu, konkrétně na architektury T5, BERT a GPT. V praktické části provádíme experimenty jak v češtině, tak v angličtině, založené na architektuře T5. Shromáždili jsme data obsahující přirozené dialogy mezi jednotlivci. Pro dosažení co nejlepších předpovědí výstupu se snažíme o různé modifikace trénovacích dat, jako je značkování nebo augmentace. Hodnocení se provádí pomocí modelu sémantické návaznosti, který porovnává vstup a výstup modelu. | cs |
| dc.description.abstract-translated | This bachelor's thesis deals with natural language processing using neural networks. Currently, there is a rapid development of neural networks in this field, with the company OpenAI being a major pioneer with its large models based on the Transformer architecture. The theoretical part focuses on this architecture, specifically the T5, BERT, and GPT architectures. In the practical part, we conduct experiments in both Czech and English languages based on the T5 architecture. We gathered data containing natural dialogues between individuals. Through various modifications of the training data, such as tagging or augmentation, we aim to achieve the best possible output predictions. Evaluation is performed using a semantic continuity model, comparing the input and output of the model. | en |
| dc.description.result | Obhájeno | |
| dc.format | x, 56s. (86 705 znaků) | |
| dc.identifier | 93415 | |
| dc.identifier.uri | http://hdl.handle.net/11025/55115 | |
| dc.language.iso | cs | |
| dc.publisher | Západočeská univerzita v Plzni | |
| dc.rights | Plný text práce je přístupný bez omezení | |
| dc.subject | neuronové sítě | cs |
| dc.subject | zpracování přirozeného jazyka | cs |
| dc.subject | transformer architektura | cs |
| dc.subject | bert | cs |
| dc.subject | t5 | cs |
| dc.subject | gpt | cs |
| dc.subject | augmentace | cs |
| dc.subject | úprava dat | cs |
| dc.subject | chatbot | cs |
| dc.subject.translated | neural networks | en |
| dc.subject.translated | natural language processing | en |
| dc.subject.translated | transformer architecture | en |
| dc.subject.translated | bert | en |
| dc.subject.translated | t5 | en |
| dc.subject.translated | gpt | en |
| dc.subject.translated | augmentation | en |
| dc.subject.translated | data modification | en |
| dc.subject.translated | chatbot | en |
| dc.thesis.degree-grantor | Západočeská univerzita v Plzni. Fakulta aplikovaných věd | |
| dc.thesis.degree-level | Bakalářský | |
| dc.thesis.degree-name | Bc. | |
| dc.thesis.degree-program | Kybernetika a řídicí technika | |
| dc.title | Neuronové sítě pro zpracování přirozeného jazyka | cs |
| dc.title.alternative | Neural networks for natural language processing | en |
| dc.type | bakalářská práce |
Files
Original bundle
1 - 4 out of 4 results
No Thumbnail Available
- Name:
- BP_Cedik.pdf
- Size:
- 2.91 MB
- Format:
- Adobe Portable Document Format
- Description:
- Plný text práce
No Thumbnail Available
- Name:
- PosudekVedoucihoSTAG.pdf
- Size:
- 61.16 KB
- Format:
- Adobe Portable Document Format
- Description:
- Posudek vedoucího práce
No Thumbnail Available
- Name:
- posudek.pdf
- Size:
- 312.57 KB
- Format:
- Adobe Portable Document Format
- Description:
- Posudek oponenta práce
No Thumbnail Available
- Name:
- Prubeh obhajoby Cedik.pdf
- Size:
- 82.09 KB
- Format:
- Adobe Portable Document Format
- Description:
- Průběh obhajoby práce