# わたしのべんきょうノート

## 勉強した論文や技術等の情報をGithubのIssueにメモっているひとのブログ。 それなりにメモの量が蓄積されてきたので、一度整理したいなと思いブログはじめてみました！ 自然言語処理(NLP), 推薦システム(RecommenderSystem), Educational Data Mining (EDM), Learning Analytics (LA)などの分野のメモが多いと思います。 最近は特にLLMにお熱 :)

Jan 3, 2025 AkihikoWATANABE About 1 min

Light

Dark

## Subword

#Pretraining#MachineLearning#Pocket#NLP#LanguageModel
Issue Date: 2024-11-12 LBPE: Long-token-first Tokenization to Improve Large Language Models, Haoran Lian+, arXiv24 CommentBPEとは異なりトークンの長さを優先してマージを実施することで、最終的なトークンを決定する手法で、![image](https://github.com/user-attachments/assets/99b91472-88d8-4792-bf04-acc67956e4f5)![image]( ...
Related Articles

- DataGenerationに関する論文・技術記事メモの一覧 TOP NEW
- Extractiveに関する論文・技術記事メモの一覧 TOP NEW
- InformationExtractionに関する論文・技術記事メモの一覧 TOP NEW
- Repositoryに関する論文・技術記事メモの一覧 TOP NEW