alvarobartt/bpe.zig

Minimal implementation of a Byte Pair Encoding (BPE) tokenizer in Zig

语言：Zig · GitHub 星标：15 · Fork：0

话题：bpe · gpt-2 · tokenizer · zig

在 GitHub 上查看原仓库