4 references to Add
Microsoft.ML.Tokenizers (4)
Model\BPETokenizer.cs (4)
1258word.Add(unk.Value.Id, unk.Value.Len); 1261word.Add(id, length); 1275word.Add(unk.Value.Id, unk.Value.Len); 1298word.Add(unk.Value.Id, unk.Value.Len);