4 references to Add
Microsoft.ML.Tokenizers (4)
Model\BpeTokenizer.cs (4)
1274word.Add(unk.Value.Id, unk.Value.Len); 1277word.Add(id, length); 1291word.Add(unk.Value.Id, unk.Value.Len); 1314word.Add(unk.Value.Id, unk.Value.Len);