Span[] tokenSpans = tokenizer.tokenizePos(sentence);
String[] tokens = getTokensForSpans(sentence, tokenSpans);
String[] pos;
double[] posProbs;
if(posTagger != null){
pos = posTagger.tag(tokens);
posProbs = posTagger.probs();
} else {
pos = null;
posProbs = null;
}