Aprenda a conta palavras em uma string em JavaScript

Uma das limitações e ponto de atenção da API do chatGPT é o limite de palavras: isso aparece em forma de tokens. Até onde sei: não tem como saber antes de enviar. Uma solução que achei é criar uma estimativa do número de palavras, em função dos tokens

Abaixo um exemplo em como contar palavras em uma string em JavaScript, isso pode ser usado para evitar de mandar algo maior do que deveria.

Curva no Excel mostrando a relação entre token e palavras. Quase linear, alfa= 0,408828001

---

Créditos: criado com ajuda do chatGPT