No, nadie tiene una explicación satisfactoria. Por lo que puedo decir, aunque hay muchos artículos examinados en el primer enlace a continuación, se extienden a lo largo de muchos años y disciplinas, y no hay muchas comunidades de investigación donde esta pregunta es (o hace mucho tiempo que es) una tema candente, aunque los efectos de la frecuencia en el lenguaje fueron brevemente un tema a mediados del siglo XX y luego comenzaron de nuevo en los años 80, alcanzando prominencia en la lingüística y campos relacionados hasta la actualidad. (Hubo algunas fuentes de este resurgimiento, pero la única más grande es probablemente “el giro empírico” en la IA, cuyo éxito comenzó a extenderse a lo largo de las ciencias cognitivas: la lectura relacionada con la hora de acostarse es On Chomsky de Peter Norvig y Las dos culturas del aprendizaje estadístico. )
Los papeles que busca (principalmente el primero):
- Piantadosi 2014 – La ley de frecuencia de palabras de Zipf en lenguaje natural: una revisión crítica y direcciones futuras
- Piantadosi, Tily, Gibson 2012 – La longitud de las palabras está optimizada para una comunicación eficiente