https://news.sherlock.stanford.edu/posts/when-setting-an-environment-variable-gives-you-a-40-x-speedup Переменная окружения отвечающая за настройку цветов вывода ls команды влияет на то, на основании чего эти цвета вычисляются и какие данные она поэтому считывает с файловой системы. Это существенно может влиять на производительность этой команды.