Вот только экспресс не умеет ни кэш, ни авторизацию, ни формочки, ни ресолв зависимостей, ни модульность, потому что веб-сервер это веб-сервер, и ничего более.

Фре́ймворк (иногда фреймво́рк; англицизм, неологизм от framework — остов, каркас, структура) — программная платформа, определяющая структуру программной системы; программное обеспечение, облегчающее разработку и объединение разных компонентов большого программного проекта.

Отсюда
Так вот экспресс вообще никаким образом не определяет структуру приложения и не объединяет никакие компоненты. Типичная схема его работы - передать в него хэндлер запроса, как функцию, и всё. Абсолютно также, как апачу или энжинксу нужно указать, что такие-то запросы обрабатывает index.php, а такие-то отдать, как статику.

Там же далее по тексту:

«Фреймворк» отличается от понятия библиотеки тем, что библиотека может быть использована в программном продукте просто как набор подпрограмм близкой функциональности, не влияя на архитектуру программного продукта и не накладывая на неё никаких ограничений. В то время как «фреймворк» диктует правила построения архитектуры приложения, задавая на начальном этапе разработки поведение по умолчанию — «каркас», который нужно будет расширять и изменять, согласно указанным требованиям.

В данном случае express.js - это и есть библиотека для реализации функционала веб-сервера.

Пример фреймворка - это symfony. Чтобы было совсем понятно, представь, сколько времени займет переписывание проекта с симфони на чистый пхп. Для сравнения, переписать проект с express.js на нативный js - это порядка 15-60 минут.