Давайте для начала вспомним, что такое классическая фантастика.

Ключевым здесь является определение из учебника: наличие фантастического допущения. Некоего "пусть в моем мире будет так" и построение мира, отталкиваясь от этого допущения. Пусть, например, найден бесконечный источник энергии, но он меняет законы физики и рано или поздно приведет к катастрофе. А откуда он найден? Как обмен массой из другого мира с другими законами физики. А почему люди на это идут? Потому что слишком удобно, проще заткнуть рот несогласным. И так далее (если что пример - это "Сами боги" Азимова).

И у этого подхода есть родовая травма - авторам слишком часто было важнее показать свою идею. Показать как изменится мир, если добавить это самое допущение. Не важно на чем сосредотачивался конкретный автор: на научных последствиях, на социальных, даже на философских - идея первична. А что вторично? Персонажи. Их арки часто были подчинены цели раскрытия мира, всех его аспектов, всех последствий допущения. По сути камера на ножках, к которой привязаться гораздо сложнее.

Возьмём, например, Пикник на обочине Стругацких. Рэдрик - яркий персонаж с интересной аркой, показывающей его глубокие эмоциональные изменения и то, как травма от окружающего мира влияет на него... Только вот между каждой главой проходит несколько лет. Потому что задача повествования не рассказать историю Рэдрика, а продемонстрировать мир в динамике и показать как он влияет на человека. Даже не конкретного Рэдрика, а человека вообще.

И это проблема, потому что массовому читателю наоборот, персонажи, их личные арки интереснее оригинальных миров. Эмоциональные арки для него первичны, а идеи вторичны.

И этим пользуются авторы других жанров. Возьмём как крайний пример подростковую антиутопию. Это не фантастика деградировавшая до набора клише. Это подростковая литература взявшая на вооружение фантастический сеттинг. Чтобы с помощью фантастических допущений обойти ограничения реального мира и писать о подростках. О персонажах, а не о мире. Мир там обычно картонный и рассыпается при ближайшем рассмотрении.

А классическая фантастика - это нишевый жанр, на какое-то время получивший популярность. Сперва на волне общего энтузиазма от развития науки. Потом - от общего разочарования. А потом вернувшийся обратно в нишевость. Но выход из нее он получит только тогда, когда авторы начнут давать читателю то, что он хочет. То есть писать про персонажей, не упрощая фантастический мир, учитывая всю его сложность, а не просто про сам мир.