タグタイムライン表示速度ですが、よわよわのaruba鯖でこのぐらいの表示速度です。(DTP-Mstdn.jpだとこの倍ぐらい速い)
1 CPU / 1GB / 20GB とかっていうミニマムなサーバです。CloudFlareは通している(キャッシュされている)。
PostgreSQLは10.6。Redis 4.0.9。最新master追従で、改造点はexplorerの表示条件緩和(10 followers --> 1 follower)だけ。pgBouncerは利用していない。
504が出るとかだと、激しくクエリが遅いのかもしれませんね。解明されるといいんですが……。