Ich nutze selber zwei Canon 6d, eine Sony A7 und eine Fuji XE-2s.
Auch ich finde die Fuji ist optisch gesehen die schönste Kamera. Die Retro Bedienung spricht mich sehr an. Jedoch muss ich auch sagen, dass sie am besten mit Fuji Glas zurecht kommt. Altglas geht natürlich auch wunderbar. Die Adaption von EF Linsen ist allerdings eine Qual und habe nach wenigen malen nicht mehr gemacht. Der AF stellt mich einfach nicht zufrieden, dann lieber gutes manuelles Altglas.
Du solltest also die Investition in ein paar Fuji Gläser miteinplanen oder direkt zur x100 greifen, dann erübrigt sich das Linsenproblem.
Ich nutze meine jedoch gerne, weil sie nun mal sehr klein ist und in die Jackentasche passt. Das ist bei der XT schon wieder knapp. Ich denke bevor ich eine XT nehmen würde, würde ich immer wieder zur A7 gehen. Wenn Fuji dann eher XE oder Pro Reihe.
Ganz umsteigen würde ich nicht, da fehlt mir dann der KB Sensor bei Fuji..