Minecraft com FPS baixo em PC potente.

Olá
Tenho uma rx 580 2048 sp e um i5 3570 
Rodo warzone no médio e tudo mais, mais no Minecraft o FPS fica extremamente baixo e fica travando mas somente quando instalo mods, não importa se tem um modpack de 20 mods ou apenas 1 mod ele trava igual 
Alguém tem uma ideia do que seja e a solução?