No soy informático pero hay 4 motivos que podrían afectarte:
1.- La configuración del propio Filezilla
2.- La configuración del Firewall.
3.- La configuración del Router.
4.- Que el server que tengas contratado te limite a 20mbps por descarga. (esta parece más que probable)