Es posible que estes sobreentrenando, aunque no das información suficiente para saberlo. No es lo mismo bajar 4 segundos en una o dos semanas (entra dentro de lo normal), que hacerlo durante 3 o cuatro semanas seguidas.
De todos modos no creo que sea buena idea correr la prueba al 100% todas las semanas. Es mejor seguir haciendo series, y dejar el test mejor para cada 15 o 30 días. Al fin y al cabo, el ritmo al que haces las series ya te va indicando tu estado de forma y la marca que puedes conseguir.
Para mejorar tu técnica de natación tienes que hacer técnica de natación: recobro, sólo brazada, sólo patada, respiración, etc...