Hola Alejandro.
Tu no remas sino que paleas porque llevas una pala y no un remo. El remo de una embarcacion tiene un punto de apoyo en la misma y la pala no, aunque el verbo "palear" todavía sale en rojo cuando escribes con corrector. Si siempre te tuerces al mismo lado es porque no paleas con la misma intensidad por ambos lados, puede ser que no agarres la pala correctamente y una mano esté mas cerca de la hoja que la otra. Puedes solucionarlo poniendo unas cintas que te indiquen la posición o colocando el dedo meñique en la unión hoja/mástil, marcas un palmo (al mismo tiempo ambas manos) y tienes referencia exacta.
Lo mas seguro es que no sea esto, el Ysak tiene una proa alzada sensible al viento, la técnica consiste en cantear (inclinar el kayak) al lado opuesto al giro deseado. Con viento lateral la proa del kayak busca la dirección del viento, la orza corrige este efecto pero en tu barco no es viable por ser de plástico. Con la práctica corregirás este efecto apretando mas por un lado que por otro, esto puede ser cansado y aunque yo no sea partidario la solución fácil es instalar un timón.