Грамматический словарь Зализняка (склонения слова):
Купальщица, купальщицы, купальщицы, купальщиц, купальщице, купальщицам, купальщицу, купальщиц, купальщицей, купальщицею, купальщицами, купальщице, купальщицах
купа́льщица
-ы, ж.
женск. к купальщик.