Употреблять его, обращаясь к женщине, не совсем корректно, точно так же, как говорить "Извините, мужчина!".
В Англии к женщине не обратятся "woman", а испанке не скажут "mujer"-это будет воспринято как фамильярность, если ни как оскорбление. "Мужчина" и "Женщина" звучит несколько грубо в контексте общения с незнакомыми (и знакомыми тоже) людьми. Более распространённое обращение у нас "девушка", но это тоже не правильно, однако, все к нему привыкли.