しつこく二人きりになるのを誘うのは立派なセクハラ、パワハラです。
上役に相談しましょう。