可以通过以下方式关心女孩子下班很晚：提供打车费用，确保她安全到家；关注她的出行安全，询问她是否安全到达目的地；提供一定的自卫常识和技能，如何避免危险；保持联系，确保她在下班后有人关心和照顾。