岩屋外相、ホームタウン問題で謝罪「初動遅れた」「外国人に不安や不公平を感じる状況は承知している」