日韓防衛相非公式会談、自民会合で批判「安易にすべきでない」