被派遣劳动者不符合录用条件或严重违纪违法，以及不胜任工作等情形，用工单位可以要求退回被派遣劳动者。劳务派遣单位依据可以与被派遣劳动者解除劳动合同。

【法律依据】

《劳动合同法》第六十五条，被派遣劳动者可以依照本法第三十六条、第三十八条的规定与劳务派遣单位解除劳动合同。

被派遣劳动者有本法第三十九条和第四十条第一项、第二项规定情形的，用工单位可以将劳动者退回劳务派遣单位，劳务派遣单位依照本法有关规定，可以与劳动者解除劳动合同。