不向法院起诉有以下方式催收债务：

1、电话催收；

2、书面函件催收；

3、面访催收；

4、索要确认函和书面付款计划。

【法律依据】

根据《民事诉讼法》第119条规定，起诉必须符合下列条件：

(一)原告是与本案有直接利害关系的公民、法人和其他组织；

(二)有明确的被告；

(三)有具体的诉讼请求和事实、理由；

(四)属于人民法院受理民事诉讼的范围和受诉人民法院管辖。