不能退耕林。

因为根据相关法规，土地使用权的退还必须符合规定，如果已经缴纳过4年的土地使用费，那么就不能退耕林了。

此外，即便是没有缴纳土地使用费的情况下，也要根据政策规定进行申请，并经过相关部门审批才能进行退耕林。

因此，交过士地使用费4年的地不能退耕林。