我们可以看到，拖拉机是一种农业机械，其主要用途是耕地、播种、收割等。因此，从机械的角度来看，拖拉机载人属于非法用途，应该由农业部门来处理。农业部门可以通过检查农户的拖拉机使用情况，对非法用途进行处罚和取缔，以达到维护公共安全的目的。
我们也可以从交通安全角度来考虑。拖拉机是机械化农业生产的重要工具，但它并没有行驶证、驾驶证等必要的行驶证件，也没有符合交通规则的灯光、刹车、安全带等安全设施。因此，从交通安全的角度来看，拖拉机载人应该由交通部门来处理。交通部门可以对非法拖拉机进行查处和处罚，同时要对拖拉机进行安全检查和改造，以免造成交通事故和伤亡。
我们还可以从法律角度来考虑。根据《道路交通安全法》等相关法律法规，运载人员的车辆必须符合一定的要求，否则将被认定为非法行驶。因此，对于拖拉机载人这种违法行为，应该由公安部门来处理。公安部门可以通过加强巡逻和查处，对违法拖拉机进行处罚和取缔，以维护社会公共秩序和公共安全。