Quitar plaga de árbol de Mamey

Buen dia, espero estar en al categoría correcta, el problema es que tengo un árbol de Mamey en mi quinta y desde siempre la cosecha ha salido con gusanos, pequeños y amarillos, no importa si la fruta esta verde o madura siempre aparecen estos pequeños amiguitos, quisiera saber si hay alguna forma de arreglarlo para que se acabe este problema ya que durante casi todo el año hay cosecha y me da lastima que se pierda siempre.