Si, un árbol de levas es muy caro, y se cambia solo si esta muy malo (o uno es fanático millonario y quiere sacarle más potencia).
Lo aconsejable, seria que esmeriles un poco los bordes con una pasta de pulir o una lija al agua muy fina. De ese modo, no vas a rebajar, y vas a eliminar cualquier arista que pueda generar un enganche en el futuro. O sea "redondear bordes de rayas", no rebajar.
Y que las marcas sean justo sobre la entrada de aceite, es lógico: El punto que más sufre al quedarse sin lubricación.
Y el haber sacado las virutas, es bueno!. De todos modos, no se si lo tendrá el tuyo, pero muchos motores tienen magnetizado el tapón de drenaje del carter: Y ahí quedan atrapadas las pequeñas virutas que puedan aparecer. Primer lugar para buscar. El filtro es relativo... porque algunos motores tiene flujo total por el filtro, y otros parcial. En el total, pueden atraparlas... en el parcial, se les pueden escapar.