Межевание, могу ли я отказать соседу, который требует у меня межевать мой участок?

Ну так межуйте сами свой участок по фактическим границам (учитывая этот кусок) .
если его участок уже окадастрен, то его согласования границы при составлении вашего межевого дела не требуется. (оно требуется только в случаях, если участок соседей еще не поставлен на кадастровый учет). получите кадастр, там будут указаны все точки вашего участка. и тогда никакой суд ему не поможет.
у меня была такая же ситуация. к моему участку прилегал кусок земель общего пользования садоводства (садоводство на этот кусок не претендовало), но торцом шириной 3 метра он прилегал и к соседям. они сбоку на него залезли и свалили всякий хлам (нормально им его было не использовать, он лежал вдоль всей одной моей стороны. я подождала, когда они сделали себе межевание (без учета этого кусочка), радостно им его подписала. а когда стала межевать себе, этот кусок включила по факту (с ними подписывать уже ничего не надо было-у них участок к тому моменту уже был окадастрен)
получила документы, показала им и попросила все дерьмо убрать с моего участка.