Zeitraum für Fertigstellung Außenanlage nach Hausbau

Gibt es ein Gesetz/Regelung, was mich einschränkt, wie lange ich nach dem Hausbau für meinen Außenanlage brauchen darf?
Hintergrund:
Wir haben 2014 unser Grundstück gekauft und mussten diese erst beräumen / beräumen lassen. 2016 - 2017 haben wir dann gebaut und seit dem sind wir mit den Außenanlagen beschäftigt. Ein Nachbar kam nun letztens und meinte, dass laut seinem Anwalt man nur 2 Jahre Zeit hätte. Heute der gleiche Nachbar meinte, dass sie in der Zeitung einen Bericht gelesen hätten, dass man nach Fertigstellung des Hauses 5 Jahre Zeit hätte für die Außenanlagen, damit im "Viertel" irgendwann wieder Ruhe einkehrt.
Ergänzend muss ich sagen, wir gehen nicht jeden Samstag mit dem Abbruchhammer und Rüttelplatte durch den Garten . Klar ist der Zaun incl. Vorgarten nicht mal an einem Samstag erledigt. Dauerte 6 Wochen/Samstag im Frühjahr. Dafür war jetzt den ganzen Sommer Ruhe, da ich im Schuppen werkeln musst + Urlaub + Hitze.
Auch leben wir in einem Mischgebiet (und nicht im Sanatorium), wo aktuell noch andere Nachbarn bauen - mal mehr, mal weniger.
--
Klar versuche ich Rücksicht zunehmen. Aber die Arbeiten müssen nunmal gemacht werden. Und irgendein Hobby braucht man ja auch .
Nur was hätten denn die Nachbarn für eine Grundlage für ihre Behauptung mit den 5 Jahren...?

 

Danke. Also scheint es nix konkretes zu geben?
Ich vermute ja, dass es hier Einzelfallentscheidung gibt. Der Nachbar meinte: "ja laut Zeitung wurde die Auflage durch das Amt auferlegt". Klar, wenn jemand seit Jahren jeden Tag den ganzen Tag um sein Haus nur Baulärm macht, kann man dieser sicher vom Amt her mit Auflagen versehen. Wenn es überhaupt eine rechtliche Grundlage dafür gibt.
Wir halten uns an die Lärmschutzverordnung (Bundesimmissionsschutzgesetz) und darüber hinaus. Ich dürft sogar Samstag von7:00 - 20:00 durchweg arbeiten. Trotzdem aktzeptieren wir die Mittagsruhe am Samstag.
Etwas hab ich mir aber bisher nicht nehmen lassen : Ich wollte meine Motorsense durch einen Trimmer ersetzen. Aber der Trimmer ist mir viel leise . Nee..., ist ja wieder mit Geld verbunden, was ich nur wegen der Lärmminderung nicht ausgeben wollte.

Doch die Nachbar scheinen fertig zu sein. Es sind Renter die haben den ganzen Tag Zeit, um ihre wenigen Arbeiten zu erledigen. Die erwachsenen Kinder, welcher mit Haus wohnen, haben sich quasi ins gemachte Nest gesetzt.
Was heißt fertig gemäß Bauantrag? Klar sind wir fertig DAMIT. Aber die Außenanlagen sind ja nicht im Bauantrag enthalten. Auf dem Grundstück standen beim Kauf noch alte Garagen. Zwei davon blieben erhalten. Eine ist bereits als Werkstatt soweit fertig. Die andere muss noch "saniert" werden. Macht auch wieder Arbeit, wofür es aber keinen Bauantrag braucht. Für den zweiten Carport brauchte es auch keinen Bauantrag. Nur die Fundamente etc. muss man auch machen - die waren aber an zwei Tagen durch.
Und ja, fertig ist man NIE, wenn man ein Grundstück hat, außer man lässt es herunter kommen.