Wenn du grade beschäftigt bist und in Ruhe gelassen werden willst, würde ich sowas wie: "Lass mich das noch schnell zu Ende machen", oder: "Moment, ich muss grade noch was erledigen/checken/eintragen" und Variationen davon einfach wiederholen, bis der Tag rum ist 😁
Für Dinge, über die du nicht reden willst, hätte ich "Hab ich keine starke Meinung zu" im Angebot. Das drückt einfach sehr neutral aus, dass einem das Thema komplett egal ist.
Wenn dir ein Thema zu persönlich ist oder du eine Fragen übergriffig findest, würde ich das einfach sagen. Wenn deine Kolleginnen und Kollegen das nicht respektieren, entweder mit der Personalabteilung reden und sagen, dass du dich nicht wohl fühlst, oder, wie du schon sagtest, den Arbeitsplatz wechseln.