Mach mal einen Versuch mit einem Holzbohrer. Der zentriert sich erst und schneidet dann aussen zuerst. Geht sicher besser als ein Metallbohrer. Wichtig: ebene "Opfer"-Unterlage und gut fixieren. Wenn Das Material beim Durchstechen hochkommt, Sperrholz darüber.
Von Julian kenne ich den Tipp, bei dünnem Blech durch einen Lappen zu bohren. Ist evtl. auch einen Versuch wert.
Wenns nur wenige Löcher auch: Klein vorbohren, mit der Rundfeile erweitern. Hat auch den Vorteil, dass Du bezüglich der Lage noch etwas korrigieren kannst, wenn die Kernbohrung nicht ganz präzise sitzt.