Darf ich fragen, was genau du da nach Noten gespielt hast?
Also wenn ich fünf Jahre lang von Noten gespielt hätte, dann könnte ich da einiges von auswendig.
Setz dich doch erstmal ans Set und versuch Dinge aus deinem Gedächtnis nachzuspielen.
Ich persönlich fänd es schwieriger nach Noten zu spielen, aber wenn dir das wirklich leicht fällt (auch bei schwierigeren Sachen), dann guck doch mal, ob es von der Band, die du am liebsten hörst, eine Art Songbook oder ähnliches mit Schlagzeugnoten gibt (im Zweifelsfall machst dus halt mit den im Netz verfügbaren Tabs).
Dann schnappst du dir das, hörst den Song über Kopfhörer und spielst dazu die Noten nach.
Und mit der zeit versuchst du dann einfach ohne die Noten mitzuspielen.
Vielleicht bekommst du dann ein Gefühl dafür, ohne Noten zu spielen.
Am besten wäre es aber definitiv, dich mit ein paar anderen zusammenzurotten und einfach draufloszuspielen.
Selbst wenn du dann erstmal nur Bumm Tschack spielst, irgendwann wird der Punkt kommen wo du denkst "Hm da könnt ich doch auch mal aufs Tom hauen".
Allein die Bassdrum"platzierung" zu verschieben ist da auch schon ein Anfang.
Von 0 auf 100 wirst du nicht kommen, du musst dir deine Freiheit erarbeiten.