Da, u mnogo slučajeva je svejedno da li koristiš pamtiti ili sećati se. Takođe, glagol sećati se može da ima i "trenutno" značenje, ako kažeš "upravo sam se setio gde sam ostavio telefon" a "pamtiti" ili "zapamtiti" mogu podrazumevati i da nešto znaš, ako kažeš "zapamtio sam njegov broj telefona".

I would say that the verb PAMTITI matches to the English verb MEMORIZE, and SEĆATI SE to the verb REMEMBER. But, as always, it depends on the context. (Sećaš li se Marka Markovića? Pamtiš li njegov broj telefons? / Zapamti ovaj dogadjaj, uvek ćeš ga se sećati ).

I pamtiti i sećati se su nesvršeni glagoli i imaju značenje "imati nešto sačuvano u svesti, pamtiti nekoga nešto". Upotreba jednog ili drugog je u vezi sa kolokacijama, šta je ustaljeno u govoru. Primeri: Još uvek pamtim njene reči. Još uvek se sećam njenih reči. (isto značenje) No, u sledećim primerima ima male razlike: Pamtim ja njega. - arhaično, ne tako tipično za savremeni govor Sećam se njega. Glagol "sećati se" nema trenutno značenje, jer je nesvršen (imperfective), već glagol koji u infinitivu glasi "setiti se". Isto ne možemo da izjednačimo glagole "pamtiti" i "zapamtiti", jer je prvi nesvršen, a drugi svršen, pa se drugačije i upotrebljavaju. Više o tome na http://learn-serbian-online.blogspot.rs/2016/06/perfective-imperfective-imperfective.html Sve u svemu, "sećam te se" je prirodnije za današnju upotrebu jezika.