Александр Казарский  родился в семье отставного губернского секретаря, управляющего имением князя Любомирского. В доме Казарских не поощрялось чтение книг, зато отец привил Александру уверенность в непоколебимости устоев империи[, дал чёткое понятие о чести и верности Отечеству. В 1808 году к Казарским приехал крёстный Александра — Василий Семёнович и предложил определить Александра в Черноморское штурманское училище в Николаеве. Отец согласился и, по свидетельству капитан-лейтенанта Ивана Николаевича Сущева, первого биографа Казарского, сказал на прощание: «Честное имя, Саша, — это единственное, что оставлю тебе в наследство».
Эти слова Казарский пронёс через всю жизнь. Он помнил их. когда бриг повёл "Меркурий" в бой против двух турецких кораблей «Селимие» и «Реал-беем», имеющими в сумме десятикратное превосходство в количестве орудий. Приняв неравный бой, экипаж брига под командованием Казарского одержал блестящую победу, нанеся противнику повреждения, принудившие его выйти из боя. Турецкий офицер с «Реал-бея» писал позже:"Ежели в великих деяниях древних и наших времён находятся подвиги храбрости, то сей поступок должен все оные помрачить, и имя сего героя достойно быть начертано золотыми литерами на храме Славы: он называется капитан-лейтенант Казарский, а бриг — «Меркурий»."
Этими же словами он руководствовался, когда 1833 году Казарский был направлен для проведения ревизии и проверки тыловых контор и складов в черноморских портах. Но эту миссию он выполнить не успел.