Братьев Орловых было пятеро: Иван (1733-1791), Григорий (1734 1783), Алексей (1737 -1808), Фёдор (1741-1796) и Владимир (1743-1831). Родились они в семье генерал-майора Григория Ивановича Орлова, старого служаки, участника петровских походов, в конце жизни бывшего некоторое время губернатором Новгорода. Орловы принадлежали к старинному, хотя и далеко не аристократическому русскому дворянскому роду. Они владели землями в Бежецком уезде — старинном новгородско-тверском пограничье.
Сыновья Григория Ивановича, за исключением младшего, Владимира, отличавшегося хрупким здоровьем, были молодец к молодцу. Они превосходили своих сверстников и ростом, и статью, и телесной мощью, и удалью и обещали вырасти в настоящих русских богатырей. Особенно наградила природа третьего из братьев — Алексея, которого уже в то время стали величать атаманом Алеханом.