Фамилия образована от топонима Vorzhev Vorzha - село в Ростовской области Ярославской области на берегу реки Vorzhi. В XVI веке в Vorzhe жили рыбаки, lovivshie в озере рыбу для московского дворца. В 1608 году польские войска разорили соседнее село Grodichi, но полностью нетронутыми Vorzhu. В ознаменование этого события, Ростове митрополит Филарет Романов Никитич построен в Vorzhe в 1609 году деревянная церковь Покрова Богородицы. В XIX веке, основным занятием жителей деревни было садоводство.
Сам топоним, по некоторым версиям, происходит от глагола "гадать", что вы делали языческих ведьм, которые жили здесь. Согласно другой гипотезе, деревня, расположенная среди полей засеяны рожью, за которые он так и называлась - Vorzha.
Возможно, имена основателем был уроженец или житель села Vorzha. Vorzha в конечном счете получил название Vorzhev.