Местечко Жванец известно с первой половины XV столетия, в 1431 году король Польский Владислав Ягелло пожаловал его дворянину Свычку из Лечива. В царствование Сигизмиунда Августа (1548-1572) Жванец находился в закладном владении генерала Подольской земли Валентия Калиновского и тогда уже существовал в нем замок. Стоя на рубеже Подолья, Жванец подвергался частым нападениям татар, турок и молдаван. Но самую важную эпоху истории его представляет вторжение татар вызванное в 1653 году Хмельницким. Король Ян Казимир, не успев достаточно изготовиться к обороне, принужден был укрыться в Жванецком замке: татары не допустили его даже до Каменца, представлявшего более надежную защиту. На беду, в руки им попала переписка поляков, из которой было видно, что под зиму они затруднялись в продовольствии своего войска. Татары положили, держа короля в этом замке, пресечь подвоз к нему жизненных припасов. В таком крайне затруднительном положении Ян Казимир должен был просить мира ми выслушивать самые унизительные предложения со стороны врагов. Татары требовали между прочим, чтобы им предоставлено было право разграбить несколько городов и местечек. переговоры длились безуспешно несколько дней. Король выведенный из терпения и тревожимый возрастающей опасностью, согласился, наконец, давать татарам ежегодную дань и свято соблюдать Зборовский договор относительно козаков. а в заверение выдал аматами сыновей двух своих вельмож, Ланцкоронского и Олесницкого. На таком-то основании заключен мир 7 декабря 1653 года.

Из предания и из одного старинного сочинения видно, что в Жванце были некогда пещеры, имевшие сообщение с селом Кривчем, в Галиции, по ту сторону Збруча. Польские генералы Мартин Канецкий и Иоанн Капенгауз посещали их и удостоверили, что там быз бесконечный лабиринт различной величины подземных покоев, теперь нет уже и следов этого прохода.

Во времена Российской империи здесь существовала некоторое время таможня и карантин. Ныне только разрушающийся замок свидетельствует о прежнем значении этого местечка.

Изстари, кроме русских, поляков и евреев, в Жванце проживали армяне. Бывший здесь армянский костел сожжен барскими конфедератами. Другой, основанный Лаврентием Ланцкоронским, существует и поныне.