Родился в 1898 г. в Самаре. Сын Якова Яковлевича Винса. В 1911 г. выехал с родителями в Канаду. Член Церкви евангельских христиан-баптистов (ЕХБ). В 1918 г. окончил Библейскую школу В.А.Фетлера в г. Филадельфия (США), а в 1922 г. трехгодичную баптистскую семинарию в г. Луивилл (США). С 1923 по 1925 гг. был проповедником в русско-украинской общине ЕХБ г. Питтсбург (шт. Пенсильвания, США). Пастор (1926 г.). В 1926 г. переезжает с отцом на Дальний Восток в качестве христианского миссионера и после того, как его отец. уехал в Хабаровск, возглавил баптистскую церковь в г. Благовещенск. Женат на Лидии Жариковой (1927). Подвергался преследованиям за веру со стороны советских властей, неоднократно был арестован. П.Я. Винсу, как иностранному подданному, было предложено покинуть СССР, однако он принял решение отказаться от американского гражданства и принять советское чтобы продолжать евангелизацию. Через несколько дней после принятия советского гражданства в 1930 г. он был снова арестован и осужден на ссылку. Расстрелян 26 августа 1937 г.