Vilniuje ir kituose LDK miestuose budeliai ėmė rastis XIV a. pabaigoje, o iki tol budelio funkcijas tekdavo atlikti, pavyzdžiui, amnestuotiems nusikaltėliams. Pirmiausia budeliai atsirado LDK priklausiusioje Palenkėje, kur anksčiausiai išsiplėtojo miestų savivalda.

1465 m. Kazimiero teisyne minimi kankinimai, juos budelis turėjo taikyti vagysčių bylose. Lietuvos Statutai irgi kalba apie budelius. Trečiajame Statute (1588 m.) nurodyta, kad budelius privalo turėti visi pilies teismai, tik neaišku, kaip šis reikalavimas buvo vykdomas.

Nežinome ir, matyt, niekada nesužinosime kada Vilniuje atsirado budelis. Reikia manyti, kad tai įvyko XIV a. pabaigoje arba XV a. pradžioje, kai susiformavo miesto savivalda. Vilniaus vaitas 1432 m. magdeburgine privilegija gavo teisę skirti mirties bausmes, tad tikėtina, kad tuo metu miestas jau turėjo budelį. Tačiau pirmasis dokumentuotas Vilniaus budelio veiksmas kur kas vėlesnis: 1580 m. Rotušės aikštėje jis nukirsdino valstybės išdaviką didiką Grigalių Astiką.