舒位祖籍直隶大兴(今属北京)人,但舒位自称:“余生于吴门大石头巷。”伯父希忠曾官江南,父永福偕行,因而寄居吴门。乾隆三十年(1765)母沈氏于苏州生下舒位,沈氏本也吴人。舒位少颖悟,十岁能文,伯父希忠赞曰:“此吾家千里驹也。”14岁随父任居广西永福县,其父官舍后有铁云山,因而自号铁云山人。乾隆五十三年(1788)中举人,不久伯父犯事遭抄家,于广西任县丞的父亲亦以事失官,旋殁于江西。舒位奉父柩回吴门,但家贫无屋而一度借居湖州乌镇,后才移居苏州。
舒位一生坎坷,曾九次参加会试
考试,皆不中,遂绝意进取。居京师时,作戏曲,礼亲王爱其才,辄以作品付家乐演习,给以润笔,并与当时