聚众赌博的处罚要是具体情节而定，若只是违反治安管理处罚法，则最长拘留5天或罚款500元以下。但一旦聚众赌博的行为触犯刑法的规定，则要判处三年以下有期徒刑或管制，并处罚金；情节更加严重的，如涉案金额超过5万参与或人数超过20人的，还要处三年以上十年以下的有期徒刑，并处罚金。
【本文关联的相关法律依据】
《治安管理处罚法》第七十条：
以营利为目的，为赌博提供条件的，或者参与赌博赌资较大的，处五日以下拘留或者五百元以下罚款；情节严重的，处十日以上十五日以下拘留，并处五百元以上三千元以下罚款。
《刑法》第三百零三条：
以营利为目的，聚众赌博或者以赌博为业的，处三年以下有期徒刑、拘役或者管制，并处罚金。
开设赌场的，处三年以下有期徒刑、拘役或者管制，并处罚金；情节严重的，处三年以上十年以下有期徒刑，并处罚金。