Γεννήθηκε στο Σάουθσι του Πόρτσμουθ. Η οικογένειά του συμμετείχε στα βαριετέ της εποχής, κάτι που έκανε και ο ίδιος από μικρή ηλικία, μαθαίνοντας στην πράξη χορό, τραγούδι και ηθοποιία, ενώ έπαιξε και ντραμς σε διάφορες τζαζ μπάντες. Κατά το Δεύτερο Παγκόσμιο Πόλεμο υπηρέτησε στη RAF σαν μη-ιπτάμενος, λόγω της κακής του όρασης.
Μετά τον πόλεμο ξαναγύρισε στα βαριετέ, ενώ αργότερα παρουσίασε την ραδιοφωνική εκπομπή «The Goon Show» που μεταφέρθηκε στην τηλεόραση και τον έκανε αρκετά γνωστό. Το 1955 άρχισε να εμφανίζεται στον κινηματογράφο, κάνοντας επιτυχία με Βρετανικές κωμωδίες, πιο σημαντική απ’ τις οποίες ήταν «Το ποντίκι που βρυχάται».
Το 1962 συμμετείχε στην κινηματογραφική μεταφορά του μυθιστορήματος του Β. Ναμπόκοφ «Λολίτα» από τον Στάνλεϊ Κιούμπρικ υποδυόμενος το ρόλο του Κλαιρ Κίλτι. Έκανε μεγαλύτερη και διεθνή επιτυχία μετά την εμφάνισή του στην ταινία «Ο Ροζ Πάνθηρας» το 1963, και στη συνέχειά της του 1964, ενώ την ίδια χρονιά εμφανίστηκε και στη σημαντική κωμωδία του Στάνλεϊ Κιούμπρικ «S.O.S Πεντάγωνο Καλεί Μόσχα», παίζοντας τρεις διαφορετικούς ρόλους. Την ίδια χρονιά παντρεύτηκε τη Σουηδή ηθοποιό Μπριτ Έκλαντ και έπαθε την πρώτη του καρδιακή προσβολή.
Ακολούθησαν τρεις συνέχειες του «Ροζ Πάνθηρα» αλλά και άλλες σημαντικές ταινίες όπως «Καζίνο Ρουαγιάλ», «Το Πάρτυ», «Τα σατανικά κόλπα του Φου Μαντσού» και ο βασικός ρόλος στην ταινία «Να Είσαι Εκεί Κύριε Τσανς» του Γέρζι Κοζίνσκι που του χάρισε τη Χρυσή Σφαίρα.
Ο Σέλερς πέθανε στις 24 Ιουλίου 1980 από καρδιακή προσβολή. Δυο χρόνια μετά το θάνατό του κυκλοφόρησε στους κινηματογράφους η ταινία «Στα Ίχνη του Ροζ Πάνθηρα» στην οποία χρησιμοποιήθηκαν σκηνές που ο Σέλερς είχε γυρίσει πριν το θάνατό του για τις υπόλοιπες ταινίες της σειράς.