På Darlington Hall i England på 30-talet härskar butlern James över den stora skaran tjänstefolk. Han visar aldrig några känslor. När den nya hushållerskan dyker upp sätts han ur spel.