L’azienda è stata fondata nel 1761 a Stein, vicino Norimberga, da Caspar Faber, quando le matite di grafite erano una novità, ma è il barone Lothar von Faber a trasformarla in un importante produttore di matite e, in seguito, di un vasto assortimento di strumenti per la scrittura e il disegno. Il figlio di Caspar, Anton Wilhelm, acquistò un lotto di terreno sul confine di Stein. Allargò il laboratorio di matite fino a farlo diventare una moderna manifattura. Lo stabilimento è ancora oggi la sede centrale dell’azienda.
Nel 1978 il conte Anton-Wolfgang von Faber-Castell subentra ai vertici aziendali. Nello stesso anno amplia il portafoglio del marchio con la produzione di matite in legno per il make up. Nei tre decenni successivi il gruppo Faber-Castell continua ad affermarsi come azienda con presenza globale e radici tedesche.
Con la fondazione di altre società e stabilimenti esteri l’azienda fa il proprio ingresso in numerosi nuovi mercati in tutto il mondo, soprattutto in Sud America (Argentina 1988, Costa Rica 1996, Colombia 1998, Cile 2006) e Asia/Pacifico (Malaysia 1978, Hong Kong 1979, Indonesia 1990, India 1997, Singapore 2000 e Cina 2001).