Na počátku slavné továrny na tužky stál Joseph Hardtmuth. Patřil k části bavorského rodu Hardtmuthů, která v 18. století přesídlila do Rakous. Roku 1790 založil firmu na výrobu kameniny ve Vídni a roku 1802 si patentoval vynález výroby grafitové tuhy z grafitu a jílu. Roku 1808 postavil novou továrnu na výrobu tužek a kameniny ve Vídni, továrna roku 1848 přesídlila do Českých Budějovic, výroba kameniny byla ukončena a vyráběly se výhradně tužky.
Ve zdokonalování výroby pokračoval i Franz Hardtmuth. Uvedl na trh žlutě zbarvenou tužkou s velkým rozsahem tvrdosti grafitového jádra a s vysokou kvalitou. Nazval ji KOH-I-NOOR podle velikého indického žlutého diamantu KOCH-I-NUR, "Hora světla". Tato tužka získala zlatou medaili na světové výstavě v Paříži a dodnes je nejznámějším výrobkem firmy. Franz také přišel s devatenácti gradacemi. Označil je písmeny B jako black (1-8), H jako hard(1-10) a F jako firm, případně HB jako střed. Toto jeho značení se dodnes užívá po celém světě.