Nemůžeš. Můžete analyzovat značky HTML a použít je k vytvoření objektu ve formátu RTF, který byste pak mohli nastavit jako obsah buňky; ale v samotném PHPExcelu není integrována žádná konverze z HTML do formátovaného textu, takže to budete muset udělat ručně.
