Si los iconos no aparecen cuando instanciamos componentes de Fabric UI, debemos inicializarlos en nuestro código una única vez, al inicio de cargar nuestra aplicación.
Debemos importar el typing y llamar al metodo de inicialización:
import { initializeIcons } from '@uifabric/icons';
initializeIcons();
Más información: https://github.com/OfficeDev/office-ui-fabric-react/blob/master/packages/icons/README.md