A forma correta é "modéstia à parte". Essa expressão é utilizada para dizer que, apesar de se fazer uma observação que pode parecer modesta, a pessoa quer destacar algo sem falsa modéstia. Portanto, a grafia correta contém a crase.