Préchauffer le four à 170°. Porter le lait à ébullition. A part, dans une autre casserole sur feu doux, faire fondre le beurre avec le sucre roux et le miel. Battre l’œuf et l'incorporer au mélange beurre-miel-sucre.
Laver les oranges et les râper en zestes, puis couper les morceaux de gingembre confit en lamelles.
Dans un saladier, mélanger les deux farines, le bicarbonate, le gingembre, les zestes d'oranges, la cannelle et les deux pincées de "4 épices".
Ajouter progressivement cette préparation au mélange beurre-miel-sucre, et verser ensuite le lait tiédi toujours en remuant.
Ecraser les biscuits "Spéculoos" en morceaux et les ajouter à la pâte.
Beurrer et fariner un moule à cake (ou recouvrir les parois de papier sulfurisé). Verser la pâte dans le moule et laisser reposer à température ambiante pendant 10 minutes.
Cuire à 170° pendant 35 à 40 minutes. Laisser refroidir quelques minutes avant de démouler. Déguster tiède ou froid.