Χτυπάμε τους 16 κρόκους μαζί με τη ζάχαρη μέχρι να ασπρίσουν. Στη συνέχεια χτυπάμε τα ασπράδια σε μαρέγκα. Ρίχνουμε στα αυγά πρώτα λίγο παξιμάδι, λίγη μαρέγκα, λίγο καρύδι και συνεχίζουμε μέχρι να τελειώσουν όλα τα υλικά. Τα ανακατεύουμε όλα μαζί προσθέτοντας και τα μυρωδικά (κανέλα, ξύσμα λεμονιού, βανίλια, κονιάκ).
Βάζουμε την καρυδόπιτα σε βουτυρωμένο ταψί στον φούρνο στους 180-200 °C για 30 με 45 λεπτά. Καθώς το γλυκό ψήνεται, ετοιμάζουμε το σιρόπι βάζοντας όλα τα υλικά μαζί να πάρουν 2-3 βράσεις.
Για να φτιάξουμε την κρέμα, βάζουμε σε κατσαρόλα στη φωτιά το γάλα μαζί με το αλεύρι και το ανακατεύουμε συνέχεια για να μη μας σβολιάσει. Στη συνέχεια ρίχνουμε τους κρόκους μαζί με τη ζάχαρη και, όταν γίνει η κρέμα, προσθέτουμε το βούτυρο και τη βανίλια. Κατεβάζουμε την κρέμα από τη φωτιά και την αφήνουμε να κρυώσει.
Όταν η καρυδόπιτα ψηθεί, ρίχνουμε, όπως είναι ζεστή, το σιρόπι κρύο και από πάνω στρώνουμε την κρέμα. Γαρνίρουμε με σοκολάτα κουβερτούρα, κερασάκια και καρύδια χοντροκομμένα.
