Για να φτιάξουμε εύκολο παγωτό ξυλάκι χωρίς ειδική φόρμα, ξεκινάμε κόβοντας το κουτί του γάλακτος με ένα μαχαίρι στο πάνω μέρος. Το ξεπλένουμε και το αφήνουμε να στεγνώσει.
Χτυπάμε στο μίξερ την κρέμα γάλακτος μέχρι να σφίξει και να αποκτήσει παχύρρευστη υφή (περίπου όπως είναι το γιαούρτι). Θέλουμε να στέκεται στο κουτάλι, αλλά να μην έχει γίνει σαντιγί.
Προσθέτουμε το ζαχαρούχο γάλα και χτυπάμε για 10 δευτερόλεπτα μέχρι να αναμειχθούν τα δύο υλικά και να σφίξει λίγο ακόμη η κρέμα. Αδειάζουμε το μείγμα κουταλιά κουταλιά μέσα στο κουτί του γάλακτος. Χτυπάμε το κουτί 4-5 φορές πάνω στον πάγκο έτσι ώστε το μείγμα να απλώσει καλά.
Με ένα λεπτό, μυτερό και κοφτερό μαχαίρι κάνουμε οπές στη μία πλαϊνή πλευρά του κουτιού, ξεκινώντας την πρώτη περίπου 2 εκ. από το κάτω μέρος και τις υπόλοιπες σε απόσταση 4 εκ. από την προηγούμενη. Ανάλογα με το μέγεθος του κουτιού, θα βγουν 4-5 οπές. Μπήγουμε σε κάθε οπή από 1 ξυλάκι παγωτού (το μπήγουμε περίπου μέχρι τη μέση).