Οι στίχοι του τραγουδιού αναδεικνύουν τη συναισθηματική αναταραχή και την εσωτερική σύγκρουση που βιώνει ο άντρας. Παραδέχεται ότι εξακολουθεί να σκέφτεται την πρώην του «κάθε νύχτα και μέρα» και ότι «δεν μπορεί παρά να αναρωτιέται» αν τον σκέφτεται κι εκείνη. Αναγνωρίζει ότι πρέπει να προχωρήσει, αλλά δεν μπορεί να το κάνει, καθώς η καρδιά του είναι ακόμα δεμένη μαζί της.
Το ρεφρέν τονίζει την αδυναμία του άνδρα να ανταποδώσει την αγάπη που του προσφέρει κάποιος άλλος. Τραγουδάει, «Δεν μπορώ να σε αγαπήσω πίσω, παρόλο που προσπαθείς σκληρά» και «Ακόμα κρατάω το φάντασμα αυτού που είχαμε». Αυτό υποδηλώνει ότι δεν είναι συναισθηματικά διαθέσιμος για μια νέα σχέση και εξακολουθεί να καταναλώνεται από τα συναισθήματά του για την πρώην σύντροφό του.
Σε όλο το τραγούδι ο άντρας εκφράζει τη λαχτάρα του για το παρελθόν και την επιθυμία του να είναι ξανά με την πρώην του. Τραγουδάει, «Μακάρι να μπορούσα να γυρίσω πίσω και να αναιρέσω όλα τα πράγματα που κάναμε» και «Μακάρι να μπορούσα να σε κρατήσω ξανά στην αγκαλιά μου». Αυτό υποδηλώνει ότι μετανιώνει για τον χωρισμό και παλεύει να αποδεχτεί την πραγματικότητα του χωρισμού τους.
Συνολικά, το "I Can't Love You Back" είναι ένα συγκινητικό τραγούδι για την απογοήτευση, την απώλεια και τις προκλήσεις της μετάβασης από μια προηγούμενη σχέση. Καταγράφει τη συναισθηματική αναταραχή και την ευαλωτότητα κάποιου που εξακολουθεί να παλεύει με τον απόηχο ενός χωρισμού και δεν μπορεί να ξαναβρεί την αγάπη.