Average probability of each token: Token 0 (' A'): 0.004697 Token 1 (' B'): 0.004732 Token 2 (' C'): 0.004720 Token 3 (' D'): 0.004694 Token 4 (' E'): 0.004699 Token 5 (' F'): 0.004703 Token 6 (' G'): 0.004708 Token 7 (' H'): 0.004688 Token 8 (' I'): 0.004697 Token 9 (' J'): 0.004682 Token 10 (' K'): 0.004697 Token 11 (' L'): 0.004741 Token 12 (' M'): 0.004670 Token 13 (' N'): 0.004760 Token 14 (' O'): 0.004723 Token 15 (' P'): 0.004704 Token 16 (' Q'): 0.004725 Token 17 (' R'): 0.004688 Token 18 (' S'): 0.004684 Token 19 (' T'): 0.004707 Token 20 (' U'): 0.004663 Token 21 (' V'): 0.004685 Token 22 (' W'): 0.004708 Token 23 (' X'): 0.004685 Token 24 (' Y'): 0.004696 Token 25 (' Z'): 0.004660 Token 26 (' _'): 0.788149 Token 27 (' >'): 0.014938 Token 28 (' !'): 0.059773 Token 29 (''): 0.014923 Token 30 (''): 0.000000