MySQLのindex_lengthはバイト単位ですか？

はい、バイトです。 showtablestatusの他の長さについても同じことが言えます。それらはすべてバイト単位です：

Avg_row_length
Data_length
Max_data_length
Index_length