不一定要使用电池胶固定。电池胶是一种粘合剂，可以将电池固定在手机内部，防止电池松动或脱落。但是，电池胶并非必须使用，如果没有电池胶，也可以通过其他方式将电池固定在手机内部。例如，可以使用双面胶或泡棉胶带将电池固定在手机内部，这些胶带同样可以起到固定电池的作用。此外，有些手机的电池设计本身就具有固定功能，无需使用额外的胶带或粘合剂。因此，换电池时是否使用电池胶取决于电池的设计和个人喜好，并不是必须使用的。