能否使用12伏电源适配器给手电钻充电？

可以。

如果电源适配器的接口和手电钻的充电极性一致就是允许的，电源适配器的电压略高于锂电池的电压是正常的。不必担心。