晒干的红薯干可以用烤箱烤，但需要注意以下几点：

1. 预热烤箱：将烤箱预热至适宜的温度，通常为150-180度左右。

2. 切片：将晒干的红薯干切成适当大小的薄片，这有助于烤制的均匀和口感的酥脆。

3. 烤盘铺垫：在烤盘上铺上烤纸或者涂上少量食用油，以防止红薯干粘在烤盘上。

4. 烤制时间：将切好的红薯干均匀地铺在烤盘上，放入预热好的烤箱中，烤制时间一般为20-30分钟左右，具体时间可以根据红薯干的厚度和烤箱的温度进行调整。

5. 翻面和观察：在烤制过程中，可以适当翻动红薯干，以保证烤制的均匀。同时，可以观察红薯干的颜色和酥脆程度，以确定是否烤制完成。

需要注意的是，烤箱烤制的红薯干可能不如传统的烤制方法（如火炉烤制）口感更好，但是烤箱烤制可以更加方便和快捷，适合在家中进行。