本发明公开了一种基于改进轻量YOLOv4的遥感图像目标检测方法，属于无人机航拍遥感图像的目标检测技术领域，包括以下步骤：对遥感数据集进行格式转换；按比例将转换后的遥感数据集划分；对骨干网络进行改进，对骨干网络的低层和高层的输入特征图分别进行Haar小波变换，通过Ghost模块对高频特征进行卷积融合，将融合后的特征与普通卷积对特征图提取的特征相加；对Neck进行改进，在FPN前、改进的骨干网络的最后一个残差结构后的两个分支上引入坐标注意力；设置训练参数，得到并保存权重数据；选取验证集损失函数最小的模型训练权重载入到网络中，用测试集进行测试。本发明能够提高无人机航拍遥感图像的目标检测精度和实时性。