针对MAXQ算法存在的弊端，提出一种改进的分层学习算法BMAXQ。该方法修改了MAXQ的抽象机制，利用BP神经网络的特点，使得Agent能够自动发现子任务，实现各分层的并行学习，适应动态环境下的学习任务。