Angular:事件侦听器在指令更改之间递增增加

我有一个Angular状态，它可以在三个模板之间旋转，每个模板都由自己的指令控制。指令有事件侦听器，但当我在指令中轮换时，事件侦听器加起来一个，在第一次转换到另一个指令后，一切都开始出错。我试图修复这些错误，但没有成功。以下是三个指令之一的示例：

angular.module('app').directive('presetStationOne', function($interval, $parse, $compile, PresetFactory){
    var linker = function(scope, element, attrs){
        PresetFactory.assign(1,6,scope);
        scope.$watch('page1', function(newVal, oldVal){
            if(newVal === true) {
                allEncompassing(document, PresetFactory, scope, "start");
            }
        });
        scope.$on('$destroy', function(){
            allEncompassing(document, PresetFactory, scope, "finish");
        });
    };
    return {
        restrict: 'EA',
        scope: false,
        link: linker,
        templateUrl: 'public/templates/freeplay/presetspage1.html'
    };  
}); 

这里是函数allEncompassing()，它是所有三个presetStation指令。它们都使用PresetFactory，当我从一个指令更改为另一个指令时，对PresetFactory的调用会逐渐增加。

function allEncompassing(document, PresetFactory, scope, msg){
    if (msg === "finish"){
        removeMyListeners();
    }   
    function clickListen(e){
        var f;
        if (!e.target.attributes.stationnumber){
            if (undefined){
                return;
            } else if(!e.target.parentNode || !e.target.parentNode.parentNode || !e.target){
                return;
            } else if (!e.target.parentNode.parentNode.attributes.hasOwnProperty('stationnumber')){
                return;
            } else {
                return f = e.target.parentNode.parentNode.attributes;
            }
        } else {
            return f = e.target.attributes;
        }
    }
    function resetMouseup(PresetFactory){
        restartMyListeners();
        PresetFactory.mouseUp();            
    }
    function execMouseup(e){
        resetMouseup(PresetFactory);
    }
    function execClickListen(e){
        var f = clickListen(e);
        if (f !== undefined){
            PresetFactory.mouseDown(f, scope);
            scope.$digest();
            restartMyListeners();
        } else {
            return;         
        }
    }
    function restartMyListeners(){
        restartMousedown();
        document.removeEventListener('mouseup', execMouseup);
        document.addEventListener('mouseup', execMouseup);
    }
    function restartMousedown(){
        document.removeEventListener('mousedown', execClickListen);         
        document.addEventListener('mousedown', execClickListen);
    }
    function removeMyListeners(){
        document.removeEventListener('mousedown', execClickListen);         
        document.removeEventListener('mouseup', execMouseup);
    }
    if (msg === "start"){
        restartMyListeners();
    }
}

减少增加这些事件侦听器并将其保留为单个事件侦听器的最佳方法是什么？