Edit in JSFiddle

/*

Bonjour, 

Pour pour permettre la lecture audio sans passer par une lightbox et surtout sans devoir tout charger, il est par exemple possible d'utiliser un seul et unique élément audio, avec une src vide au départ et de le manipuler à tour de rôle en fonction des clicks utilisateur.
  
Pour se faire:
1. Ajouter un élément audio dans le dom (directement dans l'html ou via une création en js). Ici je l'ai ajouté dans l'html

2. Ajouter cette fonction en l'adaptant éventuellement


En espérant vous avoir aidé,
Bien à vous !
  
 */

function lireaudiosanslightbox(lienaudio) {
 	//On arrête le player 
  $('#audioplayer').get(0).pause();
  
  //On met le player à zéro (il n'y a pas de fonction stop)
  $('#audioplayer').attr("currentTime", 0)

  //On change la source audio avec le bon lien
	$('#audioplayer').attr("src", "http://beninlangues.com/" + lienaudio);
  
  //On lance la lecture
  $('#audioplayer').get(0).play();
  
}
<div class="mot">[Abaisser]</div>
<div id="phraud2" class="l">
    <div class="ll">Abaisse-le : </div>
    <div class="lll">Dɔn ɛ do do</div>
    <div class="llll">
        <a class="lire" onclick="lireaudiosanslightbox('audios/phrasesaudios/fongbe/abaisse-le1489334124.mp3');"><img src="http://beninlangues.com/img/play.png" alt="Lire l'audio" />Lire l'audio</a>
    </div>
</div>
<div class="mot">[Abandonner]</div>
<div id="phraud3" class="l">
    <div class="ll">Ses compagnons l'abandonnèrent : </div>
    <div class="lll">Gbɛ tɔn lɛ jo e do</div>
    <div class="llll">
        <a class="lire" onclick="lireaudiosanslightbox('audios/phrasesaudios/fongbe/ses-compagnons-l-abandonnerent1463660590.mp3');"><img src="http://beninlangues.com/img/play.png" alt="Lire l'audio" />Lire l'audio</a>
    </div>
</div>
<div class="mot">[Abattre]</div>
<div id="phraud4" class="l">
    <div class="ll">II est très abattu par la maladie : </div>
    <div class="lll">Azɔn zin i d'ɛ</div>
    <div class="llll">
        <a class="lire" onclick="lireaudiosanslightbox('audios/phrasesaudios/fongbe/ii-est-tres-abattu-par-la-maladie1463660754.mp3');"><img src="http://beninlangues.com/img/play.png" alt="Lire l'audio" />Lire l'audio</a>
    </div>
</div>
<div id="phraud5" class="l">
    <div class="ll">Ma grosse hache a abattu l'arbre : </div>
    <div class="lll">Gbolu ce wɛn atin</div>
    <div class="llll">
        <a class="lire" onclick="lireaudiosanslightbox('audios/phrasesaudios/fongbe/ma-grosse-hache-a-abattu-l-arbre1463661074.mp3');"><img src="http://beninlangues.com/img/play.png" alt="Lire l'audio" />Lire l'audio</a>
    </div>
</div>

<audio id="audioplayer" src="">Veuillez mettre à jour votre navigateur !</audio>