Ich muss gestehen, dass ich aufgrund der Beschreibung das Problem und das, was Du gern hättest, nicht nachvollziehen kann. Du lieferst kein Beispiel, wie Du das caption plugin verwendest. Was Du zeigst, ist auch nicht die Syntax für ein Bild, sondern für einen Link, der ein Bild enthält. Das heisst, es wäre ein Link, wenn die Syntax korrekt wäre.
Eine Abbildung wäre hier vielleicht hilfreich.