Активизируйте панель в легенде - там можно удалить добавленные значения.
А вот редактировать связь нельзя, да и зачем? Можно добавлять не только перетаскиванием, но и используя кнопку со звездочкой.