Gintarų piliakalnis stūkso netoli Kartenos miestelio, Minijos kairiajame krante. Įrengtas I tūkst. pradžioje ir buvo naudojamas iki V-VI a. Į vakarus nuo piliakalnio esančioje terasoje nuo I tūkst. prieš Kr. pab. – iki XIII a. veikė kapinynas.

XVI-XVII a. ant piliakalnio stovėjo Kartenos dvaras, kurį supo 3 tvenkiniai, o šalia buvo evangelikų reformatų bažnyčia. Manoma, kad dvaras sunaikintas gaisro apie XVII a. vidurį, karų su švedais metu. Kalvą vietos gyventojai vadina Vyšnių kalnu ir pasakoja apie ją įvairius padavimus.

Vienas jų byloja kad, švedams užpuolus dvarą, gražuolė pono duktė pasislėpė lobių rūsyje, kuriame liko gyva palaidota po rūmų griuvėsiais. Ją išvaduoti galima tik sykį per 300 metų. Kartą, priartėjus išvadavimo laikui, ji prisisapnavo ligotam žmogui ir mainais už sveikatos sugrąžinimą paprašė ją išvaduoti. Šiam sutikus, gražuolė liepė pasidaryti daug šermukšnio kryželių ir, kai tik jis pateks į pilies požemius, bučiuoti per juos visus, kas prieis. Davęs pažadą, žmogus greitai išgijo ir ankstų Velykų rytą nuėjo prie Vyšnių kalno. Kur buvęs, kur nebuvęs šalia atsirado kažkoks tarnas ir įvedė į pilies požemius, kuriuose ant aukso skrynios sėdėjo juoda mergina. Netrukus žmogų apnyko visokiausios baidyklės, kurias jis bučiavo kaip sapne prisakė gražuolė. Su kiekvienu pabučiavimu mergina vis balo ir balo. Ir kai juoda liko tik galva, atslinko baisi rupūžė, iš kurios gerklės veržėsi ugnys. Žmogus pabūgo, metė viską ir pabėgo. Išbėgdamas dar išgirdo merginą vaitojant: "Kad tu būtum negimęs... Man vėl 300 metų teks kentėti..." Sugrįžęs namo žmogus netrukus vėl susirgo. Prieš mirtį norėjo parodyti artimiesiems tą vietą, kur požemiuose lobiai paslėpti, bet mirė Vyšnių kalno nepasiekęs.

Kitas padavimas mena, kad Kartenos dvaro ponas labai mėgo vyšnias ir pasodino didelį sodą. Švedams dvarą sudeginus, sodas išliko ir kiekvieną pavasarį baltais žiedais papuošdavo kalvą. Dėl to ji ir buvo pavadinta Vyšnių kalnu.