Το μουσείο του βρίσκεται στην Ποταμιά Θάσου. Εγκαινιάστηκε το 1981 και έχει έδρα το πέτρινο κτήριο του παλιού δημοτικού σχολείου. Φιλοξενεί 98 έργα γλυπτικής και 15 πίνακες ζωγραφικήςΟ Πολύγνωτος Βαγής γεννήθηκε στις 14 Ιανουαρίου το 1894 στην Ποταμιά. Ο πατέρας του ήταν μαραγκός από τη Θάσο ενώ η μητέρα του καταγόταν από γνωστή ναυτική οικογένεια της Ύδρας. Σε ηλικία 19 χρόνων μετανάστευσε στην Νέα Υόρκη. Κατά τη διάρκεια του πρώτου παγκοσμίου πολέμου υπηρέτησε στον αμερικανικό στόλο. Το 1919 απέκτησε αμερικάνικη υπηκοότητα και σπούδασε γλυπτική στο πανεπιστήμιο Beaux Arts Institute της Νέας Υόρκης. Ο Βαγής διακρίθηκε στην Αμερική και ασχολήθηκε με τη τεχνική της άμεσης γλυπτικής. Η γλυπτική του χωρίζεται σε δύο περιόδους. Στην πρώτη, τα έργα του είναι εμπνευσμένα από την ιστορία και την μυθολογία ενώ στην δεύτερη κυριαρχεί η αφαιρετικότητα. Το 1922 διακρίθηκε για πρώτη φορά με το έργο "ο παππούς μου".Το πρώτο ταξίδι του στην Ελλάδα έγινε το 1963. Το 1964 κληροδότησε στην Ελλάδα τα έργα του με την προϋπόθεση να εκθεθούν σε εθνικό μουσείο ή σε ιδρυθείσα βιβλιοθήκη, κατά προτίμηση στην Θάσο.Στις 15 Μαρτίου 1965 απεβίωσε στην Νέα Υόρκη και η σωρός του μεταφέρθηκε στην Ποταμιά όπου και ετάφη.
