Silas Marner is de wever in het Engelse plattelandsdorpje Raveloe in het begin van de negentiende eeuw. Zoals veel wevers in zijn tijd is hij een buitenstaander, het voorwerp van verdenking vanwege zijn speciale vaardigheden en het feit dat hij van elders naar Raveloe is gekomen. De dorpelingen vinden Silas vooral vreemd door de merkwaardige cataleptische aanvallen die hij af en toe krijgt. Silas is in Raveloe terechtgekomen omdat de leden van zijn religieuze sekte in Lantern Yard, een insulaire buurt in een grotere stad, hem valselijk beschuldigden van diefstal en hem in de ban deden.
Door de schok van de beschuldiging vindt Silas in Raveloe niets vertrouwds dat zijn geloof weer kan opwekken en vervalt hij in een gevoelloze routine van eenzaam werk. Zijn enige poging tot nabuurschap mislukt: wanneer een kruidenmiddel werkt dat hij voorstelt voor de ziekte van een buurman, gaat het gerucht dat hij een soort heksendokter is. Met weinig anders om voor te leven, wordt Silas verliefd op het geld dat hij verdient met zijn werk en hamstert het, om van zo weinig mogelijk te leven. Elke nacht haalt hij zijn goud uit zijn schuilplaats onder de vloerplanken om het te tellen. Zo gaat hij vijftien jaar lang door.
Squire Cass is de rijkste man in Raveloe, en zijn twee oudste zonen zijn Godfrey en Dunstan, of Dunsey. Dunsey is hebzuchtig en wreed, en geniet ervan Godfrey, de oudste zoon, te kwellen. Godfrey is goedaardig maar heeft een zwakke wil, en hoewel hij in het geheim getrouwd is met de opiumverslaafde Molly Farren, is hij verliefd op Nancy Lammeter. Dunsey heeft Godfrey overgehaald om te trouwen en chanteert hem herhaaldelijk met het dreigement dat hij het huwelijk aan hun vader zal onthullen. Godfrey geeft Dunsey 100 pond van het huurgeld dat hem is betaald door een van hun vaders huurders. Godfrey komt dan in een lastig parket als Dunsey erop staat dat Godfrey het bedrag zelf moet betalen. Dunsey dreigt opnieuw Godfrey’s huwelijk te onthullen, maar biedt na wat geruzie aan Godfrey’s prijsgevecht, Wildfire, te verkopen om de lening terug te betalen.
De volgende dag ontmoet Dunsey een paar vrienden die aan het jagen zijn en onderhandelt over de verkoop van het paard. Dunsey besluit deel te nemen aan de jacht voordat hij de verkoop afrondt, en daarbij krijgt hij een ongeluk dat het paard doodt. Dunsey kent de geruchten over Silas’ schat, en maakt plannen om de wever te intimideren door hem geld te lenen. Zijn wandeling naar huis brengt hem langs Silas’ huisje, en omdat het huisje leeg is, steelt Dunsey het geld.
Silas komt terug van een boodschap en ziet dat zijn geld weg is. Overweldigd door het verlies rent hij naar de plaatselijke taverne voor hulp en kondigt de diefstal aan voor een sympathiek publiek van taverne stamgasten. De diefstal wordt het gesprek van het dorp en er ontstaat een theorie dat de dief misschien een marskramer is geweest die een tijd eerder door het dorp is gekomen. Godfrey, ondertussen, wordt afgeleid door gedachten aan Dunsey, die niet thuis is gekomen. Nadat hij hoort dat Wildfire dood is gevonden, besluit Godfrey zijn vader over het geld te vertellen, maar niet over zijn huwelijk. De landheer wordt woedend over het nieuws, maar doet niets drastisch om Godfrey te straffen.
Silas is volkomen ontroostbaar over het verlies van zijn goud en gaat gevoelloos verder met zijn weefwerk. Sommige dorpelingen komen langs om hun medeleven te betuigen en advies te geven. Onder deze bezoekers, valt Dolly Winthrop op. Net als vele anderen moedigt zij Silast aan om naar de kerk te gaan – iets wat hij niet meer heeft gedaan sinds hij uit Lantern Yard is verbannen – maar ze is ook vriendelijker en meer oprecht sympathiek.
Nancy Lammeter komt aan op het beroemde nieuwjaarsdansfeest van schildknaap Cass, vastbesloten om Godfrey’s avances af te wijzen vanwege zijn ondeugdelijke karakter. Godfrey is echter directer en vasthoudender dan hij in lange tijd is geweest, en Nancy merkt dat ze ondanks haar voornemen toch opgewonden raakt van de avond. Ondertussen is Molly, Godfrey’s geheime vrouw, op weg naar het huis van de Casses om het geheime huwelijk te onthullen. Ze heeft hun dochter, een peuter, in haar armen. Vermoeid na haar lange wandeling, neemt Molly een slok opium en valt bewusteloos langs de weg. Als ze Silas’ huisje ziet en wordt aangetrokken door het licht van het vuur, wandelt Molly’s kleine meisje door de open deur en valt bij Silas in slaap.
Silas heeft op dat moment een van zijn buien en merkt niet dat het kleine meisje zijn huisje binnenkomt. Als hij bijkomt, ziet hij haar al op de haard slapen, en hij is even verbaasd over haar verschijning als over de verdwijning van zijn geld. Een tijdje later volgt Silas de voetstappen van het meisje buiten en vindt het lichaam van Molly in de sneeuw. Silas gaat naar het huis van de schildknaap om de dokter te zoeken, en zorgt voor opschudding bij het bal als hij aankomt met het meisje in zijn armen. Godfrey, die zijn dochter herkent, vergezelt de dokter naar Silas’ huisje. Wanneer de dokter verklaart dat Molly dood is, realiseert Godfrey zich dat zijn geheim veilig is. Hij eist zijn dochter niet op en Silas adopteert haar.
Silas raakt steeds meer gehecht aan het kind en noemt haar Eppie, naar zijn moeder en zus. Met de hulp van Dolly Winthrop voedt Silas het kind liefdevol op. Eppie begint een brug te vormen tussen Silas en de rest van de dorpelingen, die hem hulp en advies geven en hem door wat hij heeft gedaan als een voorbeeldig persoon zijn gaan beschouwen. Eppie haalt Silas ook uit de sleur waarin hij terecht was gekomen na het verlies van zijn goud. In zijn hervonden geluk begint Silas de herinneringen aan zijn verleden te onderzoeken die hij lang heeft verdrongen.
De roman springt zestien jaar vooruit. Godfrey is getrouwd met Nancy en schildknaap Cass is overleden. Godfrey heeft het huis van zijn vader geërfd, maar hij en Nancy hebben geen kinderen. Hun enige dochter stierf bij de geboorte, en Nancy weigerde te adopteren. Eppie is uitgegroeid tot een mooie en pittige jonge vrouw, en Silas tot een tevreden vader. De steengroeve achter Silas’ huisje wordt drooggelegd om de aangrenzende velden te besproeien, en op de bodem wordt het skelet van Dunsey gevonden, samen met Silas’ goud. De ontdekking maakt Godfrey bang, en hij raakt ervan overtuigd dat zijn eigen geheimen ook aan het licht zullen komen. Hij biecht Nancy de waarheid op over zijn huwelijk met Molly en het vaderschap van Eppie.Nancy is niet boos maar betreurt het en zegt dat ze Eppie legitiem hadden kunnen adopteren als Godfrey het haar eerder had verteld.
Die avond besluiten Godfrey en Nancy naar het huisje van Silas te gaan om de waarheid over Eppie’s afkomst op te biechten en haar als hun dochter te claimen. Na het horen van Godfrey en Nancy’s verhaal vertelt Eppie hen echter dat ze liever bij Silas blijft dan bij haar biologische vader te wonen. Godfrey en Nancy vertrekken en berusten in het feit dat ze Eppie van een afstand helpen. De volgende dag besluit Silas naar Lantern Yard te gaan om te zien of hij ooit is vrijgesproken van de diefstal waarvan hij jaren eerder werd beschuldigd. De stad is echter onherkenbaar veranderd, en Silas’ oude kapel is afgebroken om plaats te maken voor een nieuwe fabriek. Silas beseft dat zijn vragen nooit beantwoord zullen worden, maar hij is tevreden met het gevoel van vertrouwen dat hij heeft teruggekregen door zijn leven met Eppie. Die zomer trouwt Eppie met Aaron Winthrop, de zoon van Dolly. Aaron komt in Silas’ huisje wonen, dat op kosten van Godfrey is uitgebreid en opgeknapt.