Silas Marner ist der Weber im englischen Dorf Raveloe auf dem Land im frühen neunzehnten Jahrhundert. Wie viele Weber seiner Zeit ist er ein Außenseiter – ein Objekt des Misstrauens aufgrund seiner besonderen Fähigkeiten und der Tatsache, dass er von anderswo nach Raveloe gekommen ist. Die Dorfbewohner sehen Silas als besonders sonderbar an, weil er gelegentlich seltsame kataleptische Anfälle erleidet. Silas ist in Raveloe gelandet, weil die Mitglieder seiner religiösen Sekte in Lantern Yard, einem abgeschiedenen Viertel in einer größeren Stadt, ihn fälschlicherweise des Diebstahls beschuldigt und exkommuniziert haben.
Nach der Beschuldigung stark erschüttert, findet Silas in Raveloe nichts Vertrautes, das seinen Glauben wiedererwecken könnte, und verfällt in eine betäubende Routine der einsamen Arbeit. Sein einziger Versuch, nachbarschaftlich zu sein, geht nach hinten los: Als ein pflanzliches Heilmittel, das er für die Krankheit einer Nachbarin vorschlägt, wirkt, wird ihm nachgesagt, er sei eine Art Medizinmann. Da er sonst nichts zum Leben hat, ist Silas vernarrt in das Geld, das er mit seiner Arbeit verdient, und hortet es, um so wenig wie möglich davon zu leben. Jede Nacht holt er sein Gold aus seinem Versteck unter den Dielen hervor, um es zu zählen. So geht es fünfzehn Jahre lang weiter.
Squire Cass ist der reichste Mann in Raveloe, und seine beiden ältesten Söhne sind Godfrey und Dunstan, oder Dunsey. Dunsey ist gierig und grausam und genießt es, Godfrey, den ältesten Sohn, zu quälen. Godfrey ist gutmütig, aber willensschwach, und obwohl er heimlich mit der opiumsüchtigen Molly Farren verheiratet ist, ist er in Nancy Lammeter verliebt. Dunseyt hat Godfrey zur Heirat überredet und erpresst ihn immer wieder mit Drohungen, die Ehe ihrem Vater zu verraten. Godfrey gibt Dunsey 100 Pfund von der Miete, die ihm einer der Pächter ihres Vaters gezahlt hat. Godfrey findet sich dann in einer Zwickmühle wieder, als Dunsey darauf besteht, dass Godfrey die Summe selbst bezahlt. Dunsey droht erneut, Godfreys Ehe zu verraten, bietet aber nach einigem Streit an, Godfreys Preispferd Wildfire zu verkaufen, um das Darlehen zurückzuzahlen.
Am nächsten Tag trifft sich Dunsey mit einigen Freunden, die auf der Jagd sind, und verhandelt über den Verkauf des Pferdes. Dunsey beschließt, an der Jagd teilzunehmen, bevor er den Verkauf abschließt, und er hat dabei einen Reitunfall, der das Pferd tötet. Da er die Gerüchte über Silas‘ Hort kennt, plant Dunsey, den Weber einzuschüchtern und ihm Geld zu geben. Auf seinem Heimweg kommt er an Silas‘ Hütte vorbei, und als er diese leer vorfindet, stiehlt Dunsey stattdessen das Geld.
Silas kehrt von einer Besorgung zurück und findet sein Geld weg. Überwältigt von dem Verlust, rennt er in die örtliche Taverne, um Hilfe zu bekommen, und verkündet den Diebstahl einem sympathischen Publikum von Tavernen-Stammgästen. Der Diebstahl wird zum Gesprächsthema im Dorf, und es entsteht die Theorie, dass der Dieb ein Hausierer gewesen sein könnte, der einige Zeit zuvor durch das Dorf kam. Godfrey ist derweil von Gedanken an Dunsey abgelenkt, der nicht nach Hause zurückgekehrt ist. Nachdem er hört, dass Wildfire tot aufgefunden wurde, beschließt Godfrey, seinem Vater von dem Geld zu erzählen, jedoch nicht von seiner Ehe. Der Gutsherr gerät über diese Nachricht in Rage, unternimmt aber nichts Drastisches, um Godfrey zu bestrafen.
Silas ist völlig untröstlich über den Verlust seines Goldes und fährt wie betäubt mit seiner Weberei fort. Einige der Stadtbewohner kommen vorbei, um ihr Beileid und ihren Rat anzubieten. Unter diesen Besuchern sticht Dolly Winthrop hervor. Wie viele der anderen ermutigt sie Silast, in die Kirche zu gehen – etwas, das er nicht mehr getan hat, seit er von Lantern Yard verbannt wurde -, aber sie ist auch sanfter und aufrichtig mitfühlend.
Nancy Lammeter kommt zu Squire Cass‘ berühmtem Neujahrstanz mit dem Vorsatz, Godfreys Annäherungsversuche wegen seines unzureichenden Charakters zurückzuweisen, doch Godfrey ist so direkt und aufdringlich wie schon lange nicht mehr, und Nancy findet sich trotz ihres Vorsatzes von dem Abend erheitert. In der Zwischenzeit macht sich Molly, Godfreys heimliche Ehefrau, auf den Weg zum Haus der Casses, um die heimliche Heirat zu enthüllen – mit ihrer Tochter, einem Kleinkind, auf dem Arm. Als sie Silas‘ Hütte sieht und vom Licht des Feuers angezogen wird, wandert Mollys kleines Mädchen durch die offene Tür und schläft an Silas‘ Herd ein.
Silas hat gerade einen seiner Anfälle und bemerkt nicht, wie das kleine Mädchen seine Hütte betritt. Als er wieder zu sich kommt, sieht er sie bereits schlafend auf seinem Herd und ist über ihr Erscheinen ebenso verblüfft wie über das Verschwinden seines Geldes. Einige Zeit später folgt Silas den Fußspuren des Mädchens nach draußen und findet Mollys Körper im Schnee liegen. Silas geht zum Haus des Gutsherrn, um den Arzt zu finden, und sorgt beim Tanz für Aufsehen, als er mit dem kleinen Mädchen auf dem Arm ankommt. Godfrey, der seine Tochter wiedererkennt, begleitet den Arzt zu Silas‘ Hütte. Als der Arzt erklärt, dass Molly tot ist, erkennt Godfrey, dass sein Geheimnis sicher ist. Er erhebt keinen Anspruch auf seine Tochter, und Silas adoptiert sie.
Silas wächst zunehmend an dem Kind und nennt sie Eppie, nach seiner Mutter und seiner Schwester. Mit Dolly Winthrops Hilfe zieht Silas das Kind liebevoll auf. Eppie beginnt, als Brücke zwischen Silas und den übrigen Dorfbewohnern zu dienen, die ihm Hilfe und Ratschläge anbieten und ihn aufgrund seiner Taten als vorbildlichen Menschen ansehen. Eppie holt Silas auch aus dem erstarrten Zustand heraus, in den er nach dem Verlust seines Goldes gefallen war. In seinem neu gewonnenen Glück beginnt Silas, die Erinnerungen an seine Vergangenheit zu erforschen, die er lange verdrängt hat.
Der Roman springt sechzehn Jahre vorwärts. Godfrey hat Nancy geheiratet und Squire Cass ist gestorben. Godfrey hat das Haus seines Vaters geerbt, aber er und Nancy haben keine Kinder. Ihre einzige Tochter ist bei der Geburt gestorben, und Nancy hat sich geweigert, sie zu adoptieren. Eppie ist zu einer hübschen und temperamentvollen jungen Frau herangewachsen, und Silas zu einem zufriedenen Vater. Als die Steingrube hinter Silas‘ Haus trockengelegt wird, um die benachbarten Felder zu bewässern, wird am Boden das Skelett von Dunsey gefunden, zusammen mit Silas‘ Gold.Die Entdeckung erschreckt Godfrey, der überzeugt ist, dass auch seine eigenen Geheimnisse aufgedeckt werden sollen. Er gesteht Nancy die Wahrheit über seine Ehe mit Molly und die Zeugung von Eppie.
Nancy ist nicht wütend, sondern bedauert, dass sie Eppie rechtmäßig hätten adoptieren können, wenn Godfrey es ihr früher gesagt hätte.
An diesem Abend beschließen Godfrey und Nancy, Silas‘ Hütte zu besuchen, um die Wahrheit über Eppies Abstammung zu gestehen und sie als ihre Tochter zu beanspruchen. Doch nachdem sie Godfrey und Nancy die Geschichte erzählt hat, sagt Eppie ihnen, dass sie lieber bei Silas bleiben würde, als bei ihrem leiblichen Vater zu leben. Godfrey und Nancy gehen und geben sich damit zufrieden, Eppie aus der Ferne zu helfen. Am nächsten Tag beschließt Silas, Laternenhof zu besuchen, um zu sehen, ob er jemals von dem Diebstahl freigesprochen wurde, dessen er Jahre zuvor beschuldigt wurde. Die Stadt hat sich jedoch bis zur Unkenntlichkeit verändert, und Silas‘ alte Kapelle wurde abgerissen, um Platz für eine neue Fabrik zu schaffen. Silas erkennt, dass seine Fragen nie beantwortet werden, aber er ist zufrieden mit dem Gefühl des Glaubens, das er durch sein Leben mit Eppie wiedergewonnen hat. In diesem Sommer wird Eppie mit Aaron Winthrop, Dollys Sohn, verheiratet. Aaron zieht in Silas‘ Cottage ein, das auf Godfreys Kosten ausgebaut und renoviert wurde.