在一座歷史古老的農莊裡，偷偷住著一家身高不過10公分（4英吋）的神秘小矮人「大座鐘家族」：爸爸豆莢兒（Pod）、媽媽荷米粒（Homily）、他們的獨生女亞莉亞蒂（Arrietty），以及小矮人們的一些親戚。他們隱居在人類的世界，平日專門拿走人類的東西，並且靠此為生。 （所謂「拿走人類的東西」，被他們稱之為「借用」，也就是書名《The Borrowers》的由來，因此這些小人兒亦自稱為「借東西的小矮人」或是「借物者」。）

但他們卻也同時整天提心吊膽過日子，只怕高大的人類發現他們的存在。這群小矮人隱居的範圍包括房子地板下面、閣樓中，只要是不引人注目但卻能夠隨意進出人類生活範圍的地方都可以。

大座鐘家族住在一間古老又寬廣的宅邸。由於居住在那裡的人類生活作息非常規律，他們很高興找到像這樣安全的棲身之所。某天，亞莉亞蒂的爸爸豆莢兒不幸意外被一位小男孩發現了行蹤。正當一家人煩惱著該不該「移民」時，亞莉亞蒂竟然與這位10歲小男孩（The Boy）邂逅並結為好友。然而此一舉動卻也同時讓人類發現到小矮人們的存在，面對這一場「大災難」，這些小矮人們的命運將會是如何呢？