盡管外祖母用盡全力去保護小外孫，但小高爾基還是被外祖父無情地搶了過去，卡希林先生把老婆推倒在地，從手中奪過外孫，抱到凳子上。
高爾基在外祖父的手中掙紮著，哭喊著，他拉外祖父的紅胡子，咬外祖父的手指，卡希林先生更加生氣，他夾緊了外孫，惡狠狠地將他撂在長凳上，用侵泡過的樹條子抽了起來。
茨岡跑過去用自己的手臂去擋鞭子，他認為，自己的皮肉很厚，可以將卡希林先生的樹條子折斷，然後趁著卡希林先生去換另一條鞭子的時候，讓外祖母把小高爾基帶走。但他沒有想到，卡希林先生的樹條早被水浸得很結實，極有韌性，根本就折不斷。
盡管如此，高爾基還是挺感謝茨岡，起碼，茨岡替自己白挨了好幾鞭子。
這一次，外祖父把高爾基打得失去了知覺。接著小高爾基就大病了一場。生病的日子，高爾基的印象非常深刻，他感覺自己長得很快，並且有了一種奇異的感覺。從那時起，小高爾基就懷著一種不安的心情觀察人們，對於一切屈辱和痛苦，不論是自己的或是別人的，他都會感受到一種錐心的疼痛。
在外祖父家裏，高爾基的另外一個好朋友是老工人葛利高裏，他給高爾基的外祖父幹了一輩子的活，最後因為過度勞累而成了快要瞎掉的人。
高爾基的兩個舅舅經常給這位可憐的老人開些無聊的、殘忍的玩笑，有時，舅舅們會叫自己的兒子把葛利高裏幹活的工具頂針用鉗子夾到火上去拷，等到把頂針燒熱以後，他們再悄悄地把頂針放到葛利高裏老人的手邊，看著老人因受燙而痛苦的樣子取樂。
有時，他們又把顏色不同的料子偷偷地放在這個半瞎的老人手邊，看著他把它們縫成一匹布，然後又看著他挨主人卡希林先生的罵。
對於兒子們的這些把戲，外祖母總是握著拳頭警告他們：“你們這些討厭鬼，就知道捉弄人，真是不要臉的東西、壞蛋！”
有一次，高爾基看見自己的小舅舅雅科夫喝了很多的酒，他醉得不像樣，不停地撕扯自己的衣服，不停地敲擊自己的腦袋，抓頭發、揪胡子、捏鼻子、甚至擰自己的嘴唇，滿臉都是淚水。
這讓高爾基很不理解，他一直覺得，小舅舅雅科夫是個很快活的人，雖然他經常作弄葛利高裏，但他一直得到外祖父卡希林的喜愛。
高爾基去問葛利高裏，小舅舅為什麼哭？他為什麼罵自己、打自己？
葛利高裏把高爾基抱到膝蓋上，告訴他：“你舅舅把你舅媽打死了，現在他受良心的責備，你懂嗎？不過，這些事情你怎麼能懂呢？你最好什麼也不要知道，不然，你會完蛋的！”
高爾基問葛利高裏，舅舅為什麼會把小舅媽打死呢？
葛利高裏說：“他打她，也許是因為她比他好，他嫉妒她。小兄弟，你不知道，卡希林父子的嫉妒心很強，他們的眼裏根本容不下比他們強比他們好的人，他們總是玩一些鬼伎倆去折磨他、排斥他。”
停了一下，葛利高裏繼續說：“不過，你的外祖母可是個好人，她什麼話都說，但她不喜歡說謊，也不會說謊，盡管她常常聞鼻煙，而且還酗酒，但她純樸得就跟聖徒一樣，她整天都好像無憂無慮，憨憨的，你記著我的話，一定要好好地愛你的外祖母，永遠地陪伴著她。”
高爾基懂事地點點頭，他本來就是非常喜歡外祖母的。
漸漸地，高爾基和茨岡、葛利高裏都成了很要好的朋友。外祖母整日要忙家務，根本顧不上照料小外孫，年幼的高爾基每天隻好從早到晚都圍著茨岡和葛利高裏打轉。
外祖父的脾氣不好，經常一生氣就打高爾基，每次挨打的時候，茨岡總會把胳膊伸出去先擋幾鞭子，這幾鞭子雖然不算什麼，但也令他難受。