赵元任出生前，父母找人算命，算出是要生个女孩。等赵元任一下地，发现是个男孩，便说：“哎呀，敢情还是个小子呐！”于是给他扎了耳洞。
赵元任小时候和母亲一起睡，一天晚上，小赵元任看见母亲先睡着了，便大哭起来，母亲被他吵醒，慌忙问：“什么事？怎么啦？”赵回答说：“妈先睡着了嚜！”赵回想起来觉着自己很可笑，但当时他觉着母亲先睡着了就好像全家都走了，把他一人留下了似的，很是孤凄。
赵元任儿时，每到过年，赵家总是张灯结彩，赵元任很是欢喜，因为总是有好吃的，还可以放花、放风筝、掷骰子玩，并且不用上学。所以在赵元任的心里，总觉着过年是一件大事情。于是他常盼望着过年，过完年才两三个月，他便吵闹着问母亲：“怎么老不过年？怎么老不过年？”母亲很是奇怪：“刚过了年嚜，怎么又要过年？”等过一段时间，他又开始吵闹：“老不过年！老不过年！”
赵元任儿时喜欢玩铜钱，一次他把三个钱含得嘴里，结果吞到嗓子里，吐不出来，也咽不下去，说不出话来了。母亲见他脸都憋的通红，说不出话，便问他怎么了，他指指自己的嗓子。母亲便将手伸进他嗓子里，他一恶心，才把钱吐出来了。
赵元任儿时喜欢看朝霞，他常天不亮就爬起来，站在院子里，不眨眼地盯着看，看着太阳一点儿一点儿的现出来，看到眼睛都花了。
有人送给赵元任一个三寸多的放大镜。没有人教他怎么用，他就自己研究怎么玩，将放大镜贴近眼睛远一些看东西，东西就变成了倒的了；他将一张报纸搁得放大镜底下，那些东西的倒影子就都出现在报纸上；他又跟吕爷学来用放大镜取火的方法，学到后便到处烧东西玩，幸好没闯出什么祸来。
赵元任小时候喜欢看雷雨，喜欢看闪电，更喜欢下大雨。每次下雨，院子里有一点湿，他就盼望着那水快点儿积起来，到满院子都是水看不见地就好了。他喜欢睡在被窝里听外头打雷下雨，总觉着外头越是又湿又凉，他在被窝儿里就睡的又干又暖和。
赵元任小时候常搬家，看家大人整理收拾东西，他也便整理自己的小东西。后来便养成了习惯，喜欢给东西归类。在国外留学时，赵元任曾想拿科学分类作他的论文题目，但老师若伊思（JosiahRoyce）说这题目太枯燥，才作罢。
赵元任说：“我五岁的时候儿说一种不顶纯正的京话，说一种地道的江苏常熟话，可是念书就只会用江苏常州音念。”
赵元任儿时读书，将描红上的句子是“圣上爱一夫之力，惜十家之产、深闭固居，未肯……”读成三字经似的句式：“圣上爱，一夫之，力惜十，家之产，深闭固，居未肯，……”
一次，菊花开的正好，赵元任和家人一起拿菊花做题吟诗，他开头儿第一句就写：“满堂菊花香。”赵的大姐说：“你头一句就把话都说完了嚜！你得慢慢儿的说呀！”于是赵元任就改成：“有人来看花，花开阵阵香……”他记得诗中有一句“风动一开张”，觉得应该是大人给他改的，不像是他会写的句子。
赵元任八岁是第一次坐船，从天津到上海，不晕船的时候，他喜欢在海上看日出看晚霞看雷雨看闪电，觉得在海上看的比在地上的好看。有时候他站在船边看得入了迷，身上让浪花溅湿了，或是被潲进来的雨给濯湿了也不管，等大人叫了好几遍才回到房舱里。
赵元任儿时最喜欢三房叔公的么女侬姑，他说他几乎爱上了她，大人们打麻将的时候，他会挤在她身旁看着她打牌。他眼睛有毛病的时候，她总是在睡前给赵元任点最后一次药水。