杜江华的老家在南市街道横城村梧坞自然村，临近横城义塾，童年时他常听长辈讲述书院的故事。那些先贤求学、耕读传家的传说，像春雨一样渗进他的心里。虽然当时听得似懂非懂，但潜移默化之下，爱书的种子悄然播下。年岁稍长，杜江华迷上了看书。农村赶集时，他把父亲给的10元零花钱全部拿来买《读者》杂志。回想起那时的心情，杜江华用“兴奋”和“满足”来形容。
孩童时期的杜江华还喜欢收集各种“古董”。“小时候爱去老房子里玩，听着脚下木地板的‘吱呀’声，看着尘土在昏暗光线下的运动轨迹，都会让我有种在考古的错觉。”他打趣自己“无师自通”，天生就爱倒腾老物件。在亲戚家见到“皇宋通宝”铜钱，他会刨根问底铜钱从哪里来；在祠堂角落发现半截残缺的石碑，他会蹲下身反复辨认斑驳的字迹，尽管当时很多字尚不认识。8岁那年，他在河滩边捡到一块形似中国“雄鸡”版图的石头，郑重地收进收藏盒，视为自己最早的“收藏品”。
12岁那年，在一次赶集时，杜江华被一书摊前的议价声吸引了注意力。循声望去，一本泛黄的旧书正摆在摊上，古朴的装帧、竖排的文字，瞬间就勾住了他的好奇心。他亲眼目睹经过摊主和买家一番“博弈”后，这本古朴的线装书最终以5元钱成交。自此，杜江华对古籍有了别样的情愫。升入初中后，他的文言文成绩在班级里总是遥遥领先，对古籍的兴趣因此愈发浓厚。那些晦涩难懂的古文，在他眼中散发着独特的魅力。
高中时，杜江华开始留意旧书摊上的线装书。尽管学业繁重，他依然要抽出时间看看古籍。“记得有次看到一本民国课本，里面的插画和课文跟现在完全不同，字里行间都是那个时代的气息。”古籍上的每一道折痕、每一处批注，都让他清晰地意识到，这是前人留下的痕迹。