而黄义民访问傅青主时，他正避居钓鱼城忠义祠边侧。他之所以要避居此处，是因为南宋末年有五位为钓鱼城抗元之战献身的忠义之士的灵堂汇集于此，他于此结茅，正展现了他对前明王朝的忠贞不二之志。
且说傅青主同意随同黄义明下山，为杨复盆诊病。但下山之前，需到忠义祠祭拜辞行。黄义明一行随着傅青主出茅屋前行，前往忠义祠。而出行末远，路左末便是忠义祠了。
步入祠中但见整座建筑由正厅、耳房和左右厢房组成。进入石坊形大门，是一个院坝两面的厢房，拾级而上至正厅。迎面高悬“忠义千秋”金字巨匾，匾下祭台上排列着余玠、王坚、张珏、冉琎、冉璞五人的牌位。祭台正面有祝文：“维神才兼武，志秉忠贞。画地成城，据形胜而保蜀土；协力战守，遗鱼饼以退元戎。忠诚贯日星，先后相继；大节凌霄汉，古今照临。兹届仲春修祀典，肃陈笾豆，伏维来歆。尚飨。”厅堂楹柱有联，上联为：“持竿以钓中原，二三人尽瘁鞠躬，直拼得蒙哥一命”；下联为：“把盏而浇故垒，十万众披肝沥胆，竟不图王立二心”。忠义祠内尚有宋孝宗时期碑文4块，宋光宗时期碑文2块，宋宁宗时期碑文5块，乾道年间以后碑文22块，其中记录钓鱼城之战史迹的碑文为12块。
此外，忠义祠内尚有南宋名丞文天祥《将北上登钓鱼城》诗碑，全诗为：
四十无闻尚远游，天门从此二乘秋。
风霜独重黄花笑，今古谁轻白发愁。
山属大明蠲宋愤，水仍巴字叹川流。
登途已拟归来赋，青管何能为国谋。
另有明士人李尚德《钓鱼城王张二忠祠》诗碑，全诗为：
钓鱼城下清江水，荒烟古垒恨难平。
睢阳百战有健将，墨翟久守无降兵。
犀舟曾挥白羽扇，雄剑几断缦胡缨。
西湖日夜尚歌舞，只持崖山航海行。
此忠义祠始建于明弘治七年（1494年），原名“王张祠”，初祀为保卫钓鱼城献身的王坚、张珏忠烈二将灵堂。建祠的起端是：明弘治五年（1492年）春，也就是钓鱼城之战后二百余年，在朝中为官的合州人王玺，因母丧回乡守孝，约了同乡、时在贵州为官的陈揆同游钓鱼城。上得山来，感念钓鱼城名将王坚、张珏的忠烈，不亚于在“安史之乱”中坚守睢阳城的唐代将领张巡、许远，却无祠存世，为之不公。为此，王玺回朝后，上奏孝宗皇帝要为二人立祠，皇帝恩准，始于弘治七年，为之建“王张祠”，供奉王坚、张珏二人牌位。此后明弘治十二年（1499年），合州知州宋琢上钓鱼山祭“王张祠”，认为祠堂简陋，集资重修。此后正德十二年（1517年），合州知州佘崇凤又上钓鱼山祭拜王张祠，并刻石立碑并培修祠宇，于祠中补立为坚守钓鱼城之战做出贡献的余玠、冉琎、冉璞三将位牌位祀祭，并改祠名为“忠义祠”。
以上所说，是有关忠义祠的历史。且说傅青主入得忠义祠后，自然是对祠中所供五将牌后一一焚香磕首，而陪同前来的黄义明及二位随从自然也是跟着焚香磕首。祭祀礼仪完毕，傅青主开始与黄义民一行侃侃而谈起守卫钓鱼城的英烈事迹及沦陷经过。
原来南宋咸淳元年（1265年），坚持抗元的播州十五世土司杨文病故，继任者为杨氏十六世土司杨邦宪。时至南宋政府已灭亡（1279年，元世祖忽必烈至元十五年），元朝政府再度派遣使者到播州招降，并许诺杨氏仍可世代承爵统治播州。继任的杨氏十六世土司杨邦宪，在得到元政府不得屠城的承诺之后，痛哭三日，“遣使纳款”、归降元朝，然后继续世袭播州土司之职，并升任播州宣慰使。而原本已建城的南宋军队抗元重要军事要塞龙岩新屯，也最终也被历史尘封。
但播州十六世土司杨邦宪以播州降元，钓鱼城守将却并未随同降元。此时重庆合川钓鱼城抗元之战已坚持了三十六年。钓鱼城之战的初期守将为王坚，王坚后战死，由张珏继任守将。钓鱼城之战末期，张珏调防回守重庆，任“安抚使兼合州知州”，钓鱼城的防务交给了王立。此时，王立有了一个“义妹”名熊耳夫人。
此位熊耳夫人的来历是：其本姓李，是元朝安西王相李德辉的同母异父之妹，又是元军战将熊耳的夫人，故称熊耳夫人。先此，元军攻占领泸州，熊耳率军驻守，熊耳夫人亦随军来到了泸州。此后王立指挥宋军进行收复泸州之战，熊耳被王立击毙，熊耳夫人亦被俘获，谎称王姓，因有姿色，为王立所得。王立对外谎称其为自己的“义妹”，让她照顾老母，实则成为王立不公开的宠室。
宋恭帝德佑二年（1276年）三月（宋端宗景炎元年），元军攻陷宋都临安，宋恭帝被俘获投降，南宋大势已去。南宋流亡小朝廷在陆秀夫、张世杰拥戴下逃往广东新会继续抗元。