因果游记＜二＞
圣示：世风日下，人心不古，世人能欺、能瞒、能诈、能骗，无所不用其极，致而人间一股怨气上冲于天。玉帝龙颜大怒，致令南天霜雪部至四大部洲降下大雪及寒气，以儆世人之恶。望世人能知而改之，否则后续之惩犹有续也，勉之。
济佛曰：傻徒儿，游历著书去也。
（此时济佛以佛扇轻拂，童生之元灵随即被调出。）
童生曰：徒儿向恩师叩请圣安，恩师啊！今日天气严寒，您老人家衣衫单薄，会不会着凉啊？
济佛曰：嘿嘿！傻徒儿就是傻徒儿，为师佛身，何来畏惧？风、寒、暑、火不能伤也。不过你有此心，虽傻亦傻得可爱，为师感心也，可边走边谈好了。
（此时济佛口念真言，护法金龙随即现前，济佛师徒二人上了金龙，向今日出游之目的地出发。）
童生曰：恩师啊！徒儿心中有二事问恩师，不知可否？
济佛曰：傻徒儿，既是奉旨著书，有问题尽管问之无妨。
童生曰：一是二○○五年二月廿六日发生于台中之金沙大楼大火，有四人罹(lí)难。一是保全员黄静澍(shù)，二是工务课长黄万益，三是副总陈忠信，四是工务员萧纯仁。此四人于大火发生之时，尽忠职守，为了避免灾情扩大，上楼抢救以致身殒命丧，令人悲怜。叩问恩师，似此等舍身救人之人，殁后上天如何奖励？可否请恩师开示？
济佛曰：可。凡是世人在世为忠、孝、节、义而亡者，依其情节之深或浅，可列位下、中、上界神只不等。像汝所言金沙大火事件，此四位皆能为救人而舍身，其义行可风，吾自当引渡其四魂至南屏山潜修，以期证果。
童生曰：那太好了，真替他们四位感到高兴，但为何他们有此荣幸可蒙恩师亲自引渡呢？
济佛曰：因其夙世皆为有修之人，且与吾有缘，又能舍身救人，故而吾为之引渡也。
童生 曰：原来如此，感谢恩师之开示。徒儿想，世人若皆能学此四人之义行，自可让世界充满光与爱也。又最近地球气候异常寒冷，世界各地纷纷飘下大雪，时值春季， 不但未见鸟鸣花香之宜人气候，反倒平时不降雪之地，都纷纷降下大雪。阿里山还降下七十一年来首次之雪，连新竹海拔一千二百公尺之高山亦飘下雪来，欧、日、 美各国亦同受大雪之寒害。请恩师道其详，以悟世人好吗？阿弥陀佛！
济 佛曰：傻生怎么学起出家人来着？为师可简述之可也。晚近以来人心丕变尤速，汝不闻每日翻开报纸或打开电视，什么杀人分尸、抢劫、吸毒、色情泛滥、黑枪盛行、诈骗集团无所不用其极的行诈骗世人之举，以致一股黑气上冲于天。玉帝闻下界各神只及诸天仙佛、日夜游神、监察天君之禀报，龙颜大怒。故命南天霜雪部至 各地降下大雪，以惩世道人心之险恶。人心反映天象，天象反映人心，此乃亘古不变之理也。汝之外祖父南天霜雪部天君林镇安，亦奉派至日本降雪，汝知乎？
童生曰：徒儿不知，但听恩师一说，徒儿反倒感到无比光荣。外祖父能奉玉帝之圣命，执行霜雪部之任务，乃徒儿之光荣也，不知是否圆满完成任务？
济佛曰：尚待些时日方可完功。吾希望世人能改过向善，努力行善、修行，以挽上天之浩劫。否则上天还会降下其他之灾劫，其情况比南亚大海啸有过之而无不及，世人当早日警醒，莫以吾佛所言为戏言。
童生曰：那可麻烦，上次南亚大海啸已死亡二十五万人，那更严重之灾劫，岂不死伤更惨？望恩师高抬“佛”手，救救这些可怜的众生吧！
济佛曰：非吾佛不慈，实乃共业难以挽转也。惟有世人能改过向善，方可避此大浩劫也。
（师徒二人谈谈间，金龙已没入大海之中，向东海水域前进。甚多鱼类游于其间，美景美不胜收。又有巡海夜叉、虾兵蟹将巡狩其间，此乃世人之肉眼难以看见也。）
童生曰：阿嬷喂！怎么金龙一下子没入海中，下生又没穿潜水衣，没戴氧气罩，又无带鱼枪护身，万一遇到大白鲨怎么办？
济佛曰：傻徒儿啊！你、吾皆非肉身，怎需此工具呢？且有为师及金龙护身，你怕什么？
童生曰：喔！说的也是，水经身而不湿不寒，且恩师及金龙身上皆发出紫色佛光及金色祥光，整个东海海域顿时光耀无比。又见巡海夜叉，以前听人说女人很凶悍，称为“母夜叉”，听来颇觉贴切，徒儿见之鸡皮疙瘩掉满地，心里为之惊骇不已。
济佛曰：傻徒儿勿惊，那巡海夜叉乃奉东海龙王敖广之命而巡狩，其相自是狰狞。世人只要心不做恶念，平生不做歹事，见之何惧之有？
童生曰：徒儿胆小，见之自然畏惧，如果徒儿有恩师之佛法在，那我也可以无所惧也。
（就在童生说完时，眼前突然出现一只巨鼋(yuán)，其大如山。一张口，一大堆鱼就被吸进去，连凶悍之鲨鱼亦不例外，真吓人！）
童生曰：喔！救命啊！恩师啊！我们会不会被吃掉？
济佛曰：呔！劣徒，它的嘴巴再大，吞得下昊天玉诏吗？吾师徒奉母娘及玉旨著书，三界仙佛都当鼎力相助，更何况此巨鼋呢？如其有不轨之举，吾佛已向贵堂主席借得七星宝剑，定斩之不饶，贤徒可勿惊。待为师施法调出其元灵，再访之可也。
（此时济佛口念真言，佛扇一挥，说声“出”，此巨鼋之元灵随即被调出，原来是一白发苍苍之老者。此老者慢慢步向前，至济佛跟前，向济佛叩首请安。）
济佛曰：免礼，可请起。
童生曰：弟子向老仙请安，不知如何称呼？怎么元灵跟本相差个十万八千里？真吓人！
老 者曰：哈哈！童生勿惊，吾在此已历三千年之久，尚未能修成正果，乃因夙世杀业重也。吾殁后堕入水族身，初时身形甚小，但随时日之迁移，体型愈来愈大，吾也 甚为讶异！因吾只吃食凶悍之鱼，那些可爱之小鱼反而跟随在我之身旁，以避免被大鱼吃食，吾也乐得当它们的保镳(biāo)。因吾有此之善德，东海龙王便引吾至此修炼， 至今已历三千年矣！
童生曰：怪哉！三千年还无法修成正果，此是何因？
老 者曰：说来话长。三千年前吾本一海盗头子，除常率众抢劫路过之商船，将船上财物洗劫一空外，并将船上之人尽皆杀死。因此杀业，故而殁后因杀业之重，被判入 水族身，幸吾尚有一点善念，故而得以修行以躲轮回。但身在冰冷海域中甚苦也，需忍受刺骨之冰水及身上之巨壳，行动又不快，真是苦也，望济佛救吾出苦。
济佛曰：汝好生修持，时间到，吾佛自来接引汝也。
老者曰：感谢济佛慈悲！
济佛曰：时间已久矣，恐乩(jī)体过累，回堂去吧！
（此时济佛口念真言，将巨鼋之元灵送回身上。师徒二人上了金龙，向全真堂而回。）
济佛曰：全真堂已到，童生魂魄投体。可，吾回。
圣示：世风日下，人心不古，世人能欺、能瞒、能诈、能骗，无所不用其极，致而人间一股怨气上冲于天。玉帝龙颜大怒，致令南天霜雪部至四大部洲降下大雪及寒气，以儆世人之恶。望世人能知而改之，否则后续之惩犹有续也，勉之。
济佛曰：傻徒儿，游历著书去也。
（此时济佛以佛扇轻拂，童生之元灵随即被调出。）
童生曰：徒儿向恩师叩请圣安，恩师啊！今日天气严寒，您老人家衣衫单薄，会不会着凉啊？
济佛曰：嘿嘿！傻徒儿就是傻徒儿，为师佛身，何来畏惧？风、寒、暑、火不能伤也。不过你有此心，虽傻亦傻得可爱，为师感心也，可边走边谈好了。
（此时济佛口念真言，护法金龙随即现前，济佛师徒二人上了金龙，向今日出游之目的地出发。）
童生曰：恩师啊！徒儿心中有二事问恩师，不知可否？
济佛曰：傻徒儿，既是奉旨著书，有问题尽管问之无妨。
童生曰：一是二○○五年二月廿六日发生于台中之金沙大楼大火，有四人罹(lí)难。一是保全员黄静澍(shù)，二是工务课长黄万益，三是副总陈忠信，四是工务员萧纯仁。此四人于大火发生之时，尽忠职守，为了避免灾情扩大，上楼抢救以致身殒命丧，令人悲怜。叩问恩师，似此等舍身救人之人，殁后上天如何奖励？可否请恩师开示？
济佛曰：可。凡是世人在世为忠、孝、节、义而亡者，依其情节之深或浅，可列位下、中、上界神只不等。像汝所言金沙大火事件，此四位皆能为救人而舍身，其义行可风，吾自当引渡其四魂至南屏山潜修，以期证果。
童生曰：那太好了，真替他们四位感到高兴，但为何他们有此荣幸可蒙恩师亲自引渡呢？
济佛曰：因其夙世皆为有修之人，且与吾有缘，又能舍身救人，故而吾为之引渡也。
童生 曰：原来如此，感谢恩师之开示。徒儿想，世人若皆能学此四人之义行，自可让世界充满光与爱也。又最近地球气候异常寒冷，世界各地纷纷飘下大雪，时值春季， 不但未见鸟鸣花香之宜人气候，反倒平时不降雪之地，都纷纷降下大雪。阿里山还降下七十一年来首次之雪，连新竹海拔一千二百公尺之高山亦飘下雪来，欧、日、 美各国亦同受大雪之寒害。请恩师道其详，以悟世人好吗？阿弥陀佛！
济 佛曰：傻生怎么学起出家人来着？为师可简述之可也。晚近以来人心丕变尤速，汝不闻每日翻开报纸或打开电视，什么杀人分尸、抢劫、吸毒、色情泛滥、黑枪盛行、诈骗集团无所不用其极的行诈骗世人之举，以致一股黑气上冲于天。玉帝闻下界各神只及诸天仙佛、日夜游神、监察天君之禀报，龙颜大怒。故命南天霜雪部至 各地降下大雪，以惩世道人心之险恶。人心反映天象，天象反映人心，此乃亘古不变之理也。汝之外祖父南天霜雪部天君林镇安，亦奉派至日本降雪，汝知乎？
童生曰：徒儿不知，但听恩师一说，徒儿反倒感到无比光荣。外祖父能奉玉帝之圣命，执行霜雪部之任务，乃徒儿之光荣也，不知是否圆满完成任务？
济佛曰：尚待些时日方可完功。吾希望世人能改过向善，努力行善、修行，以挽上天之浩劫。否则上天还会降下其他之灾劫，其情况比南亚大海啸有过之而无不及，世人当早日警醒，莫以吾佛所言为戏言。
童生曰：那可麻烦，上次南亚大海啸已死亡二十五万人，那更严重之灾劫，岂不死伤更惨？望恩师高抬“佛”手，救救这些可怜的众生吧！
济佛曰：非吾佛不慈，实乃共业难以挽转也。惟有世人能改过向善，方可避此大浩劫也。
（师徒二人谈谈间，金龙已没入大海之中，向东海水域前进。甚多鱼类游于其间，美景美不胜收。又有巡海夜叉、虾兵蟹将巡狩其间，此乃世人之肉眼难以看见也。）
童生曰：阿嬷喂！怎么金龙一下子没入海中，下生又没穿潜水衣，没戴氧气罩，又无带鱼枪护身，万一遇到大白鲨怎么办？
济佛曰：傻徒儿啊！你、吾皆非肉身，怎需此工具呢？且有为师及金龙护身，你怕什么？
童生曰：喔！说的也是，水经身而不湿不寒，且恩师及金龙身上皆发出紫色佛光及金色祥光，整个东海海域顿时光耀无比。又见巡海夜叉，以前听人说女人很凶悍，称为“母夜叉”，听来颇觉贴切，徒儿见之鸡皮疙瘩掉满地，心里为之惊骇不已。
济佛曰：傻徒儿勿惊，那巡海夜叉乃奉东海龙王敖广之命而巡狩，其相自是狰狞。世人只要心不做恶念，平生不做歹事，见之何惧之有？
童生曰：徒儿胆小，见之自然畏惧，如果徒儿有恩师之佛法在，那我也可以无所惧也。
（就在童生说完时，眼前突然出现一只巨鼋(yuán)，其大如山。一张口，一大堆鱼就被吸进去，连凶悍之鲨鱼亦不例外，真吓人！）
童生曰：喔！救命啊！恩师啊！我们会不会被吃掉？
济佛曰：呔！劣徒，它的嘴巴再大，吞得下昊天玉诏吗？吾师徒奉母娘及玉旨著书，三界仙佛都当鼎力相助，更何况此巨鼋呢？如其有不轨之举，吾佛已向贵堂主席借得七星宝剑，定斩之不饶，贤徒可勿惊。待为师施法调出其元灵，再访之可也。
（此时济佛口念真言，佛扇一挥，说声“出”，此巨鼋之元灵随即被调出，原来是一白发苍苍之老者。此老者慢慢步向前，至济佛跟前，向济佛叩首请安。）
济佛曰：免礼，可请起。
童生曰：弟子向老仙请安，不知如何称呼？怎么元灵跟本相差个十万八千里？真吓人！
老 者曰：哈哈！童生勿惊，吾在此已历三千年之久，尚未能修成正果，乃因夙世杀业重也。吾殁后堕入水族身，初时身形甚小，但随时日之迁移，体型愈来愈大，吾也 甚为讶异！因吾只吃食凶悍之鱼，那些可爱之小鱼反而跟随在我之身旁，以避免被大鱼吃食，吾也乐得当它们的保镳(biāo)。因吾有此之善德，东海龙王便引吾至此修炼， 至今已历三千年矣！
童生曰：怪哉！三千年还无法修成正果，此是何因？
老 者曰：说来话长。三千年前吾本一海盗头子，除常率众抢劫路过之商船，将船上财物洗劫一空外，并将船上之人尽皆杀死。因此杀业，故而殁后因杀业之重，被判入 水族身，幸吾尚有一点善念，故而得以修行以躲轮回。但身在冰冷海域中甚苦也，需忍受刺骨之冰水及身上之巨壳，行动又不快，真是苦也，望济佛救吾出苦。
济佛曰：汝好生修持，时间到，吾佛自来接引汝也。
老者曰：感谢济佛慈悲！
济佛曰：时间已久矣，恐乩(jī)体过累，回堂去吧！
（此时济佛口念真言，将巨鼋之元灵送回身上。师徒二人上了金龙，向全真堂而回。）
济佛曰：全真堂已到，童生魂魄投体。可，吾回。
#香山调试直播# 香山芯片调试目标完成！
记录一些流水账：
2021年6月22日，香山在RISC-V中国峰会上第一次亮相，这是当时公开的国际上性能最高的开源RISC-V处理器核设计，受到国内外的很多关注，如今在GitHub上已有近2500个Star，250多个Fork。虽然我们的报告是中文的，但却有不少英文报道，甚至还有来自俄罗斯的关注。可以说，香山成为国际上最受关注的开源芯片项目之一。
2021年7月15日，第一代香山“雁栖湖”流片。但接下来由于受到全球芯片产能影响，我们不得不经历漫长的等待期。因为许久没有回片后的消息，有一些关注香山的朋友发来小心翼翼的询问：“香山是不是流片失败了？”流片失败，就是指香山无法点亮，也就意味着它就是一块石头。
2022年1月20日，等待了整整半年，香山终于回片了。硬件调试存在很大不确定性，很可能1个bug就会需要耗上1-2个月才能解决。而硬件问题解决不了，软件调试就会受到影响。尽早发现硬件问题，此时的香山就如同刚从医院拿回来的一份尚未打开的检查报告——面对它心中充满忐忑，不知道结果是好是坏。如果要等春节假期结束后才能看报告，这个年我们会过得心里很不踏实。另外，还存在一个不确定性，就是疫情防控。前段时间北京出现疫情，导致不少同学无法回家。但另一方面，由于冬奥会、两会等一系列活动，如果其他地方出现疫情，也可能导致离京后一段时间内甚至整个2月不能返京，那就会再空耗一个月。
我们希望能尽早消除一些不确定性，否则过年心里也不踏实。时间，对于香山调试非常宝贵。于是，香山团队的多位小伙伴（徐易难、李作骏、王诲喆、勾凌睿、张紫飞、蔺嘉炜、李乾若、甄好）决定留在北京攻关调试，加上唐丹和我，组成了一支攻关调试小分队。其中有几位是因为老家疫情而留在了北京，也有本来就是北京人，除了这些这些线下的小伙伴，还有全国各地的老师和同学一起在线参与。
1月26日开始，采用香山枫叶红底色的主板陆续从深圳寄到北京。此前，1月22-24日，深圳团队的蔡晔老师、刘彤、何伟等已经在深圳焊好主板，完成了初步的调试，包括系统时钟、串口、Flash等，验证IO通路正确。
1月29日，调试攻坚战正式打响了。调试过程一开始出乎意料地顺利，虽然有些小曲折，但都很快解决。到1月30日，我们取得了不错的战果：
•CPU频率从24MHz切到1GHz；
•DDR4-2400初始化成功，并稳定运行；
•Linux正常启动进入Shell；
•CoreMark成功运行，5.3分，与仿真完全一致。
1月30日晚上，收到了中国科学院大学公共管理学院刘继安老师的消息，是她和博士后徐艳茹希望观摩香山调试。晚上9点，徐博士先来到了调试现场，拍了几张照片，然后便跟我们说，她春节也不能回去过年，希望能全程观摩香山的调试过程。我们觉得应该很快就可以结束调试了，便欣然答应。但任何事情都不要高兴太早！
1月31日，大年夜。就在我们认为可以“牛年事、牛年毕”，可以在牛年就能跑出SPEC CPU2006分值、初步完成调目标时，现实狠狠地打了我们的脸——在运行SPEC CPU2006时，DDR4-2400稳定性存在问题，会导致返回数据出现随机错误。DDR是芯片调试过程最麻烦的问题，看来我们终究还是要面对。
我们分头吃年夜饭。下午2点，唐丹老师回家和家人一起吃了顿年夜饭；下午4：30，唐老师又过来和我们一起吃了一顿年夜饭，然后回到调试作战室放松：春晚，PS5，瓜子……晚上7点，我再回家和家人又吃了一顿年夜饭。一个难忘的大年夜！
大年初一到初三，大家休息了三天。
初四，重新整装上阵。内存专家李作骏全力攻占DDR稳定性问题，其他人全力配合。全志D1-H项目负责人孙彦邦提到当时在全志时DDR调试也是难点，他推荐了在Linux下的memtester来测试内存。
初五，徐易难很快便在Linux下编译好memtester，并开始测试。初步测试访存确实不稳定，内存在作Bit Flipping时会出现8KB数据不正确。于是开始尝试修改CPU频率，1GHz提高到1.1GHz，1.26GHz，但都不稳定；那就给CPU降频，降到800MHz、600MHz，似乎访存稳定性好一些，但还是会随机出错。
唐丹老师查看DDR PHY手册，发现PHY和DIMM的VRef配置不同步，修改后稳定性得到改善，但memtester还是会出现随机访存出错，只是出现概率降低了。但是，哪怕概率再低，也不可接受——对于理论上1GHz频率下每秒可运行60亿条指令的香山来说，哪怕是亿分之一的随机出错概率，也意味着每秒会出现几十次访存数据错误，这是不可接受的。我们必须要把访存调稳定。
初六，大家继续尝试——修改DDR Trainimg参数，修改Linux启动时内存容量，改变DDR供电电压……始终无法消除DDR访存的随机出错问题。我们怀疑DDR信号完整性问题，希望看一下DDR信号的眼图。开始一通打电话借设备，我们借到了一台DDR逻辑分析仪。这这台设备和HMTT很像，也是插在DIMM槽，但它内部提供高频采样时钟，可以直接抓DDR访存数据信号。我们花了半天的时间研究如何使用，当搞清楚后，发现在DDR-2400配置下采不到预想的信号。晚上9点多，打电话给设备代理商，被告知这台设备采购时没有选支持2400的模块，现在还支持DDR-1600。燃起的希望又熄灭了。
初七，唐丹老师又开始打一轮电话，又向郝沁汾老师借来一台示波器。有人建议看一下电源是否稳定，波动幅度是否太大，可以换一下精密电源。唐老师、徐易难立刻开始测试电源稳定性，发现真的会出现上下60-80mV的波动。那时，看到这个几十毫伏的波动，似乎大家心里涌出一丝欣喜，希望这就是DDR访存不稳定的问题所在。唐丹马不停蹄地区采购精密电源，不幸的是在换电源后，我们使用最多、相对最稳定的一块板卡“牺牲”了——烧了！来不及难过，立刻又切换到另一块板卡开始测试起来。结果有点沮丧，换了精密电源后依然无法消除访存随机性问题。
李作骏通过对DDR信号进行仿真，发现DDR DQS信号的ODT参数设置存在问题，同时把所有的访存性能相关的参数调到最保守设置。大家又寄希望于这次DDR参数修改。
此时，于是另一条调试网卡的战线开始启动，由王诲喆担任主攻手：测试网卡时钟信号、调整GMAC频率，设置设备树，修改驱动——网卡很快就被识别出来了，能看到网卡能收包了，但是问题是不能发包。
初八，跑了一个晚上的memtester，连续运行了12个小时，只有一个访存出错。这次稳定性得到了极大的提高，但还没有彻底解决，运行SPEC CPU依然出错。这时，大家决定尝试一下将DDR降频到1600。DDR-1600配置下，李作骏又对DDR Training做了优化，调高了Refresh Burst数量，激动人心的时刻发生了——之前跑不过的SPEC CPU应用都能跑完了！DDR访存稳定性问题终于解决了！
从初八开始，勾凌睿便开始用SPEC CPU2006程序烤机，香山频率设置为1GHz，DDR设置为1600，连续几十个小时的运行，再也没有出现过错误了。当然，这并不是最终目标，我们知道DDR访存性能对整个香山芯片的性能至关重要，接下来我们还继续优化DDR性能。
另一条战线，王诲喆仍然在调试网卡。在香山上用tcpdump能看到从另一台机器发过来的网络包，对比发送端的wireshark，内容正确。但是发送始终存在问题，ping依然不通。
初九，跑了一天的SPEC CPU，再也没有出错了，大家开始期待香山的SPEC CPU 2006分值了。网卡调试那边，手动修改了mac地址后，香山能收到ping，但是发送依然有问题。
初十，在修复了一个串口驱动小问题后，终于得到SPEC CPU 2006分值了，香山在1GHz频率、DDR-1600配置下，分值为5.97。这个数字对于香山来说，是一个里程碑。但我们知道，这并不是香山的真实性能，因为这是把DDR-2400降频为DDR-1600后得到的结果，从数据来看，很多访存密集型应用性能受到了很大的影响。如果把DDR进一步优化，香山性能还将进一步提升。我们根据Roofline模型推演访存性能优化目标。
正月十二，王诲喆也终于将网卡调通，香山功能基本完备。有了网络，大家就可以远程访问香山了。
正月十五，李作骏对DDR-1600时序进行了初步优化，之前受DDR访存的应用性能得到了大幅提升，比如bzip2-liberty的运行时间从483s降到了265s。这也意味着SPEC CPU2006分值即使在DDR降频的情况下还可以有很大的提升。
至此，历时近3个星期的香山攻关调试取得了圆满成功。香山调试直播完毕。
衷心感谢所有关注和支持香山的朋友！后续我们仍然会向大家介绍香山后续的性能优化进展。
—————
图1：调试攻关任务清单完成！
图2：与DDR访存稳定性战斗
图3：稳定运行SPEC CPU2006程序
图4：网卡正常工作
图5：SPECCPU 2006分值与对应配置
图6：Roofline模型推演访存性能优化目标
图7-9：香山调试现场
记录一些流水账：
2021年6月22日，香山在RISC-V中国峰会上第一次亮相，这是当时公开的国际上性能最高的开源RISC-V处理器核设计，受到国内外的很多关注，如今在GitHub上已有近2500个Star，250多个Fork。虽然我们的报告是中文的，但却有不少英文报道，甚至还有来自俄罗斯的关注。可以说，香山成为国际上最受关注的开源芯片项目之一。
2021年7月15日，第一代香山“雁栖湖”流片。但接下来由于受到全球芯片产能影响，我们不得不经历漫长的等待期。因为许久没有回片后的消息，有一些关注香山的朋友发来小心翼翼的询问：“香山是不是流片失败了？”流片失败，就是指香山无法点亮，也就意味着它就是一块石头。
2022年1月20日，等待了整整半年，香山终于回片了。硬件调试存在很大不确定性，很可能1个bug就会需要耗上1-2个月才能解决。而硬件问题解决不了，软件调试就会受到影响。尽早发现硬件问题，此时的香山就如同刚从医院拿回来的一份尚未打开的检查报告——面对它心中充满忐忑，不知道结果是好是坏。如果要等春节假期结束后才能看报告，这个年我们会过得心里很不踏实。另外，还存在一个不确定性，就是疫情防控。前段时间北京出现疫情，导致不少同学无法回家。但另一方面，由于冬奥会、两会等一系列活动，如果其他地方出现疫情，也可能导致离京后一段时间内甚至整个2月不能返京，那就会再空耗一个月。
我们希望能尽早消除一些不确定性，否则过年心里也不踏实。时间，对于香山调试非常宝贵。于是，香山团队的多位小伙伴（徐易难、李作骏、王诲喆、勾凌睿、张紫飞、蔺嘉炜、李乾若、甄好）决定留在北京攻关调试，加上唐丹和我，组成了一支攻关调试小分队。其中有几位是因为老家疫情而留在了北京，也有本来就是北京人，除了这些这些线下的小伙伴，还有全国各地的老师和同学一起在线参与。
1月26日开始，采用香山枫叶红底色的主板陆续从深圳寄到北京。此前，1月22-24日，深圳团队的蔡晔老师、刘彤、何伟等已经在深圳焊好主板，完成了初步的调试，包括系统时钟、串口、Flash等，验证IO通路正确。
1月29日，调试攻坚战正式打响了。调试过程一开始出乎意料地顺利，虽然有些小曲折，但都很快解决。到1月30日，我们取得了不错的战果：
•CPU频率从24MHz切到1GHz；
•DDR4-2400初始化成功，并稳定运行；
•Linux正常启动进入Shell；
•CoreMark成功运行，5.3分，与仿真完全一致。
1月30日晚上，收到了中国科学院大学公共管理学院刘继安老师的消息，是她和博士后徐艳茹希望观摩香山调试。晚上9点，徐博士先来到了调试现场，拍了几张照片，然后便跟我们说，她春节也不能回去过年，希望能全程观摩香山的调试过程。我们觉得应该很快就可以结束调试了，便欣然答应。但任何事情都不要高兴太早！
1月31日，大年夜。就在我们认为可以“牛年事、牛年毕”，可以在牛年就能跑出SPEC CPU2006分值、初步完成调目标时，现实狠狠地打了我们的脸——在运行SPEC CPU2006时，DDR4-2400稳定性存在问题，会导致返回数据出现随机错误。DDR是芯片调试过程最麻烦的问题，看来我们终究还是要面对。
我们分头吃年夜饭。下午2点，唐丹老师回家和家人一起吃了顿年夜饭；下午4：30，唐老师又过来和我们一起吃了一顿年夜饭，然后回到调试作战室放松：春晚，PS5，瓜子……晚上7点，我再回家和家人又吃了一顿年夜饭。一个难忘的大年夜！
大年初一到初三，大家休息了三天。
初四，重新整装上阵。内存专家李作骏全力攻占DDR稳定性问题，其他人全力配合。全志D1-H项目负责人孙彦邦提到当时在全志时DDR调试也是难点，他推荐了在Linux下的memtester来测试内存。
初五，徐易难很快便在Linux下编译好memtester，并开始测试。初步测试访存确实不稳定，内存在作Bit Flipping时会出现8KB数据不正确。于是开始尝试修改CPU频率，1GHz提高到1.1GHz，1.26GHz，但都不稳定；那就给CPU降频，降到800MHz、600MHz，似乎访存稳定性好一些，但还是会随机出错。
唐丹老师查看DDR PHY手册，发现PHY和DIMM的VRef配置不同步，修改后稳定性得到改善，但memtester还是会出现随机访存出错，只是出现概率降低了。但是，哪怕概率再低，也不可接受——对于理论上1GHz频率下每秒可运行60亿条指令的香山来说，哪怕是亿分之一的随机出错概率，也意味着每秒会出现几十次访存数据错误，这是不可接受的。我们必须要把访存调稳定。
初六，大家继续尝试——修改DDR Trainimg参数，修改Linux启动时内存容量，改变DDR供电电压……始终无法消除DDR访存的随机出错问题。我们怀疑DDR信号完整性问题，希望看一下DDR信号的眼图。开始一通打电话借设备，我们借到了一台DDR逻辑分析仪。这这台设备和HMTT很像，也是插在DIMM槽，但它内部提供高频采样时钟，可以直接抓DDR访存数据信号。我们花了半天的时间研究如何使用，当搞清楚后，发现在DDR-2400配置下采不到预想的信号。晚上9点多，打电话给设备代理商，被告知这台设备采购时没有选支持2400的模块，现在还支持DDR-1600。燃起的希望又熄灭了。
初七，唐丹老师又开始打一轮电话，又向郝沁汾老师借来一台示波器。有人建议看一下电源是否稳定，波动幅度是否太大，可以换一下精密电源。唐老师、徐易难立刻开始测试电源稳定性，发现真的会出现上下60-80mV的波动。那时，看到这个几十毫伏的波动，似乎大家心里涌出一丝欣喜，希望这就是DDR访存不稳定的问题所在。唐丹马不停蹄地区采购精密电源，不幸的是在换电源后，我们使用最多、相对最稳定的一块板卡“牺牲”了——烧了！来不及难过，立刻又切换到另一块板卡开始测试起来。结果有点沮丧，换了精密电源后依然无法消除访存随机性问题。
李作骏通过对DDR信号进行仿真，发现DDR DQS信号的ODT参数设置存在问题，同时把所有的访存性能相关的参数调到最保守设置。大家又寄希望于这次DDR参数修改。
此时，于是另一条调试网卡的战线开始启动，由王诲喆担任主攻手：测试网卡时钟信号、调整GMAC频率，设置设备树，修改驱动——网卡很快就被识别出来了，能看到网卡能收包了，但是问题是不能发包。
初八，跑了一个晚上的memtester，连续运行了12个小时，只有一个访存出错。这次稳定性得到了极大的提高，但还没有彻底解决，运行SPEC CPU依然出错。这时，大家决定尝试一下将DDR降频到1600。DDR-1600配置下，李作骏又对DDR Training做了优化，调高了Refresh Burst数量，激动人心的时刻发生了——之前跑不过的SPEC CPU应用都能跑完了！DDR访存稳定性问题终于解决了！
从初八开始，勾凌睿便开始用SPEC CPU2006程序烤机，香山频率设置为1GHz，DDR设置为1600，连续几十个小时的运行，再也没有出现过错误了。当然，这并不是最终目标，我们知道DDR访存性能对整个香山芯片的性能至关重要，接下来我们还继续优化DDR性能。
另一条战线，王诲喆仍然在调试网卡。在香山上用tcpdump能看到从另一台机器发过来的网络包，对比发送端的wireshark，内容正确。但是发送始终存在问题，ping依然不通。
初九，跑了一天的SPEC CPU，再也没有出错了，大家开始期待香山的SPEC CPU 2006分值了。网卡调试那边，手动修改了mac地址后，香山能收到ping，但是发送依然有问题。
初十，在修复了一个串口驱动小问题后，终于得到SPEC CPU 2006分值了，香山在1GHz频率、DDR-1600配置下，分值为5.97。这个数字对于香山来说，是一个里程碑。但我们知道，这并不是香山的真实性能，因为这是把DDR-2400降频为DDR-1600后得到的结果，从数据来看，很多访存密集型应用性能受到了很大的影响。如果把DDR进一步优化，香山性能还将进一步提升。我们根据Roofline模型推演访存性能优化目标。
正月十二，王诲喆也终于将网卡调通，香山功能基本完备。有了网络，大家就可以远程访问香山了。
正月十五，李作骏对DDR-1600时序进行了初步优化，之前受DDR访存的应用性能得到了大幅提升，比如bzip2-liberty的运行时间从483s降到了265s。这也意味着SPEC CPU2006分值即使在DDR降频的情况下还可以有很大的提升。
至此，历时近3个星期的香山攻关调试取得了圆满成功。香山调试直播完毕。
衷心感谢所有关注和支持香山的朋友！后续我们仍然会向大家介绍香山后续的性能优化进展。
—————
图1：调试攻关任务清单完成！
图2：与DDR访存稳定性战斗
图3：稳定运行SPEC CPU2006程序
图4：网卡正常工作
图5：SPECCPU 2006分值与对应配置
图6：Roofline模型推演访存性能优化目标
图7-9：香山调试现场
【涂山故事】宋濂游涂山
宋濂 (1310—1381），字景濓，号潜溪，浙江金华潜溪人，后举家迁居浦江。家境贫寒，聪慧勤奋，6岁读书，每天记诵2000多字文章，9岁能赋诗，有神童之称，“自少至老，未尝一日去书卷，于学无所不通”。元至元二年 （1336年）应浦江义门郑氏之聘，讲学于浦江青萝山下。元至正九年（1349年）被荐为翰林院编修，以奉养父母为由，辞不应召，隐居龙门山修道著书讲学。文笔清新，写景状物生动，不事雕琢，风格似欧阳修。至正十八年(1358年），朱元璋攻取婺州，开郡学，聘为五经师。明洪武元年（1368年），朱元璋称帝，就任江南儒学提举，为太子讲经，成为历史上有名的文学侍从之臣。洪武二年 （1369年），奉命任 《元史》 总裁官，很受朱元璋器重，书成升翰林学士。洪武四年 （1371年)，调任国子司业，次年迁赞善大夫。洪武六年 （1373年)，升翰林院学士承旨知制诰兼修国史，一代礼乐，多由其裁定。洪武十年 (1377年）正月，告老归里。作为一代文学、史学泰斗式的人物宋濂，朱元璋称其为 “开国文臣之首”，刘基赞许为 “当今文章第—”四方学者称为“太史公”。文章不仅风行国内，时在高丽、 安南、日本等地亦广为流传。洪武十三年 （1380年)，因长孙宋慎牵连胡惟庸党案，全家被流放茂州 (四川茂汶羌族自治县)。明洪武十四年 （1381年），在流放途中病卒于夔州(重庆奉节），终年72岁。
《明史•宋濂传》载：“八年九月，从太子及秦、晋、楚、靖江四王讲武中都，帝得與图濠梁古迹一卷，遣使赐太子，题其外，令濂询访，随处言之。太子以示濂…...”这就是明洪武八年 （1375年）冬，时年65岁的宋濂陪太子朱标游怀远，并以游记体撰写《游涂荆二山记》。宋濂在游记中对涂荆二山的山水胜迹，对禹会诸侯的涂山，及卞和献玉的荆山的地望所在，进行考证表述的缘由。宋濂的《游涂荆二山记》，文风朴实，结构严谨，观点明了，用词精练，既是一篇好的山水游记，也是研究明初涂山荆山历史文化的宝贵资料。其全文如下：
濂既游琅琊山，起行至池河驿，适邮卒递内使监公牒至。及开缄，中藏濠梁古迹一卷，宸翰亲题其外，令濂搜访与青官言之。源因启曰：“临濠古迹惟涂荆二山最著。按《图经》，涂山在昔钟离县西八十五里，荆山亦在县西八十三里，三山本相联属，而淮水绕荆山之背，神禹凿开，使水流二山间，其疏凿之迹故在，人思其功，讫今不能忘。”青宫曰：“至中都，当共往游焉，余将渡淮狩于王庄，先生宜溯流而上，届今怀远县治以俟。”濂奉敕行。洪武乙卯冬十一月己已发舟．庚午日曛，姑泊县西门，而青宫已驻跸于东门五里矣。辛未，濂上谒，青宫喜甚，下令以壬申游二山。濂至期约怀远文学掾王景彰宿舟中，黎明棹舟至涂山足，曳杖入山。山旁废址，旧皆民庐。前渡石梁，复斗折而北，累石为塘，多艺椒之园。行可三里余，视大盘石，青丝间错。颓然欹足，坐谛视文，干藓交封之耳。闻有草生石上，高一尺，其花可爱，不假士力，人取悬檐间，呼为石莲花。复行四里所，岩石荦确，插起道左，危倾欲飞坠。复二里所，从微径入灌莽，抵岩罅，储泉一泓，味甚甘，覆以生茨，曰圣水亭，取水以禜雨多验。复一里余，至山颠，禹庙在焉。庙已毁，惟颓垣破础存。游目四顾，长淮西来，涡河北汇。而寿春、临濠、宿州之境，皆在冥茫昏杳之中，缅想南北战争屯戍处，为惑慨者久之。山之下聚落甚盛，庙史云名禹会村，乃禹会诸侯之地，庐舍之比如栉。移踵入庙，庙前杏树一章，大可蔽十牛，二柏参差左右；树东置小翁，杏柯之水时津津滴其中。庙史云，当晨雾四集，水愈多，其来如泉，可代井汲。石碣二：一大书“有夏皇祖之庙”六字，下刻宋庆元初，州守刘仲光自造；“祷雨记”一，亦记祷雨事。皇甫斌绍熙庚戌来为郡，命钟离尉丁大荣作。石未剥泐，文尚可读。复从庙西循石坡而下，巨石危立如人形，遥望之，一妪俨然也，相传为启母石。庙史云：居人每刲羊豕祭之，至有粉黛饰其貌者，闻之不觉大笑。山半旧有僧房，今废。久俟鹤贺不来，忽使者至云，扈从士马多，无桥可以渡河，青宫不复至矣。言未既，但见旌旗如锦绣曳上荆山矣。濂亦下山麓，入鲧庙，见所题神号鄙俚，弃而不睨。出读祖无择所赋歌，京口孙临为书碑。盖无择谪守寿春过此而作也。复北经县治，折而东行三里所，至荆山。梁魏交斗时就山筑堰，以灌寿春，其遗迹犹斑斑可见。复行三十步，岩广如屋。侧身而入，石屏如床座，可坐人，号为卞和洞。自西上复一里所，过避雨石，石斜倚可避雨，故名。复六十步，至产玉坡。奇石骈列，(玄质而白，缘粲如雪），西有玉池，榛荆迷路不可寻。（景彰欲导游青峰庵，足倦遂止)。时青宫已猎远郊，濂因登舟先还中都云。
惟二山见诸载记者多殊。以涂山言之，春秋左氏传云：禹合诸侯于涂山。杜预注云：在寿春县东北。说者云：今之濠州是也。《国语》《史记》则又云：禹会诸侯于会稽，故会稽亦有涂山。《吴越春秋》 亦以涂山在会稽（又兼载涂山之歌）。应劭云：涂山在永兴北。说者云，今会稽萧山是也。是二说已不能归于一致矣。至于《苏鹗演义》又云：涂山有四，一会稽，二渝州，三濠州，四当涂。然其处皆有禹迹。或者遂谓禹文治水，固尝遍历宇内，而会诸候实在会稽之涂山。柳子厚《涂山铭》，苏子瞻、子由涂山诗，指在濠州者，皆非是。濂之存疑而未决者一也。
以荆山言之，荆山楚山也。楚之先王熊绎，僻在荆山，(荜路蓝缕，以处草莽，至成王始盛，又昭王有言曰：自吾先王受封，望不过江、汉、河，非所获罪⋯⋯则楚之封疆可知）。七传至昭王，始迁都郢。郢即今之江陵。其地有荆山，一名景山。荆故楚号也，有之诚宜。世则指为濠州。濠州古钟离子国，与寿春密迩。楚自昭王之后，历十一传，（至考烈王），始徙都寿春。
《韩非子》所载卞和献玉事，乃在历、武、文三王之际。昭王上接武王，已越十世。当三王时，钟离何尝属楚，而强谓卞和至此山耶！《新序》又谓抱玉而泣，在共王之时。《杂记》叉谓在怀王及其子平王之时。平王乃昭王之父，下距怀王九世。共王上至武王亦六世，何颠倒如是耶！濂之存疑未决者二也。
大抵山川遗迹，非本诸经史者多不可信。（如葛洪丹灶、郭景纯之墓，在在有之。纵有高世之智，将何以得辨其真份邪！）必欲可信，涂山当稽之左氏，以寿春为正；荆山当正诸史传，以江陵为正。有谓涂山氏乃古国名，禹曾娶其女者，别是一说，与此珠不相涉也。
濂耄矣，诸书遗忘欲尽，所记忆者，未必无舛讹，辄缘纪游，因挂漏书之，以发同游者一失。同游者盖太子正字桂彦良、 晋府长史朱伯言、楚府长史朱伯清、吴府伴读王致远及景彰云。后一月某日记。
节选自《魅力涂山》
来源：安徽涂山
宋濂 (1310—1381），字景濓，号潜溪，浙江金华潜溪人，后举家迁居浦江。家境贫寒，聪慧勤奋，6岁读书，每天记诵2000多字文章，9岁能赋诗，有神童之称，“自少至老，未尝一日去书卷，于学无所不通”。元至元二年 （1336年）应浦江义门郑氏之聘，讲学于浦江青萝山下。元至正九年（1349年）被荐为翰林院编修，以奉养父母为由，辞不应召，隐居龙门山修道著书讲学。文笔清新，写景状物生动，不事雕琢，风格似欧阳修。至正十八年(1358年），朱元璋攻取婺州，开郡学，聘为五经师。明洪武元年（1368年），朱元璋称帝，就任江南儒学提举，为太子讲经，成为历史上有名的文学侍从之臣。洪武二年 （1369年），奉命任 《元史》 总裁官，很受朱元璋器重，书成升翰林学士。洪武四年 （1371年)，调任国子司业，次年迁赞善大夫。洪武六年 （1373年)，升翰林院学士承旨知制诰兼修国史，一代礼乐，多由其裁定。洪武十年 (1377年）正月，告老归里。作为一代文学、史学泰斗式的人物宋濂，朱元璋称其为 “开国文臣之首”，刘基赞许为 “当今文章第—”四方学者称为“太史公”。文章不仅风行国内，时在高丽、 安南、日本等地亦广为流传。洪武十三年 （1380年)，因长孙宋慎牵连胡惟庸党案，全家被流放茂州 (四川茂汶羌族自治县)。明洪武十四年 （1381年），在流放途中病卒于夔州(重庆奉节），终年72岁。
《明史•宋濂传》载：“八年九月，从太子及秦、晋、楚、靖江四王讲武中都，帝得與图濠梁古迹一卷，遣使赐太子，题其外，令濂询访，随处言之。太子以示濂…...”这就是明洪武八年 （1375年）冬，时年65岁的宋濂陪太子朱标游怀远，并以游记体撰写《游涂荆二山记》。宋濂在游记中对涂荆二山的山水胜迹，对禹会诸侯的涂山，及卞和献玉的荆山的地望所在，进行考证表述的缘由。宋濂的《游涂荆二山记》，文风朴实，结构严谨，观点明了，用词精练，既是一篇好的山水游记，也是研究明初涂山荆山历史文化的宝贵资料。其全文如下：
濂既游琅琊山，起行至池河驿，适邮卒递内使监公牒至。及开缄，中藏濠梁古迹一卷，宸翰亲题其外，令濂搜访与青官言之。源因启曰：“临濠古迹惟涂荆二山最著。按《图经》，涂山在昔钟离县西八十五里，荆山亦在县西八十三里，三山本相联属，而淮水绕荆山之背，神禹凿开，使水流二山间，其疏凿之迹故在，人思其功，讫今不能忘。”青宫曰：“至中都，当共往游焉，余将渡淮狩于王庄，先生宜溯流而上，届今怀远县治以俟。”濂奉敕行。洪武乙卯冬十一月己已发舟．庚午日曛，姑泊县西门，而青宫已驻跸于东门五里矣。辛未，濂上谒，青宫喜甚，下令以壬申游二山。濂至期约怀远文学掾王景彰宿舟中，黎明棹舟至涂山足，曳杖入山。山旁废址，旧皆民庐。前渡石梁，复斗折而北，累石为塘，多艺椒之园。行可三里余，视大盘石，青丝间错。颓然欹足，坐谛视文，干藓交封之耳。闻有草生石上，高一尺，其花可爱，不假士力，人取悬檐间，呼为石莲花。复行四里所，岩石荦确，插起道左，危倾欲飞坠。复二里所，从微径入灌莽，抵岩罅，储泉一泓，味甚甘，覆以生茨，曰圣水亭，取水以禜雨多验。复一里余，至山颠，禹庙在焉。庙已毁，惟颓垣破础存。游目四顾，长淮西来，涡河北汇。而寿春、临濠、宿州之境，皆在冥茫昏杳之中，缅想南北战争屯戍处，为惑慨者久之。山之下聚落甚盛，庙史云名禹会村，乃禹会诸侯之地，庐舍之比如栉。移踵入庙，庙前杏树一章，大可蔽十牛，二柏参差左右；树东置小翁，杏柯之水时津津滴其中。庙史云，当晨雾四集，水愈多，其来如泉，可代井汲。石碣二：一大书“有夏皇祖之庙”六字，下刻宋庆元初，州守刘仲光自造；“祷雨记”一，亦记祷雨事。皇甫斌绍熙庚戌来为郡，命钟离尉丁大荣作。石未剥泐，文尚可读。复从庙西循石坡而下，巨石危立如人形，遥望之，一妪俨然也，相传为启母石。庙史云：居人每刲羊豕祭之，至有粉黛饰其貌者，闻之不觉大笑。山半旧有僧房，今废。久俟鹤贺不来，忽使者至云，扈从士马多，无桥可以渡河，青宫不复至矣。言未既，但见旌旗如锦绣曳上荆山矣。濂亦下山麓，入鲧庙，见所题神号鄙俚，弃而不睨。出读祖无择所赋歌，京口孙临为书碑。盖无择谪守寿春过此而作也。复北经县治，折而东行三里所，至荆山。梁魏交斗时就山筑堰，以灌寿春，其遗迹犹斑斑可见。复行三十步，岩广如屋。侧身而入，石屏如床座，可坐人，号为卞和洞。自西上复一里所，过避雨石，石斜倚可避雨，故名。复六十步，至产玉坡。奇石骈列，(玄质而白，缘粲如雪），西有玉池，榛荆迷路不可寻。（景彰欲导游青峰庵，足倦遂止)。时青宫已猎远郊，濂因登舟先还中都云。
惟二山见诸载记者多殊。以涂山言之，春秋左氏传云：禹合诸侯于涂山。杜预注云：在寿春县东北。说者云：今之濠州是也。《国语》《史记》则又云：禹会诸侯于会稽，故会稽亦有涂山。《吴越春秋》 亦以涂山在会稽（又兼载涂山之歌）。应劭云：涂山在永兴北。说者云，今会稽萧山是也。是二说已不能归于一致矣。至于《苏鹗演义》又云：涂山有四，一会稽，二渝州，三濠州，四当涂。然其处皆有禹迹。或者遂谓禹文治水，固尝遍历宇内，而会诸候实在会稽之涂山。柳子厚《涂山铭》，苏子瞻、子由涂山诗，指在濠州者，皆非是。濂之存疑而未决者一也。
以荆山言之，荆山楚山也。楚之先王熊绎，僻在荆山，(荜路蓝缕，以处草莽，至成王始盛，又昭王有言曰：自吾先王受封，望不过江、汉、河，非所获罪⋯⋯则楚之封疆可知）。七传至昭王，始迁都郢。郢即今之江陵。其地有荆山，一名景山。荆故楚号也，有之诚宜。世则指为濠州。濠州古钟离子国，与寿春密迩。楚自昭王之后，历十一传，（至考烈王），始徙都寿春。
《韩非子》所载卞和献玉事，乃在历、武、文三王之际。昭王上接武王，已越十世。当三王时，钟离何尝属楚，而强谓卞和至此山耶！《新序》又谓抱玉而泣，在共王之时。《杂记》叉谓在怀王及其子平王之时。平王乃昭王之父，下距怀王九世。共王上至武王亦六世，何颠倒如是耶！濂之存疑未决者二也。
大抵山川遗迹，非本诸经史者多不可信。（如葛洪丹灶、郭景纯之墓，在在有之。纵有高世之智，将何以得辨其真份邪！）必欲可信，涂山当稽之左氏，以寿春为正；荆山当正诸史传，以江陵为正。有谓涂山氏乃古国名，禹曾娶其女者，别是一说，与此珠不相涉也。
濂耄矣，诸书遗忘欲尽，所记忆者，未必无舛讹，辄缘纪游，因挂漏书之，以发同游者一失。同游者盖太子正字桂彦良、 晋府长史朱伯言、楚府长史朱伯清、吴府伴读王致远及景彰云。后一月某日记。
节选自《魅力涂山》
来源：安徽涂山
✋热门推荐