#香山调试直播# 香山芯片调试目标完成!

记录一些流水账:

2021年6月22日,香山在RISC-V中国峰会上第一次亮相,这是当时公开的国际上性能最高的开源RISC-V处理器核设计,受到国内外的很多关注,如今在GitHub上已有近2500个Star,250多个Fork。虽然我们的报告是中文的,但却有不少英文报道,甚至还有来自俄罗斯的关注。可以说,香山成为国际上最受关注的开源芯片项目之一。

2021年7月15日,第一代香山“雁栖湖”流片。但接下来由于受到全球芯片产能影响,我们不得不经历漫长的等待期。因为许久没有回片后的消息,有一些关注香山的朋友发来小心翼翼的询问:“香山是不是流片失败了?”流片失败,就是指香山无法点亮,也就意味着它就是一块石头。

2022年1月20日,等待了整整半年,香山终于回片了。硬件调试存在很大不确定性,很可能1个bug就会需要耗上1-2个月才能解决。而硬件问题解决不了,软件调试就会受到影响。尽早发现硬件问题,此时的香山就如同刚从医院拿回来的一份尚未打开的检查报告——面对它心中充满忐忑,不知道结果是好是坏。如果要等春节假期结束后才能看报告,这个年我们会过得心里很不踏实。另外,还存在一个不确定性,就是疫情防控。前段时间北京出现疫情,导致不少同学无法回家。但另一方面,由于冬奥会、两会等一系列活动,如果其他地方出现疫情,也可能导致离京后一段时间内甚至整个2月不能返京,那就会再空耗一个月。

我们希望能尽早消除一些不确定性,否则过年心里也不踏实。时间,对于香山调试非常宝贵。于是,香山团队的多位小伙伴(徐易难、李作骏、王诲喆、勾凌睿、张紫飞、蔺嘉炜、李乾若、甄好)决定留在北京攻关调试,加上唐丹和我,组成了一支攻关调试小分队。其中有几位是因为老家疫情而留在了北京,也有本来就是北京人,除了这些这些线下的小伙伴,还有全国各地的老师和同学一起在线参与。

1月26日开始,采用香山枫叶红底色的主板陆续从深圳寄到北京。此前,1月22-24日,深圳团队的蔡晔老师、刘彤、何伟等已经在深圳焊好主板,完成了初步的调试,包括系统时钟、串口、Flash等,验证IO通路正确。

1月29日,调试攻坚战正式打响了。调试过程一开始出乎意料地顺利,虽然有些小曲折,但都很快解决。到1月30日,我们取得了不错的战果:
•CPU频率从24MHz切到1GHz;
•DDR4-2400初始化成功,并稳定运行;
•Linux正常启动进入Shell;
•CoreMark成功运行,5.3分,与仿真完全一致。

1月30日晚上,收到了中国科学院大学公共管理学院刘继安老师的消息,是她和博士后徐艳茹希望观摩香山调试。晚上9点,徐博士先来到了调试现场,拍了几张照片,然后便跟我们说,她春节也不能回去过年,希望能全程观摩香山的调试过程。我们觉得应该很快就可以结束调试了,便欣然答应。但任何事情都不要高兴太早!

1月31日,大年夜。就在我们认为可以“牛年事、牛年毕”,可以在牛年就能跑出SPEC CPU2006分值、初步完成调目标时,现实狠狠地打了我们的脸——在运行SPEC CPU2006时,DDR4-2400稳定性存在问题,会导致返回数据出现随机错误。DDR是芯片调试过程最麻烦的问题,看来我们终究还是要面对。

我们分头吃年夜饭。下午2点,唐丹老师回家和家人一起吃了顿年夜饭;下午4:30,唐老师又过来和我们一起吃了一顿年夜饭,然后回到调试作战室放松:春晚,PS5,瓜子……晚上7点,我再回家和家人又吃了一顿年夜饭。一个难忘的大年夜!

大年初一到初三,大家休息了三天。

初四,重新整装上阵。内存专家李作骏全力攻占DDR稳定性问题,其他人全力配合。全志D1-H项目负责人孙彦邦提到当时在全志时DDR调试也是难点,他推荐了在Linux下的memtester来测试内存。

初五,徐易难很快便在Linux下编译好memtester,并开始测试。初步测试访存确实不稳定,内存在作Bit Flipping时会出现8KB数据不正确。于是开始尝试修改CPU频率,1GHz提高到1.1GHz,1.26GHz,但都不稳定;那就给CPU降频,降到800MHz、600MHz,似乎访存稳定性好一些,但还是会随机出错。

唐丹老师查看DDR PHY手册,发现PHY和DIMM的VRef配置不同步,修改后稳定性得到改善,但memtester还是会出现随机访存出错,只是出现概率降低了。但是,哪怕概率再低,也不可接受——对于理论上1GHz频率下每秒可运行60亿条指令的香山来说,哪怕是亿分之一的随机出错概率,也意味着每秒会出现几十次访存数据错误,这是不可接受的。我们必须要把访存调稳定。

初六,大家继续尝试——修改DDR Trainimg参数,修改Linux启动时内存容量,改变DDR供电电压……始终无法消除DDR访存的随机出错问题。我们怀疑DDR信号完整性问题,希望看一下DDR信号的眼图。开始一通打电话借设备,我们借到了一台DDR逻辑分析仪。这这台设备和HMTT很像,也是插在DIMM槽,但它内部提供高频采样时钟,可以直接抓DDR访存数据信号。我们花了半天的时间研究如何使用,当搞清楚后,发现在DDR-2400配置下采不到预想的信号。晚上9点多,打电话给设备代理商,被告知这台设备采购时没有选支持2400的模块,现在还支持DDR-1600。燃起的希望又熄灭了。

初七,唐丹老师又开始打一轮电话,又向郝沁汾老师借来一台示波器。有人建议看一下电源是否稳定,波动幅度是否太大,可以换一下精密电源。唐老师、徐易难立刻开始测试电源稳定性,发现真的会出现上下60-80mV的波动。那时,看到这个几十毫伏的波动,似乎大家心里涌出一丝欣喜,希望这就是DDR访存不稳定的问题所在。唐丹马不停蹄地区采购精密电源,不幸的是在换电源后,我们使用最多、相对最稳定的一块板卡“牺牲”了——烧了!来不及难过,立刻又切换到另一块板卡开始测试起来。结果有点沮丧,换了精密电源后依然无法消除访存随机性问题。

李作骏通过对DDR信号进行仿真,发现DDR DQS信号的ODT参数设置存在问题,同时把所有的访存性能相关的参数调到最保守设置。大家又寄希望于这次DDR参数修改。

此时,于是另一条调试网卡的战线开始启动,由王诲喆担任主攻手:测试网卡时钟信号、调整GMAC频率,设置设备树,修改驱动——网卡很快就被识别出来了,能看到网卡能收包了,但是问题是不能发包。

初八,跑了一个晚上的memtester,连续运行了12个小时,只有一个访存出错。这次稳定性得到了极大的提高,但还没有彻底解决,运行SPEC CPU依然出错。这时,大家决定尝试一下将DDR降频到1600。DDR-1600配置下,李作骏又对DDR Training做了优化,调高了Refresh Burst数量,激动人心的时刻发生了——之前跑不过的SPEC CPU应用都能跑完了!DDR访存稳定性问题终于解决了!

从初八开始,勾凌睿便开始用SPEC CPU2006程序烤机,香山频率设置为1GHz,DDR设置为1600,连续几十个小时的运行,再也没有出现过错误了。当然,这并不是最终目标,我们知道DDR访存性能对整个香山芯片的性能至关重要,接下来我们还继续优化DDR性能。

另一条战线,王诲喆仍然在调试网卡。在香山上用tcpdump能看到从另一台机器发过来的网络包,对比发送端的wireshark,内容正确。但是发送始终存在问题,ping依然不通。

初九,跑了一天的SPEC CPU,再也没有出错了,大家开始期待香山的SPEC CPU 2006分值了。网卡调试那边,手动修改了mac地址后,香山能收到ping,但是发送依然有问题。

初十,在修复了一个串口驱动小问题后,终于得到SPEC CPU 2006分值了,香山在1GHz频率、DDR-1600配置下,分值为5.97。这个数字对于香山来说,是一个里程碑。但我们知道,这并不是香山的真实性能,因为这是把DDR-2400降频为DDR-1600后得到的结果,从数据来看,很多访存密集型应用性能受到了很大的影响。如果把DDR进一步优化,香山性能还将进一步提升。我们根据Roofline模型推演访存性能优化目标。

正月十二,王诲喆也终于将网卡调通,香山功能基本完备。有了网络,大家就可以远程访问香山了。

正月十五,李作骏对DDR-1600时序进行了初步优化,之前受DDR访存的应用性能得到了大幅提升,比如bzip2-liberty的运行时间从483s降到了265s。这也意味着SPEC CPU2006分值即使在DDR降频的情况下还可以有很大的提升。

至此,历时近3个星期的香山攻关调试取得了圆满成功。香山调试直播完毕。

衷心感谢所有关注和支持香山的朋友!后续我们仍然会向大家介绍香山后续的性能优化进展。

—————

图1:调试攻关任务清单完成!
图2:与DDR访存稳定性战斗
图3:稳定运行SPEC CPU2006程序
图4:网卡正常工作
图5:SPECCPU 2006分值与对应配置
图6:Roofline模型推演访存性能优化目标
图7-9:香山调试现场

我今天真的气死了
垃圾意大利电信公司屎TIM不知道已经坑了老子第几次了
要么官网充值不成功却把钱扣走 要么开后门开通其他业务盗走余额 要么漫游期间在没使用流量的情况下说你用流量 莫名的不到20kb的流量25欧 就算这个真的是我不小心消费的 单价也根本不对啊 他们短信里写的的海外流量价格还蛮合理的
最后都是客户的错 因为你没有在被盗刷之后的n天之内主动启用他们的“保护”服务/没有在漫游开始时就关闭禁止使用流量服务 搞笑吗?so万一我真的有意使用他们的海外流量 注定还是要被乱扣费咯? 你大爷的谁会天天看余额查话费 付钱买服务我还要小心翼翼地自卫 绷紧神经看看每天谁要骗钱
朋友说就算换电信公司也是一样的 变着法偷偷骗钱或涨价 垄断也是没法度
前前后后两年时间 大概一共被坑了有至少70欧吧
诉求无果 看看以后要不要换电信公司好了
不气了不气了 怕气出病
当交学费再次提醒自己and大家以后:1.仔细阅读自己收到的所有短信和电话 官方或疑似诈骗的短信(之前盗刷的扣费短信就被我错认为是诈骗短信根本不在意) 2. 尽量勤快地多检查账户余额 3. 每个月只充值月资费 多一毛都不行 (两次不幸都发生在我偷懒提前充了两三个月的话费)
国内的朋友也当心点 毕竟诈骗无处不在 科技发展太快 加上自己一忙起来就不会留那么多心眼
吃一堑才懂长一智的可怜的我[失望]

霍金去世前,曾向中国发出严正警告!!!
原因是,当时中国贵州的射电望远镜“天眼”接收到一个来自外太空4光年外的可疑信号。
得知这一消息后,霍金郑重地警告中国:“不要回答!不要回答!不要回答!”
后经过中国政府对外星文明接触各种可能性的慎重考虑和分析,决定不能放过这次千载难逢的机会,并认为中国不回答其他国家也会回答,而且指出这次的交流也许可以引发全人类科技的大跃进。
中国决定回答。
之后中国科学家宣布了发现了太阳的分层结构,可以利用太阳当作一个电波放大器,将人类的信号扩大发送到宇宙中。
随即,霍金再一次警告:“不要回答!不要回答!不要回答!”
中国用太阳向接收4光年外信号的方向,回复了一封信息。内容包括地球行星概况、地球生命系统概括、世界历史基本信息、全部信息为17.5KB。
历史学家们命名这一天为“回复日”。
几天后,全球射电基地同时收到了数以万计的宇宙信号,全部来自四光年外的同一个方向。面对如此反常的信号,人类终于意识到了危险和恐惧。
联合国紧急召开会议,共同研究外星信息内容破译,并宣布全球进入战备状态。
在这段时间地球每日都在持续接收大量外星信号下,联合国外星信息解译小组成立了,集合了所有世界顶尖级科学家,并马上投入到对这几万条外星信息内容的破解翻译工作中。
联合国确定了一个国际性的合作方案,并正式启动了人类逃亡计划,各国拟定经济节省计划,控制人口计划,并开始投入全力研究宇航技术,建造太空舰队。
此时,地球每天收到的外星信号越来越多。人类知道,留给自己的时间不多了。
外星信息解译小组对外宣布:解译程序终于开发成功!
联合国大厦的会议室里,各国首脑紧张地盯着屏幕,程序显示这几万条外星信号都系同样一个信息,随着电脑的破解,一行字清晰地显示在屏幕里,人类终于第一次读到了来自宇宙中另一个世界的信:
那口大锅附近房价多少钱一平米?租金多少钱?实在住不起,我们还是继续住山洞吧! https://t.cn/z8ADXVc


发布     👍 0 举报 写留言 🖊   
✋热门推荐
  • 很多想要挽回前任的人找到我们的时候,都下定决心在短时间内挽回感情,但是这个过程其实需要很高的执行力才能达成。很多想要挽回前任的人找到我们的时候,都下定决心在短时
  • #felix[超话]# [蛋糕] #Felix0915生日快乐# 【2022生日祝福Message Book】为了让Felix感受到来自舒馥蕾&中国ST
  • 真是个小可怜啊,不说了,我要去疯狂搜索魔道的同人和广播剧了! ...展开全文c一天两夜看完了魔道祖师,然后…我整个人都不好了,十分后悔为什么到现在才开始看,好吧
  • 一开始,面对霍启刚的追求,郭晶晶也不怎么感冒,主要是她感觉两个人之间的差距太大了,她更想嫁给一个普通人或者是一位运动员。经过慢慢的接触,郭晶晶才发现了霍启刚身上
  • 我不是教你诈,是教你认清人道,弗成因为他们的好,忘了他们的坏;不要因为他们的恶,忘了他的善。当你种出最丰富,乃至远凌驾果园仆人之前种出的果实的时间,永久不要忘掉
  •   等业主走后,我和瓦工师傅还讨论这个话题,现在获取信息太简单了,很多业主只看到了表面工作,看到的都是对方想让你看到的,而一些内在的东西,看不见也不关注。   
  • 石家庄隆鼻医院医生推荐,石家庄做直鼻多少钱?石家庄隆鼻医院医生推荐,石家庄做直鼻多少钱?
  • “物勒工名”的产品质量管理制度,特别体现在秦国官营的兵器生产中。据有学者对出土的秦国兵器“戈”上的铭文考证,发现秦国对兵器的生产制作,实行严格的“物勒工名”制度
  • ✨@引路星 原著,@玉苍红工作室 独家制作,广播剧《你亲我一下》距离开播还有1天~收听见评论,卷花本条+关注,下周六抽①名小伙伴送主役双签明信片无料x1!〖卷+
  • 上午吃了车厘子蓝莓,今天好像不太爱吃的样子,奶奶给买了牛油果,明天换水果吃。回家来匆忙的准备辅食,今天依旧不喜欢西红柿,妈妈辛苦做出来的辅食只吃了1/4[失望]
  • 双方同意保持战略协调,深化务实合作。【王毅会见俄罗斯外长拉夫罗夫】8月5日,国务委员兼外长王毅在金边出席东亚合作系列外长会期间应约会见俄罗斯外长拉夫罗夫。
  • 同理,清香型铁观音,抽湿单丛等焙火不重的茶,为了保持其鲜爽和滋味,则放冰箱低温保存为好。最全知识很多朋友在买了一款茶之后没怎么在意结果几个月后去喝发现没买时那么
  • 不用更换刷头,真心推荐#技术N学堂#天气越来越冷咯,车辆在低温时启动会变得更加困难。但是这又是个想减肥的季节,要是能在家里运动就好了,于是打算买一台设备放家里[
  • #饭圈扩关[超话]#来抽个奖~抽个510fo限hyq哟 可以现在来约我我属性敖子逸马嘉祺张极张泽禹陈浚铭注意避让![赞啊][赞啊][赞啊]在此,大王郑重声明,
  • #山东专升本[超话]# 山东专升本考试专业分析——能源与动力工程专业-能源与动力工程专业-学科大类:工学考试科目:大学语文、高等数学Ⅰ、英语、计算机可报考专业:
  • #小魂[超话]#江湖不见吧,我真的很喜欢你唱的花满楼。以前跟一堆人换个号给你投票,给你转发微博发评论,出新歌了也第一时间去夸夸,那会子真的是很开心。
  • #每日一善[超话]##每日一善# #阳光信用# 真正的快乐,可能就是你做一件事,想一个人,会忍不住笑出来,唱出来,甚至可能是流出泪来我常常思考为何鸟儿拥有整片天
  • 每天刷微博大脑不停看碎片化的东西大脑也处理不了什么有用的信息但很快乐会停止焦虑投入到其他里面比如看听电台看k线看电影看电视剧然后再出来发现做的也没意义只是觉得它
  • 敬请关注——​宜兴市寻亲志愿者团队贺​ 2022.7.30#寻亲##团圆行动##寻亲达人情报尖兵#广元机场今日航班✈️:请计划执飞航班的旅客提前到机场办理登机
  • [悲伤][悲伤][悲伤] 疫情反反复复,做核酸的队伍又排成了长龙,突然想起看过的一段话,希望对大家能有一些鼓励,“我们不要觉得烦,不要觉得青春被疫情偷走了。当然