• [问题求助] 【OpenGauss】【性能测试】请问OpenGauss 能跑 sysbench 吗?
    请问除了 benchmarksql 外,opengauss 能跑 sysbench 吗?或者自己特有的benchmark 工具
  • [技术干货] 国内首个事务型数据库性能测试工具正式开源
    2 月 17 日,由信通院主办的国内首款金融数据库性能测试工具开源发布会在线上召开。会上,定位于国家高端专业智库、产业创新发展平台的信通院宣布开源了该测试工具,并详细阐述了开源此工具的背景、初心、历程以及愿景。信通院云大所副所长魏凯表示,将该款测试工具开源出来,也是希望借助平台的力量推动我国数据库产业健康、可持续地发展。国产数据库百花齐放,选型和测评成为困扰2022 年 1 月 17 日,据国际数据公司(IDC)发布的《2021 年上半年中国关系型数据库软件市场跟踪报告》显示,2021 上半年中国关系型数据库软件市场规模为 11.9 亿美元,整体市场同比增长 37.2%,IDC 预测,2021 全年中国关系型数据库软件市场规模为 27.5 亿美元, 到 2025 年将达到 76.7 亿美元,未来 5 年市场年复合增长率(CAGR)为 30.4%。毫无疑问,资本的目光紧盯上了数据库这块大蛋糕。据相关数据显示,仅在 2021 第四季度,全球数据库初创企业就募集了超过 22 亿美元的资金,国内的数据库产品更是可谓百花齐放。在全面数字化转型的过程中,数据库也迎来了换道转型的关键时期,其中最明显的变化就是云原生和分布式数据库时代真正来临了。一方面数据库产品多点开花昭示着这个行业是欣欣向荣的,这对行业来说是个利好,但另一方面,对于企业而言,要在纷繁复杂的数据库产品中选出适合自己企业的产品也愈发困难。在看到了这种现象出现后,作为信息社会创新发展的思想库和使能者,信通院也在关注数据库的 Benchmark 的实践应用及演变。技术在变、应用场景在变、产业的主体也在变,所以这也给信通院提供了一个契机和窗口,为数据库产业提出具有时代特色的 Benchmark 软件工具。在所有应用场景中,最典型的场景是金融行业,它对数据库的可拓展性、安全性、兼容性等要求是极为苛刻的。那么,应该怎样测评一款数据库是否符合当前的应用场景?此前,数据库性能测试长期依托 TPC( Transaction Processing Performance Council,事务处理性能委员会)推出的 TPC-C 评测标准。但由于其存在工具不统一、场景不对口等问题,难以满足当前我国数据库产业新发展阶段需求。此外,TPC-C 的商品批发销售模型不能完全模拟金融机构实际业务中的事务,TPC 也不提供官方测试工具,第三方工具五花八门,测试结果难以横向比较。基于以上种种,2018 年,中国信通院联合北京银行、建设银行以及多个领域头部企业,共同设计研发了金融数据库性能测试工具(DetaBench-T),并依托工具开展了统一标准测试,有效指导了金融行业数据库选型工作。2022 年开年之际,为使工具更快、更好地为相关方服务,信通院特将 Detabench-T 进行开源。项目开源地址:https://gitee.com/caict-bigdata/databench-t四年磨一剑,力求打造中国 TPC自 2018 年至今,信通院联合各大银行及多个领域头部企业深耕打磨的 Detabench-T,为什么选择金融行业来首次试水?据中国信通院云计算与大数据研究所业务主管刘思源介绍,2020 年,信通院从公开的数据中统计到金融业占全国的 GDP 是 8.2%,是除了制造业之外最大的一个行业。除此之外还有一个重要的原因就是金融、监管机构从 2017 年开始规划了很多政策文件,这些文件为金融信息系统向分布式架构转型的方向提出了很多的高层次指导意见。于是,从 2018 年年底开始,信通院联合了北京银行、建设银行一起来开发,并邀请了来自腾讯、华为、中兴等企业的多位专家来共同参与该款工具的总体设计和实现。DetaBench-T 工具总体架构分为三大模块,工具的总体架构图如下:刘思源表示,在我国数字化转型大背景下,很多行业都处于蓬勃发展的阶段,对于数据库这类基础软件有着极端的要求。数据库应用侧不断涌现的一些需求也在快速变化,存量市场需要替换,增量市场也要创新。但目前来说,存量市场和增量市场有两大矛盾:首先,就存量市场而言,据 2021 年信通院统计数据显示,国内已经有 80 多家数据库企业,一百多款数据库产品,今年的数据将会更多,产品的同质化竞争较为严重。但供给侧的发展相对来说并不是特别清晰,应用侧也很难在众多数据库产品中做出选择。其次,就增量市场而言,随着数字化转型的不断推进,数据和数据业务上云已经成为一种主流趋势。目前来讲,未来数据库的一些创新方向和实现路径以及应用模式还缺乏成熟的、可借鉴的经验。在这两大矛盾作用下,信通院在数据库领域的定位就很明确了,一是优化存量市场的竞争环境,对于存量市场中一些相对来说不那么适应新需求的数据库进行平稳的替代;二是找到新的数据库的发展方向,引领整个产业标准化达成共识。此次发布的 Detabench-T 工具,也是希望能从根本上推动我国 ICT 领域健康、快速发展,使工具能更快、更好地为相关方服务。文章来源:https://t.cj.sina.com.cn/articles/view/5901272611/15fbe462301901uipd声明:文章只为分享、学习,如有涉及侵权, 请及时联系删除,谢谢!
  • [技术干货] 最近开源了一款网络性能测试仪dperf,发现鲲鹏非常适合做网络报文处理,棒棒的
    今日开源了一款针对四层负载均衡的性能测试仪: dperf。它使用了DPDK与用户态tcp协议栈技术,用一台x86服务器就可以制造巨大流量:数10亿并发连接,百Gbps吞吐,千万级HTTP CPS。欢迎使用、讨论、贡献,谢谢。我们内部把dperf部署在两台物理服务器上,对打流量,用来测评、对比各种CPU平台的网络处理能力,希望dperff对您有用,谢谢。这是用用两台鲲鹏920测试的数据。
  • [交流吐槽] 华为MateBook E二合一笔记本性能测试
    随着计算机技术的快速发展,硬件性能的快速提升,用户在选购笔记本电脑时不再一味地追求极致的性能体验,而是务实地遵循“够用就好、体验为王”的原则,特别对于需要经常出差的商务人士,“易携带、待机久、体验好”成为选购笔记本电脑的黄金三要素。正因如此,融合了移动笔记本和平板电脑两大特点的二合一笔记本越来越受到商务办公人群的青睐。早在2013年微软就瞄准不断下滑的个人电脑市场推出二合一笔记本电脑Surface Pro,由于定价高而性能一般,八年来并未被国内消费者所接受。国外大厂习惯了在缺少竞争者的市场中给产品设定较高价格,以获取更多的利润。随着华为新一代MateBook E的发布,这种竞争格局即将改变。11月17日,华为发布新一代MateBook E二合一笔记本,收获了一大波眼球。为探析MateBook E二合一笔记本的实际性能,给商务人士选购笔记本提供全面性能评估数据,新工业网编辑特别蹲守到12月1日凌晨的开卖点,在华为商城订购一台MateBook E二合一笔记本。1 外观赏析本次选购的MateBook E二合一笔记本搭配11代酷睿 i5 处理器、16G LPDDR4x内存、512G M.2 2280固态硬盘,以及12.6英寸OLED原色全面屏。操作系统为最新发布的Windows 11,先通过四张图全面赏析MateBook E惊叹的外观。正面,是一块 12.6 英寸、2560 x 1600 分辨率、240PPI 的 OLED 屏,也是华为首次将 OLED 屏幕用在 Windows电脑上,OLED 屏特点是色彩准确、亮度高、对比度高,特别适合创新设计人士。在MateBook E左侧有一个电源指纹二合一按钮和 3.5mm 耳机孔。右边有且仅有一个雷电4 接口;上侧屏幕和边框中间有比较明显的孔隙,孔隙中有进风口、出风口和四扬声器。四个扬声器采取左两个右两个的对称式布局,由 HUAWEI SOUND 进行专业调校,使得声场更加广阔、音色富有层次感和方向感。针对音乐、电影、游戏和通话等场景都有专门的优化。在屏幕上方还有一个800万像素的高清摄像头,能进行高质量的视频通话。华为还自主研发了 AI 降噪语音增强技术,能够调用机身的多麦克风,实时识别出人声语音与干扰噪声,并降低环境噪声、提取出纯净的语音传递给对方,让沟通更为高效。在具体尺寸和重量信息方面,长宽高分别为184.7*286.5*7.99mm, 重量约 709g,比普通的笔记本小很多。就设计而言,如此轻薄的机身内塞进性能丝毫不输目前主流笔记本性能的硬件配置,解决散热问题,其工艺水平可见一斑。2 Windows 11MateBook E搭配的WIndows 11系统提供许多创新功能,旨在支持当前的混合工作环境,侧重于在灵活多变的全新体验中提高最终用户的工作效率。值得一提的是,MateBook E开机体验非常好,就像手机和平板电脑一样,从开机到进入桌面平均花费15秒左右,远少于主流笔记本的开机时间。MateBook E二合一笔记本自带Word、PowerPoint和Excel三大办公套件,只需简单激活就可以使用;内嵌微软和华为两大厂商的应用商店,用户可以像手机一样下载并安装应用,为测试MateBook E的商务办公性能,小编专门从华为应用商店下载PhotoShop和CAD快速看图软件。除此之外,MateBook E针对游戏提供优化的场景设置功能。在兼顾办公的同时也注重游戏娱乐体验。3 性能测试笔记本性能是否拥有很高性价比,判断依据无非是与市场主流产品进行性能对比,如果展现出更好的性能或同等性能,价格又低,说明产品拥有更高的性价比,用户可择优选择。为此,本次测试将使用小编自己的MacBook Air 2020笔记与MateBook E做性能对比,通过分析测试结果判断MateBook E是否物超所值。1、硬件性能测试通过华为应用商店下载鲁大师,对MateBook E性能进行测试,具体的硬件参数和综合性能得分如下。测试显示,MateBook E性能表现击败全国48%的用户,能流畅运行DOTA2、英雄联盟等大型联网游戏以及PS等绘图软件,满足日常的娱乐办公需求。一款6000元的二合一笔记本,处在普遍动辄8000元、9000元的笔记本市场,实属物美价廉。由于苹果电脑不支持鲁大师,考虑到结果的公平,我们也无法用其他测试软件对MacBook Air进行测试。不过小编截取苹果电脑具体配置图,也不妨先对比一番。从硬件配置看,处理器和硬盘两者相差不大,处理器均为四核心Intel Core i5 1.1Ghz和512GB固态硬盘,但MacBook Air只有8GB内存,MateBook E则是16GB,型号都是LPDDR4X;MateBook E采用Intel Iris Xe显卡芯片,MacBook Air则使用Intel Iris Pro显卡芯片。两款产品定价方面却相差2000元,MateBook E市场价6000元起步,而MacBook Air市场价则是8000起步。2、办公性能测试为测试笔记本办公性能,我们选用了四个文档:1个Word文档、3个PPT文档。(1)Word文档,100页4万字,包括图片和表格,大小3M。(2)PPT文档,157页,包括图片和表格,大小6.8M。(3)PPT文档,147页,包括图片和表格,大小7.7M。(4)PPT文档,36P,包括图片和表格,大小8.5M。从测试结果看,两台笔记本打开、编辑和保存文档都十分流畅,文档打开时间基本都在3秒以内,编辑和操作过程无任何卡顿或不流畅的地方,显示出十分稳定的性能。稍有不同之处是,MateBook E是触摸屏,通过触控笔或手指轻松点击、放大和滑动,这决定了MateBook E适用更为广泛的生活和办公场景,较轻的重量和较小的体积可以像手机一样拿在手中操作,即便是在咖啡厅、户外环境也能便捷携带,交互性体验感更好。3、创意设计测试创意设计测试使用了两大软件,PhotoShop和CAD快速预览。PhotoShop测试对图形设计的处理能力,CAD快速预览测试对专业CAD图文档的浏览编辑能力。我们选取了两个文档:(1)从摄图网下载的新加坡滨海湾全景高清大图,JPG格式,大小为45.4M。(2)从网上下载的DWG格式的CAD装配图,大小为1M。从测试结果看,两台笔记本在使用PhotoShop打开、缩放和旋转图片的过程都十分流畅。由于MateBook E拥有更大内存,比较而言,其打开图片的过程用时更短,对色彩的处理效果也更好。此外,在用CAD快速看DWG文档时,两台笔记本打开装配图过程也非常快,无论是尺寸标注、坐标标注还是缩放旋转,都没有任何卡顿,两款产品都适合简单的工业CAD图形预览处理。4、游戏性能测试网络游戏作为人们最普遍的娱乐休闲方式,是消费者选购笔记本必须考虑的用途之一。特别是LOL、DOTA2等受众较广的游戏,主流电脑型号必须给予支持。我玩网络游戏比较少,英雄联盟是第一次玩,这次纯粹为了测试MateBook E在英雄联盟游戏中的性能表现。注册新账号和加载登录过程很快,在跑动和攻击过程中十分流畅,游戏色彩显示十分自然真实。虽然我并非游戏发烧友,但从体验来讲,我对玩英雄联盟的交互效果感到很满意。4 总结就像互联网造就PC时代,移动互联网造就移动笔记本、平板电脑和智能手机一样,随着社会节奏不断加快,工作和生活融合得更为紧密,工作与生活场景切换也变得更为频繁。如何保证工作高效的同时更好地体验生活,整合移动办公、娱乐休闲等多元属性,成为新时代笔记本功能创新的重要切入点。华为MateBook E二合一笔记本的发布,与其说是厂商基于时代需求对产品的改良创新,不如说是针对商务人群所做的人性化设计。重要的是,它在保证工作和生活多元化性能需求的同时,价格与普通的笔记本并无差别,甚至价格更低,而交互体验却更好。搭起来就是一台移动笔记本,收起来就是平板,不论是在公司还是在家,或者是出差途中,随时随地满足商务人士的多元化需求。来源“新工业网”作者 | 熊东旭原文链接 |  https://www.xingongye.cn/cms/IT_architecture/944.html
  • [优秀实践] 大数据性能测试问题分析案例总结
    问题:执行脚本后HDFS NameNode自动停止分析过程:查看日志,发现Hive报错堆内存溢出,HDFS报NameNode连接超时导致停止运行等错误。查看name node机器环境:lscpu查看负载:top分析到系统numa个数只有2个以及网络中断很高,怀疑网卡版本有问题。查看网卡版本:ethtool -i enp4s0发现是1822网卡,驱动未升级。排查集群机器解决方案:升级网卡驱动以及关闭DIE交织升级后的网卡关闭DIE交织后,正常显示4个numa对机器升级驱动以及关闭DIE交织后,再次执行脚本Namenode正常,distcp任务运行时间由2个多小时降低至3分钟左右问题二:mapreduce提交任务计算时,job已经结束,但是容器仍不能关闭持续等待五分钟问题原因:ATSv2的嵌入式HBASE崩溃。解决方案:重置ATsv2内嵌HBASE数据库1.停止Yarn服务Ambari -> Yarn-Actions -> Stop2.删除Zookeeper上的ATSv2 Znodezookeeper-client -server zookeeper-quorum-serversrmr /atsv2-hbase-unsecure或rmr /atsv2-hbase-secure(如果是kerberized集群)3.从HDFS移动Hbase时间线服务器Hbase嵌入式数据库hdfs dfs -mv /atsv2/hbase/tmp/4.开始使用yarn服务Ambari - > Yarn-Actions- > Start再次重新提交任务,发现程序正常,问题解决,任务时间由14分钟降低至8分钟左右
  • [算子开发] 【众智】【CANN】数据性能劣化
    【功能模块】算子性能测试模块【操作步骤&问题现象】1、Cumprod算子性能测试设置512Kb,2M,64M数据性能出现劣化2、在实现.cc文件中,我是仿照Cumsum算子的多线程写法,Cumsum的性能测试通过了,但不知道为什么Cumprod的多核好像没有生效,性能比tf的还差3、想问一下原因,以及下一步的改动方法4、添加Cumprod算子 · Pull Request !11383 · Ascend/canndev - Gitee.com【截图信息】【日志信息】(可选,上传日志内容或者附件)
  • [算子开发] 【CANN】关于使用自定义数据进行ST测试的问题
    【功能模块】ST测试【操作步骤&问题现象】1、在对算子进行ST测试时,由于算子的3个输入分别为另一个算子的1个输入和2个输出,所以没有使用随机tensor而是使用了自定义数据生成脚本。想问下能不能在一个脚本中,做到实现多个不同case,每个case中设定自己想要的shape值这样的效果来做性能测试呢?或者有没有办法能从json文件中获取某个case中某个inputdesc的shape呢?FAQ2-16 如何使用自定义数据进行ST测试2、在使用自定义数据生成脚本时,两个输入的值,是通过脚本生成的另一个输入调用pytorch中的函数得到的。在对一个case通过这一方法进行性能测试时,发现测试结果花费时间较长,请问这跟使用自定义数据脚本测试有关吗?如果有关的话有什么方法可以避免吗?
  • [Atlas200] 网络性能测试
    你好,Atlas 200 用在我们的底板上,网口外扩了一个88E1512的PHY芯片,用SD卡启动后,使用iperf3工具测试网络性能,当PC为服务器,A200为客户端时,测试网络没有问题,但是当A200为服务器,PC为客户端时,速率就不正常了,请问有哪些原因会导致这种情况发生。
  • [算子开发] 【众智】【CANN】算子性能测试不达标
    算子性能测试,大部分数据无论开不开多核加速,耗时都不达标,请问算子实现哪里可以改进算子耗时相关数据已附在压缩包中
  • [问题求助] CPTS测试工程,导入脚本,运行之后,查看结果报错
    有没有出现这样问题的,希望有贵人相助,感谢
  • [技术干货] 测试工程师必看——性能测试&安全测试
  • [算子开发] 【众智】【CANN】算子性能测试加-conf msopst.ini报错
    【操作步骤&问题现象】算子st测试正常,可以正常得到run time,在性能测试时按照文档加入-conf msopst.ini指令后报错请问如何解决
  • [问题求助] 【鲲鹏920产品】【SSD性能测试】PM983在鲲鹏920平台下,4K读性能只能到330K,必须经过拔插才能到600K
    【功能模块】【操作步骤&问题现象】1、在IO模组3 位置插入PM983 NVME SSD2、fio --ioengine=libaio --randrepeat=0 --norandommap --filename=/dev/nvme0n1 --numjobs=8 --iodepth=64 --rw=randread --thread --direct=1 --group_reporting --name=mytest --ramp_time=10 --runtime=3600 --time_based --bs=4k3、步骤2 随机读性能只能到330K(没有达到datasheet要求4、拔插下 SSD5、再次读写,就可以达到600K该问题为必现【截图信息】步骤3 截图:步骤5截图:【日志信息】(可选,上传日志内容或者附件)热拔插打印日志:[  283.935864] pciehp 0000:80:08.0:pcie004: Slot(28): Card present[  285.068082] pci 0000:83:00.0: [144d:a808] type 00 class 0x010802[  285.068101] pci 0000:83:00.0: reg 0x10: [mem 0x00000000-0x00003fff 64bit][  285.068118] pci 0000:83:00.0: reg 0x30: [mem 0x00000000-0x0000ffff pref][  285.068124] pci 0000:83:00.0: Max Payload Size set to 256 (was 128, max 256)[  285.068334] pci 0000:83:00.0: BAR 6: assigned [mem 0xb0000000-0xb000ffff pref][  285.068336] pci 0000:83:00.0: BAR 0: assigned [mem 0xb0010000-0xb0013fff 64bit][  285.068343] pcieport 0000:80:08.0: PCI bridge to [bus 83][  285.068345] pcieport 0000:80:08.0:   bridge window [io  0x10000-0x10fff][  285.068347] pcieport 0000:80:08.0:   bridge window [mem 0xb0000000-0xb00fffff][  285.068349] pcieport 0000:80:08.0:   bridge window [mem 0x280000000000-0x2800001fffff 64bit pref][  285.069016] nvme nvme0: pci function 0000:83:00.0[  285.069037] nvme 0000:83:00.0: enabling device (0140 -> 0142)[  289.280873] nvme nvme0: Shutdown timeout set to 8 seconds
  • [业务动态] 关于微认证《微服务网站性能测试》下线优化的通知
    尊敬的微认证客户:您好!因产品功能调整,华为云学院于2021年6月24日对《微服务网站性能测试》微认证的课程及实验进行下线优化,预计将于2021年7月23日重新上线,届时请您关注。为此,我们将采取以下措施:1.对于已购买该微认证并通过考试领取证书的客户,原证书在证书有效期内仍有效,并与课程优化后的证书拥有同等效力;2.对于已购买该微认证但未通过考试且仍有考试机会的客户,可在重新上线后进行新课程学习、实验,参加考试并领取证书;3.对于已购买该微认证但未完成实验操作的客户,如您在2021年6月24日前,自购买日期起在30天内(代金劵有效)未进行实验操作,华为云学院将于微认证优化重新上线后为您另行发放代金券,可用于优化后的微认证实验操作,新代金券自发放之日起30天内有效,请在有效期内使用。如您有任何问题,可随时通过工单或者服务热线(+86-4000-955-988 )与我们联系。感谢您对华为云微认证的支持! 发布日期:2021年6月24日
  • [算子开发] 【AI CPU】【性能测试】编写的算子处理int64类型的数据性能比TensorFlow差
    【功能模块】InvertPermutation算子:计算张量的逆排列逻辑为:y[x[i]] = i for i in [0, 1, ..., len(x) - 1]比如:输入[3, 4, 0, 2, 1]对应的输出为[3, 4, 0, 2, 1]【操作步骤&问题现象】1、在性能测试过程中:程序中使用了多线程后,处理int32类型的数据时,性能与tensorflow对应的算子相持平;但对于int64类型的数据,当数据量增大时(64k, 1M, 2M, 8M, 128M),编写的算子运行时间要比tensorflow中的算子高3%到6%。2、请问该怎么提升一下算子的性能。【截图信息】附件中包含算子实现文件,算子性能数据以及我编写的代码与TF中代码的对比描述。
总条数:136 到第
上滑加载中