当前位置:CIO新闻中心 → 正文

TiDB助力数据价值实时变现

责任编辑:cres |来源:企业网D1Net  2022-08-13 15:41:27 原创文章 企业网D1Net

8月13日,由企业网D1Net、信众智CIO智力输出及社交平台和中国企业数字化联盟共同主办的2022北京部委央企及大型企业CIO年会(夏季)在北京盛大开幕。大会以“数字化转型新场景”为主题,汇聚了约100余名北京地区各行业的CIO和信息主管,以及多家一线IT解决方案提供商,围绕CIO的实战案例和前瞻性思考,分享在当前复杂的经济环境和数字化升级转型逐渐深入的大背景之下,政企信息部门如何通过数字化手段解决新业务场景遭遇的难题,为广大企业的数字化转型场景化探索提供参考依据,推进中国企业的数字化升级与转型进程。
 
以下是现场速记。



PingCAP合伙人执行副总裁 余梦杰
 
余梦杰:大家下午好!我是来自PingCAP的余梦杰,很高兴今天给大家作一个分享。我今天讲的题目是TiDB助力数据价值实时变现。
 
PingCAP是一家源自中国的分布式数据库厂商,我们是一家创业公司,我们已经成立第七个年头了。到目前为止,我们在全球有9个办公室,研发人员的比例超过了60%,目前服务于全球超过2000的用户。
 
如果关注数据库的朋友都会了解到,在国内我们是有比较全维的排行榜,TiDB在这个排行榜上已经连续20多个月排名第一,处于比较领先的状态。
 
值得一提的是这个排行榜目前收录了大概230多家国产数据库,但是如果我们去看全球最权威的收录的数据库大概只有350家左右,在国家扶持、行业繁荣背景下,客观的也给我们客户、我们用户在选择数据库时带来了很多困扰 ,所以怎样更好科学界定、评测、给出推荐,是我们的监管要做的很重要的事情。相信随着时间 的推移,会把头部厂商逐步梳理出来。
 
在这个过程中,经过七年的时间,我们已经比较自豪的可以说TiDB是国人主导的全球的顶级的开源项目。我们可以看各种各样的开源排名、活跃度、贡献度以及分布的排名,我们都是排在非常前列的。值得一提的我们在去年科创中国开源创新榜唯一一家同时获得开源社区、开源公司和开源产品的一家企业。
 
TiDB的发展是依托于开源、云一步步做起来的,如果熟悉开源的朋友大家都知道,开源本身有三个特别显而易见的好处:加速产品创新,因为迭代很快;在全球范围内更高效的病毒式口碑传播;帮助我们更高效的获客。
 
开源还有它本身承载极其重大的公益和社会价值。像国家疾控中心疫苗库就在使用TiDB,但是也是通过我们合作伙伴去用的,这本身也是它的社会价值的体现。
 
云更不用说了,大家都知道我们的用户可以像水和电一样来使用云的资源,从而它的整个迭代,在它的弹性、灰度升级上都有极高的便利性。所以云和开源融合在一起的时候,它不是一个加法而是乘法,可以加速整个产品的迭代。
 
这是我们最近取得的成绩,数据库行业客户口碑和推荐是非常重要的。我们在沙利文报告里也处于领导的象限。
 
我做数据库比较久了,在数据库的行业我们有一些行话,我们通常讲这个世界上只有两种数据库:被人骂的;没人用的。虽然它比较大白话,但是很朴素的反馈出了基础软件要想持续创新、要想繁荣发展做大的鸡生蛋和蛋生鸡的难题。PingCAP在这方面在探索中国基础软件全球化发展的最佳的路径,我们讲的是自主开源,我们会自主研发,掌握核心的代码,没有用到一行mysql代码,没有断供风险。
 
我们通过商业版、发行版拓展我们业务市场,同时可以很好主导和决策我们产品的研发方向。这里有两点重点去讲:
 
第一.从供应链来看,它占据了供应链的上游,我们在国内还有很多大的机构跟我们合作TiDB的发行版,作为整个下游去丰富整个生态,这个从根本上消除了断供的风险。
 
第二.很多朋友问我们说TiDB发展这么多年,它核心的竞争力在哪儿?我们认为TiDB核心竞争力在于它产品迭代和演进的加速度和它的创造力,我觉得这个是最关键的。
 
这个动能是怎么来的?归根到底来自于中国领先全球的业务需求。大家都知道我们是从互联网做起来的,通过开源的形式。中国的消费互联网是全球领先的,全球领先的需求一定能够带来领先的业务场景,从而能够带来最领先的产品需求。
 
另一方面中国经过这么多年的发展,我们人才积累已经跟硅谷跟世界上一流水平是可以齐头并进了。所以如果我们能用开源的形式打造人尽其才的设施,把场景、人才吸纳进来,这个是构成我们最核心的竞争力。
 
挑战也很大,我们一直讲做开源特别需要践行长期主义,要有长期投入。以PingCAP为例,我们长期有几十个人团队,没有背任何的数字和营销目标,专注做开源社区。考核它的是能不能让社区自发生长,活跃度、长期度和贡献。
 
相比国内230多家国产数据库,这里还是有一些风险的。它的好处是可以快速的进行封装投入使用,但是有几点风险需要大家注意。
 
第一.有很多厂商拿开源的mysql进行封装做成自己的产品,但是这个里面有很大的法律风险。因为mysql采用AGPL,按照甲骨文官方要求和国际通行准则来看如果用它进行封装,必须把它开源出来,否则就违法,这个真的是违反法律的。包括国内的知识产权相关的法院,也有多起类似的判例。
 
第二.它在整个迭代和演进上的风险。现在不管你是用哪个数据库,它的架构都是20年前、30年前的架构了,它的整个架构的天花板相对来讲是比较低的。所以你在它的基础上,在一个天花板比较低的架构上做迭代、创新,你很难适应未来大数据量还有海量并发的需求。所以我们算是顺应这个时代做了这样的产品。
 
在国产化这一块,我们一直非常积极的去拥抱整个国产化的工作。包括所有的信创相关的联盟、工作组我们都在里面,我们也大量的参与了各种规范、标准的制定,也是在各种像分布式数据库开源专委会相应的委员,参与编制了很多这方面的标准。
 
从去年开始,像北京市的市委书记、市长工信部副部长陆续考察调研PingCAP,也考察我们自主开源+国际化的战略。
 
这我们的logo墙,发展了七年,我们初步有统计的应该是超过了2千多家。大家可以看到这个行业分布非常广,就数据库来讲它是基础软件,基础软件的特点是它是全行业的,所以可以看到在像银行、证券、保险包括像制造业、电信、能源、零售、物流、快消等等其实都有涵盖。以金融行业为例,四大行里的两家,12股份制银行里5家以及头部的像银行间组织、保险、证券我们都有深度合作,也是和这些客户一起解决我们面临的卡脖子的问题和业务创新的情况。
 
我们可能还是为数不多的中国能够真正走出去成功进入发达国家经济体,参与竞争全球标准的企业。我们现在在美国、日本、新加坡都有分公司,把业务做到了比较不错的体量,都有很多的头部案例。
 
讲一下HTAP,大家可以明显的看到2014年开始整个云上数据库或者说整个NewSQL创新出现非常多的变化,核心是云原生的兴起带来巨大的变革。
 
这几年大家都会听到一个词,我们会讲HTAP,它是指混合负载,在一套数据库里又可以去处理你的在线交易就是生产系统,同时你也不需要数据搬迁就可以做实时的分析,大大的简化我们技术栈。
 
为什么很多客户需求层出不穷?本质上大家都希望发挥数据价值,我们都知道数据是新时代的石油,数据的价值越实时,它的价值就越高。因为实时的意义在于它可以帮助我们做正确的决策,避免做错误的决策或者是去纠错。比如做促销或者做广告的投放,肯定尽快知道它的评估效果,帮助你下一步的决策。
 
2022年开始整个在HTAP在混合交易这一块出现了很多新的变化,包括去年我们5.0发布了并行计算引擎,大幅度提高了HTAP里面分析型的能力,包括今年的5月份谷歌AlloyDB也补全了它在整个HTAP的短板,包括SnowFlake在今年的6月份发布了Unistore为它的ODS提供在线的服务。
 
对于混合负载HTAP实时分析来看,它带来几个好处:
 
第一.它没有任何数据搬迁的过程。以前都是生产系统产生数据,这时通过文件的传输也好,通过计算也好会到一套AP系统再进行分析,这个过程是非常本周的,我们没有这个过程可以就地分析,它有非常好的TP和AP的隔离性。
 
第二.大量的简化技术栈。过去像一些中小企业要雇两拨人,一拨人维护在线系统,另外一拨是大数据团队做离线分析。但我们觉得用上TiDB,你只需要用一种语言,你只要会mysql就会大数据分析,这样会大量节省运维心力甚至团队。
 
第三.实时洞察。这张图核心在于现在为止我们技术的舒适区,只要数据量在500T以内,查询平均要求在半分钟,我们都是比较舒适的。我们在这块有大量的实践。
 
从关键能力来看,TiDB首先是关系型数据库,100%的关系型,因为它是实现强一致事务的。在这基础上可以横向扩展,从而对应用透明。所有业务问题通过加机器来解决,不用再去改你的应用,应用不会受制于基础架构,同时它的运维工具,它的接口包括它的扩展性就不一一阐述了。
 
我们同时支持多种部署,不管你的虚机、云上的机器或者你用云原生容器管理平台,我们都可以去部署。值得一提的是,我们可能是极少数的支持在kubernetes去部署的国产数据库,这个为我们的客户带来极大的便利性。
 
作为OLTP数据库,所有该有的我们都齐备。包括它的扩展性、高可用和数据强一致性以及高度兼容性,我们没有用到一行mysql代码,我们却兼容它的协议,完全合规的去做这样的工作。
 
从场景来看,我们初步的去列了这几种场景包括混合负载、流式计算、数据中枢场景,数据在哪儿你就就地展开分析,提供saas场景。另外线上已经有大量分库分表之后的数据库,我可以通过我的实时写入能力和快速分析能力,把所有的库汇聚到更大的中台数据里然后进行实时分析带来整个生产力的提升。
 
中通case,整个包裹物流追踪系统,需要全域的追踪。我们成功的把它迁到了TiDB,从5分钟变成了1分钟以内。
 
得益于我们的创新和迭代的能力,我们版本也快速的迭代和创新,每一个版本都有我们早期很多客户持续的给我们去打磨,我们用最好的服务保证客户成功。大家可以看到从5.0开始,我们整体企业级能力,我们核心的OLTP响应时间、延迟、抖动都已经是完全能够满足绝大部分客户关键业务的需求,关键6.0也是今年4月份刚刚发布的,也是有巨大的性能提升,整体比5.0提升大概50%。
 
这是部分客户的反馈,包括像微众,它用我们来跑它的批量,做日间和日终结算,耗时降低58%。包括中通从5分钟缩短为1分钟,北京银行,现在上了差不多23套业务系统了。
 
我们是天然为云而生的数据库,我们可以多云部署,我们可以跟K8S深度适配,可以在阿里云上享用我们的服务。我们坚信开源、云原生加上全球化,这是PingCAP发展的核心理念,也是我们的战略基石。
 
今天就给大家汇报到这里,谢谢!

关键字:数字化转型

原创文章 企业网D1Net

x TiDB助力数据价值实时变现 扫一扫
分享本文到朋友圈
当前位置:CIO新闻中心 → 正文

TiDB助力数据价值实时变现

责任编辑:cres |来源:企业网D1Net  2022-08-13 15:41:27 原创文章 企业网D1Net

8月13日,由企业网D1Net、信众智CIO智力输出及社交平台和中国企业数字化联盟共同主办的2022北京部委央企及大型企业CIO年会(夏季)在北京盛大开幕。大会以“数字化转型新场景”为主题,汇聚了约100余名北京地区各行业的CIO和信息主管,以及多家一线IT解决方案提供商,围绕CIO的实战案例和前瞻性思考,分享在当前复杂的经济环境和数字化升级转型逐渐深入的大背景之下,政企信息部门如何通过数字化手段解决新业务场景遭遇的难题,为广大企业的数字化转型场景化探索提供参考依据,推进中国企业的数字化升级与转型进程。
 
以下是现场速记。



PingCAP合伙人执行副总裁 余梦杰
 
余梦杰:大家下午好!我是来自PingCAP的余梦杰,很高兴今天给大家作一个分享。我今天讲的题目是TiDB助力数据价值实时变现。
 
PingCAP是一家源自中国的分布式数据库厂商,我们是一家创业公司,我们已经成立第七个年头了。到目前为止,我们在全球有9个办公室,研发人员的比例超过了60%,目前服务于全球超过2000的用户。
 
如果关注数据库的朋友都会了解到,在国内我们是有比较全维的排行榜,TiDB在这个排行榜上已经连续20多个月排名第一,处于比较领先的状态。
 
值得一提的是这个排行榜目前收录了大概230多家国产数据库,但是如果我们去看全球最权威的收录的数据库大概只有350家左右,在国家扶持、行业繁荣背景下,客观的也给我们客户、我们用户在选择数据库时带来了很多困扰 ,所以怎样更好科学界定、评测、给出推荐,是我们的监管要做的很重要的事情。相信随着时间 的推移,会把头部厂商逐步梳理出来。
 
在这个过程中,经过七年的时间,我们已经比较自豪的可以说TiDB是国人主导的全球的顶级的开源项目。我们可以看各种各样的开源排名、活跃度、贡献度以及分布的排名,我们都是排在非常前列的。值得一提的我们在去年科创中国开源创新榜唯一一家同时获得开源社区、开源公司和开源产品的一家企业。
 
TiDB的发展是依托于开源、云一步步做起来的,如果熟悉开源的朋友大家都知道,开源本身有三个特别显而易见的好处:加速产品创新,因为迭代很快;在全球范围内更高效的病毒式口碑传播;帮助我们更高效的获客。
 
开源还有它本身承载极其重大的公益和社会价值。像国家疾控中心疫苗库就在使用TiDB,但是也是通过我们合作伙伴去用的,这本身也是它的社会价值的体现。
 
云更不用说了,大家都知道我们的用户可以像水和电一样来使用云的资源,从而它的整个迭代,在它的弹性、灰度升级上都有极高的便利性。所以云和开源融合在一起的时候,它不是一个加法而是乘法,可以加速整个产品的迭代。
 
这是我们最近取得的成绩,数据库行业客户口碑和推荐是非常重要的。我们在沙利文报告里也处于领导的象限。
 
我做数据库比较久了,在数据库的行业我们有一些行话,我们通常讲这个世界上只有两种数据库:被人骂的;没人用的。虽然它比较大白话,但是很朴素的反馈出了基础软件要想持续创新、要想繁荣发展做大的鸡生蛋和蛋生鸡的难题。PingCAP在这方面在探索中国基础软件全球化发展的最佳的路径,我们讲的是自主开源,我们会自主研发,掌握核心的代码,没有用到一行mysql代码,没有断供风险。
 
我们通过商业版、发行版拓展我们业务市场,同时可以很好主导和决策我们产品的研发方向。这里有两点重点去讲:
 
第一.从供应链来看,它占据了供应链的上游,我们在国内还有很多大的机构跟我们合作TiDB的发行版,作为整个下游去丰富整个生态,这个从根本上消除了断供的风险。
 
第二.很多朋友问我们说TiDB发展这么多年,它核心的竞争力在哪儿?我们认为TiDB核心竞争力在于它产品迭代和演进的加速度和它的创造力,我觉得这个是最关键的。
 
这个动能是怎么来的?归根到底来自于中国领先全球的业务需求。大家都知道我们是从互联网做起来的,通过开源的形式。中国的消费互联网是全球领先的,全球领先的需求一定能够带来领先的业务场景,从而能够带来最领先的产品需求。
 
另一方面中国经过这么多年的发展,我们人才积累已经跟硅谷跟世界上一流水平是可以齐头并进了。所以如果我们能用开源的形式打造人尽其才的设施,把场景、人才吸纳进来,这个是构成我们最核心的竞争力。
 
挑战也很大,我们一直讲做开源特别需要践行长期主义,要有长期投入。以PingCAP为例,我们长期有几十个人团队,没有背任何的数字和营销目标,专注做开源社区。考核它的是能不能让社区自发生长,活跃度、长期度和贡献。
 
相比国内230多家国产数据库,这里还是有一些风险的。它的好处是可以快速的进行封装投入使用,但是有几点风险需要大家注意。
 
第一.有很多厂商拿开源的mysql进行封装做成自己的产品,但是这个里面有很大的法律风险。因为mysql采用AGPL,按照甲骨文官方要求和国际通行准则来看如果用它进行封装,必须把它开源出来,否则就违法,这个真的是违反法律的。包括国内的知识产权相关的法院,也有多起类似的判例。
 
第二.它在整个迭代和演进上的风险。现在不管你是用哪个数据库,它的架构都是20年前、30年前的架构了,它的整个架构的天花板相对来讲是比较低的。所以你在它的基础上,在一个天花板比较低的架构上做迭代、创新,你很难适应未来大数据量还有海量并发的需求。所以我们算是顺应这个时代做了这样的产品。
 
在国产化这一块,我们一直非常积极的去拥抱整个国产化的工作。包括所有的信创相关的联盟、工作组我们都在里面,我们也大量的参与了各种规范、标准的制定,也是在各种像分布式数据库开源专委会相应的委员,参与编制了很多这方面的标准。
 
从去年开始,像北京市的市委书记、市长工信部副部长陆续考察调研PingCAP,也考察我们自主开源+国际化的战略。
 
这我们的logo墙,发展了七年,我们初步有统计的应该是超过了2千多家。大家可以看到这个行业分布非常广,就数据库来讲它是基础软件,基础软件的特点是它是全行业的,所以可以看到在像银行、证券、保险包括像制造业、电信、能源、零售、物流、快消等等其实都有涵盖。以金融行业为例,四大行里的两家,12股份制银行里5家以及头部的像银行间组织、保险、证券我们都有深度合作,也是和这些客户一起解决我们面临的卡脖子的问题和业务创新的情况。
 
我们可能还是为数不多的中国能够真正走出去成功进入发达国家经济体,参与竞争全球标准的企业。我们现在在美国、日本、新加坡都有分公司,把业务做到了比较不错的体量,都有很多的头部案例。
 
讲一下HTAP,大家可以明显的看到2014年开始整个云上数据库或者说整个NewSQL创新出现非常多的变化,核心是云原生的兴起带来巨大的变革。
 
这几年大家都会听到一个词,我们会讲HTAP,它是指混合负载,在一套数据库里又可以去处理你的在线交易就是生产系统,同时你也不需要数据搬迁就可以做实时的分析,大大的简化我们技术栈。
 
为什么很多客户需求层出不穷?本质上大家都希望发挥数据价值,我们都知道数据是新时代的石油,数据的价值越实时,它的价值就越高。因为实时的意义在于它可以帮助我们做正确的决策,避免做错误的决策或者是去纠错。比如做促销或者做广告的投放,肯定尽快知道它的评估效果,帮助你下一步的决策。
 
2022年开始整个在HTAP在混合交易这一块出现了很多新的变化,包括去年我们5.0发布了并行计算引擎,大幅度提高了HTAP里面分析型的能力,包括今年的5月份谷歌AlloyDB也补全了它在整个HTAP的短板,包括SnowFlake在今年的6月份发布了Unistore为它的ODS提供在线的服务。
 
对于混合负载HTAP实时分析来看,它带来几个好处:
 
第一.它没有任何数据搬迁的过程。以前都是生产系统产生数据,这时通过文件的传输也好,通过计算也好会到一套AP系统再进行分析,这个过程是非常本周的,我们没有这个过程可以就地分析,它有非常好的TP和AP的隔离性。
 
第二.大量的简化技术栈。过去像一些中小企业要雇两拨人,一拨人维护在线系统,另外一拨是大数据团队做离线分析。但我们觉得用上TiDB,你只需要用一种语言,你只要会mysql就会大数据分析,这样会大量节省运维心力甚至团队。
 
第三.实时洞察。这张图核心在于现在为止我们技术的舒适区,只要数据量在500T以内,查询平均要求在半分钟,我们都是比较舒适的。我们在这块有大量的实践。
 
从关键能力来看,TiDB首先是关系型数据库,100%的关系型,因为它是实现强一致事务的。在这基础上可以横向扩展,从而对应用透明。所有业务问题通过加机器来解决,不用再去改你的应用,应用不会受制于基础架构,同时它的运维工具,它的接口包括它的扩展性就不一一阐述了。
 
我们同时支持多种部署,不管你的虚机、云上的机器或者你用云原生容器管理平台,我们都可以去部署。值得一提的是,我们可能是极少数的支持在kubernetes去部署的国产数据库,这个为我们的客户带来极大的便利性。
 
作为OLTP数据库,所有该有的我们都齐备。包括它的扩展性、高可用和数据强一致性以及高度兼容性,我们没有用到一行mysql代码,我们却兼容它的协议,完全合规的去做这样的工作。
 
从场景来看,我们初步的去列了这几种场景包括混合负载、流式计算、数据中枢场景,数据在哪儿你就就地展开分析,提供saas场景。另外线上已经有大量分库分表之后的数据库,我可以通过我的实时写入能力和快速分析能力,把所有的库汇聚到更大的中台数据里然后进行实时分析带来整个生产力的提升。
 
中通case,整个包裹物流追踪系统,需要全域的追踪。我们成功的把它迁到了TiDB,从5分钟变成了1分钟以内。
 
得益于我们的创新和迭代的能力,我们版本也快速的迭代和创新,每一个版本都有我们早期很多客户持续的给我们去打磨,我们用最好的服务保证客户成功。大家可以看到从5.0开始,我们整体企业级能力,我们核心的OLTP响应时间、延迟、抖动都已经是完全能够满足绝大部分客户关键业务的需求,关键6.0也是今年4月份刚刚发布的,也是有巨大的性能提升,整体比5.0提升大概50%。
 
这是部分客户的反馈,包括像微众,它用我们来跑它的批量,做日间和日终结算,耗时降低58%。包括中通从5分钟缩短为1分钟,北京银行,现在上了差不多23套业务系统了。
 
我们是天然为云而生的数据库,我们可以多云部署,我们可以跟K8S深度适配,可以在阿里云上享用我们的服务。我们坚信开源、云原生加上全球化,这是PingCAP发展的核心理念,也是我们的战略基石。
 
今天就给大家汇报到这里,谢谢!

关键字:数字化转型

原创文章 企业网D1Net

电子周刊
回到顶部

关于我们联系我们版权声明隐私条款广告服务友情链接投稿中心招贤纳士

企业网版权所有 ©2010-2024 京ICP备09108050号-6 京公网安备 11010502049343号

^