操作系统

alisql（阿里sql优化手册）

2023-06-06 操作系统本文链接

阿里这一步走对了，同时还为互联网企业带了一个好头！

就在刚刚，上海传来了一个大消息。综合快递物流服务企业韵达正式与阿里云达成合作。双方宣布成立“智慧物流数据库创新应用中心”的同时，也在探索推进分布式数据库在智慧物流核心系统中的深度应用。最终，对物流行业底层链路进行重构，从而提升整个行业的整体效率。这一消息的公布，不仅是阿里云原生分布式数据库PolarDB-X在全功能开源后，首次在政企领域落地的真实写照。也同样是，阿里云技术推动实体经济发展的又一次迈进。

值得注意的是，该数据库是目前开源社区唯一一款存储计算分离的数据库，具有极致弹性、毫秒级延迟、HTAP能力。其核心技术由阿里内部广泛应用和锤炼的TDDL、AliSQL和X-Engine演进而来，曾获中国电子学会科学技术奖一等奖，而TDDL也曾开创国内互联网领域使用分库分表技术先河。可想而知，其在数字技术上所具备的深厚功力。

要知道，近年来中国互联网行业的增长已经遇到了天花板。很多人对互联网行业的未来前景发出了担忧。然而，今天的阿里无疑做了一个很好的表率。相对于其它行业来说，互联网行业具备着一个天然优势，那就是数字技术。因而推动自身转型，专注于数字技术的发展，则成为了互联网行业最好的出路之一，也是肩负社会责任的直观体现。其实早在之前，阿里就已经将重心全面向科技研发倾斜。从达摩院、平头哥的落地，到公开表态不以盈利为目的。从宣布数据库的开源，到今天的推动数字技术服务实体经济。种种迹象都在表明，如今的阿里正在科技的道路上越走越远。也相信数字技术的驱动下，未来中国实体业也将迎来新一轮爆发！

#夏日生活打卡季#腾讯云数据库负责人“丁奇”（林晓斌）借了同事一亿元炒股？知情人士回应：金额不实，原因不清楚“

林晓斌在国内 MySQL 领域挺有影响力的，但凡对数据库有点了解，就一定听说过他。”有数据库业内人士指出。

在入职腾讯前，林晓斌曾在阿里巴巴任职，为前阿里 P9 技术专家，参与阿里云关系型数据库服务内核的开发，并推动了 AliSQL 分支开源。其网名“丁奇”也是林晓斌在阿里的花名。(科创板日报）#腾讯##传腾讯云数据库负责人借一亿炒股#

又有美国企业宣布制裁俄罗斯！

这一次是美国的数据库巨头Oracle（甲骨文）。

近日，乌克兰副总理兼数字化转型部长Mykhailo Fedorov在推特上呼吁甲骨文公司制裁俄罗斯。

没有想到的是，甲骨文公司很快就给出了回应：为了甲骨文在全世界各地150000名员工的利益，为了支持乌克兰，甲骨文已经暂停在俄罗斯的所有业务。

事件发生后，中国网友也颇为关注，因为同样的事情有可能会发生在我们身上。

甲骨文的创始人拉里·埃里森对中国的"关心"不比俄罗斯少，他在2018年接受媒体采访时表示，如果让中国经济超越我们，让中国培养出比我们更多的工程师，让中国科技公司击败美国，那我们距离军事科技落后也不远了。在激烈竞争中，我站在美国这边。

于是，甲骨文在2019年解散了中国区研发中心，裁员900多名科技人员。

那么问题来了，假设甲骨文宣布制裁中国，国内的公司会不会因为没有数据库的支持而立刻休克呢？

答案是并不会，因为国内的科技巨头早就意识到了这个问题，所有的数据库、云计算、芯片等都不能过于依赖国外公司。

以阿里巴巴为例，早在2009年就开始构建自己的云计算系统。在打造独立自主的云计算时，最难的问题就是去IOE（IBM、Oracle和EMC），这三家公司进入这个领域比较早，拥有非常成熟的技术积累。

可是再难也要去做，因为公司还在快速发展中，所有的数据存储都依赖国外公司就相当于被卡了脖子。历经3年多的努力，阿里巴巴终于将淘宝、支付宝等数据从甲骨文转移到了AliSQL。

可是阿里巴巴成长的实在太快了，尤其是双十一，数据简直是天文数字，AliSQL数据库也很快到了极限。阿里巴巴在2015年又开始进一步研发自己的数据库，终于在2017年10月份开始公测POLARDB，2018年4月正式对外商用。

在芯片领域，华为也利用自身研发优势开发了麒麟芯片。这就是国内科技巨头们的担当，我们虽然起步晚，但是一直在奋力追赶和超越！

【一条 SQL 是如何在 MyBatis 中执行的】MyBatis 执行 SQL 的核心接口为 SqlSession 接口，该接口提供了一些 CURD 及控制事务的方法，另外还可以通过 SqlSession 先获取 Mapper 接口的实例，然后通过 Mapper 接口执行 SQL，Mapper 接口方法的执行最终还是委托到 SqlSession 中的方法。网页链接

【MaxCompute笛卡尔积逻辑的参数优化&复杂JOIN逻辑优化】这篇文章主要讲一个SQL优化反映的两个优化点。分别是笛卡尔积逻辑的参数优化、一个复杂JOIN逻辑的优化思路。点击了解详情：网页链接

【新炬网络：与华为、腾讯、阿里等信创主流厂商完成相关信创产品兼容性测试或技术认证】财联社11月10日电，新炬网络公告，近期，公司ZnAiops智能运维管理平台、ZnSQL数据库运维管理平台等智能运维产品进一步加强了对信创产品的兼容支持，与华为、中兴、腾讯、阿里、蚂蚁集团、麒麟软件、统信软件等信创主流厂商完成了相关信创产品兼容性测试或技术认证。

2021年6月阿里巴巴最火热的开源java之alibaba/DataX

作为异构数据源之间的同步工具，支持sql/nosql/无结构化等各种结构，对于动辄千万甚至上亿数据量的迁移，通过qps或者通道数目去流控，真心方便,链接----网页链接

【如何避免出现SQL注入漏洞】本文将针对开发过程中依旧经常出现的SQL编码缺陷，讲解其背后原理及形成原因。并以几个常见漏洞存在形式，提醒技术同学注意相关问题。最后会根据原理，提供解决或缓解方案。如何避免出现SQL注入漏洞-阿里云开发者社区

Druid是阿里开源的数据库连接池，也是市面上最好用的数据库连接池，大家公认的排名是：Druid > proxool > c3p0 > dbcp，dbcp垫底是因为没有自动回收空闲连接的功能，也没有连接池监控功能。

Druid已经跟springboot很完美的结合了，只需要引入Druid的依赖，就可以通过jdbcTemplete实现数据库的RUID，同时Druid自带数据库连接池监控功能，可以在监控界面查看池的信息以及当前状态、SQL的执行情况、对数据库的请求动作等等，对于排查故障有很大帮助。#程序员# #程序员摸鱼小组#

阿里规定超过三张表时禁止使用 JOIN 关联查询，为什么呢？

数据库的查询在开发中是用的最多的，也是最消耗服务器资源（CPU、IO、内存），下图是一个复杂SQL语句的执行计划：

总共执行为51步、其中嵌套查询就达到了18层[震惊]，这个SQL语句对服务器有“三伤”：伤CPU、伤IO、伤内存。

影响SQL查询消耗主要维度：1、表的数据量、2、表的关联、3、索引。

三者关系影响都是成指数级的，特别是多层嵌套。

#SQL#

【表格存储 SQL 查询多元索引】多元索引是表格存储产品中一个重要的功能，多元索引使用倒排索引技术为表格存储提供了非主键列上的快速检索功能，另外也提供了统计聚合功能。表格存储近期开放了SQL查询功能，SQL引擎默认从原始表格中读取数据，非主键列上的查询需要扫描全表。表格存储 SQL 查询多元索引-阿里云开发者社区

美国公司行动后，阿里的“备胎”也可以转正了！3月份以来，美国的一些公司相继宣布停止向俄出货，这一举动对于当地的企业发展与用户都是一种伤害，而这也让我们意识到了“科技有国界”。在多家暂停的公司当中，其实对当地影响最大的并非是停止了Apple Pay服务的苹果，而是数据库公司甲骨文。

因为对于企业来讲最重要的就是数据信息，金融、航空、医疗、交通等各个方面都需要数据库来存储数据。而在这方面，甲骨文的Oracle数据库以及SQL Server则是主流产品，所以说甲骨文做出这一决定以后，对于当地企业的影响可想而知。所以这一点更是直接说明了掌握核心技术的重要性。

而在这种情况下，不少人则联想到了阿里旗下自研的OceanBase数据库，值得一提的是，这款数据库其实是阿里在2010年布局的产品。因为对于阿里来讲，如果使用Oracle数据库，就意味着需要对其全面开放自己的业务与数据，而且当时内部人员估计，Oracle当时难以完全承载大量的数据运行。所以经过决定以后，阿里在2010年就展开了OceanBase数据库的研发工作。

正所谓十年磨一剑，阿里的OceanBase经过长时间的打磨与优化以后，在TPC-C的基准测试当中打破了甲骨文保持了九年时间的世界纪录，成功稳定榜首，并且近些年也一直都在不断地打破自己的记录。并且值得一提的是，阿里每年双十一庞大的数据量也都是OceanBase所承载住的，并且在配合上阿里云的服务器，如今也实现了相当不错的成绩。

所以说在这方面，阿里早已经有了充足的准备，当时或许很多人都不理解为何马云要走这一步棋，但现在来看，马云确实有自己的远见。

《科技日报》曾总结过35项制约中国的核心技术，操作系统、核心工业软件、数据库管理系统等软件技术赫然在列。其实这何尝不是俄罗斯的痛处，就拿前些天甲骨文“断供”俄罗斯来说，这项卡脖子技术再次给中国提醒：补齐软件这块短板，迫在眉睫！

比如说工业软件是制造业的根本，美国拥有微软、谷歌等世界标杆级大厂。在操作系统方面，Windows、Unix、Android、Mac OS都出自美国公司。还有数据库领域，美国的甲骨文、IBM DB2、SQL Server都处于全球领先。所以说，美国能成为超级大国，科技是重中之重。

但不能说，中国比美国起步晚就该自暴自弃。正视差距不假，中国企业也确实做出了一些成绩。华为有了鸿蒙，阿里也在多条科技战线上都有成果，除了自研“飞天”云操作系统，阿里云数据库占国内数据库市场榜首，另外还开源了龙蜥服务器操作系统。不难发现，除了国家层面，本土大厂同样在为构筑中国技术长城添砖加瓦。

不得不说，自研技术难如登天，但这正告诉我们不能依赖别人。外国技术再好终归是镜花水月，在国家安全面前，科技公司是有国界的。除了加大投入、广揽人才，中国科研的追赶之路没有捷径可走啊！

软件开发和DBA谁更吃香？有答案了！

类似这样的问题在技术圈层出不穷，虽说DBA越老越吃香，但从软件开发到DBA，不仅是个人经验积累的转变，在职业发展道路上，更是从一山跨越到另一山。这该如何取舍呢？

“从开发到DBA确实是一个很大的转折，我也犹豫了很久，毕竟要放下自己已经非常熟练的技术栈和多年累积的开发经验。”PostgreSQL中国社区主席、探探数据库负责人张文升如是说道。曾是一名软件开发者的他，思虑良久，最终选择投入DBA的“怀抱”，并秉持开源精神，耕耘于数据库领域，且常年活跃于PostgreSQL、MySQL、Redis等开源技术社区，推动开源数据解决方案在中国的发展。

在“2021长沙·中国1024程序员节”前夕，我们采访了PostgreSQL中国区主席张文升，聊聊他的技术人生和PostgreSQL的最新动态，以及他与PostgreSQL的不解之缘。此外，在本次大会上，张文升也将带来主题为《基于PostgreSQL的技术生态发展历程和演进趋势》的精彩分享，敬请期待！

图片

以下为采访实录。

CSDN：最近在忙什么？

张文升：一直在推动PostgreSQL中文社区的建设。最近PostgreSQL中文社区和阿里、腾讯组织了多次线上和线下的活动，相关从业者参与度很高，反响很不错。另外，今年是PostgreSQL中文社区成立十周年，我们根据核心成员的建议调整了组织架构，成立了多个方向的委员会，将社区不同领域的工作分配给更精细化的组织。目前部分委员会已经成型，但还没有彻底打通，这在PostgreSQL社区的发展历程中是一种尝试，对社区的未来发展有深远影响。

近期还收到了CSDN“2021长沙·中国1024程序员节”、云栖大会等业界知名活动的邀约，我也在积极准备分享资料，努力为大家带来有价值的话题。

CSDN：为什么身体力行地推广PostgreSQL在国内的应用，源于什么，有什么有趣的故事吗？

张文升：一转眼，我结识PostgreSQL已经有14年的时间了，而真正让我觉得自己应该为PostgreSQL、为开源做些力所能及的事情，还是源于多年前的一件事。

当时，由于所在公司版权意识不强，使用了从网络上“获取”的软件，随即被软件厂商起诉。从那时候开始，我就非常注意版权问题，随后在深入技术研究时，偶然发现了PostgreSQL，了解到它是一个类BSD的开源协议，而且是性能、功能等各方面指标都非常优异的开源数据库，真是如获至宝。

像PostgreSQL这样拥有全球上千名开发者共同贡献的大型基础软件，全球寥寥无几。从此，我便从一个开发团队的Leader逐渐投入到PostgreSQL数据库的学习和研究中，最终转型成为了一名数据库行业的从业者。

CSDN：从软件开发转向DBA，是一个比较大的职业转折，当时的考虑是什么？有没有一些建议可以给到想转型DBA的朋友？

蚂蚁员工表示做算法的别来蚂蚁，这里根本蚂蚁多少适合算法的场景，而且森多粥少，来了之后就是天天抢活、做PPT、瞎吹、实际干的就是sql,待一两年你就没有竞争力了，换来的只是年记大了一两岁，饱受pua折磨，无数个失眠的夜晚

网友1：起码蚂蚁pua磨炼了你的心智~ 请感恩，请热泪盈眶

网友2：PPT画好了代码随便写写就行，出去还要真的跑模型多累

网友3：蚂蚁职级真的大放水，烂透了，现在蚂蚁都沦落成这样了。

阿里员工：作为阿里人，你不够皮实

请专业IT人士高抬贵手，拉黑取关我～我更希望跟我讨论Access数据库的是跟我一样老老实实上班下班的办公人员，而不是你们高大上的IT从业者。