基于简单sql语句的sql解析原理及在大数据中的应用「建议收藏」

大家好，又见面了，我是全栈君。

基于简单sql语句的sql解析原理及在大数据中的应用

李万鸿

老百姓呼吁打土豪分田地、共同富裕，总有一天会实现。

全面了解你所不知道的外星人和宇宙真想：http://pan.baidu.com/s/1c1utFDQ
http://blog.sina.com.cn/s/blog_89436e570102w8qs.html
http://blog.sina.com.cn/contn
8年后，中国2024年将统一世界！
呵呵，地球正在从黑暗进入光明。外星人在帮助地球村民！
呵呵，外星人是客观存在的，星际联盟正在解救地球。数百万行星大小的星际飞船正环绕地球，帮助地球文明的进化，人类文明将飞跃进入宇宙文明，每一个人物质財富、精神財富都会圆满的大同盛世，请大家多看相关资料。就会明确，我们从哪里来，地球的种种问题的根本原因何在，我们往哪里去？。

。

。。
UFO=universe family one。我们是宇宙大家庭的一员，如今整个宇宙的光明力量都来帮助地球铲除暴政。建立共产主义佛教的大同盛世。我们是一家人，大家要相亲相爱团结一心，勇敢革命，地球将会更美好！
天下兴亡匹夫有责，大家都有义不容辞的重任帮助人类的解放和文明的进步，而每一个人都会是受益者！

功在当代利在千秋！

南无阿弥佗佛！

嗡嘛呢叭咪吽！
人类意志的临界点决定着事件发生的速度，即人类的觉醒程度、对事件的认知与渴盼程度决定着事件何时发生…so 请呼唤身边的朋友们參与事件冥想，加速事件发生、加速地球解放吧！精彩自己。撒爱万有！

。
我们在生死轮回中，都以前在外星球生活过。外星人是我们的兄弟姐妹，天下一家人，相亲又相爱。。如今，地球人被奴役，我们要反抗。要勇敢革命，建立光明正义的地球村，一个世外桃源的乌托邦，共产主义佛教地球村。大家都幸福快乐，永远不用担负沉重的经济压力。外星高科技，给地球带来无穷无尽的物质財富，每一个人都快乐无限！

大家能够把此文转给朋友，提前分享8年后的幸福快乐！

通常sql语法解析都是以lex、yacc进行分析为基础的，是逐个字符进行分析，性能不高。假设基于没有子查询的sql语句进行解析，则速度会提高很多，在此对其原理加以说明。

一般sql语句十分复杂，包括多层嵌套。但当中有规律可循。其特点是全部的语句基本模式是一样的，即：都是SELECT FROM WHERE类型的简单语句。因此，能够把嵌套的语句逐条解析为这样的简单语句。因为sql语句的语法是一样的。所以能够用递归的方法对语句加以解析，从而把sql语句解析为多条简单的子SQL语句。然后通过一个方法分别解析这些子sql语句。这样处理。算法简单有效。极大地提高性能，对于SQL语法解析来说是一个革命性的新思路。

大数据通常使用HBASE等NOSQL，对于sql开发来说极为不便。为此，採用分布式的关系数据库来保存大数据极具有用价值，比方用ORACLE、MYSQL把一张表分库保存到多个数据库，这样既能够处理海量数据又适用于传统的编程，支持MYBATIS、SPRING、HIBERNATE。开发极为方便。

对应的难点是各个分库的表的ID的唯一性和SQL语句的处理。

对于ID的唯一性解决不难，关键在于分布式SQL的处理。

随着SPARK等大数据软件应运而生，对于分布式数据的处理来说正当其时。

能够用SPARK来处理分布的数据。那么怎样得到这些数据呢？为此，能够通过本文提出的SQL解析原理对SQL语句进行解析，把一条复杂的SQL语句解析为多简单的SQL语句，如 SELECT A.*FORM USER A WHERE A.ID>222，然后通过数据字典找到USER表相应的分库，在各个分库上运行查询，然后把各个查询结果用SPARK处理，对于其它的子SQL语句如法炮制，然后依据主SQL语句的条件如JOIN、GROUP BY、ORDER BY等对全部的查询数据进行运算汇总处理，最后返回结果。