A otimização de big data passou por um processo que vai da otimização SQL a diversas teorias, tecnologias e produtos de otimização, e agora evoluiu para um estágio em que retorna à otimização SQL. SQL é a base da otimização de big data e também o destino inevitável. No entanto, muitos profissionais de big data se perderam nas inúmeras teorias e tecnologias de otimização. Quando se deparam com muitas plataformas, plug-ins e outros produtos, eles usam várias tecnologias para otimizar seu trabalho, mas o efeito final não é satisfatório. Como engenheiros que atuam na linha de frente de pesquisa e desenvolvimento de grandes empresas há muito tempo, os dois autores deste livro não apenas possuem um profundo conhecimento da otimização de big data, mas também sempre tiveram um coração de artesão. Eles estudaram por muito tempo a lógica subjacente da otimização de big data e, finalmente, resumiram um método que pode alcançar a otimização de baixo para cima. Esse conjunto de metodologias tem uma certa universalidade.

●Prefácio
Cognição
Capítulo 1 Visão geral 2
1.1 O desenvolvimento do big data2
1.2 Por que o SQL4 é usado para big data
1.2.1 Linguagem padronizada 5
1.2.2 Programação Declarativa 6
1.2.3 Baseando-se na teoria madura de bancos de dados relacionais 8
1.3 Desvantagens do SQL para Big Data 9
1.3.1 Fácil de aprender, difícil de dominar
1.3.2 Capacidade limitada de expressão
1.3.3 Terreno comum com bancos de dados relacionais12
1.4 Por que devemos ajustar 13
1.4.1 Redução de custos e melhoria da eficiência13
1.4.2 Conhecer os fatos e as razões por trás deles15
Princípio
Capítulo 2 A Essência do SQL 18
2.1 Refinamento do Processo de Execução 18
2.2 Árvore de Sintaxe Abstrata 20
……

Este é um livro de ferramentas que aborda a perspectiva de desenvolvedores de linha de frente, partindo da essência do SQL, combinando teoria com prática, casos com análise e a experiência do autor com as necessidades da linha de frente, e interpreta profundamente as principais tecnologias e soluções de otimização de SQL para Big Data. Este livro é voltado principalmente para técnicos de Big Data juniores e intermediários, com a esperança de ajudar todos a compreender profundamente os princípios da otimização de SQL para Big Data, dominar os métodos práticos de otimização de SQL, para que possam realmente "brincar" com a tecnologia de otimização de SQL para Big Data e projetar soluções direcionadas para melhorar o desempenho do SQL de acordo com problemas e necessidades reais. Este livro está dividido em 4 partes, incluindo 10 capítulos. A parte cognitiva (Capítulo 1) é voltada principalmente para iniciantes, para explicar por que os mecanismos de computação ou armazenamento de Big Data finalmente escolheram o SQL como uma linguagem de consulta unificada, os motivos, os prós e os contras, os principais problemas atualmente enfrentados pelos profissionais de SQL para Big Data e os dois objetivos fundamentais do ajuste. A parte de princípios (Capítulo 2) interpreta a essência do SQL de uma forma fácil de entender. Para facilitar a compreensão dos leitores, este artigo também utiliza os três principais mecanismos de execução (Hive, Spark e Flink) como exemplos para explorar os segredos por trás da execução de SQL sob a perspectiva do código-fonte. A parte prática (Capítulos 3 a 9) primeiro interpreta profundamente a consulta do mecanismo, etc.