深入了解抽象語(yǔ)法樹(shù)(AST)及其在使用工具和庫(kù)中的應(yīng)用

在本文中，我們將深入了解抽象語(yǔ)法樹(shù)(AST)及其在日常工作中使用的工具和庫(kù)中的應(yīng)用。我們更感興趣的是AST的實(shí)際使用和應(yīng)用，而不是編譯器、解析器等編程語(yǔ)言開(kāi)發(fā)工具的晦澀學(xué)術(shù)理論。

這是一系列文章中的第一篇，該文章探討了Freshworks的前端開(kāi)發(fā)人員構(gòu)建和使用的各種AST工具來(lái)執(zhí)行大量活動(dòng)，例如大規(guī)模代碼遷移、重構(gòu)等。

AST 探索者

有一個(gè)在線工具可以探索由各種語(yǔ)言解析器生成的AST，稱(chēng)為ASTExplorer，由Facebook的工程師構(gòu)建。它支持多種語(yǔ)言和解析器。您可以輸入代碼并獲取它表示的AST格式，并在同一瀏覽器窗口中檢查節(jié)點(diǎn)和數(shù)據(jù)。您還可以編寫(xiě)轉(zhuǎn)換函數(shù)，這將幫助您使用AST更改或重構(gòu)代碼。對(duì)于任何想要了解AST并在其幫助下創(chuàng)建工具的人來(lái)說(shuō)，這是學(xué)習(xí)和使用AST的最佳工具。

為什么AST對(duì)工具很重要？

抽象語(yǔ)法樹(shù)是任何語(yǔ)言開(kāi)發(fā)工具的構(gòu)建塊，因?yàn)樗鼈兪怯行Р僮髟创a的可擴(kuò)展手段。通過(guò)將代碼表示為樹(shù)狀結(jié)構(gòu)，您可以利用樹(shù)數(shù)據(jù)結(jié)構(gòu)附帶的所有有效操作機(jī)制。它比處理以文本片段或字符串表示形式表示的源代碼要快得多。這是因?yàn)槿绻雽?duì)源代碼進(jìn)行高級(jí)和復(fù)雜的操作，那么使用純字符串和字符序列將是一場(chǎng)噩夢(mèng)。如果您希望有一個(gè)方便的表示來(lái)對(duì)您的代碼進(jìn)行更改而不會(huì)產(chǎn)生意想不到的后果和副作用，那么AST是最好的表示。將源代碼轉(zhuǎn)換為抽象語(yǔ)法樹(shù)格式后，

這就是為什么所有語(yǔ)言標(biāo)準(zhǔn)都默認(rèn)帶有AST規(guī)范的原因。該語(yǔ)言本身具有用于創(chuàng)建、轉(zhuǎn)換和使用AST的內(nèi)置API。除此之外，總會(huì)有外部工具和庫(kù)使使用AST成為一項(xiàng)方便而輕松的任務(wù)。

那么我們實(shí)際上在哪里使用AST呢？簡(jiǎn)而言之，它在工具和庫(kù)的Javascript生態(tài)系統(tǒng)中無(wú)處不在。從這個(gè)列表中可以看出，如果沒(méi)有AST，則根本不可能為Javascript項(xiàng)目提供工具。

語(yǔ)法高亮

代碼完成

靜態(tài)分析

代碼覆蓋率

縮小

即時(shí)編譯

源地圖

編譯成JS語(yǔ)言

代碼重構(gòu)

代碼遷移等等。

代碼模組

在Freshworks，當(dāng)我們嘗試將Ember代碼遷移到新版本時(shí)，我們首先遇到了像Codemods這樣的AST工具。Ember框架和社區(qū)本身提供了許多codemods來(lái)幫助您更輕松、更省時(shí)地進(jìn)行遷移。我們已經(jīng)寫(xiě)了一篇關(guān)于我們?nèi)绾问褂肅odemods來(lái)遷移我們的代碼庫(kù)的博客文章

您可能想查看它以重新了解codemod，包括為什么它們有意義，以及為什么它們應(yīng)該成為您的自動(dòng)遷移工具的關(guān)鍵部分。甚至諸如React、Angular和Vue之類(lèi)的框架也推薦并提供codemods用于從框架的一個(gè)版本遷移到下一個(gè)版本的升級(jí)。

一旦我們開(kāi)始使用Codemods進(jìn)行遷移，我們的開(kāi)發(fā)人員發(fā)現(xiàn)將他們的代碼遷移到較新版本的框架非常有用且節(jié)省時(shí)間。我們需要越來(lái)越多的codemod來(lái)解決我們的一些遷移問(wèn)題。因此，我們開(kāi)始探索和編寫(xiě)專(zhuān)門(mén)解決我們自己的代碼遷移問(wèn)題的codemod，但同時(shí)使codemod更加通用，以便我們可以與更大的JavaScript開(kāi)發(fā)人員社區(qū)共享它們并使其開(kāi)源。

但是我們的一些開(kāi)發(fā)人員無(wú)法完全掌握AST等Codemod的底層架構(gòu)以及Babel、recast和jscodeshift等相關(guān)工具。所以我們決定讓我們的開(kāi)發(fā)人員更容易理解這一點(diǎn)，并減少學(xué)習(xí)的痛苦。我們圍繞AST構(gòu)建了一堆工具來(lái)幫助開(kāi)發(fā)人員熟悉AST和codemods。本系列博文將深入探討這些工具的內(nèi)部架構(gòu)和組件，從而抓住這些工具的本質(zhì)和意義。

審核編輯：劉清