閑魚基于Dart生態(tài)的FaaS前端一體化建設(shè)

背景

隨著Flutter對現(xiàn)有業(yè)務(wù)的不斷參透，閑魚Serverless基建的重心也傾向了dart生態(tài)，先是將dart容器打包到服務(wù)器上，實(shí)現(xiàn)dart編程語言的統(tǒng)一，在統(tǒng)一的容器之上實(shí)現(xiàn)編程框架一體化(nexus、story)，以及后端領(lǐng)域服務(wù)一體化?；赿art生態(tài)下，前端的FaaS在研發(fā)交付其實(shí)并不高效，研發(fā)階段主要面臨的問題是：
編程語言不統(tǒng)一：編程語言本身雖然不是最大的障礙，但這也確實(shí)給前端開發(fā)者增加不少門檻，而且更重要的是語言背后的生態(tài)、環(huán)境與體系更是一道高高的墻。
工程割裂與背后環(huán)境復(fù)雜：端側(cè)一個工程，F(xiàn)aaS側(cè)也有一個獨(dú)立的工程，它們背后都有著自己的一套構(gòu)建、調(diào)試、集成/發(fā)布的工具鏈；除此之外FaaS還有自己配套的環(huán)境、runtime、框架作為支撐。開發(fā)者面對這樣復(fù)雜的FaaS研發(fā)環(huán)境與雙重的研發(fā)工作流是無法做到高效交付的。

編程語言一體化

Typescript作為Javascript的超集，彌補(bǔ)了Javascript的靜態(tài)類型檢查，同時(shí)擴(kuò)展了很多OOP的語法特性，使得TS跟dart在語法特性上有非常多相似的地方，為后面的轉(zhuǎn)換提供了可能與便利。要實(shí)現(xiàn)語言層面轉(zhuǎn)換背后都會有一個小型的編譯器在支撐著，不過幸運(yùn)的是Typescript官方已經(jīng)提供語法解析器，通過它我們很容易就拿到一份可靠的AST，所以我們只需要實(shí)現(xiàn)一個dart generator就行了。生成器大致可以分為四個層面的工作：

• 基礎(chǔ)語法轉(zhuǎn)換

• 原生方法差異轉(zhuǎn)換

• 業(yè)務(wù)框架橋接

• 依賴庫與頭文件橋接

基礎(chǔ)語法轉(zhuǎn)換

這部分很好理解，就是最基本的語法層面轉(zhuǎn)換，用個最簡單的例子看下。

原生方法差異轉(zhuǎn)換

兩種語言在內(nèi)置原生方法上也有很大區(qū)別，舉個例子：可以看到下面數(shù)組的實(shí)例方法在兩種語言體系上是不一致的，除了數(shù)組插入還有很多很多原生方法是不一致的。當(dāng)然也沒太必要被這個難以想象的數(shù)量嚇到，大多數(shù)情況：90%的場景只會用到那10%的方法，完成了10%的轉(zhuǎn)換就能cover到90%的場景。

// ts
list2.push(10)

// dart
list2.add(10)

要實(shí)現(xiàn)系統(tǒng)方法的差異轉(zhuǎn)化首先要識別出該方法是來自于哪個類，比如說 list2.push(10) 我不可能只檢查 push ，因?yàn)殡S便一個類/對象都可以實(shí)現(xiàn)一個push方法。我們必須識別出 list2.push 的 push 屬于 Array.push，別忘了整個typescript編譯器中占比最大的類型檢查器 ts.TypeChecker ，它可以很好的幫我們解決這個問題。大致思路如下：

業(yè)務(wù)框架橋接

在完成上面兩塊能力轉(zhuǎn)換后，常規(guī)裸寫一段邏輯進(jìn)行轉(zhuǎn)換問題是不大的；但業(yè)務(wù)是不可能裸寫，業(yè)務(wù)需要框架，需要借助框架進(jìn)行通訊、與容器打交道。需要借助框架進(jìn)行業(yè)務(wù)抽象，更好的組織、管理業(yè)務(wù)邏輯。我們來看個例子：

DartMtopResult<String> result = awaitHsfServices.request(moduleName, parameter);

上面的這段代碼是用于在dart側(cè)進(jìn)行內(nèi)部服務(wù)請求的，從代碼表明我們可以獲取到三部分信息：

1. 有一個HsfServices的類

2. HsfServices有一個同步返回結(jié)果的request方法，接收兩個參數(shù)

3. 最終返回DartMtopResult的數(shù)據(jù)結(jié)構(gòu)

我們再翻一下 request 的實(shí)現(xiàn)與 DartMtopResult 的申明：

// DartMtopResult.dart
classDartMtopResult<T> implements xxxx {
  T data;
bool success;
String errMsg;
String errCode;

// more code hidden
}

// HsfServices.dart
classHsfServices{
// more code hidden
staticFuture<DartMtopResult<String>> request(String moduletName, String parameter) async{
// more code hidden
}
// more code hidden
}

就看這么多足夠了，打個比方如果我希望在typescript側(cè)編寫一個能用 HsfServices.request 發(fā)請求的ts代碼且不報(bào)錯，那應(yīng)該怎么做呢？像下面這樣申明一個：

// HsfServices.d.ts
export declare classHsfServices{
static request(moduletName: string, parameter: string): Promise<DartMtopResult<string>>;
}
// DartMtopResult.d.ts
export declare classDartMtopResult<T> {
  data: T;
  success: boolean;
  errMsg: string;
  errCode: string;
}

// business.ts
import{HsfServices} from"HsfServices.d.ts"
import{DartMtopResult} from"DartMtopResult.d.ts"
const result: DartMtopResult<string>= awaitHsfServices.request<DartMtopResult<string>>('recycleGet', parameter);

非常簡單就能讓業(yè)務(wù)邏輯正常寫下去并且不報(bào)錯。但你肯定會說這樣的代碼也沒法運(yùn)行起來，是的，但我并不需要上面代碼運(yùn)行起來，我需要的是將它轉(zhuǎn)成dart，并能在dart runtime中運(yùn)行就可以了。大致的橋接思路如下：

依賴庫與頭文件橋接

// business.tsimport {HsfServices} from "@ali/faas-hsf"import {DartMtopResult} from "@ali/faas-mtop-result"const result: DartMtopResult<string> = await HsfServices.request<DartMtopResult<string>>('recycleGet', parameter);

// business.dartimport 'package:hsf_services/hsf_services.dart';import 'package:dart_mtop_result/dart_mtop_result.dart';DartMtopResult<String> result = await HsfServices.request(moduleName, parameter);

@ali/faas-hsf
|--lib/
|--faas.yaml
|--package.json

// faas.yaml
faas_pub:
    # 映射的dart側(cè)依賴包
    hsf_services: ^1.1.7
    # 映射引入頭文件
    index: hsf_services.dart

研發(fā)過程中再通過工程腳手架來自動完成這之間的映射關(guān)系的提?。侯^文件映射與依賴包映射。頭文件映射最終會交給轉(zhuǎn)換器，而依賴包映射會交給背后自動維護(hù)著的dart工程（后面會提到背后自動維護(hù)的dart工程）。大概的思路如下圖所示：

編程語言一體化只是整個FaaS一體化研發(fā)的第一步，也只有統(tǒng)一了編程語言之后，背后的生態(tài)(npm)、工具鏈(build)與工程才可能一體化。我們看下現(xiàn)狀：開發(fā)者面對的是兩個割裂的工程，兩套不同的環(huán)境、生態(tài)。這正如文章一開始所說的：編程語言本身不是最大的障礙，但語言背后的環(huán)境與生態(tài)卻是一道高高的墻。在我們統(tǒng)一編程語言之后，研發(fā)工程一體化就變得可行了。

正如上圖所示，F(xiàn)aaS工程本身的復(fù)雜在于整個工程需要運(yùn)行在一個本地容器之中，因?yàn)槿萜饕獮楣こ烫峁﹔untime、相應(yīng)的工具鏈、框架依賴等能力。所以本地容器本身是必不可少的，我們能做的只是盡可能讓開發(fā)者無感容器的存在；除此之外還要對兩個工程的邏輯做一定的融合，大致可以抽象成四部分工作：

├── faas_pub.yaml├── faas_src│   └── Home│       └── index.ts├── package.json├── src│   ├── components│   └── pages│       └── Home│           ├── index.css│           └── index.js└── README.md

使端側(cè)腳手架全權(quán)接管FaaS側(cè)的工程初始化、熱部署、調(diào)試信息，暴露出來給開發(fā)者的只有一套工具鏈，只有兩個指令 init  dev ，讓開發(fā)者0門檻初始化出一套統(tǒng)一而可靠環(huán)境的FaaS工程。

對接編譯器進(jìn)行研發(fā)實(shí)時(shí)編譯

這部分主要負(fù)責(zé)對接轉(zhuǎn)換器實(shí)時(shí)將ts編譯成dart，并同步到黑盒中的FaaS工程。在實(shí)時(shí)編譯過程有兩部分內(nèi)容：一部分是純ts邏輯編譯成dart，另一部分是依賴包的同步安裝，其中 faas_pub.yaml 由腳手架通過探測端側(cè)package.json中的faas依賴包來進(jìn)行提取生成的，并不需要人工維護(hù)。

從保存每一個改動到在瀏覽器上能成功發(fā)起一個faas函數(shù)請求，這之間大致經(jīng)過這些步驟：監(jiān)控改動、編譯代碼、產(chǎn)物部署的流，由統(tǒng)一的端側(cè)腳手架進(jìn)行串聯(lián)起來。

經(jīng)過編程語言的一體化后，我們不僅為開發(fā)者提供一種熟悉的技術(shù)棧，也為后面工程一體化提供了可能性；再經(jīng)過工程一體化后，我們?yōu)殚_發(fā)者解決了工程割裂，解決背后復(fù)雜的FaaS本地運(yùn)行環(huán)境，帶來與原研發(fā)模式基本一致的研發(fā)體驗(yàn)。