国产av一二三区|日本不卡动作网站|黄色天天久久影片|99草成人免费在线视频|AV三级片成人电影在线|成年人aV不卡免费播放|日韩无码成人一级片视频|人人看人人玩开心色AV|人妻系列在线观看|亚洲av无码一区二区三区在线播放

網(wǎng)易首頁 > 網(wǎng)易號(hào) > 正文 申請(qǐng)入駐

SERHANT.用1個(gè)SDK同時(shí)調(diào)用3家大模型

0
分享至


800個(gè)房產(chǎn)經(jīng)紀(jì)人同時(shí)用AI跑客戶分析,后臺(tái)卻只用3個(gè)工程師維護(hù)——這不是什么SaaS神話,是紐約地產(chǎn)公司SERHANT.去年交出的真實(shí)數(shù)據(jù)。他們的秘密武器叫S.MPLE,一個(gè)從內(nèi)部試點(diǎn)干到全員標(biāo)配的AI工具,核心邏輯簡(jiǎn)單粗暴:讓模型互相打工,哪個(gè)便宜用哪個(gè)。

2024年2月,Jeremy Bunting以工程VP身份加入時(shí),S.MPLE已經(jīng)跑了200人內(nèi)測(cè)。這個(gè)Next.js應(yīng)用搭在Vercel上,前端是漸進(jìn)式網(wǎng)頁,后來順手?jǐn)U了個(gè)React Native iOS版,后端沒動(dòng)一磚一瓦。Bunting的焦慮不在技術(shù)債,在AI本身——"這行變化比你的迭代周期還快,選錯(cuò)模型等于白干三個(gè)月"。

AI SDK:把"綁死一家"變成"隨時(shí)跳槽"

Bunting最初對(duì)Vercel的AI SDK有本能警惕。他直接問團(tuán)隊(duì):"這玩意會(huì)不會(huì)把我們鎖死在Vercel生態(tài)里?"一個(gè)工程師的回應(yīng)讓他改了主意——"這不是基礎(chǔ)設(shè)施綁定,是基礎(chǔ)設(shè)施獨(dú)立"。

翻譯成人話:SDK只是層翻譯官,OpenAI、Claude、Gemini的API格式千差萬別,SDK幫你抹平差異。想換模型?改行配置的事,不用重寫業(yè)務(wù)邏輯。

Bunting算過一筆賬。如果團(tuán)隊(duì)all in某個(gè)前沿模型,每次廠商漲價(jià)、降速、抽風(fēng),都得跟著重寫 fallback 邏輯。AI SDK把"模型選擇"變成了配置文件里的下拉菜單,"認(rèn)知負(fù)荷直接砍半"。

AI Gateway是另一張牌。團(tuán)隊(duì)內(nèi)部有人自己揣著API key做原型,Gateway照樣能統(tǒng)一監(jiān)控用量、成本和響應(yīng)延遲。Bunting的原話:"調(diào)試快了,優(yōu)化快了,花錢花在哪也清楚了。"

三模型混打:復(fù)雜任務(wù)給Claude,快響應(yīng)丟給Gemini

省下來的工程時(shí)間,全砸在"什么任務(wù)配什么模型"的實(shí)驗(yàn)上。SERHANT.的打法很現(xiàn)實(shí)——沒有全能選手,只有分工協(xié)作:


Claude Sonnet處理復(fù)雜、需要準(zhǔn)確性的任務(wù)。房產(chǎn)市場(chǎng)分析涉及多源數(shù)據(jù)交叉驗(yàn)證,容錯(cuò)率低,Claude的"長(zhǎng)思考"模式更穩(wěn)。

Gemini Flash跑輕量級(jí)、高并發(fā)的查詢??蛻魡?這套房學(xué)區(qū)怎么樣",響應(yīng)速度比深度分析更重要,Gemini的定價(jià)和延遲都占優(yōu)。

OpenAI GPT-4o作為中間地帶的默認(rèn)選項(xiàng)。當(dāng)任務(wù)復(fù)雜度介于兩者之間,或者需要特定功能調(diào)用時(shí),4o的通用性兜底。

這套"模型路由"策略直接寫在AI SDK的配置層里。Bunting透露,某些場(chǎng)景下通過任務(wù)分流,成本壓低了40%以上——不是砍功能,是讓便宜的模型干便宜的活。

從200人到800人:沒重構(gòu),只加配置

S.MPLE的擴(kuò)張路徑有點(diǎn)反常識(shí)。傳統(tǒng)SaaS擴(kuò)到4倍用戶量,通常要?jiǎng)蛹軜?gòu)、分庫、加緩存。SERHANT.的工程師數(shù)沒漲,后臺(tái)還是那套Next.js + Vercel,變化只發(fā)生在配置表里。

Bunting把這歸功于"提前買的靈活性"。2024年初選技術(shù)棧時(shí),團(tuán)隊(duì)賭的是"模型層會(huì)劇烈震蕩",而不是"某個(gè)廠商會(huì)贏"?,F(xiàn)在看,這個(gè)賭對(duì)了——Claude 3.5、GPT-4o、Gemini 1.5的發(fā)布節(jié)奏比手機(jī)換代還快,鎖死任何一家都是技術(shù)自殺。

一個(gè)細(xì)節(jié):S.MPLE的iOS版和網(wǎng)頁版共享同一套API層。React Native的決策當(dāng)初被質(zhì)疑過"是不是太偷懶",但現(xiàn)在新功能上線,兩端同步更新,不用養(yǎng)兩個(gè)后端團(tuán)隊(duì)。

房產(chǎn)經(jīng)紀(jì)人的使用數(shù)據(jù)也在反哺模型選擇。哪些查詢類型容易觸發(fā)Claude的拒絕響應(yīng)?哪些場(chǎng)景下Gemini的幻覺率更高?Gateway的日志成了迭代地圖,"下個(gè)月可能又把權(quán)重調(diào)一遍",Bunting說。

現(xiàn)在S.MPLE每天處理數(shù)萬次AI交互,后臺(tái)的模型組合仍在動(dòng)態(tài)調(diào)整。最后一個(gè)被驗(yàn)證的改動(dòng)是:把部分摘要任務(wù)從GPT-4o遷移到Gemini Flash,延遲從2.3秒降到0.8秒,成本再砍一截——而實(shí)現(xiàn)這個(gè)改動(dòng),工程師只花了15分鐘改配置。

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點(diǎn)推薦
伊朗外長(zhǎng):霍爾木茲海峽只對(duì)敵人關(guān)閉 中國(guó)、俄羅斯等國(guó)船只都安全通過了

伊朗外長(zhǎng):霍爾木茲海峽只對(duì)敵人關(guān)閉 中國(guó)、俄羅斯等國(guó)船只都安全通過了

閃電新聞
2026-03-26 10:48:55
蘋果憋了3年沒告訴你:你的充電器一直在"摸魚"

蘋果憋了3年沒告訴你:你的充電器一直在"摸魚"

全棧遛狗員
2026-03-25 23:00:33
小米捷報(bào),誤傷寧德時(shí)代

小米捷報(bào),誤傷寧德時(shí)代

ZAKER新聞
2026-03-26 22:10:32
在哪一瞬間,對(duì)你老公徹底失望了?網(wǎng)友:強(qiáng)行分居兩年,然后離婚

在哪一瞬間,對(duì)你老公徹底失望了?網(wǎng)友:強(qiáng)行分居兩年,然后離婚

另子維愛讀史
2026-03-24 21:15:00
49歲翁帆突傳“喜訊”!喪夫5個(gè)月后高調(diào)露面,狀態(tài)好到出人意料

49歲翁帆突傳“喜訊”!喪夫5個(gè)月后高調(diào)露面,狀態(tài)好到出人意料

查爾菲的筆記
2026-03-16 19:12:07
三次精準(zhǔn)躲過斬首行動(dòng),卡尼突然現(xiàn)身反轉(zhuǎn)劇情,伊朗這局水太深了

三次精準(zhǔn)躲過斬首行動(dòng),卡尼突然現(xiàn)身反轉(zhuǎn)劇情,伊朗這局水太深了

盛夏微涼
2026-03-24 18:10:08
王海團(tuán)隊(duì):已協(xié)助起訴黃天鵝

王海團(tuán)隊(duì):已協(xié)助起訴黃天鵝

南方都市報(bào)
2026-03-26 10:59:32
重返廣東!李春江有了新工作,亮相籃球場(chǎng),崗位曝光,杜鋒期待

重返廣東!李春江有了新工作,亮相籃球場(chǎng),崗位曝光,杜鋒期待

萌蘭聊個(gè)球
2026-03-26 13:02:53
2-0晉級(jí)八強(qiáng)!中國(guó)女網(wǎng)15歲新星連續(xù)爆冷真猛:下一輪對(duì)決王曦雨

2-0晉級(jí)八強(qiáng)!中國(guó)女網(wǎng)15歲新星連續(xù)爆冷真猛:下一輪對(duì)決王曦雨

李喜林籃球絕殺
2026-03-26 17:04:26
國(guó)防部:菲方侵權(quán)挑釁只會(huì)遭到更加堅(jiān)決應(yīng)對(duì)

國(guó)防部:菲方侵權(quán)挑釁只會(huì)遭到更加堅(jiān)決應(yīng)對(duì)

界面新聞
2026-03-26 16:00:27
浙江省人大常委會(huì)決定任免部分省政府組成部門主要負(fù)責(zé)人

浙江省人大常委會(huì)決定任免部分省政府組成部門主要負(fù)責(zé)人

浙江發(fā)布
2026-03-26 10:04:01
不僅抗炎,這還是眼睛、大腦最愛的營(yíng)養(yǎng)!

不僅抗炎,這還是眼睛、大腦最愛的營(yíng)養(yǎng)!

FitEmpire健身領(lǐng)域
2026-03-26 14:53:07
你知道的高檔會(huì)所里消費(fèi)有多高?網(wǎng)友:貧窮限制了我的想象

你知道的高檔會(huì)所里消費(fèi)有多高?網(wǎng)友:貧窮限制了我的想象

夜深愛雜談
2026-03-14 21:25:13
寫小說判十年,把生殖器放女孩嘴巴里判兩年九個(gè)月

寫小說判十年,把生殖器放女孩嘴巴里判兩年九個(gè)月

昊軒看世界
2026-03-24 19:56:42
澳門國(guó)民黨中將呂文貞突然說,我是李克農(nóng)的人,該向組織報(bào)到了

澳門國(guó)民黨中將呂文貞突然說,我是李克農(nóng)的人,該向組織報(bào)到了

鶴羽說個(gè)事
2026-03-25 21:56:09
薩拉赫離隊(duì)去向已明:不去沙特淘金,誓在歐洲巔峰再戰(zhàn)

薩拉赫離隊(duì)去向已明:不去沙特淘金,誓在歐洲巔峰再戰(zhàn)

樂道足球
2026-03-26 20:44:07
馬英九疑似患失智癥,臺(tái)律師:大陸已注意到,沒讓其擔(dān)任統(tǒng)一大使

馬英九疑似患失智癥,臺(tái)律師:大陸已注意到,沒讓其擔(dān)任統(tǒng)一大使

影孖看世界
2026-03-26 23:28:51
被伊朗打疼了?美以一邊要求?;?0天,一邊密集調(diào)動(dòng)特種部隊(duì)!

被伊朗打疼了?美以一邊要求?;?0天,一邊密集調(diào)動(dòng)特種部隊(duì)!

軍武次位面
2026-03-26 14:29:00
2026普法:強(qiáng)奸、通奸、嫖娼,只有這個(gè)行為會(huì)坐牢!

2026普法:強(qiáng)奸、通奸、嫖娼,只有這個(gè)行為會(huì)坐牢!

奇葩游戲醬
2026-03-26 05:01:32
美媒:以總理提議,特朗普拒絕

美媒:以總理提議,特朗普拒絕

環(huán)球時(shí)報(bào)國(guó)際
2026-03-27 00:13:22
2026-03-27 01:31:00
灰度測(cè)試中
灰度測(cè)試中
生活正在重構(gòu),目前還在灰度測(cè)試階段,暫不全量發(fā)布。
200文章數(shù) 2關(guān)注度
往期回顧 全部

科技要聞

美團(tuán)發(fā)布外賣大戰(zhàn)后成績(jī)單:虧損超200億

頭條要聞

張雪峰留巨額遺產(chǎn):二婚妻子或拿50% 剩下的女兒占1/3

頭條要聞

張雪峰留巨額遺產(chǎn):二婚妻子或拿50% 剩下的女兒占1/3

體育要聞

申京努力了,然而杜蘭特啊

娛樂要聞

劉曉慶妹妹發(fā)聲!稱姐姐受身邊人挑撥

財(cái)經(jīng)要聞

油價(jià)"馴服"特朗普?一到100美元就TACO

汽車要聞

一汽奧迪A6L e-tron開啟預(yù)售 CLTC最大續(xù)航815km

態(tài)度原創(chuàng)

本地
房產(chǎn)
游戲
數(shù)碼
公開課

本地新聞

救命,這只醬板鴨已經(jīng)在我手機(jī)復(fù)仇了一萬遍

房產(chǎn)要聞

突發(fā),三亞又有大批征遷補(bǔ)償方案出爐!

PS1大IP游戲藏私貨!成人手繪與盜版馬里奧ROM塞滿

數(shù)碼要聞

英特爾發(fā)Q1.26版Arc Pro專業(yè)顯卡驅(qū)動(dòng),支持B70 / B65顯卡

公開課

李玫瑾:為什么性格比能力更重要?

無障礙瀏覽 進(jìn)入關(guān)懷版