Mano是什么

Mano 是明略科技推出的專有大模型，專注于圖形用戶界面（GUI）智能操作。模型基于多模態(tài)基礎(chǔ)模型，通過(guò)在線強(qiáng)化學(xué)習(xí)和訓(xùn)練數(shù)據(jù)自動(dòng)采集等創(chuàng)新技術(shù)，在 Mind2Web 和 OSWorld 兩大基準(zhǔn)測(cè)試中取得 SOTA 成績(jī)。Mano 能精準(zhǔn)識(shí)別和操作網(wǎng)頁(yè)及桌面環(huán)境中的 GUI 元素，完成復(fù)雜任務(wù)，如填寫(xiě)表單、登錄賬號(hào)等，為自動(dòng)化操作提供高效解決方案，推動(dòng) GUI 智能體領(lǐng)域的發(fā)展。

Mano的主要功能

• 自動(dòng)化網(wǎng)頁(yè)操作：模型能自動(dòng)完成網(wǎng)頁(yè)中的各種操作，如填寫(xiě)表單、點(diǎn)擊按鈕、輸入文本、提交表單等，能應(yīng)用在自動(dòng)化數(shù)據(jù)采集、網(wǎng)頁(yè)自動(dòng)化測(cè)試等場(chǎng)景。
• 桌面應(yīng)用操作：支持對(duì)桌面軟件的操作，包括打開(kāi)軟件、進(jìn)行菜單操作、輸入文本、點(diǎn)擊按鈕等。
• 跨平臺(tái)操作：兼容多種操作系統(tǒng)和瀏覽器，實(shí)現(xiàn)在不同平臺(tái)上的自動(dòng)化操作，滿足多樣化的自動(dòng)化需求。
• 數(shù)據(jù)采集與分析：支持自動(dòng)從網(wǎng)頁(yè)或桌面應(yīng)用中采集數(shù)據(jù)，進(jìn)行初步分析，為后續(xù)的數(shù)據(jù)處理和決策提供支持。
• 錯(cuò)誤檢測(cè)與恢復(fù)：具備錯(cuò)誤檢測(cè)機(jī)制，能及時(shí)發(fā)現(xiàn)操作過(guò)程中的錯(cuò)誤，嘗試自動(dòng)恢復(fù)，提高操作的可靠性和穩(wěn)定性。

Mano的技術(shù)原理

• 多模態(tài)基礎(chǔ)模型：基于多模態(tài)基礎(chǔ)模型，能理解和處理視覺(jué)信息（如網(wǎng)頁(yè)截圖）和文本信息（如用戶指令、網(wǎng)頁(yè)文本），實(shí)現(xiàn)對(duì) GUI 環(huán)境的感知和理解。
• 在線強(qiáng)化學(xué)習(xí)：通過(guò)在線強(qiáng)化學(xué)習(xí)，Mano 能在與真實(shí)環(huán)境的交互中不斷學(xué)習(xí)和優(yōu)化操作策略，提高在動(dòng)態(tài)環(huán)境中的適應(yīng)性和決策能力。
• 訓(xùn)練數(shù)據(jù)自動(dòng)采集：設(shè)計(jì)訓(xùn)練數(shù)據(jù)自動(dòng)采集模塊，自動(dòng)生成和采集高質(zhì)量的交互數(shù)據(jù)，用在模型的訓(xùn)練和優(yōu)化，降低人工標(biāo)注成本。
• 監(jiān)督微調(diào)（SFT）：在訓(xùn)練的第一階段，用監(jiān)督學(xué)習(xí)對(duì)模型進(jìn)行微調(diào)，能更好地理解和執(zhí)行特定的 GUI 操作任務(wù)。
• 離線強(qiáng)化學(xué)習(xí)：在第二階段，通過(guò)離線強(qiáng)化學(xué)習(xí)進(jìn)一步優(yōu)化模型的決策能力，能更好地完成多步操作任務(wù)。
• 在線強(qiáng)化學(xué)習(xí)：在第三階段，模型在模擬環(huán)境中與真實(shí)環(huán)境進(jìn)行交互，通過(guò)在線強(qiáng)化學(xué)習(xí)進(jìn)一步提升模型適應(yīng)性和靈活性。
• 驗(yàn)證模塊：Mano 配備驗(yàn)證模塊，用在驗(yàn)證每一步操作的正確性，及時(shí)發(fā)現(xiàn)、糾正錯(cuò)誤，提高操作的準(zhǔn)確性和可靠性。

Mano的項(xiàng)目地址

• 技術(shù)論文：https://www.mininglamp.com/wp-content/uploads/2025/09/%E6%98%8E%E7%95%A5%E7%A7%91%E6%8A%80-Mano-Technical-Report.pdf

Mano的應(yīng)用場(chǎng)景

• 自動(dòng)化數(shù)據(jù)采集：Mano 能自動(dòng)從網(wǎng)頁(yè)或桌面應(yīng)用中采集數(shù)據(jù)，為數(shù)據(jù)分析和研究提供高效支持，節(jié)省人工采集時(shí)間。
• 網(wǎng)頁(yè)自動(dòng)化測(cè)試：模型自動(dòng)完成網(wǎng)頁(yè)的各種操作，如填寫(xiě)表單、點(diǎn)擊按鈕等，用在測(cè)試網(wǎng)頁(yè)功能是否正常，提高測(cè)試效率和準(zhǔn)確性。
• 企業(yè)自動(dòng)化辦公：支持對(duì)桌面軟件的操作，實(shí)現(xiàn)企業(yè)內(nèi)部辦公流程的自動(dòng)化，如自動(dòng)填寫(xiě)報(bào)表、發(fā)送郵件等，提升工作效率。
• 軟件自動(dòng)化測(cè)試：模型用在對(duì)桌面軟件進(jìn)行自動(dòng)化測(cè)試，包括打開(kāi)軟件、進(jìn)行菜單操作等，幫助開(kāi)發(fā)者快速發(fā)現(xiàn)軟件問(wèn)題。
• 智能客服輔助：模型能自動(dòng)處理一些常見(jiàn)的客戶咨詢問(wèn)題，如查詢訂單狀態(tài)、解答常見(jiàn)疑問(wèn)等，減輕客服人員的工作負(fù)擔(dān)。

[超站]友情鏈接：

四季很好，只要有你，文娛排行榜：https://www.yaopaiming.com/
關(guān)注數(shù)據(jù)與安全，洞悉企業(yè)級(jí)服務(wù)市場(chǎng)：https://www.ijiandao.com/