้ฆๆฌพๆ ้็ต่็ๅผๆบ AI ๆๆบ่ชๅจๅๅฉๆ | AI Phone Automation Assistant
ๅบไบ่ง่ง่ฏญ่จๆจกๅ (VLM) ยท ๅ็ Android Kotlin ยท ๅค Agent ๅไฝๆถๆ
English | ็ฎไฝไธญๆ
2025 ๅนด 12 ๆ๏ผๅญ่่ทณๅจ่ๅไธญๅ ดๅๅธไบใ่ฑๅ ๆๆบๅฉๆใ๏ผไธๆฌพ่ฝๅค่ชๅจๆไฝๆๆบๅฎๆๅคๆไปปๅก็ AI ๅฉๆใๅฎ่ฝๅธฎไฝ ๆฏไปทไธๅใๆน้ๆ็ฎๅใๅท่ง้ข๏ผ็่ณไปฃๆๆธธๆใ
้ฆๆน 3 ไธๅฐๅทฅ็จๆบๅฎไปท 3499 ๅ ๏ผไธ็บฟๅฝๅคฉๅณๅๅฎ็ฝ๏ผไบๆๅธๅบไธๅบฆ็ๅฐ 5000+ใ
ไนฐไธๅฐ๏ผ้ฃๅฐฑ่ชๅทฑๅไธไธชใ
ไบๆฏๆไบ่ๅ โโไธไธชๅฎๅ จๅผๆบ็ AI ๆๆบ่ชๅจๅๅฉๆใ
ไธบไปไนๅซใ่ๅ ใ๏ผๅ ไธบไฝ่ ไธ็ฑๅ็ด ใ๐ฅ
| ็นๆง | ่ๅ | ่ฑๅ ๆๆบ | ๅ ถไปๅผๆบๆนๆก |
|---|---|---|---|
| ้่ฆ็ต่ | โ ไธ้่ฆ | โ ไธ้่ฆ | โ ๅคงๅค้่ฆ |
| ้่ฆ่ดญไนฐ็กฌไปถ | โ ไธ้่ฆ | โ ้่ฆ 3499+ | โ ไธ้่ฆ |
| ๅ็ Android ๅฎ็ฐ | โ Kotlin | โ ๅ็ | โ Python |
| ๅผๆบ | โ MIT | โ ้ญๆบ | โ ๅผๆบ |
| Skills/Tools ๆถๆ | โ ๅฎๆด | โ ๆช็ฅ | โ ๆ |
| UI ่ฎพ่ฎก | โญโญโญยฝ | โญโญโญโญ | โญโญ |
| ่ชๅฎไนๆจกๅ | โ ๆฏๆ | โ ไป ่ฑๅ | โ ้จๅๆฏๆ |
ไผ ็ป็ๆๆบ่ชๅจๅๆนๆก็็น๏ผ
- ๅฟ ้กป่ฟๆฅ็ต่่ฟ่ก ADB ๅฝไปค
- ้่ฆ้จ็ฝฒ Python ็ฏๅขๅๅ็งไพ่ต
- ๅช่ฝๅจ็ต่็ซฏๆไฝ๏ผๆๆบๅฟ ้กป้่ฟๆฐๆฎ็บฟ่ฟๆฅ
- ๆๆฏ้จๆง้ซ๏ผๆฎ้็จๆท้พไปฅไฝฟ็จ
่ๅ ็่งฃๅณๆนๆก๏ผ
ไธไธช App๏ผ่ฃ ไธๅฐฑ่ฝ็จใๆ ้็ต่ใๆ ้ๆฐๆฎ็บฟใๆ ้ไปปไฝๆๆฏ่ๆฏใ
ๆๅผ App โ ้ ็ฝฎ API Key โ ่ฏดๅบไฝ ๆณๅ็ไบ โ ๅฎๆใ
ๅธ้ขไธๅ ไนๆๆๆๆบ่ชๅจๅๅผๆบ้กน็ฎ๏ผๅ ๆฌ้ฟ้็ MobileAgent๏ผ้ฝๆฏ Python ๅฎ็ฐ๏ผ้่ฆ๏ผ
- ๅจ็ต่ไธ่ฟ่ก Python ่ๆฌ
- ๆๆบ้่ฟ USB/WiFi ADB ่ฟๆฅ็ต่
- ๆชๅพ้่ฟ ADB ไผ ่พๅฐ็ต่๏ผๅค็ๅๅๆๆไฝๆไปคไผ ๅๆๆบ
่ๅ ๅฎๅ จไธๅใ
ๆไปฌ็จ Kotlin ้ๅไบๆดไธช MobileAgent ๆกๆถ๏ผๅ็่ฟ่กๅจ Android ่ฎพๅคไธ๏ผ
- ๆชๅพใๅๆใๆง่กๅ จ้จๅจๆๆบๆฌๅฐๅฎๆ
- ๆ ้็ต่ไธญ่ฝฌ๏ผๅปถ่ฟๆดไฝ
- ๅฉ็จ Shizuku ่ทๅพ็ณป็ป็บงๆ้๏ผ่้็น็็ ADB ๅฝไปค
Android ็ณป็ปๅบไบๅฎๅ จ่่๏ผๆฎ้ App ๆ ๆณ๏ผ
- ๆจกๆ็จๆท็นๅปใๆปๅจๅฑๅน
- ่ฏปๅๅ ถไป App ็็้ขๅ ๅฎน
- ๆง่ก
input tapใscreencap็ญ็ณป็ปๅฝไปค
ไผ ็ปๆนๆก้่ฆ่ฟๆฅ็ต่ๆง่ก ADB ๅฝไปคใ่ Shizuku ๆฏไธไธชไผ้ ็่งฃๅณๆนๆก๏ผ
- ้่ฟๆ ็บฟ่ฐ่ฏๆ็ต่ ADB ๅฏๅจไธๆฌก Shizuku ๆๅก
- ไนๅๆฎ้ App ๅฐฑๅฏไปฅ่ทๅพ ADB ็บงๅซ็ๆ้
- ๆ ้ Root๏ผๆ ้ๆฏๆฌก้ฝ่ฟๆฅ็ต่
่ฟ่ฎฉ่ๅ ๅฏไปฅ็ดๆฅๅจๆๆบไธๆง่กๆชๅพใ็นๅปใ่พๅ ฅ็ญๆไฝ๏ผ็ๆญฃๅฎ็ฐใไธไธช App ๆๅฎไธๅใใ
ๅ Claude Code ๆถๆๅฏๅ๏ผ่ๅ ๅฎ็ฐไบ Tools + Skills ๅๅฑ Agent ๆกๆถ๏ผ
็จๆท: "ๅธฎๆ็นไปฝๅคๅ"
โ
โผ
โโโโโโโโโโโโโโโ
โ SkillManager โ โ ๆๅพ่ฏๅซ
โโโโโโโโโโโโโโโ
โ
โโโโโโดโโโโโ
โ โ
โผ โผ
๐ ๅฟซ้่ทฏๅพ ๐ค ๆ ๅ่ทฏๅพ
(Delegation) (GUI ่ชๅจๅ)
โ โ
โผ โผ
็ดๆฅ DeepLink Agent ๅพช็ฏ
ๆๅผๅฐ็พ AI ๆไฝ็พๅข App
Tools ๅฑ๏ผๅๅญ่ฝๅ๏ผ
ๅบๅฑๅทฅๅ ท้๏ผๆฏไธช Tool ๅฎๆไธไธช็ฌ็ซๆไฝ๏ผ
| Tool | ๅ่ฝ |
|---|---|
search_apps |
ๆบ่ฝๆ็ดขๅทฒๅฎ่ฃ ๅบ็จ๏ผๆฏๆๆผ้ณใ่ฏญไน๏ผ |
open_app |
ๆๅผๅบ็จ |
deep_link |
้่ฟ DeepLink ่ทณ่ฝฌๅฐ App ็นๅฎ้กต้ข |
clipboard |
่ฏปๅๅช่ดดๆฟ |
shell |
ๆง่ก Shell ๅฝไปค |
http |
HTTP ่ฏทๆฑ๏ผ่ฐ็จๅค้จ API๏ผ |
Skills ๅฑ๏ผ็จๆทๆๅพ๏ผ
้ขๅ็จๆท็ไปปๅกๅฑ๏ผๅฐ่ช็ถ่ฏญ่จๆ ๅฐๅฐๅ ทไฝๆไฝ๏ผ
| Skill | ็ฑปๅ | ๆ่ฟฐ |
|---|---|---|
| ็นๅคๅ(ๅฐ็พ) | Delegation | ็ดๆฅๆๅผๅฐ็พ AI ่ฎฉๅฎๅธฎไฝ ็น |
| ็นๅคๅ(็พๅข) | GUI ่ชๅจๅ | ๅจ็พๅข App ไธไธๆญฅๆญฅๆไฝ |
| ๅฏผ่ช(้ซๅพท) | Delegation | DeepLink ็ด่พพ้ซๅพทๆ็ดข |
| ็ๆๅพ็(ๅณๆขฆ) | Delegation | ๆๅผๅณๆขฆ AI ็ๆๅพ็ |
| ๅๅพฎไฟก | GUI ่ชๅจๅ | ่ชๅจๆไฝๅพฎไฟกๅๆถๆฏ |
ไธค็งๆง่กๆจกๅผ๏ผ
-
Delegation๏ผๅงๆ๏ผ๏ผ้ซ็ฝฎไฟกๅบฆๅน้ ๆถ๏ผ็ดๆฅ้่ฟ DeepLink ๆๅผๆ AI ่ฝๅ็ App๏ผๅฆๅฐ็พใ่ฑๅ ใๅณๆขฆ๏ผ๏ผ่ฎฉๅฎไปฌๅฎๆไปปๅกใๅฟซ้ใไธๆญฅๅฐไฝใ
-
GUI ่ชๅจๅ๏ผๆฒกๆ AI ่ฝๅ็ App๏ผๅฆ็พๅขใๅพฎไฟก๏ผ๏ผ้่ฟไผ ็ป็ๆชๅพ-ๅๆ-ๆไฝๅพช็ฏๅฎๆใSkill ไผๆไพๆไฝๆญฅ้ชคๆๅฏผ๏ผๆ้ซๆๅ็ใ
- ๅบไบๅ ่ฟ็่ง่ง่ฏญ่จๆจกๅ๏ผVLM๏ผ๏ผ่ฝๅค"็ๆ"ๅฑๅนๅ ๅฎน
- ่ช็ถ่ฏญ่จๆไปค๏ผ่ฏดไบบ่ฏๅฐฑ่ฝๆไฝๆๆบ
- ๆบ่ฝๅณ็ญ๏ผๆ นๆฎๅฑๅน็ถๆ่ชๅจ่งๅไธไธๆญฅๆไฝ
่ฟๅฏ่ฝๆฏๆๆๆๆบ่ชๅจๅๅผๆบ้กน็ฎไธญ UI ๅๅพๆๅฅฝ็็ใ
- ็ฐไปฃๅ Material 3 ่ฎพ่ฎก่ฏญ่จ
- ๆต็ ็ๅจ็ปๆๆ
- ๆทฑ่ฒ/ๆต ่ฒไธป้ข่ช้ๅบ
- ็ฒพๅฟ่ฎพ่ฎก็้ฆๆฌกไฝฟ็จๅผๅฏผ
- ๅฎๆด็ไธญ่ฑๆๅ่ฏญๆฏๆ
- ๆฏๆๅค็ง VLM๏ผ้ฟ้ไบ้ไนๅ้ฎใOpenAI GPT-4VใClaude ็ญ
- ้ข่ฎพ API ๆๅกๅ๏ผ้ฟ้ไบใOpenAIใOpenRouter ไธ้ฎๅๆข
- ไป API ๅจๆ่ทๅๅฏ็จๆจกๅๅ่กจ๏ผๆฏๆๆจก็ณๆ็ดข
- ๅฏ้ ็ฝฎ่ชๅฎไน API ็ซฏ็น๏ผๆฏๆๆฌๅฐๆจกๅ๏ผOllamaใvLLM ็ญ๏ผ
- API Key ไฝฟ็จ AES-256-GCM ๅ ๅฏๅญๅจ
- ๆฃๆตๅฐๆฏไปใๅฏ็ ็ญๆๆ้กต้ข่ชๅจๅๆญข
- ไปปๅกๆง่กๅ จ็จๅฏ่ง๏ผๆฌๆตฎ็ชๆพ็คบ่ฟๅบฆ
- ้ๆถๅฏไปฅๆๅจๅๆญขไปปๅก
- ๅฏ้็ไบ็ซฏๅดฉๆบไธๆฅ๏ผๅฏๅจ่ฎพ็ฝฎไธญๅ ณ้ญ๏ผ
ๅฝ Shizuku ไปฅ Root ๆ้่ฟ่กๆถ๏ผ่ๅ ๅฏไปฅๅฏ็จ Root ๆจกๅผ๏ผ
- Root ๆจกๅผ๏ผ่งฃ้ๆดๅค็ณป็ป็บงๆไฝ่ฝๅ
- su ๅฝไปค๏ผๅ
่ฎธๆง่ก
su -cๅฝไปค๏ผ้่ฐจๆ ไฝฟ็จ๏ผ - ่ชๅจๆฃๆต๏ผ่ชๅจๆฃๆต Shizuku ๆ้็ญ็บง๏ผADB/Root๏ผ๏ผ้ Root ็ฏๅขไธ่ฏฅ้้กนไธบ็ฐ่ฒไธๅฏ็จ
- Android 8.0 (API 26) ๆๆด้ซ็ๆฌ
- WiFi ็ฝ็ป - Shizuku ๆ ็บฟ่ฐ่ฏไพ่ต WiFi ่ฟๆฅ๏ผ็กฎไฟๆๆบๅทฒ่ฟๆฅ WiFi
- Shizuku - ็จไบ่ทๅ็ณป็ป็บงๆงๅถๆ้
- VLM API Key - ้่ฆ่ง่ง่ฏญ่จๆจกๅ็ API ๅฏ้ฅ๏ผๅฆ้ฟ้ไบ้ไนๅ้ฎ๏ผ
Shizuku ๆฏไธไธชๅผๆบๅทฅๅ ท๏ผๅฏไปฅ่ฎฉๆฎ้ๅบ็จ่ทๅพ ADB ๆ้๏ผๆ ้ Rootใ
ๅฏๅจๆนๅผ๏ผไบ้ไธ๏ผ๏ผ
ๆ ็บฟ่ฐ่ฏ๏ผๆจ่๏ผ้ Android 11+๏ผ
- ่ฟๅ
ฅ
่ฎพ็ฝฎ > ๅผๅ่ ้้กน > ๆ ็บฟ่ฐ่ฏ - ๅผๅฏๆ ็บฟ่ฐ่ฏ
- ๅจ Shizuku App ไธญ้ๆฉ"ๆ ็บฟ่ฐ่ฏ"ๆนๅผๅฏๅจ
็ต่ ADB
- ๆๆบ่ฟๆฅ็ต่๏ผๅผๅฏ USB ่ฐ่ฏ
- ๆง่ก๏ผ
adb shell sh /storage/emulated/0/Android/data/moe.shizuku.privileged.api/start.sh
ไป Releases ้กต้ขไธ่ฝฝๆๆฐ APK ๅฎ่ฃ ใ
- ๆๅผ่ๅ App
- ๅจ Shizuku ไธญๆๆ่ๅ
โ ๏ธ ้่ฆ๏ผ่ฟๅ ฅ่ฎพ็ฝฎ้กต้ข๏ผ้ ็ฝฎไฝ ็ API Key
้ฟ้ไบ้ไนๅ้ฎ๏ผๆจ่ๅฝๅ ็จๆท๏ผ
- ่ฎฟ้ฎ ้ฟ้ไบ็พ็ผๅนณๅฐ
- ๅผ้ DashScope ๆๅก
- ๅจ API-KEY ็ฎก็ไธญๅๅปบๅฏ้ฅ
OpenAI๏ผ้่ฆไปฃ็๏ผ
- ่ฎฟ้ฎ OpenAI Platform
- ๅๅปบ API Key
ๅธฎๆ็นไธช้่ฟๅฅฝๅ็ๆฑๅ ก
ๆๅผ็ฝๆไบ้ณไนๆญๆพๆฏๆฅๆจ่
ๅธฎๆๆๆๅไธๅผ ็
ง็ๅ้ๅฐๅพฎๅ
ๅธฎๆๅจ็พๅข็นไธไปฝ็ช่้ฅญ
ๆๅผB็ซ็็ญ้จ่ง้ข
โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ
โ ่ๅ
App โ
โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโค
โ โ
โ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ โ
โ โ UI ๅฑ (Compose) โ โ
โ โ HomeScreen / Settings / History โ โ
โ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ โ
โ โ โ
โ โโโโโโโโโโโโโโโโโโโโโโโโโโผโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ โ
โ โ Skills ๅฑ โ โ
โ โ SkillManager โ ๆๅพ่ฏๅซ โ ๅฟซ้่ทฏๅพ/ๆ ๅ่ทฏๅพ โ โ
โ โ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ โ โ
โ โ โ ็นๅคๅ โ ๅฏผ่ช โ ๆ่ฝฆ โ ๅๅพฎไฟก โ AI็ปๅพ โ ... โ โ โ
โ โ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ โ โ
โ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ โ
โ โ โ
โ โโโโโโโโโโโโโโโโโโโโโโโโโโผโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ โ
โ โ Tools ๅฑ โ โ
โ โ ToolManager โ ๅๅญ่ฝๅๅฐ่ฃ
โ โ
โ โ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ โ โ
โ โ โ search_apps โ open_app โ deep_link โ clipboard โ โ
โ โ โ shell โ http โ screenshot โ tap โ swipe โ type โ โ
โ โ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ โ โ
โ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ โ
โ โ โ
โ โโโโโโโโโโโโโโโโโโโโโโโโโโผโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ โ
โ โ Agent ๅฑ โ โ
โ โ MobileAgent (็งปๆค่ช MobileAgent-v3) โ โ
โ โ โโโโโโโโโโโโโฌโโโโโโโโโโโโฌโโโโโโโโโโโโฌโโโโโโโโโโโ โ โ
โ โ โ Manager โ Executor โ Reflector โ Notetakerโ โ โ
โ โ โ (่งๅ) โ (ๆง่ก) โ (ๅๆ) โ (่ฎฐๅฝ) โ โ โ
โ โ โโโโโโโโโโโโโดโโโโโโโโโโโโดโโโโโโโโโโโโดโโโโโโโโโโโ โ โ
โ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ โ
โ โ โ
โ โโโโโโโโโโโโโโโโโโโโโโโโโโผโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ โ
โ โ VLM Client โ โ
โ โ Qwen-VL / GPT-4V / Claude โ โ
โ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ โ
โ โ โ
โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโผโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโค
โ โผ โ
โ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ โ
โ โ Shizuku โ โ
โ โ System-level Control โ โ
โ โ screencap โ input tap โ input swipe โ am start โ โ
โ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ โ
โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ
็จๆท่พๅ
ฅๆไปค
โ
โผ
โโโโโโโโโโโโโโโโโโโ
โ Skills ๅน้
โ โ ๆฃๆฅๆฏๅฆๆๅฏนๅบ็ Skill
โโโโโโโโโโโโโโโโโโโ
โ
โโโ ้ซ็ฝฎไฟกๅบฆ Delegation Skill โโโถ ็ดๆฅ DeepLink ่ทณ่ฝฌ โโโถ ๅฎๆ
โ
โผ
โโโโโโโโโโโโโโโโโโโ
โ ๆ ๅ Agent ๅพช็ฏ โ
โโโโโโโโโโโโโโโโโโโ
โ
โผ
โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ
โ 1. ๆชๅพ - Shizuku screencap โ
โ 2. Manager ่งๅ - VLM ๅๆๅฝๅ็ถๆ โ
โ 3. Executor ๅณ็ญ - ็กฎๅฎไธไธๆญฅๆไฝ โ
โ 4. ๆง่กๅจไฝ - tap/swipe/type/open_app โ
โ 5. Reflector ๅๆ - ่ฏไผฐๆไฝๆๆ โ
โ 6. ๅพช็ฏ็ดๅฐๅฎๆๆๅฎๅ
จ้ๅถ โ
โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโ
app/src/main/java/com/roubao/autopilot/
โโโ agent/ # AI Agent ๆ ธๅฟ (็งปๆค่ช MobileAgent-v3)
โ โโโ MobileAgent.kt # Agent ไธปๅพช็ฏ
โ โโโ Manager.kt # ่งๅ Agent
โ โโโ Executor.kt # ๆง่ก Agent
โ โโโ ActionReflector.kt # ๅๆ Agent
โ โโโ Notetaker.kt # ็ฌ่ฎฐ Agent
โ โโโ InfoPool.kt # ็ถๆๆฑ
โ
โโโ tools/ # Tools ๅฑ - ๅๅญ่ฝๅ
โ โโโ Tool.kt # Tool ๆฅๅฃๅฎไน
โ โโโ ToolManager.kt # ๅทฅๅ
ท็ฎก็ๅจ
โ โโโ SearchAppsTool.kt # ๅบ็จๆ็ดข
โ โโโ OpenAppTool.kt # ๆๅผๅบ็จ
โ โโโ DeepLinkTool.kt # DeepLink ่ทณ่ฝฌ
โ โโโ ClipboardTool.kt # ๅช่ดดๆฟๆไฝ
โ โโโ ShellTool.kt # Shell ๅฝไปค
โ โโโ HttpTool.kt # HTTP ่ฏทๆฑ
โ
โโโ skills/ # Skills ๅฑ - ็จๆทๆๅพ
โ โโโ Skill.kt # Skill ๆฅๅฃๅฎไน
โ โโโ SkillRegistry.kt # Skill ๆณจๅ่กจ
โ โโโ SkillManager.kt # Skill ็ฎก็ๅจ
โ
โโโ controller/ # ่ฎพๅคๆงๅถ
โ โโโ DeviceController.kt # Shizuku ๆงๅถๅจ
โ โโโ AppScanner.kt # ๅบ็จๆซๆ (ๆผ้ณ/่ฏญไนๆ็ดข)
โ
โโโ vlm/ # VLM ๅฎขๆท็ซฏ
โ โโโ VLMClient.kt # API ่ฐ็จๅฐ่ฃ
โ
โโโ ui/ # ็จๆท็้ข
โ โโโ screens/ # ๅไธช้กต้ข
โ โโโ theme/ # ไธป้ขๅฎไน
โ โโโ OverlayService.kt # ๆฌๆตฎ็ชๆๅก
โ
โโโ data/ # ๆฐๆฎๅฑ
โ โโโ SettingsManager.kt # ่ฎพ็ฝฎ็ฎก็
โ
โโโ App.kt # Application ๅ
ฅๅฃ
app/src/main/assets/
โโโ skills.json # Skills ้
็ฝฎๆไปถ
- ๅ็ Android ๅฎ็ฐ - Kotlin ้ๅ MobileAgent๏ผๆ่ฑ Python ไพ่ต
- Tools ๅฑ - ๅๅญ่ฝๅๅฐ่ฃ ๏ผsearch_appsใdeep_linkใclipboard ็ญ๏ผ
- Skills ๅฑ - ็จๆทๆๅพๆ ๅฐ๏ผๆฏๆ Delegation ๅ GUI ่ชๅจๅไธค็งๆจกๅผ
- ๆบ่ฝๅบ็จๆ็ดข - ๆผ้ณใ่ฏญไนใๅ็ฑปๅค็ปดๅบฆๅน้
- ๅฟซ้่ทฏๅพ - ้ซ็ฝฎไฟกๅบฆ Skill ็ดๆฅ DeepLink ่ทณ่ฝฌ
ๆญฃๅจๅผๅ็้ๅคงๆดๆฐ๏ผ็ฎๅๅจ
roubao2.0+AccessibilityServiceๅๆฏ
-
ๆ ้็ขๆๅกๆททๅๆจกๅผ - ้ๆ AccessibilityService๏ผๅฎ็ฐๆด็ฒพๅ็ UI ๆไฝ
- ไผๅ ไฝฟ็จๅ ็ด ็ดขๅผ็นๅป๏ผไธๅๅฑๅนๅๅๅฝฑๅ๏ผ
- ๆบ่ฝๅ้๏ผ็ดขๅผๆจกๅผๅคฑ่ดฅๆถ่ชๅจๅๆขๅฐๅๆ ๆจกๅผ
- ๆ ้ Root๏ผ่ฟไธๆญฅ้ไฝไฝฟ็จ้จๆง
-
UI ๆ ๆ็ฅ - Agent ่ฝๅค่ทๅๅฎๆด็ UI ็ปๆ
- ่ฏๅซๅฏ็นๅปๅ ็ด ใ่พๅ ฅๆกใๆปๅจๅบๅ
- ไธบ LLM ๆไพ็ปๆๅ UI ไธไธๆ
- ๅๅฐ็บฏ่ง่ง่ฏฏๅค
-
ๅฎ่ๆฌ็ณป็ป - ๅฝๅถใๅญๅจใๅๆพๆไฝๅบๅ
- ๅฐๆง่ก่ฟ็จๅฝๅถไธบๅฏ้ๅคๆญๆพ็่ๆฌ
- ๆฏๆๅพช็ฏๆญๆพใๅปถๆถๆงๅถ
- ่ๆฌ็ฎก็็้ข๏ผๆฐๅข"่ๆฌ"ๅฏผ่ช้กต๏ผ
-
่ฎพ็ฝฎๅขๅผบ
- ๆ ้็ขๆๅกๅผๅ ณไธๅผๅฏผ
- ๆททๅๆจกๅผ็ถๆๅฑ็คบ
- MCP (Model Context Protocol) - ๆฅๅ ฅๆดๅค่ฝๅๆฉๅฑ๏ผๅฆๆฅๅใ้ฎไปถใๆไปถ็ฎก็็ญ
- ๆง่กๅฝๅฑ - ไฟๅญไปปๅกๆง่ก่ฟ็จ่ง้ข๏ผๆนไพฟๅ้กพๅ่ฐ่ฏ
- ๆดๅค Skills - ๆฉๅ ๅ ็ฝฎ Skills๏ผๆฏๆ็จๆท่ชๅฎไน
- ๆดๅค่ฎพๅคๆฏๆ - ้้ ๆดๅค Android ่ฎพๅคๅๅฎๅถ็ณป็ป๏ผMIUIใColorOSใHarmonyOS ็ญ๏ผ
- ๆฌๅฐๆจกๅ - ๆฏๆๅจ่ฎพๅค็ซฏ่ฟ่กๅฐๅ VLM๏ผๅฎ็ฐ็ฆป็บฟไฝฟ็จ
- ไปปๅกๆจกๆฟ - ไฟๅญๅๅไบซๅธธ็จไปปๅก
- ๅคๅบ็จๅไฝ - ่ทจ App ่ๅจๅฎๆๅคๆๅทฅไฝๆต
- ๆบ่ฝๅญฆไน - ไป็จๆทๆไฝไน ๆฏไธญๅญฆไน ๏ผไผๅๆง่ก็ญ็ฅ
- ่ฏญ้ณๆงๅถ - ่ฏญ้ณๅค้ๅ่ฏญ้ณๆไปค
- Android Studio Hedgehog ๆๆด้ซ็ๆฌ
- JDK 17
- Android SDK 34
# ๅ
้ไปๅบ
git clone https://github.com/yourusername/roubao.git
cd roubao
# ๆๅปบ Debug ็ๆฌ
./gradlew assembleDebug
# ๅฎ่ฃ
ๅฐ่ฎพๅค
./gradlew installDebug้ๅฐๅดฉๆบๆ Bug๏ผ่ฏท้่ฟไปฅไธๆนๅผๅ้ฆ๏ผ
- ๆๅผ่ๅ App โ ่ฎพ็ฝฎ
- ๆพๅฐใๅ้ฆไธ่ฐ่ฏใๅ็ป
- ็นๅปใๅฏผๅบๆฅๅฟใ
- ้ๆฉๅไบซๆนๅผ๏ผๅพฎไฟกใ้ฎไปถ็ญ๏ผๅ้็ปๅผๅ่
- ่ฎพๅคๅๅทๅ Android ็ๆฌ
- ๅบ็จ็ๆฌๅท
- ๅดฉๆบๅ ๆ ไฟกๆฏ๏ผๅฆๆ๏ผ
- ๆไฝๆฅๅฟ
๐ก ๆฅๅฟๆไปถไธๅ ๅซๆจ็ API Key ๆไธชไบบ้็งไฟกๆฏ
่ฏทๅจ GitHub Issues ๆไบค้ฎ้ข๏ผ้ไธ๏ผ
- ้ฎ้ขๆ่ฟฐ
- ๅค็ฐๆญฅ้ชค
- ๅฏผๅบ็ๆฅๅฟๆไปถ
ๆฌข่ฟๆไบค Issue ๅ Pull Request๏ผ
- Fork ๆฌไปๅบ
- ๅๅปบ็นๆงๅๆฏ (
git checkout -b feature/amazing-feature) - ๆไบคๆดๆน (
git commit -m 'Add some amazing feature') - ๆจ้ๅฐๅๆฏ (
git push origin feature/amazing-feature) - ๅผๅฏ Pull Request
ๆฌ้กน็ฎๅบไบ MIT ่ฎธๅฏ่ฏๅผๆบใ่ฏฆ่ง LICENSE ๆไปถใ
- MobileAgent - ้ฟ้่พพๆฉ้ข X-PLUG ๅข้ๅผๆบ็็งปๅจ็ซฏ Agent ๆกๆถ๏ผไธบๆฌ้กน็ฎๆไพไบ้่ฆ็ๆๆฏๅ่
- Shizuku - ไผ็ง็ Android ๆ้็ฎก็ๆกๆถ
Made with โค๏ธ by Roubao Team