
谷歌致力于通過高效、可靠的方法
構(gòu)建 AI 驅(qū)動的產(chǎn)品
如今已經(jīng)走過了七年 "AI 為先" 的旅程
一起來看 2023 Google 開發(fā)者大會上
AI 開發(fā)如何被廣泛應(yīng)用,簡化開發(fā)
并將機器學(xué)習(xí)的強大能力
引入到應(yīng)用和工作流中
提高開發(fā)者工作效率

過去 3 年,Web 機器學(xué)習(xí)技術(shù)的使用和開發(fā)都呈指數(shù)級增長,許多熱門 Google 產(chǎn)品都已采用 Web 技術(shù)。谷歌的許多團隊都在為 Web 機器學(xué)習(xí)的未來積極貢獻力量。例如,Chrome 團隊正致力于制定新的 Web 標(biāo)準(zhǔn),使 TensorFlow.js 和 MediaPipe 等團隊能夠在這些堆棧的基礎(chǔ)上構(gòu)建各種產(chǎn)品和服務(wù),并實現(xiàn)更出色的性能。

MediaPipe 是一個開源的跨平臺框架,用于在移動設(shè)備、桌面設(shè)備和 Web 上構(gòu)建機器學(xué)習(xí)解決方案。MediaPipe 提供可自定義的設(shè)備端解決方案,只需幾行代碼,即可將解決方案集成到 Web 應(yīng)用中。此外,MediaPipe 也發(fā)布了新模型,例如人臉融合變形分類。開發(fā)者可以使用此模型來創(chuàng)建虛擬頭像,使其實時匹配用戶的面部表情。

MediaPipe Studio 是一款基于 Web 的應(yīng)用程序,用于評估和自定義應(yīng)用程序的設(shè)備上 ML 模型和管道。MediaPipe Studio 可讓開發(fā)者使用自己的數(shù)據(jù)和自定義的 ML 模型在瀏覽器中快速測試 MediaPipe 解決方案,以及支持試驗結(jié)果總數(shù)、報告結(jié)果的最小置信度閾值等模型設(shè)置。
MediaPipe Studio 可以提供手勢識別等完全在瀏覽器中運行的解決方案

TensorFlow.js 是谷歌新發(fā)布的模型可視化調(diào)試程序,幫助開發(fā)者比較模型在不同 TensorFlow.js 后端上執(zhí)行時的輸出,找出運算輸出從何時開始出現(xiàn)差異,以及差異有多大,以便發(fā)現(xiàn)在不同后端環(huán)境和設(shè)備上使用模型時可能出現(xiàn)的 bug。
TensorFlow.js 模型可視化調(diào)試程序

谷歌對 WebGL 后端進行了重大優(yōu)化,Web 機器學(xué)習(xí)模型的運行速度將比以往更快。單項運算級別中常見運算的性能最高能夠免費提升到原來的 5.8 倍,熱門模型性能優(yōu)化最高可至原來的 1.59 倍。
左右滑動查看

谷歌在 Chrome 穩(wěn)定版中添加了對 WebGPU 的支持,為 Web 注入了十億個 GPU 的強悍性能,使編解碼器、游戲和機器學(xué)習(xí)等計算密集型應(yīng)用能夠在瀏覽器中運行,并且能夠?qū)崿F(xiàn)前所未有的細節(jié)豐富度和幀率。

語言模型旨在預(yù)測和生成合理的語言。發(fā)展至今,現(xiàn)代大語言模型規(guī)模龐大,可以預(yù)測句子、段落甚至整個文檔的概率。典型自然語言可以處理實體提取、分類、生成摘要、情感分析、翻譯等任務(wù)。谷歌新推出的大語言模型 (LLM) 工具 PaLM API 和 MakerSuite 可以幫助開發(fā)者快速開發(fā)原型。
大語言模型 (LLM)

MakerSuite 可以幫助開發(fā)者直接在瀏覽器中快速創(chuàng)建提示并為其進行原型設(shè)計,無需機器學(xué)習(xí)專業(yè)知識或代碼。借助 MakerSuite,開發(fā)者將能夠迭代提示、使用合成數(shù)據(jù)增強數(shù)據(jù)集,并輕松調(diào)整自定義模型。

MakerSuite

PaLM API 使開發(fā)者可以輕松、安全地試驗谷歌的大型語言模型,即通過 PaLM API 直接訪問谷歌的先進大型語言模型,構(gòu)建生成式 AI 應(yīng)用。它將為開發(fā)人員提供針對多回合用例優(yōu)化的模型(例如內(nèi)容生成和聊天)以及針對摘要、分類等用例優(yōu)化的通用模型。PaLM API 可以提供文本服務(wù)、聊天服務(wù)、嵌入服務(wù)。

開發(fā)者現(xiàn)在可以使用 Firebase 擴展訪問 PaLM API,即在帶有 PaLM API 擴展程序的全新聊天機器人中添加用于連續(xù)對話、文本摘要等功能的聊天界面。

通過實例,一起來了解如何通過 AI 和機器學(xué)習(xí)構(gòu)建應(yīng)用。

用 Flutter & AI 構(gòu)建 I/O Flip
I/O Flip 是一個使用 Flutter 和 AI 構(gòu)建的虛擬紙牌游戲,它展示了多項 Google 技術(shù)的融合。具體來說,開發(fā)者用 Muse 上的 DreamBooth 生成角色圖像,用 PaLM API 生成描述,用 Flutter 創(chuàng)建游戲 UI 和動畫,用 Dart 編寫后端,并使用一套 Firebase 和 Google Cloud 工具進行托管和共享。通過 2023 Google 開發(fā)者大會現(xiàn)場的互動展示區(qū),參會者實際體驗了這款紙牌游戲,在流暢的游戲體驗中深切感受到使用 Flutter 和 AI 構(gòu)建游戲的妙不可言。
參會者現(xiàn)場體驗 I/O Flip 紙牌游戲

使用 OCR 獲取 PDF
互聯(lián)網(wǎng)上有接近 12% 的 PDF文件因為不精確的光學(xué)字符識別 (OCR),無法被有視力障礙的用戶通過輔助技術(shù)訪問到。通過在設(shè)備上運行 OCR,Chromebook 使用戶可以使用這些 PDF 文件,高效轉(zhuǎn)換,沒有延遲。
為實現(xiàn)讓 AI 助力每一個人
谷歌將堅持負責(zé)任地進行探索
持續(xù)關(guān)注 2023 Google 開發(fā)者大會
更多精彩內(nèi)容更新
專題演講視頻持續(xù)更新中
掃碼直達官網(wǎng)
探索大會更多精彩
?點擊屏末|閱讀原文|即刻訪問2023 Google 開發(fā)者大會官方網(wǎng)站



原文標(biāo)題:新知同享 | AI 開發(fā)廣泛應(yīng)用,高效構(gòu)建
文章出處:【微信公眾號:谷歌開發(fā)者】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
-
谷歌
+關(guān)注
關(guān)注
27文章
6219瀏覽量
107158
原文標(biāo)題:新知同享 | AI 開發(fā)廣泛應(yīng)用,高效構(gòu)建
文章出處:【微信號:Google_Developers,微信公眾號:谷歌開發(fā)者】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
相關(guān)推薦
評論