天天看點

Povey正式出任小米語音首席科學家,小米移動端架構MACE全面支援Kaldi

今日,小米開發者大會 MIDC 2019 在北京開幕。語音識别大牛、前霍普金斯大學副教授 Daniel Povey 也正式宣布出任小米集團語音首席科學家,而近日更新的小米移動端深度學習架構 MACE 也已支援 Kaldi。

今年 10 月份,國際語音識别領域著名學者,前約翰霍普金斯大學教授、 語音識别開源工具 Kaldi 之父 Daniel Povey 在 Twitter 上表示,他将加入小米,來北京工作。

時間過得很快,這位知名學者在小米的全新職業生涯已經提前開始。

亮相小米開發者大會

在小米第三屆開發者大會 MIDC 2019 開幕前一天,小米創始人兼 CEO 雷軍即在微網誌上宣布,Daniel Povey 将出任小米集團語音首席科學家,直接彙報給集團副總裁、技術委員會主席崔寶秋。此外,他也将首次露相開發者大會,分享「AI 語音領域的未來技術趨勢」。

Povey正式出任小米語音首席科學家,小米移動端架構MACE全面支援Kaldi

有關

這位 AI 大牛的經曆

,在這裡就不必詳述了,他加盟中國公司也獲得了語音識别社群的極大關注。

在正在進行的小米開發者大會上,Daniel 來到了現場。小米集團副總裁、小米技術委員會主席崔寶秋在演講中表示,Daniel Povey 上周剛到北京,他将很快在北京組建獨立研發團隊。

Povey正式出任小米語音首席科學家,小米移動端架構MACE全面支援Kaldi

崔寶秋表示,「Daniel Povey 是一個單純的技術人員,非常符合小米的價值觀——他要求自己在小米期間的工作必須保證 100% 開源。在未來,小米将繼續加大在 Kaldi 上的投入,幫助打造一個國際化的開源社群,希望小米可以引領開源的語音識别技術。」

毫無疑問,Daniel Povey 是一個人工智能的重量級學者,人們對于小米招攬這樣一位大牛花費了多少資源非常感興趣。「其實大家有點想歪了,Povey 在前來小米參觀的時候,主動和我們講他不需要很高的年薪,」崔寶秋介紹道。「小米帶給他的優厚條件,可以說是強大的手機+IoT 生态,重視語音技術研發的背景,以及小米深厚的開源文化。」

據說,Povey 來 10 月份前來小米時,在介紹完自己的工作之後就迫不及待地去到小米工位上,想要了解公司的工作環境和工程師們的工作氛圍。

小米認為,手機是今天 AI 的最大應用平台,而從 IoT 到 AIoT 的發展将是一個質變。從過去的互聯互通到未來的整體互聯服務中,語音互動非常重要。小米将在 Povey 等人的帶領下,在語音+視覺多模态互動等方向加速進行技術研發。

「KALDI 之父 Daniel Povey 能夠來到小米是非常幸運的一件事,小米希望能夠占據技術的制高點。當然,小米也會以全面開源的姿态參與技術的發展。」崔寶秋說道。

短短一個月,MACE 支援 Kaldi

Povey正式出任小米語音首席科學家,小米移動端架構MACE全面支援Kaldi

小米去年 6 月就開源了移動端深度學習架構 MACE。在兩天前,MACE 架構釋出最新的更新,在此次更新中可以看到,架構已支援了知名開源語音識别系統 Kaldi。

MACE 開源位址:

https://github.com/XiaoMi/mace/releases
Povey正式出任小米語音首席科學家,小米移動端架構MACE全面支援Kaldi

Kaldi 是一個開源的語音識别系統,由 Daniel Povey 主導開發,在很多語音識别測試和應用中廣泛使用。

MACE 作為小米提前布局的開源産品,是一個可在移動端使用的異構計算平台神經網絡架構。通過這一架構,小米可在移動端布局各類深度學習應用和算法,包括計算機視覺、語音識别等。據小米不完全統計,MACE 每天被調用 5000 萬次。

Povey正式出任小米語音首席科學家,小米移動端架構MACE全面支援Kaldi

在 MACE 的提供的模型中已出現了 Kaldi。

從 Kaldi 模型内可以看到,Kaldi 的 nnet2 和 nnet3 模型已被轉換為了 ONNX 檔案。ONNX 檔案是一種通用的 AI 模型檔案,支援在多個深度學習開發架構中使用。

據相關頁面資訊顯示,MACE 已經支援大部分 Kaldi 系統内元件,以及 ONNX 形式的的 Kaldi 模型。此外,項目還提供了 Kaldi-onnx 轉換工具。

具體轉換後的模型清單如下:

Povey正式出任小米語音首席科學家,小米移動端架構MACE全面支援Kaldi

本次加入對 Kaldi 的支援,無疑将進一步加強小米 MACE 在語音識别方面的優勢。小米表示,他們會尊重 Povey 的想法和價值觀,繼續推進深度學習相關的開源工作。

此外,小米還準備在未來一兩個月開源 MACE-Kit 和超低功耗計算裝置。

繼續閱讀