日本小哥如何使用深度學習和TensorFlow種黃瓜?
選文|Aileen
翻譯|馮琛 黃卓君
校對|長彪(Bill)
導讀
現在說機器學習和深度學習的應用只受限于人們的想象力并不夸張。不僅全世界的數據科學家們?yōu)橹?，甚至在日本的農場，一位小哥為了減輕媽媽的工作負擔，也開始嘗試采用深度學習和Tensor Flow種黃瓜。
大約一年前，曾為日本汽車業(yè)內一名嵌入式系統(tǒng)設計師的MakotoKoike開始在父母的黃瓜種植園幫工。根據大小形狀顏色和其他屬性來分選黃瓜這件事所需的工作量令他吃驚。
Makoto Koike那一生致力于提供鮮脆黃瓜的父親就很為他那些仍帶有細刺的扎手黃瓜感到自豪。顏色鮮艷又直又粗并且有許多刺的黃瓜被認為是高檔的，可在市場上要價更高。
但是MakotoKoike很快就了解到分選黃瓜就如把它們種出來一樣難。“每只黃瓜的顏色、形狀、質量、新鮮度都不同”，Makato說。
零售店里和Makoto Koike家農場的黃瓜
在日本，每家農場都有自己的分類方法，并且沒有行業(yè)標準。MakotoKoike家農場把黃瓜分為9個不同的等級，由他媽媽親自分選所有黃瓜，——這在收獲的峰季是最高每天8小時的工作量。
“分選工作不是一項簡單易學的任務。你不只要看它的大小粗細，還要看顏色質地，有沒有小的劃痕，是不是奇形怪狀，有沒有刺。這些需要好幾個月才能學會，所以在最忙的時節(jié)雇臨時工行不通。我自己也是最近才學得能把這些黃瓜分選好”，Makoto說到。
歪歪扭扭的黃瓜被評為次品
市面上也有(黃瓜)自動分選機，但在性能和費用方面都有局限，所以小型農場不大會用它們。
Makoto認為分選黃瓜不是瓜農的一項重要任務。“瓜農希望把注意力和功夫花在培養(yǎng)可口蔬菜上。我想在接手父母的農場生意之前把分選工作自動化。”
Makoto Koike(中間)和他的父母在自家黃瓜農場
深度學習的眾多用途
Makoto試用機器學習來分選黃瓜的創(chuàng)意最初來自一個完全不同的應用實例：谷歌阿爾法狗與世界頂尖職業(yè)圍棋手對弈。
“當我看到谷歌的阿爾法狗，我意識到這里確實在發(fā)生一些很嚴肅的事情，”Makoto說，“這觸發(fā)我開始開發(fā)帶有深度學習技術的黃瓜分選機。”
深度學習用于圖像識別，允許電腦從訓練數據集中學習到什么是圖像的重要“特征”。使用大量的人工神經元分層，深度學習可以高精度地自動分類圖像。因此神經網絡可以從圖像中識別出不同種類的貓，或是不同型號的汽車和飛機。神經網絡有時會在特定應用中超過人眼的表現。(如需更多信息，請看我過去的博客文章Understanding neuralnetworks with TensorFlow Playground.)
TensorFlow將深度學習的權力民主化
但是計算機是否真能學會媽媽的黃瓜分選技藝?Makoto開始著手使用谷歌的開源機器學習庫TensorFlow來看看自己能不能用深度學習技術來進行分選。
“谷歌剛剛開源了TensorFlow，所以我就開始把它試用于我的黃瓜圖像上，”Makoto說。“這是我第一次嘗試機器學習或是深度學習技術，馬上就得到高過預期的準確度。那給了我信心：它能解決我的問題。”
有了TensorFlow，你不需要知道施用深度神經網絡所需的高階數學模型和優(yōu)化算法。只要下載示例代碼并閱讀教程，你可以馬上就可以開始用它。TensorFlow顯著降低了機器學習的門檻，自從谷歌于去年11月開源了這個程序庫，許多“非機器學習”的工程師已經開始通過他們自有的數據和應用來擺弄這項技術。
黃瓜分選系統(tǒng)的設計
下圖是Makoto設計的黃瓜分選機的系統(tǒng)圖解。該系統(tǒng)以Raspberry Pi 3為主控制器用一架相機為每根黃瓜拍照。在最初階段，系統(tǒng)在TensorFlow上運行小規(guī)模的神經網絡來檢測這是否是黃瓜的照片。系統(tǒng)接下來將這張照片轉發(fā)至Linux服務器上的一個更大的TensorFlow神經網絡執(zhí)行更加精細的分類。
黃瓜分選機的系統(tǒng)圖解
Makoto 采用了名為DeepMNIST for Experts的TensorFlow示例代碼，經過一些對卷積層，池化層和最后一層的微調后，改變網絡設計以適應黃瓜圖像的像素格式和黃瓜分選的等級數。
下圖是Makoto的黃瓜分選機，已于七月投入使用。
下圖是分選臂以及相機接口的特寫鏡頭。
挑戰(zhàn)深度學習的極限
深度學習目前面臨的挑戰(zhàn)之一是它需要大量的訓練數據。為了訓練模型，Makoto花了大約三個月時間，拍攝了7000張他母親所分選的黃瓜的照片，但這恐怕還是不夠。
“當我用測試圖像進行驗證時，識別準確度超過95%。但如果在實際操作中運用這個系統(tǒng)，準確度就會下降到70%左右。我懷疑神經網絡模型由于訓練圖像的數量不夠，存在“過度擬合”的問題(神經網絡中的現象：模型被訓練得只適于少量的訓練數據)。”
深度學習的第二個挑戰(zhàn)是它消耗大量的運算容量?，F在這架分選機用一臺普通的Windows臺式電腦來訓練神經網絡模型。盡管它將黃瓜的照片轉成80*80像素的低分辨率圖像，但對基于7000張照片的模型，它仍需2-3天時間來完成訓練。
“即使處理這樣低像素的圖像，這個系統(tǒng)也只能根據黃瓜的形狀、長度和彎度來將其分類。它不能識別色澤、紋理、劃痕和刺”，Makoto解釋道。提高像素來放大黃瓜的圖像可以提高準確度，但訓練所需時間也將大大增加。
為了改進深度學習，一些大公司已經開始進行大規(guī)模分布式訓練，但那些服務器往往需要巨額成本。谷歌推出了云機器學習(CloudML)這個用于訓練和預測的低成本云平臺，它可以投入數以百計的云服務器來使用TensorFlow訓練神經網絡。在Could ML平臺上，谷歌會來搭建用于分布式訓練的大規(guī)模集群，而你只需購買你要用到的，這讓開發(fā)者們可以更容易地試用深度學習而無需大量資本投資。
這些專用服務器曾被用于阿爾法狗的比賽
Makoto對CloudML充滿期待。“我可以在Cloud ML上使用更高分辨率的圖像和更多的訓練數據來訓練模型。我還可以試著改變神經網絡的各種設置、參數和算法來看看這些如何提高準確度。我已經迫不及待地想試用了。”
來源：https://cloud.google.com/blog/big-data/2016/08/how-a-japanese-cucumber-farmer-is-using-deep-learning-and-tensorflow
【本文是51CTO專欄機構大數據文摘的原創(chuàng)譯文，微信公眾號“大數據文摘（ id: BigDataDigest）”】
