Google colaboratory使用筆記

標簽： paper

Google colaboratory使用筆記

介紹

Google colaboratory是google提供的一個免費的云服務器，Colaboratory 是一個 Google 研究項目，旨在幫助傳播機器學習培訓和研究成果。它是一個 Jupyter notebook環境，不需要進行任何設置就可以使用，并且完全在云端運行。

使用步驟

1.google colaboratory 配置

科學上網注冊自己的google賬戶，進入google云盤，在其中創建一個文件夾，例如colabNotebooks。
在這里插入圖片描述dasdas

右鍵單擊創建的文件夾內右窗格中的其他位置，選擇More>Colaboratory。彈出另一個窗口，您可以將筆記本命名為test.ipynb
在這里插入圖片dsadasd描述
在筆記本中，選擇Runtime > Change runtime type。將彈出一個窗口。然后選擇運行時間類型，從硬件加速器下拉菜單中選擇GPU并保存設置（還有TPU的選擇）
在這里插入圖片描述
設置好gpu之后我們創建第一個code，點擊左側按鈕運行單元格。

在這里插入圖片描述
安裝調用Google drive API，運行下面代碼，點擊結果中鏈接，獲取授權碼，并填入完成Google drive的的授權。

!pip install -U -q PyDrive

from pydrive.auth import GoogleAuth
from pydrive.drive import GoogleDrive
from google.colab import auth
from oauth2client.client import GoogleCredentials

auth.authenticate_user()
gauth = GoogleAuth()
gauth.credentials = GoogleCredentials.get_application_default()
drive = GoogleDrive(gauth)

在這里插入圖片描述
掛載后可以通過linux命令訪問google云盤，如果在訓練時候覺得速度慢，可以將drive東西放入虛擬服務器中，避免io交互時間。后面我將在google colaboratory訓練模型并保存到云盤。

注意事項

Google Colab是一個notebook環境，可看成是一臺帶有GPU的Ubuntu虛擬機，只不過我們只能用命令行的方式操作它。你可以選擇執行系統命令，亦或是直接編寫運行python代碼。
每次訪問Google Colab，會重新分配一個虛擬機，以前的代碼和數據會丟失。如果要保存數據和代碼，可以將其保存到Google Drive（谷歌云端硬盤)。
掛載完Google Drive，會在虛擬機里生成一個drive文件夾，直接將Google Drive當成是一塊硬盤即可。訪問drive文件夾里的文件，就是在訪問你的Google Drive里的文件。在Colab的代碼cell中輸入以下代碼，會返回一個鏈接，點擊鏈接登陸谷歌賬戶后，會有一個授權碼，復制授權碼，輸入至表單后，就可在該虛擬機中訪問谷歌云端硬盤。
.Colab最多連續使用12小時，超過時間系統會強制掐斷正在運行的程序并收回占用的虛擬機。（好像再次連接到虛擬機后，虛擬機是被清空的狀態，需要重新配置和安裝庫等等）
colab免費版本目前分配的顯卡為tesla T4。
colab與linux環境指令類似，僅需要在指令前添加“！”即可。
導入數據的三種方式：
直接上傳文件
上傳Google Drive并掛載導入
從github倉庫下載導入
缺點是網絡不穩定，每隔一段時間要點進來連接，一旦長時間不重新連接就會停止運行。
內存不夠大，大數據會出問題。

本文鏈接：https://blog.csdn.net/liupeng19970119/article/details/104327112

智能推薦

【工具使用】Google免費云環境Colaboratory使用

Colaboratory是Google的一個免費的深度學習云端環境，提供免費的GPU和TPU。 colab的地址：https://colab.research.google.com 1 前提條件科學上網谷歌賬號：用于登錄谷歌云盤 https://drive.google.com/drive/my-drive 2 使用以及運行深度學習項目將項目文件或者文件夾上傳至谷歌云盤在上傳的文件夾中空白...

Google Colab（Colaboratory）免費 GPU使用指南

Google Colab 免費 GPU使用指南 Google Colab 的全名是：Colaboratory，用免費的Gpu跑深度學習機器學習代碼。 1. 注冊Google賬號打開Google后，在首頁右上角可以注冊Google賬號。 2. Google Drive登陸在Google Chrome中輸入網址：https://drive.google.com/drive/my-drive , 打...

google免費云端環境colaboratory

從朋友圈中無意間發現了colaboratory，據說可以免費的使用Tesla k80 GPU加速，笨妞還從沒用過geforce以上的GPU，忍不住想試試。參考了網友發出來的“量子位”的文章， https://mp.weixin.qq.com/s?__biz=MzIzNjc1NzUzMw==&mid=2247493706&idx=1&...

在Google Colaboratory測試imageAI

1. 打開Colaboratory 2. 點擊左上角的【文件】【新建文件夾】 3. 點擊【代碼執行程序】【更改運行時類型】，修改為為GPU 4. !wget https://github.com/OlafenwaMoses/ImageAI/releases/download/1.0/yolo.h5 5. !wget https://github.com/OlafenwaMoses/ImageAI/...

HTML中常用操作關于：頁面跳轉，空格

1.頁面跳轉 2.空格的代替符...