Skip to main content

Command Palette

Search for a command to run...

Azure Data Service - Day 01 - Intro

Updated
1 min read
Azure Data Service - Day 01 - Intro

[IT 鐵人賽] Azure Data Service - Day 01 - Intro

Azure Data Service - Day 01 - Introduction

現在 AI 當道,但是在 AI 的背後其實還是由 Big Data 所組成的,俗話說的好:「沒有 Data 就沒有 AI」。

當然在這現代分工非常明確與細緻的時代,我們沒有必要全部都自己來,往大了說可以專精 Data,AI 的部分就交給別人來做,反之亦然。甚至你都不需要懂,也是有直接現成好的服務提供使用。


Microsoft Azure 身為一個正統雲端服務提供商,當然也提供了許多相關類型的服務,我在這邊統一稱為 Azure Data Service。

從最基本的數據儲存開始,例如:

  • Azure SQL Database
  • Azure SQL Database for MySQL
  • Azure SQL Database for MariaDB
  • 等等

到儲存極大數據與不同類型資料的服務:

  • Azure Cosmos DB
  • Azure Data Lake
  • 等等

有了數據以後就可以開始使用這些數據進行機器學習的訓練,Azure 所提供的相關服務有:

  • Azure Machine Learning Studio
  • HDInsight
  • Azure Databricks
  • 等等

Azure Machine Learning Studio 跟 HDInsight 看起來已經有大大的主題是這一塊了,所以我到時候應該不會著墨太多。

另外還有剛剛提到的已經建立好的服務直接提拱給你使用:Cognitive Service,他提供了許多面向類型:

  • 辨識 可聰明地識別、標示及 控管圖片的影像處理演算法。
  • 語音 將語音轉換成文字、使用語音來驗證,或將說話者 辨識新增至您的應用程式。
  • 知識 對應複雜資訊和資料,以解決 智慧建議和語意搜尋等工作。
  • 搜尋 將 Bing 搜尋 API 新增至您的應用程式,並充分利用 以單一 API 呼叫合併數十億個網頁、影像、影片和新聞的能力。
  • 語言 讓您的應用程式能夠透過預先建置的指令碼處理自然語言、 評估情感,以及了解如何辨識使用者想要的項目。

我會首先詳細介紹與使用 Cognitive Service,再來的話回到 Data 相關,最後就是關於機器學習的部分;如果還有多的時間的話,還可以介紹一下擁有 GPU 的虛擬機器類型。

在這 30 天內,透過撰寫不同服務類型的文章,期許我自己可以從一個 Data、AI 雙白,轉變成小白。

More from this blog

Career-Ops 安裝與設定 — 用 AI 來幫你篩職缺、客製履歷

最近在看新的工作機會,光是瀏覽職缺、比對 JD、調整履歷就花了不少時間。 後來找到 Career-Ops 這個開源專案 作者 santifer 用這套系統篩了 740 多個職缺、產出 100 多份客製化履歷,最後拿到 Head of Applied AI 的 offer。 看起來蠻有意思的,所以我就在 Windows 上實際裝了一輪,這篇就來把整個安裝和設定的過程記錄下來。 我這邊搭配的 AI 後

Apr 12, 20265 min read
Career-Ops 安裝與設定 — 用 AI 來幫你篩職缺、客製履歷

讓 LLM 自動化你的 N8N 工作流程:n8n-mcp-server 安裝指南

前言 網路上一大堆都是在介紹如何在 N8N 裡面用 MCP 來呼叫其他工具,但是更多時候我希望 LLM 能直接幫我寫好或是修改 N8N 的工作流程 所以這篇就來介紹如何設定與使用 n8n-mcp-server 來讓 LLM 幫忙操控 N8N 在 GitHub 上有不少的 n8n-mcp-server,經過一下下的簡單搜索,我決定使用這個專案: n8n-mcp-server 原因在於說這個專案的實作提供了基本上所有需要編輯工作流程的功能,以下就來記錄安裝過程 MCP Server 設定 首先當然...

May 28, 20253 min read

[IT 鐵人賽] ASP.NET Core 與 Log 紀錄和追蹤的愛恨交織 - Day 05 - Elmah - 02

.NET Core Logging- Elmah 02 上一篇我們提到了基本的使用方式,接下來的這一篇我們就來講講要怎麼把 Log 放到不同的儲存體上,以及如何過濾 Log Log 儲存方式 我們先來看這些 Log 倒底存在哪裡,目前共有三種儲存方式,如下: MemoryErrorLog — store errors in memory 預設為使用此方式,簡單來說就是將錯誤 Log 都存在記憶體裡,所以只要應用程式一重新啟動,Log 就沒了;但是也是最方便的方式,只是要注意如果 Log 太...

Oct 20, 20182 min read
[IT 鐵人賽] ASP.NET Core 與 Log 紀錄和追蹤的愛恨交織 - Day 05 - Elmah - 02

[IT 鐵人賽] ASP.NET Core 與 Log 紀錄和追蹤的愛恨交織 - Day 04 - Elmah - 01

.NET Core Logging- Elmah 01 Elmah 是我最一開始使用的 Log 工具,基本上它的功能就是將應用程式所有發生的錯誤記錄下來,不需要改變程式架構,而且又有介面可以觀看,十分的方便;它從 WebForm 時代就有了,到了 MVC 也是運作的很好,那這邊就來介紹一下 Elmah 要如何在 ASP.NET Core 中使用 (.NET Core 也可使用)。 不過很可惜的,目前並沒有釋出官方的 Elmah for .NET Core,不過有一個新專案: ElmahCore...

Oct 19, 20181 min read
[IT 鐵人賽] ASP.NET Core 與 Log 紀錄和追蹤的愛恨交織 - Day 04 - Elmah - 01

[IT 鐵人賽] Azure Data Service - Day 04 - Cognitive Service - 辨識 - Video Indexer

Azure Data Service - Day 04 - Cognitive Service - Vision - Video Indexer 前面幾篇都是介紹靜態影像的辨識與分析,那這篇就來到針對影片來做處理。 Cognitive Service 針對影片辨識的部分提供了:Video Indexer 它整合了許多功能,在這邊列出一些比較重要的功能: 語系偵測 可以自動偵測出這個影片是屬於哪個語系,目前支援: English, Spanish, French, German, Italia...

Oct 19, 20181 min read
[IT 鐵人賽] Azure Data Service - Day 04 - Cognitive Service - 辨識 - Video Indexer

BrainBurst, HeadFirst

45 posts

學習學到老,撞牆撞到腦. A lifelong quest—with forehead dents.