打造智慧數據湖，Google Cloud 今天推出三項新服務讓資料在雲更聰明
2021/05/27 INSIDE 硬塞的網路趨勢觀察
Google Cloud 在今天舉辦的 Google Data Cloud Summit 上，發布三項全新解決方案：Dataplex、Datastream 和 Analytics Hub Beta 版，將涵蓋旗下的資料庫和資料分析產品組合，為企業提供一個整合式資料平台，協助企業打破資料孤島。
評論
Google Cloud 在今天舉辦的 Google Data Cloud Summit 上，發布三項全新解決方案：Dataplex、Datastream 和 Analytics Hub Beta 版，將涵蓋旗下的資料庫和資料分析產品組合，為企業提供一個整合式資料平台，協助企業打破資料孤島，安全地預測業務成果並賦予使用者能力，在現今不斷變化的數位環境中即時制定明智的決策。
「Gartner 近期的問卷調查結果顯示，企業預估每年在品質不甚理想的資料上平均花費 $1,280 萬美元。」 因為資料散布在多個雲端和地端部署環境中的資料庫、資料湖泊、資料倉儲和資料市集內，企業除了要設法集中控管及管理應用程式，更需要即時整合資料來改善決策，加快創新腳步及提升客戶體驗。
Google Cloud 資料庫、資料分析及 Looker 商業智慧平台總經理暨副總裁 Gerrit Kazmaier 說明，企業須把資料視為具備將所有相關業務面向整合為一的能力。如今所有產業紛紛轉換為以數位化為主的業務型態，因為他們明白資料不但是創造價值的要素，同時也是推動數位轉型的關鍵。
透過運用 Google Cloud 的資料平台，客戶現在將能採用全方位且涵蓋完整資料生命週期的資料雲端方案，從業務執行系統到可進行未來預測和自動化作業的 AI 與機器學習工具等均包含在內。
Datastream-為客戶提供即時資料複製功能：目前提供 Beta 版體驗的 Datastream 提供全新的無伺服器異動資料擷取 (CDC) 和複製服務，讓客戶可以從 Oracle 和 MySQL 資料庫將資料串流即時擷取至 Google Cloud 服務，例如 BigQuery、可於 PostgreSQL 上執行的 Cloud SQL、Google Cloud Storage 和 Cloud Spanner。
企業可運用這項解決方案強化即時性數據分析功能、資料庫的複製速度以及事件驅動架構等。率先採用此方案的客戶 Schnuck Markets, Inc.運用 Datastream 簡化了架構，而將 Oracle 資料複製到 BigQuery 和 Cloud SQL 也不再會延遲數小時之久。
Analytics Hub-提高資料共用安全與易用性：Analytics Hub 可為企業創造安全且即時的資料交換服務，借助 Analytics Hub，企業可以在不論組織的內外部，安全地共享數據和洞察，包括動態儀表板和機器學習模型。
Analytics Hub 協助企業整合其數據資產，如將 Google 獨有數據、產業數據和公開數據整合一起。Analytics Hub 建立於 BigQuery 現行且普及的共享功能基礎上，目前已經使數千家企業透過數據分析進行革新，並透過不僅是單純共享數據的方法，來加快洞察的取得。
Dataplex-協助企業簡化資料管理作業：目前提供 Beta 版體驗的 Dataplex 是一種智慧資料網路架構，可提供單一整合式的分析體驗，能將 Google Cloud 和開放原始碼結合在一起，使企業能夠快速整理、保護、整合及分析其數據。
自動化的資料品質可讓數據資料學家和分析師利用自選工具確保資料的一致性，不須移動或複製資料即可統整並管理資料。Google 提供傑出的 AI 和機器學習功能，讓企業能夠利用內建的智慧資料來縮短處理繁複基礎架構的時間，並將更多心力轉而投入於發掘資料價值，以帶來更多業務成果。身為 Dataplex 早期客戶，Equifax 與 Google 合作致力將 Dataplex 納入自己的核心分析平台，不但簡化了工作負載，還建立了所有內部分析資料都適用的單一指令控管及管理平台。
在資料雲端高峰會舉辦期間，Google Cloud 也發表了資料庫和數據分析產品組合方面的其他最新消息：
基於對多雲端的策略性承諾，Google 陸續推出分別適用於 Microsoft Azure 的 BigQuery Omni Beta 版和 Looker 商業智慧平台正式版，藉此協助客戶取得跨雲端環境的關鍵資料深入分析結果。繼去年發表適用於 AWS 的 BigQuery Omni 後，這次發表的最新消息更延續了市場對此技術的展望。
BigQuery ML 異常偵測 可協助客戶透過使用 BigQuery 的內建機器學習功能，以更輕鬆的方式檢測異常資料模式。目前許多客戶將這項技術運用於多種用途，包括銀行詐欺偵測和生產製造不良原因分析。
Dataflow 為客戶提供了具備成本效益的快速串流分析解決方案。而預計於第三季推出的 Dataflow Prime 將提供業界領先的自動垂直擴充和數據管道正確配置技術，為客戶最大幅度地降低整體擁有成本。此外，Dataflow Prime 更內建了 AI 和機器學習技術，可以為客戶提供串流預測功能，例如時間序列分析、可主動識別瓶頸的智慧診斷功能，以及可提高使用率的自動微調功能。
Google 也將全代管關聯資料庫 Cloud Spanner 的入門價格降低 90%，連同即將推出的精細個體規模調整功能 (granular instance sizing) ，將同樣提供無限制的空間規模與99.999％的可用性，用以支援要求最苛刻的應用程式運作。BigQuery 與 Spanner 的整合功能也即將推出，可讓使用者透過 BigQuery 查詢 Spanner 中的交易資料，以便提供更豐富且即時的深入分析結果。而 Spanner 新增的 Key Visualizer 功能(目前為 Beta 版本)，可提供互動式監控功能，方便開發人員迅速識別使用模式。此外，Cloud Bigtable 更具備可達 99.999%(5 9s) SLA 的讀取和寫入可用性。
資料來源：https://www.inside.com.tw/article/23648-google-data-cloud-summit
mysql指令集 在 Re: [請益] 無法寫入mysql資料庫- 看板PHP - 批踢踢實業坊 的推薦與評價
※ 引述《dummytrue (就只是大叔而已)》之銘言：
: 超新手發問：
: 確認可以連結資料庫了
: 從phpmyadmin新增資料也可以順利顯示
: 可是從php就怎麼也寫不進去
: <FORM Action=addnew.php Method=POST>
: <TABLE Border="1" bgcolor="#FFCC66" bordercolor="#FF9933" cellspacing="0">
: <TR><TD><font size="2">姓名：</font></TD>
: <TD><font size="2"><INPUT Type="text" Size="30" Name="姓名"></font></TD></TR>
: <TR><TD><font size="2">e-mail：</font></TD>
: <TD><font size="2"><INPUT Type="text" Size="30" Name="e-mail">
: </font></TD></TR>
: <TR><TD><font size="2">主題：</font></TD>
: <TD><font size="2"><INPUT Type="text" Size="60" Name="主題">
: </font></TD></TR>
: <TR><TD><font size="2">內容：</font></TD>
: <TD><font size="2"><TEXTAREA Name="內容" Rows="8" Cols="60">
: </TEXTAREA></font></TD></TR>
: </TABLE><INPUT Type="submit" Value="送出討論主題">
: </FORM>
: 然後由這邊接：
: Function chgStr($data)
: {
: $chgStr = "'" . str_replace("'", "''", $data) . "'";
: return $chgStr;
: }
: //將資料寫入資料庫
: $sql = "Insert Into maintitle (姓名, Email, 主題, 內容, 篇數, 發言日期)
: Values (";
: $sql = $sql . chgStr($_REQUEST["姓名"]) . ",";
: $sql = $sql . chgStr($_REQUEST["e-mail"]) . ",";
: $sql = $sql . chgStr($_REQUEST["主題"]) . ",";
: $sql = $sql . chgStr(nl2br($_REQUEST["內容"])) . ",";
: $sql = $sql . 0 . ",'";
: date_default_timezone_set('Asia/Taipei');
: $sql = $sql . date("Y-m-j H:i:s") . "')";
: mysql_query($sql);
: header("Location: index.php");
: 沒有全部貼出來 應該是這兩段有問題吧?
幾個地方要注意，有的比較重要，有的是coding style
1.所有的函式指令集一律使用小寫。不要有大小寫混用的情形：
例：
正確：echo、function
錯誤的style：Echo、ECHO、Function
雖然使用錯誤的style並不一定會有錯誤，但對看的人而言要不是覺得奇怪。
要不就是有格格不入的感覺。
2.資料庫指令集有很多php的書都是教用大寫。
這當然也是coding style的問題，但是對sql指令集來說我的習慣是要就全部大寫，要
就全部小寫，不要大小寫混在一起使用，就算他不會出錯也不好。
(其實我看到比較多的習慣是SQL指令集全大寫，欄位、資料才是用小寫)
3.$_REQUEST最好不要使用。
這東西是POST和GET都吃，那如果你表單也下name你設定post送出。
然後你的網址又帶name=xxx
雖然這樣取資料會是以表單的post為主。
那如果你的網址帶的參數是有意義的話參數就被消滅了。
該是post就用$_POST該是get就用$_GET
4.資料庫的欄位……正確的說除了資料本身資料庫的設定都不要用中文。
這個問題基本關乎中文編碼。就算你全部統一使用UTF-8做為你的編碼。
有關於資料庫的結構和指令集都不應該讓他出現中文。
這我該說做為一個程式設計師就算英文跟我一樣爛也實在不應該以中文做為程式碼
或是規劃資料庫的一部份。
不過話說回來，這種錯誤大概很多初學新手都會犯到使用中文。
當年我剛開始學MYSQL時，也幹過同樣的事。
後來就是自食惡果。
5.時區設定請寫在SERVER的PHP.INI設定中。如果是使用付費空間就請對方改。
基本上時區應該是全網頁一體適用。
如果說這是不能改的，那你最好祈禱你每次都記得設定時區，否則在做交易時可能
會因為時間上的錯誤導致交易異常。
也許現在的很多framework都有內置config來設定時區。
前提是你有在用。
儘可能將必要的設定做在server的設定檔中，而不是用程式中途去改。
除非是特別狀況(例如臨時上傳大檔案要臨時加大記憶體使用的空間)
6.無論如何，去了解一下關於php「魔術引號」這件事情。
7.date()格式，通常是Y-m-d或是Y-n-j，Y-m-j會變成下面這種情形：
2014年9月4日
Y-m-d => 2014-09-04
Y-n-j => 2014-9-4
y-m-j => 2014-09-4
你應該會覺得月份和日期感覺格格不入吧。
當然這是個人感覺style的問題。
其實大部份應該都算是設計風格上的問題。
畢竟你的程式是能正常運作的。
不過去改善這些事情對修改及維護會很有幫助。
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 112.105.140.51
※ 文章網址: https://www.ptt.cc/bbs/PHP/M.1411577487.A.2C7.html
... <看更多>