商业智慧（BI）.ppt

商業智慧 (BI) 謝邦昌 教授 輔仁大學統計資訊系教授 中華資料採礦協會 秘書長 STAT1001@MAILS.FJU.EDU.TW WWW.CDMS.ORG.TW 2004/09/30 你不能不知的十大創新技術 未來科技大預言 Technology Review雜誌（麻省理工學院2002年1月出刊） 公佈改變未來的十項新興趨勢 機器與人腦的介面 塑膠電晶體 資料採礦(Data mining) 數字權利管理 生物測定學(Biometrics) 語言識別處理 微光學技術(Microphotonics) 解開程式碼(Untangling code) 機器人設計 微應用流體學(Microfluidics) 商業智慧 讓資料為您開啟智識大門 議題: KDD過程 資料處理 資料採礦的過程 資料採礦方法概述 結語 KDD過程---1.DATA KDD過程---2.SELECTION KDD過程---3.PROCESSING KDD過程---4.TRANSFORMATION KDD過程---5.MATCHINE LEARNING KDD過程---6. EVALUATION 使用方法論的同時必須注意事項 (1)演算法之基本假設（Hypothesis） (2)每個方法論中所隱藏的偏差（Bias） (3)資料變數之間的關連性（Dependency/ Independency） (4)資料分佈狀況（Distribution） (5)資料型態及其所代表的含意。 資料採礦流程 資料採礦方法概述 1.Classification 2.Prediction 3.Segmentation 4.Association 5.Sequence Data Mining的要件 task T、experience E、performance P 協同式智慧型系統（CIS, Collaborative Intelligent System） CIS的架構圖 由CIS架構圖可以很清楚看到企業面臨困境： 1.後端資料倉儲（Data Warehouse）的建立 2.前端CRM系統的孤立無援 3.建立前端與後端的橋樑 It’s Hot !!! Data mining didnt exist as a field until he helped pioneer it.--Usama M. Fayyad It is New 資源與資訊共享Information Delivery Data mining （DM）是一個當紅的專題， 也是蠻新的一個專題 多半的人，並不知道它能做甚麼。 但是不能太晚上車。 (中研院 趙民德) Business Understanding (Domain) 找問題－確定商業目標 對現有資源的評估 確定問題是否能夠通過資料採礦來解決 確定資料採礦的目標 制定資料採礦計畫 Data Mining的應用 實際應用 醫藥方面 Pain Control Problem： Detecting pain Subjective no direct measurement Clinical：Visual Analogue Scale（VAS） Where will cause the pain？ Endoscope Operating room：ESWL；Prostate Post Op. ：PCA ICU Cancer pain P φ A System PCA data mining management 化學方面 近年來，隨著化學資料的大量累積和資料庫的普遍使用，逐步認識到大量資料的利用是十分困難且不充分的，更具價值的規律性的資訊和知識反而被隱蔽起來。因此，化學資料採礦作為一種新的資訊技術開始出現於電腦化學中。 這一技術的關鍵是用軟體來從大量的化學資料中自動地發現新的不明顯和有潛在應用價值的資訊和知識，因此它也常常與資料分析和知識發現(Knowledge discovery)相緊密結合。 化學資料採礦主要內容 Data cleaning Data reduction Feature detection Feature reduction Classifier and category detection Fraud detection Recognizing unusual patterns Novelty detection Construction of sample databases Knowledge discovery and rule detection from large databases 生物醫學方面 背景 隨著人類基