商业智慧的工具－资料采矿-辅仁大学管理学院.PDF

輔仁管理評論 (專刊) 中華民國91 年9 月，第九卷第三期，11-34 商業智慧的工具－資料採礦 鄭宇庭* ‧蘇志雄** *政治大學統計學系 **致理技術學院會計系 (收稿日期：91 年3 月14 日；第一次修正：91 年5 月8 日； 接受刊登日期：91 年7 月3 日) 摘要 本文介紹資料採礦 (Data Mining) 及資料倉儲的意義、比較資料採礦和統計分析，並進一 步說明資料倉儲、KDD 與資料採礦的關係。同時也說明資料採礦的功能、應用、進行步驟、工 具。最後並對資料倉儲與資料採礦在顧客關係管理上的運用作一說明。 關鍵詞彙：資料採礦，資料倉儲，商業智慧，顧客關係管理 壹‧前言 資料採礦的工作 (Data Mining) 是近年來資料庫應用領域中，相當熱門的 議題。它是個神奇又時髦的技術，但卻也不是什麼新東西，因為Data Mining 使用的分析方法，如預測模型 ( 迴歸、時間數列) 、資料庫分割 (Database Segmentation) 、連接分析 (Link Analysis) 、偏差偵測 (Deviation Detection) 等； 美國政府從第二次世界大戰前，就在人口普查以及軍事方面使用這些技術，但 是資訊科技的進展超乎想像，新工具的出現，例如關連式資料庫、物件導向資 料庫、柔性計算理論 (包括Neural network 、Fuzzy theory 、Genetic Algorithms 、 Rough Set 等) 、人工智慧的應用 (如知識工程、專家系統) ，以及網路通訊技術 的發展，使從資料堆中挖掘寶藏，常常能超越歸納範圍的關係；使Data Mining 成為企業智慧的一部份。 Data Mining 是一個浮現中的新領域。在範圍和定義上、推理和期望上有 一些不同。挖掘的資訊和知識從巨大的資料庫而來，它被許多研究者在資料庫 系統和機器學習當作關鍵研究議題，而且也被企業體當作主要利基的重要所 在。有許多不同領域的專家，對Data Mining 展現出極大興趣，例如在資訊服 務業中，浮現一些應用，如在Internet 之資料倉儲和線上服務，並且增加企業 的許多生機。 12 輔仁管理評論，第九卷第三期，民國91 年9 月 我們對於這種Data Mining 的產品應該有一個正確的認知，就是它不是一 個無所不能的魔法。它不是在那邊監視你的資料的狀況，然後告訴你說你的資 料庫裡發生了某種特別的現象。也不是說有了Data Mining 的工具，就連不瞭 解業務、不瞭解資料所代表的意義、或是不瞭解統計原理的人也可以做 Data Mining 。Data Mining 所挖掘出來的資訊，也不是你可以不經確認，就可以照 單全收應用到業務上的。事實上，Data Mining 工具是用來幫助業務分析策畫 人員從資料中發掘出各種假設 (Hypothesis) ，但是它並不幫你查證 (Verify) 這 些假設，也不幫你判斷這些假設對你的價值。 貳‧何謂資料採礦？ 資料採礦 (Data Mining) 是指找尋隱藏在資料中的訊息，如趨勢 (Trend) 、特徵 (Pattern) 及相關性 (Relationship) 的過程，也就是從資料中發 掘資訊或知識 (有人稱為Knowledge Discovery in Databases, KDD) ，也有人 稱為「資料考古學」(Data Archaeology) 、「資料樣型分析」(Data Pattern Analysis) 或「功能相依分析」(Functional Dependency Analysis) ，目前已被許多研究人 員視為結合資料庫系統與機器學習技術的重要