商業大數據應用基礎（AI+微課版）

周敏，武漢軟件工程職業學院商學院副院長，成功申報並完成省教育廳三年行動計劃項目《校企共建連鎖經營管理專業現代學徒制特色學院》建設任務，先後完成湖北省特色專業建設、教育部第三批現代學徒制試點項目、“一專一項”項目等省級及以上重點建設任務，參與完成兩項國家級優質校項目建設；此外，主持的多項教學改革項目獲全國商科教育教學成果一等獎、學校教學成果一等獎及三等獎，撰寫的校企合作案例獲中國連鎖經營協會優秀案例三等獎、湖北省首屆職業教育校企合作優秀案例一等獎，為職業教育產教融合提供了實踐範本。

項目一 商業大數據分析 認知.......................................1 任務一 初識大數據.................................... 2 一、大數據概述 ......................................2 二、大數據分析概述 ...............................4 三、商業大數據概述 ...............................7 任務二 數據分析崗位認知........................11 一、數據分析崗位的發展前景與趨勢 特征...............................................11 二、數據分析崗位職責..........................14 三、數據分析崗位技能要求 ..................16 實戰任務一 商業大數據認知筆記撰寫..... 18 實戰任務二 AI 輔助數據整理................... 19 實戰任務三 AI 輔助制作“商業大數據 分析價值”海報 ................... 21 【知識鞏固】............................................... 23 項目二 商業數據的采集.....24 任務一 明確數據采集概念、商業數據 類型與來源.................................. 25 一、數據采集的概念 .............................25 二、常見的商業數據類型與來源 ...........26 任務二 規劃數據采集流程....................... 27 一、數據采集的流程 .............................27 二、常見的數據采集方法......................28 三、常用的數據采集工具......................29 任務三 商業數據采集原則....................... 31 任務四 數據采集的法律與道德要求......... 32 一、數據采集的法律要求 ..................... 32 二、數據采集的道德要求 ..................... 33 實戰任務一 使用八爪魚采集器采集 數據...................................... 33 實戰任務二 使用 Python 抓取國家統計局 網站中的單頁數據................ 37 實戰任務三 使用 Python 抓取新浪財經 網站中的多頁數據................ 39 實戰任務四 查看並分析淘寶網的 robots.txt 文件...................... 41 【知識鞏固】............................................... 43 項目三 商業數據的存儲.....45 任務一 理解大數據存儲........................... 46 一、什麼是大數據存儲......................... 46 二、大數據存儲的方式......................... 47 任務二 實施數據存儲安全策略................ 51 一、數據存儲安全的概念 ..................... 51 二、數據存儲安全威脅來源.................. 52 三、守護數據存儲安全......................... 53 實戰任務一 存儲方案設計....................... 54 實戰任務二 理解數據存儲結構，使用 Python 生成 Excel 文件 ....... 55 實戰任務三 實現帶時間戳的自動備份 機制...................................... 56 【知識鞏固】............................................... 57 項目四 商業數據的 預處理..............................59 任務一 執行數據清洗 .............................. 60 一、數據清洗的概念 .............................60 二、數據清洗的內容 .............................60 任務二 實施數據運算 .............................. 61 一、算術運算........................................61 二、邏輯運算........................................63 任務三 了解其他預處理操作 ................... 63 一、轉置 ...............................................63 二、透視與逆透視.................................64 三、添加索引列 ....................................64 四、添加條件列 ....................................64 五、追加/合並查詢................................64 實戰任務一 數據清洗 .............................. 64 實戰任務二 算術運算 .............................. 77 實戰任務三 邏輯運算 .............................. 84 實戰任務四 其他預處理操作 ................... 87 【知識鞏固】............................................... 99 項目五 商業數據的 分析................................101 任務一 開展趨勢分析 ............................ 102 一、趨勢分析的概念 ...........................102 二、趨勢分析的方法 ...........................103 任務二 實施對比分析 ............................ 103 一、同比分析......................................104 二、環比分析......................................104 任務三 進行頻數分析 ............................ 105 一、頻數分析的概念 ...........................105 二、頻數分析的步驟 ...........................105 任務四 運用漏鬥分析 ............................ 106 一、漏鬥分析的概念 ...........................106 二、漏鬥分析的步驟........................... 106 實戰任務一 趨勢分析 ............................ 107 實戰任務二 對比分析 ............................ 109 實戰任務三 頻數分析 .............................113 實戰任務四 漏鬥分析 .............................116 【知識鞏固】..............................................119 項目六 商業數據的 可視化..........................121 任務一 認知數據可視化......................... 122 一、數據可視化的概念....................... 122 二、數據可視化的典型應用場景......... 123 三、數據可視化工具........................... 125 任務二 實施數據可視化......................... 130 一、常見圖表分類 .............................. 130 二、典型圖表介紹 .............................. 130 實戰任務一 電商行業市場數據可視化... 138 實戰任務二 傳統零售數據可視化 .......... 152 【知識鞏固】............................................. 167 項目七 商業數據分析報告 的撰寫..........................169 任務一 認知商業數據分析報告.............. 171 一、商業數據分析報告的定義 ............ 171 二、商業數據分析報告的作用 ............ 171 三、商業數據分析報告的類型 ............ 172 四、商業數據分析報告的結構 ............ 173 任務二 撰寫商業數據分析報告.............. 175 一、撰寫商業數據分析報告的流程..... 175 二、撰寫商業數據分析報告的技巧..... 178 實戰任務 撰寫商業數據分析報告 .......... 179 【知識鞏固】............................................. 197