將圍繞"市場競爭數據調研”這一項目需求進行講解,開篇將該需求拆解為潛在客戶需求市場調研、PC京東市場數據調研、淘寶APP市場數據調研等幾部分。文稿除開篇外分六個模塊。模塊一以調研潛在客戶畫像為例講解線下調研,重點闡述抽樣調查問卷設計方法。模塊二至四章將講解網絡爬蟲相關理論及實操,其中模塊二通過網絡爬蟲理論及基礎工具的講解,描述如何掌握網絡抓包工具的使用。模塊三利用八爪魚數據采集器采集京東商城商品數據(價格、銷量、評價等數據),描述如何掌握利用八爪魚完成網頁數據采集技能。模塊四則將利用python網絡爬蟲進行淘寶APP市場競爭數據采集,描述如何掌握python移動網絡爬蟲中常用的庫及技巧。模塊五、六則是數據采集后的常規(guī)操作,模塊五講述選擇合理的方式將采集數據進行存儲,模塊六則講述如何將雜亂有誤的數據進行規(guī)范。