Python爬蟲技術(shù)在學(xué)術(shù)聚合系統(tǒng)中的應(yīng)用

打開文本圖片集

摘  要：爬蟲技術(shù)是搜索引擎和信息網(wǎng)站獲取數(shù)據(jù)的核心技術(shù)之一，專用的網(wǎng)絡(luò)爬蟲能夠在短時(shí)間內(nèi)從網(wǎng)絡(luò)上抓取大量有用數(shù)據(jù)?；跒檠芯空咛峁┧鑼W(xué)術(shù)資源的目的，研究了爬蟲技術(shù)在爬取學(xué)術(shù)網(wǎng)站論文數(shù)據(jù)中的應(yīng)用。分析了Python爬蟲技術(shù)在學(xué)術(shù)聚合系統(tǒng)中的應(yīng)用，借助大數(shù)據(jù)技術(shù)手段對所爬取的學(xué)術(shù)數(shù)據(jù)進(jìn)行存儲、清洗、聚合、消歧和融合。（剩余12517字）