資料介紹
針對數字城市研究手段不足,尤其在收集大量研究文獻的基礎上對數字城市進行整體研究上的欠缺,本文基于R語言和Selenium框架設計了穩定、高效的爬蟲程序,獲取了中國知網2018年5月前收錄的數字城市為主題的研究文獻,并建立了數字城市文獻數據庫和數字城市自動分詞模型。通過分析數字城市研究的時序性、空間分布特征和研究熱點,揭示了數字城市研究的發展歷程、現狀、發展趨勢和研究熱點。結果表明本文設計的網絡爬蟲程序在數字城市研究文獻的收集方面具有可行性和有效性。
數字城市源自“數字地球”的概念,是把城市的地理信息和其他與城市相關的信息結合并存儲在計算機網絡中,讓城市和城市外空間連接在一起的虛擬空間[1]。目前數字城市的建設在全國多個省份、城市中展開,行業應用深入城市的各個領域。關于數字城市的研究,近年來雖然不乏技術和理論等方面的研究,但從獲取大量的數字城市研究文獻的角度對數字城市研究的發展歷程、現狀、發展趨勢、研究熱點的研究目前還沒有。
?
網絡爬蟲是依據程序,模擬訪問網頁、自動化提取網頁信息的腳本,是快速獲取網頁信息的一種方式。網絡爬蟲按照類型主要分為通用型爬蟲、面向主題爬蟲、分布式爬蟲三種,相比較而言面向主題爬蟲應用廣泛,形式較為靈活,可針對特定的網頁數據進行設計高效的爬蟲程序。
本文采用面向主題的網絡爬蟲方法,以中國知網(National Knowledge Infrastructure, CNKI) 2018 年5 月前收錄的以數字城市為主題的文獻為研究對象,基于R 語言和Selenium 網絡框架設計出網絡爬蟲程序。該程序對中國知網的網頁進行分析,獲取網頁請求參數,模擬瀏覽器請求和響應服務器,最終獲取了數字城市研究文獻信息,將獲取到的數據同步保存到本地,構建數字城市文獻數據庫(包括:編號、題名、作者、來源、發表時間、數據庫、被引、下載次數、作者單位、摘要、關鍵詞、資助基金共12 個字段)。并以數字城市文獻數據庫為數據基礎,基于文本挖掘技術構建了數字城市自動分詞模型,通過分析數字城市研究的時序性、空間分布特征和研究熱點,揭示了數字城市研究的發展歷程、現狀、發展趨勢和熱點。
數字城市源自“數字地球”的概念,是把城市的地理信息和其他與城市相關的信息結合并存儲在計算機網絡中,讓城市和城市外空間連接在一起的虛擬空間[1]。目前數字城市的建設在全國多個省份、城市中展開,行業應用深入城市的各個領域。關于數字城市的研究,近年來雖然不乏技術和理論等方面的研究,但從獲取大量的數字城市研究文獻的角度對數字城市研究的發展歷程、現狀、發展趨勢、研究熱點的研究目前還沒有。
網絡爬蟲是依據程序,模擬訪問網頁、自動化提取網頁信息的腳本,是快速獲取網頁信息的一種方式。網絡爬蟲按照類型主要分為通用型爬蟲、面向主題爬蟲、分布式爬蟲三種,相比較而言面向主題爬蟲應用廣泛,形式較為靈活,可針對特定的網頁數據進行設計高效的爬蟲程序。
本文采用面向主題的網絡爬蟲方法,以中國知網(National Knowledge Infrastructure, CNKI) 2018 年5 月前收錄的以數字城市為主題的文獻為研究對象,基于R 語言和Selenium 網絡框架設計出網絡爬蟲程序。該程序對中國知網的網頁進行分析,獲取網頁請求參數,模擬瀏覽器請求和響應服務器,最終獲取了數字城市研究文獻信息,將獲取到的數據同步保存到本地,構建數字城市文獻數據庫(包括:編號、題名、作者、來源、發表時間、數據庫、被引、下載次數、作者單位、摘要、關鍵詞、資助基金共12 個字段)。并以數字城市文獻數據庫為數據基礎,基于文本挖掘技術構建了數字城市自動分詞模型,通過分析數字城市研究的時序性、空間分布特征和研究熱點,揭示了數字城市研究的發展歷程、現狀、發展趨勢和熱點。
- 網絡爬蟲,Python和數據分析 2次下載
- 用Python寫網絡爬蟲 21次下載
- 什么是網絡爬蟲使用Python寫網絡爬蟲的教程說明 3次下載
- 用Python寫網絡爬蟲的PDF電子書免費下載 9次下載
- 爬蟲是如何實現數據的獲取爬蟲程序如何實現 10次下載
- 如何設計一個網絡爬蟲程序進行智慧城市研究的獲取與分析 9次下載
- 如何使用大數據技術進行居民在夜間的情感變化研究資料分析 5次下載
- python爬蟲入門教程之python爬蟲視頻教程分布式爬蟲打造搜索引擎 29次下載
- 應用Verilog HDL進行數字系統設計實例 88次下載
- 一種新型網絡爬蟲的設計與實現
- 一種新的網絡爬蟲帶寬控制策略
- 一種維護WAP網站的網絡爬蟲的設計
- 基于HTMLParser 信息提取的網絡爬蟲設計Design
- 用MatLab進行數字信號處理
- “數字城市”初步研究
- 如何使用 Verilog 進行數字電路設計 307次閱讀
- 如何看待Python爬蟲的合法性? 669次閱讀
- 網絡封包分析軟件——Wireshark抓包教程 1376次閱讀
- 爬蟲的學習方法 877次閱讀
- Python-爬蟲開發01 617次閱讀
- 網絡數據包分析軟件wireshark的基本使用 3060次閱讀
- 爬蟲技術為什么變成了害蟲?爬蟲技術到底犯了什么錯? 4276次閱讀
- 如何解決爬蟲被封的問題 5326次閱讀
- Python爬蟲8個常用的爬蟲技巧分析總結 5120次閱讀
- Python3網絡爬蟲入門實戰解析 5557次閱讀
- Python爬蟲速成指南讓你快速的學會寫一個最簡單的爬蟲 7115次閱讀
- Python學習爬蟲掌握的庫資料大全和框架的選擇的分析 5227次閱讀
- 網絡爬蟲教程(1):音樂歌單編寫 1171次閱讀
- 初學者寫Python爬蟲的四大工具 5849次閱讀
- 針對中小城市GSM網絡的網絡規劃和整治流程及方案分析 714次閱讀
下載排行
本周
- 1電子電路原理第七版PDF電子教材免費下載
- 0.00 MB | 1491次下載 | 免費
- 2單片機典型實例介紹
- 18.19 MB | 95次下載 | 1 積分
- 3S7-200PLC編程實例詳細資料
- 1.17 MB | 27次下載 | 1 積分
- 4筆記本電腦主板的元件識別和講解說明
- 4.28 MB | 18次下載 | 4 積分
- 5開關電源原理及各功能電路詳解
- 0.38 MB | 11次下載 | 免費
- 6100W短波放大電路圖
- 0.05 MB | 4次下載 | 3 積分
- 7基于單片機和 SG3525的程控開關電源設計
- 0.23 MB | 4次下載 | 免費
- 8基于AT89C2051/4051單片機編程器的實驗
- 0.11 MB | 4次下載 | 免費
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費
- 2PADS 9.0 2009最新版 -下載
- 0.00 MB | 66304次下載 | 免費
- 3protel99下載protel99軟件下載(中文版)
- 0.00 MB | 51209次下載 | 免費
- 4LabView 8.0 專業版下載 (3CD完整版)
- 0.00 MB | 51043次下載 | 免費
- 5555集成電路應用800例(新編版)
- 0.00 MB | 33562次下載 | 免費
- 6接口電路圖大全
- 未知 | 30320次下載 | 免費
- 7Multisim 10下載Multisim 10 中文版
- 0.00 MB | 28588次下載 | 免費
- 8開關電源設計實例指南
- 未知 | 21539次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935053次下載 | 免費
- 2protel99se軟件下載(可英文版轉中文版)
- 78.1 MB | 537793次下載 | 免費
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420026次下載 | 免費
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費
- 6電路仿真軟件multisim 10.0免費下載
- 340992 | 191183次下載 | 免費
- 7十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183277次下載 | 免費
- 8proe5.0野火版下載(中文版免費下載)
- 未知 | 138039次下載 | 免費
評論
查看更多