Thanks to visit codestin.com
Credit goes to github.com

Skip to content

爬虫相关的框架、组件、关键技术以及针对儿童教育相关内容的具体应用。

License

Notifications You must be signed in to change notification settings

JK-River/DeepWebCrawler

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

12 Commits
 
 
 
 
 
 
 
 
 
 

Repository files navigation

DeepWebCrawler

1.GoogleKnowledge:谷歌知识爬虫,谷歌“知识图谱”(Knowledge Graph)——可以将搜索结果进行知识系统化,任何一个关键词都能获得完整的知识体系,先看看谷歌知识的搜索用法,例如我们可以查找老虎体重是多少;


如果想用程序取到这个结果,谷歌目前没有提供专门的API得到,直接抓取页面也没办法做到,因为这部分DOM结构是动态加载的, 谷歌知识爬虫(GoogleKnowledge.py)利用selenium调用chrome,可以查找到页面加载后的DOM结构,从而取到想要的结果; 关于selenium调用chrome的配置可以参考http://blog.csdn.net/mmc2015/article/details/53064021

About

爬虫相关的框架、组件、关键技术以及针对儿童教育相关内容的具体应用。

Resources

License

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Contributors 2

  •  
  •  

Languages