<分区>
我四处搜索但没有得到太多帮助。这是我的问题。我想从维基百科上的门户页面开始，比如 Computer_science然后去它的categories页。该类别中有一些页面，并且有指向子类别的链接。我将访问其中一些页面并单独获取页面摘要。然后使用来自该类别页面等的指针进入下一个级别。
我知道 C++/php/js/python。哪个最适合这里？我想在一天内完成。我知道有一个 api，但它似乎对获取内容没有帮助。
- 我需要获取页面
- 解析它们以获取类别 div(或原始 wiki 数据提供的元素)以获取摘要以及转到其他页面。
我需要有关编程语言、库和公共(public)代码的建议(如果有的话)。 我也听说 wiki 不喜欢机器人爬虫，我计划最多获得 500 个文档。这是个问题吗？
非常感谢
