beautifulsoup

我试图从通常包含多个页面的网页中提取特定的数据。虽然我可以在第一页上打印所有我需要的信息，但我不能在其他页上做同样的事情。我在互联网上搜索解决方案，发现大多数方案都是通过一个数字连接的链接页来循环浏...

这是我想要抓取数据的url: https://en。prothomalo。com/search？q=road%20accident 但它没有分页，改变url与每次点击，而它只有一个加载更多的按钮，并单击不改变任何在url或脚本。如何自动刮整个页面，而不用手...

我想通过这个代码，但我只得到第一个10货币在页面，但页面包含100货币在哪里其他90？ from bs4 import BeautifulSoup as S import requests url = 'https://coinmarketcap.com/' headers = {'user-agent':'Moz...

试图从coinmarketcap。com提取硬币名称、价格和市值。我第一次尝试用汤。查找带有特定类的特定标记，但它总是会选中我不需要或不想要的信息。因此，我使用find_all来搜索'td'，然后计划使用for循环来查找特定的类...

假设我有以下的HTML片段: <p class="toSelect"> "some text here..." <br> "Other text here..." </p> 对于如何使用Python中的Beautifulsou...

我正在试着从一个网站上抓取新闻文章。我只对包含文本“传输”的的文章感兴趣。在本文中，我想从中提取span内的文本。结果应该在csv文件中结束，看起来像这样: R.Wolf; wechselt für 167.000 von Computer zu; H...

我看了stackoverflow上关于美丽的汤的大部分问题，只从网站上刮去了一半的数据，但到目前为止没有一个工作。我尝试过将该特性更改为lxml或html5lib等。我也尝试过使用selenium，现在我试着向下滚动网站，使用selen...

我只是Python或一般编程的初学者，因为我缺乏知识，很容易出现神秘的语法错误。当然，我试图找到一个解决方案，但在无休止的谷歌搜索后，我只知道一个方法可能没有关闭。也许知道的人会发现错误？ from bs4 impor...

我有一个代码收集所有的url从“oddsportal”网站的一个页面: from bs4 import BeautifulSoup import requests headers = { 'User-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36...

我有一个巨大的HTML文件，其中包含许多表，我想保存为CSV文件。 我有一个代码，从一个html文件导出所有的表，但当我运行它什么也没有发生！有没有办法解决这个问题？我在用废话和熊猫。 它只是打开文件并查找表...

所以我有一个url列表(称为“数据”)，它包含像这样的url https://www。amazon。com/Airpods-Fashion-Protective-Accessories-Silicone/product-reviews/B08YD8JLNQ/ref=cm_cr_dp_d_show_all_btm？ie=UTF8&reviewe...

我正在做一个网络刮刀从一个网站访问调度数据。本公司有权通过登录凭证访问本网站和数据。由于需要动态站点导航，我使用Selenium来自动抓取数据，Python和BeautifulSoup来处理HTML结构。定义了所有变量后，我有以...

我需要你的帮助。我在做一个电报机器人，它能把亚马逊的所有销售额都发给我。 它工作得很好，但这个函数不能正常工作。我总是有同样的错误，然而阻碍了脚本 imgs_str = img_div。img。get('data-a-dynamic-image...

我试图从URL获取发布日期正常的请求和美丽的汤不工作，所以尝试这个方法，它只有第一次工作，但当我再次运行它的发布日期是缺失的。我不明白是什么问题。 URL https://www。hlj。com/gundam-universe-xxxg-01sr-g...

我用stackoverflow解决了很多问题。 今天我决定问我的问题。 我刚开始学习Python。我正在研究如何从网上抓取数据。 我举了一个网站的例子，其中的产品在尺寸或颜色上可能有不同的变体。 我不知道如何“跟随”...