web-scraping

我试图从通常包含多个页面的网页中提取特定的数据。虽然我可以在第一页上打印所有我需要的信息，但我不能在其他页上做同样的事情。我在互联网上搜索解决方案，发现大多数方案都是通过一个数字连接的链接页来循环浏...

这是我想要抓取数据的url: https://en。prothomalo。com/search？q=road%20accident 但它没有分页，改变url与每次点击，而它只有一个加载更多的按钮，并单击不改变任何在url或脚本。如何自动刮整个页面，而不用手...

我想通过这个代码，但我只得到第一个10货币在页面，但页面包含100货币在哪里其他90？ from bs4 import BeautifulSoup as S import requests url = 'https://coinmarketcap.com/' headers = {'user-agent':'Moz...

我正试图搜集当地一家超市里产品的具体数据。 网址是https://www。veadigital。com。ar/Comprar/Home。aspx#_atCategory=false&_atGrilla=true&_id=446266 然而，我成功与得到一个请求由网站，但我的问题是设置...

我的情况是这样的:我用Python构建了一个机器人，它从HTML中删除了eBay产品列表的链接。 每个链接都引导我进入第一个链接旁边的产品页面。第一个是引导我到这个页面。 如何在运行脚本时删除或忽略该链接？ 这里...

所以我得在flipkart上为这款产品收集评论和评级。 我需要至少30-40的评价和评级。因此，我必须点击下一页，因为在第一页只有10个评论。下面是我用来检查我的代码是否能够点击下一页的代码。 “‘ driver =webdr...

我有这个省道代码，但每次我运行它时，它给出不同的输出 步骤来复制 将这两个文件添加到相同的目录中 运行 飞镖酒吧得到 飞镖code。dart 它将创建10个具有不同内容的文件 创建一个名为code。dart的文件 im...

假设我有以下的HTML片段: <p class="toSelect"> "some text here..." <br> "Other text here..." </p> 对于如何使用Python中的Beautifulsou...

我已经得到了导入JSON脚本: https://gist。github。com/paulgambill/cacd19da95a1421d3164 并将其粘贴到谷歌表中的谷歌apps脚本中，我想导入这个Json: https://fapi。binance。com/fapi/v1/ticker/24hr 但是我...

由于某些原因，youtube只给我他们的资源页面，而不给我他们的视频链接 这正是我想要的 代码: import mechanize import urllib import urllib.parse as urlparse url = "https://www.youtube.com" ...

你好，我想访问这个元素span。我想以一种方式访问它，它可以追加到列表。每个span都有一个wordnr="1"或任何数字。我要把每句话都写进表里。 这是网站的源代码 <div id="row1" style="top: 1px...

所以我是完全新的网络搜刮和一般不擅长编码，但我只是不能得到如何网络搜刮工作，它只是看起来如此混乱？ 不管怎样，我正在使用htmlilitypack从https://siege。gg/matches/5901-nal-na-tsm-ftx-vs-mirage (Being ...

我有一个代码收集所有的url从“oddsportal”网站的一个页面: from bs4 import BeautifulSoup import requests headers = { 'User-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36...

我正在处理来自以下网址的某些数据集(该页是西班牙文):http://www。aire。cdmx。gob。mx/default。php？opc=%27aKBh%27 在网站上，你可以选择你想要的年份，然后点击下载获得xls文件。 我想自动化这个过程，以便...

所以我有一个url列表(称为“数据”)，它包含像这样的url https://www。amazon。com/Airpods-Fashion-Protective-Accessories-Silicone/product-reviews/B08YD8JLNQ/ref=cm_cr_dp_d_show_all_btm？ie=UTF8&reviewe...