亚马逊是全球范围内购买产品的热门选择。研究表明，客户在做出购买决定之前会花很多时间阅读过去的购买评论。作为企业主和技术专家，亚马逊提供了大量的评论数据，如果没有适当的工具，提取这些数据将非常困难。

你可以尝试我们的 亚马逊评论抓取工具。此工具提供您抓取亚马逊评论所需的一切。

目录

一、为什么要抓取亚马逊产品评论

二、如何避免在抓取亚马逊评论时被封

三． 了解亚马逊产品评论页面 HTML

四． 如何抓取亚马逊评论

  • 步骤 1. 准备工作空间：先决条件和环境设置
  • 步骤2.检索亚马逊产品评论
  • 步骤 3. 使用分页抓取所有评论
  • 步骤 4. 存储数据

五、常见问题解答

一、为什么要抓取亚马逊产品评论

亚马逊评论抓取的好处

在电子商务领域，产品评论就像一张藏宝图，引导您了解客户偏好和意见的复杂景观。 抓取这些评论就像打开一扇门，让他们通向他们对产品未经过滤的想法和情感。 然而，这些评论的意义远远超出了单纯的见解； 它们对于进行市场研究、推动产品改进和进行竞争分析是不可或缺的。

二、如何避免在抓取亚马逊评论时被封

虽然抓取亚马逊评论的能力提供了大量有价值的数据，但它也面临着挑战。 电子商务的数字格局有自己的一套规则，该领域的巨头之一亚马逊也不例外。 抓取其页面比看起来更复杂。

防止亚马逊评论抓取工具在抓取产品评论时遇到阻塞对于保持数据收集过程的可靠性和连续性至关重要。 以下是一些有效的策略：

  1. 用户代理标头： Amazon 可以通过检查 HTTP 请求中的 User-Agent 标头来检测自动抓取。 为了避免检测，请使用 网络爬虫工具 或允许您设置用户代理标头以模仿 Web 浏览器的库。 这使您的请求看起来更像典型用户的请求。
  2. 请求速率限制： 在抓取请求之间实施延迟。 快速而频繁的请求压垮亚马逊的服务器可能会触发其安全机制。 通过添加延迟，您可以模拟更人性化的浏览模式，从而降低被发现的风险。
  3. IP 轮换和代理服务器： 轮换IP地址 或者使用 代理服务器服务 可以帮助防止基于 IP 的封锁。 当大规模抓取时，建议使用轮换 IP 或代理池。 这样，亚马逊就不会从单个 IP 地址识别出一致的模式，从而使他们更难阻止您的访问。
  4. 尊重robots.txt： 始终遵守亚马逊“robots.txt”文件中定义的规则。 该文件指定网站的哪些部分可以被抓取，哪些部分不能被抓取。 刮擦不允许的区域可能会导致刮刀被堵塞，因此检查并遵守这些规则非常重要。
  5. 监测和适应： 亚马逊经常更新其网站结构和安全措施。 为了保持领先地位，请监控亚马逊网站的结构变化并相应地调整您的抓取工具。 BeautifulSoup 和 Scrapy 等网页抓取库可以帮助您在 HTML 结构发生变化时调整抓取工具。

值得注意的是，虽然这些策略可以帮助防止您的抓取工具被阻塞，但它们可能需要大量的努力和专业知识才能有效实施。

Crawlbase 是最好的亚马逊评论抓取工具

管理所有这些方面 网络抓取 可能是一项具有挑战性且耗时的任务。这就是 Crawlbase Crawling API 闪耀。 Crawlbase 旨在处理网络抓取的复杂性，包括设置用户代理标头、管理请求率、轮换 IP 地址、遵守 robots.txt 规则以及监控网站变化，使其成为抓取亚马逊评论的完美工具。

亚马逊评论抓取 亚马逊使用crawlbase抓取

通过使用 Crawlbase API，您可以专注于从亚马逊评论中提取有价值的数据，而不必担心被屏蔽，因为 Crawlbase 为您解决这些挑战。这使得亚马逊能够 Crawlbase 这是您项目的绝佳选择，可确保顺利、可靠地提取数据。

三． 了解亚马逊产品评论页面 HTML

亚马逊产品评论页面 html

在我们探索为亚马逊评论抓取工具编写代码之前，有必要了解亚马逊产品评论页面的 HTML 结构。 这种理解是成功抓取操作的基础，因为它使您能够精确定位和提取所需的数据。

亚马逊的产品评论页面由各种 HTML 元素构成，每个元素都包含有价值的信息。 以下是需要注意的关键要素：

  • 检查容器
  • 审稿人信息
  • 评级和星级
  • 评论文本
  • 分页

当我们继续构建亚马逊产品评论抓取工具时，请记住这些要素。 它们是我们抓取策略的基石。

四． 如何抓取亚马逊评论

步骤 1. 准备工作空间：先决条件和环境设置

现在，让我们开始做正事，确保您的工作空间已准备好构建亚马逊评论抓取工具。 在我们开始编码之前，这里有一个清单，以确保您拥有所需的一切：

安装 Node.js

确保您的计算机上安装了 Node.js。 如果您还没有，您可以从他们的网站下载 Node.js 官方网站。 Node.js 作为运行时环境，使我们能够在您的计算机上运行 JavaScript 代码。

Crawlbase API 的 JavaScript 令牌

要连接 Crawlbase API，您需要一个 API 令牌。您可以通过以下方式获取令牌 注册 Crawlbase。 拥有帐户后，请转到帐户仪表板并保存您的 JavaScript 令牌。 将此令牌视为您访问网络数据宝藏的密钥。

JavaScript 和 npm 的基础知识

熟悉 JavaScript 和 npm（节点包管理器）对于我们继续进行将非常有益。 如果您是 JavaScript 新手，请不要担心； 我们将通过代码逐步提供详细指导。 Npm 将协助我们管理整个项目中的包和依赖项。

通过确保您具备这些要素，您就可以在学习如何抓取亚马逊评论方面获得顺利而成功的体验。

设置环境

现在我们已经准备好开始亚马逊产品评论抓取项目，让我们开始准备我们的编码环境。 这一步至关重要，因为它构成了未来工作的基础。

打开命令行界面，可以是命令提示符 (Windows)、终端（macOS 和 Linux）或类似的终端应用程序，然后导航到要在其中创建项目的目录。

进入终端的项目目录后，就可以创建代码文件了。 执行以下命令：

1
触摸 index.js 和 npm init -y

接下来，我们将使用 Crawlbase 节点库 为了更容易集成。 通过执行以下行来安装库：

1
npm 安装爬虫库

此命令使用 npm（Node 包管理器）来获取并安装 Crawlbase 库，我们将使用它来与 Crawlbase API。该库为您的 JavaScript 代码提供了便捷的功能，使网页抓取变得轻而易举。

如果一切就绪，让我们继续下一步：编写代码来提取亚马逊产品评论。

步骤2.检索亚马逊产品评论

在本节中，我们将深入研究使用以下代码获取亚马逊产品评论的代码： Crawlbase“ Crawling API。下面是代码及其解释：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
常量 { 抓取API } = 要求('crawlbase'),
  接口= 新 抓取API({ 象征: 'CRAWLBASE_JS_TOKEN' }），
  亚马逊评论URL =
    'https://www.amazon.com/Meta-Quest-Pro-Oculus/product-reviews/B09Z7KGTVW/?reviewerType=all_reviews';

异步 function 获取评论(网址、评论 = []）{
  尝试 {
    常量 响应 = 等待 蜜蜂。得到（网址，{
      刮刀: “亚马逊产品评论”,
    }）;

    if （回复。状态码 === 200）{
      常量 数据=响应。JSON.身体;

      领事.日志（数据）;
    } 其他 {
      扔 新 误差(`API 请求失败，状态为： ${response.statusCode}`);
    }
  } 捕捉 （错误） {
    领事.错误(`API 调用失败： ${错误消息}`);
  }
}

// 调用 fetchReviews 函数开始抓取过程
获取评论（亚马逊评论URL）；

此代码为使用以下方式抓取亚马逊评论奠定了基础 Crawlbase 库和 API。它通过利用 Crawlbase预先构建的亚马逊产品评论抓取工具，省去了构建自定义解析器所需的工作。

代码执行

现在，您可以使用以下命令运行代码 node 命令后跟 JavaScript 文件的名称，即 index.js 在这种情况下。 键入以下命令并按 Enter：

1
节点index.js

该代码会将抓取的数据或任何错误消息记录到终端。 仔细检查输出以确保抓取过程按预期工作。

步骤 3. 使用分页抓取所有评论

使用 Amazon Pagination 进行抓取

与许多其他网站一样，亚马逊使用分页系统来组织其产品评论。 这意味着，如果您想抓取多个页面的亚马逊评论，则需要遵循一系列页面链接来访问和检索每个评论页面的数据。

为了更好地掌握，您可以观察下面的 URL 示例，了解 Amazon 如何处理分页：

主要评论页面：
https://www.amazon.com/Meta-Quest-Pro-Oculus/product-reviews/B09Z7KGTVW/?reviewerType=all_reviews

第二页：
https://www.amazon.com/Meta-Quest-Pro-Oculus/product-reviews/B09Z7KGTVW/?reviewerType=all_reviews&pageNumber=2

第三页：
https://www.amazon.com/Meta-Quest-Pro-Oculus/product-reviews/B09Z7KGTVW/?reviewerType=all_reviews&pageNumber=3

现在，让我们检查提供的代码并解释它如何实现此分页：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
常量 { 抓取API } = 要求('crawlbase'),
  接口= 新 抓取API({ 象征: 'CRAWLBASE_JS_TOKEN' }）， // 将其替换为您的 JS 请求令牌
  亚马逊评论URL =
    'https://www.amazon.com/Meta-Quest-Pro-Oculus/product-reviews/B09Z7KGTVW/?reviewerType=all_reviews';

异步 function 获取评论(网址、评论 = []）{
  尝试 {
    常量 响应 = 等待 蜜蜂。得到（网址，{
      刮刀: “亚马逊产品评论”,
      ajax_等待: true,
      页面等待: 3000,
    }）;

    // 检查响应状态是否为200
    if （回复。状态码 === 200）{
      常量 数据=响应。JSON.身体;

      // 检查响应中是否存在分页号
      常量 下一页编号 = 数据。分页.下一页;

      领事.日志（评论。长度, “回复评论”);

      if (下一页编号) {
        // 使用下一页 URL 递归调用该函数
        常量 下一页网址= `${amazonReviewsURL}&页码=${下一页}`;
        回报 获取评论（下一页网址，评论。CONCAT（数据。评论））;
      } 其他 {
        领事.日志(“已读到最后一页。”，评论。长度);
        回报 评论。CONCAT（数据。评论);
      }
    } 其他 {
      // 处理空数据响应
      扔 新 误差(`API 请求失败，状态为： ${response.statusCode}`);
    }
  } 捕捉 （错误） {
    领事.日志(`API 调用再次获取 URL 失败： ${网址}`);

    // 使用相同的 URL 重试 API 调用
    回报 获取评论（网址、评论）；
  }
}

异步 function 获取所有评论(）{
  尝试 {
    常量 评论= 等待 获取评论（亚马逊评论URL）；
    领事.日志(“总评论：”，评论。长度);
  } 捕捉 （错误） {
    领事.错误(`递归 API 调用失败： ${错误}`);
  }
}

// 启动递归 API 调用以获取亚马逊产品评论
获取所有评论（）;

该代码有效地浏览分页的亚马逊产品评论，进行递归调用以从每个页面获取和累积数据，直到到达最后一页。 这是确保您检索所选产品的所有可用评论的可靠方法。

以下是响应示例：

亚马逊产品评论终端响应

步骤 4. 存储数据

成功抓取亚马逊产品评论后，下一个关键步骤是存储这些有价值的数据以供分析、将来参考或您可能想到的任何其他目的。 储存资料 是网络抓取过程的重要组成部分，因为它可以保留您的努力结果以供以后使用。

在 Node.js 中使用 fs 模块

为了保存抓取的评论，我们将利用 fs Node.js 中的（文件系统）模块。 这 fs module 是一个内置模块，允许我们与计算机上的文件系统进行交互。 有了它，我们可以创建、读取、写入和管理文件。 在我们的例子中，我们将使用它将抓取的评论写入 JSON 文件。

在接下来的部分中，我们将为您提供将抓取的评论保存到 amazon_reviews.json 文件并解释其工作原理。 此步骤将确保您拥有所收集的评论的结构化且可访问的记录，使您能够做出数据驱动的决策或根据需要进行进一步的分析。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
常量 { 抓取API } = 要求('crawlbase'),
  FS = 要求('fs'), // 导入 'fs' 模块
  接口= 新 抓取API({ 象征: 'CRAWLBASE_JS_TOKEN' }）， // 将其替换为您的 JS 请求令牌
  亚马逊评论URL =
    'https://www.amazon.com/Meta-Quest-Pro-Oculus/product-reviews/B09Z7KGTVW/?reviewerType=all_reviews';

异步 function 获取评论(网址、评论 = []）{
  尝试 {
    常量 响应 = 等待 蜜蜂。得到（网址，{
      刮刀: “亚马逊产品评论”,
      ajax_等待: true,
      页面等待: 3000,
    }）;

    // 检查响应状态是否为200
    if （回复。状态码 === 200）{
      常量 数据=响应。JSON.身体;

      // 检查响应中是否存在分页号
      常量 下一页编号 = 数据。分页.下一页;

      领事.日志（评论。长度, “回复评论”);

      if (下一页编号) {
        // 使用下一页 URL 递归调用该函数
        常量 下一页网址= `${amazonReviewsURL}&页码=${下一页}`;
        回报 获取评论（下一页网址，评论。CONCAT（数据。评论））;
      } 其他 {
        领事.日志(“已读到最后一页。”，评论。长度);
        回报 评论。CONCAT（数据。评论);
      }
    } 其他 {
      // 处理空数据响应
      扔 新 误差(`API 请求失败，状态为： ${response.statusCode}`);
    }
  } 捕捉 （错误） {
    领事.日志(`API 调用再次获取 URL 失败： ${网址}`);

    // 使用相同的 URL 重试 API 调用
    回报 获取评论（网址、评论）；
  }
}

异步 function 获取所有评论(）{
  尝试 {
    常量 评论= 等待 获取评论（亚马逊评论URL）；
    领事.日志(“总评论：”，评论。长度);
    fs。写文件同步('amazon_reviews.json', JSON.串化（{评论}， 空, 2））;
  } 捕捉 （错误） {
    领事.错误(`递归 API 调用失败： ${错误}`);
  }
}

// 启动递归 API 调用以获取亚马逊产品评论
获取所有评论（）;

总之，此代码获取亚马逊产品评论，处理分页，并将收集到的数据保存在 JSON 文件中以供将来使用。 这是保留和分析抓取的信息的有效方法。

执行代码。 代码运行完毕后，它将显示获取的评论总数。 然后，您可以检查同一目录中的“amazon_reviews.json”文件来访问抓取的数据。

以下是 JSON 响应示例：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
{
  “评论”: [
    {
      “评论ID”: “RKQEU6WKR8K25”,
      “评论者姓名”: “格尔戈伊尔”,
      “审稿人链接”: "https://www.amazon.com/gp/profile/amzn1.account.AHRET2Q2B5UOD2H4BENDQRLWUOCA/ref=cm_cr_arp_d_gw_btm?ie=UTF8",
      “评论链接”: "https://www.amazon.com/gp/customer-reviews/RKQEU6WKR8K25/ref=cm_cr_arp_d_rvw_ttl?ie=UTF8&ASIN=B09Z7KGTVW",
      “评论评级”: “4.0 颗星，最多 5 颗星”,
      “审核日期”: “2年2023月XNUMX日 - 已在美国亚马逊上发表”,
      “评论详情顶部”: [
        {
          “名称”: “风格”,
          “值”: “探索专业系统”
        }
      ],
      “评论标题”: “没有遗憾”,
      “评论文本”: “我在 Quest 3 发布前几个月购买 Pro 是不是疯了/傻了？我不这么认为。我的 256 GB Quest 2 面临着空间不足的危险。”,
      “评论投票”: “11 人认为这很有帮助”,
      “评论已验证购买”: true,
      “评论评论数”: 0,
      “媒体”: {
        “图片”: [],
        “视频”: ""
      }
    },
    {
      “评论ID”: “R5MWA1QYQQ08I”,
      “评论者姓名”: “动画师小蒂”,
      “审稿人链接”: “https://www.amazon.com/gp/profile/amzn1.account.AGHDQ5LDPFJWGULE6KCFUCIMVOVA/ref=cm_cr_arp_d_gw_btm?ie=UTF8”,
      “评论链接”: "https://www.amazon.com/gp/customer-reviews/R5MWA1QYQQ08I/ref=cm_cr_arp_d_rvw_ttl?ie=UTF8&ASIN=B09Z7KGTVW",
      “评论评级”: “4.0 颗星，最多 5 颗星”,
      “审核日期”: “8年2023月XNUMX日 - 已在美国亚马逊上发表”,
      “评论详情顶部”: [
        {
          “名称”: “风格”,
          “值”: “探索专业系统”
        }
      ],
      “评论标题”: “等等，但如果你不能的话，尼斯。”,
      “评论文本”: “我给自己买了一台 M.Quest 2 来使用 Quill，我是一名动画师，虽然 Steam 有一些艺术工具；其中一些还不错。”,
      “评论投票”: “27 人认为这很有帮助”,
      “评论已验证购买”: true,
      “评论评论数”: 0,
      “媒体”: {
        “图片”: [],
        “视频”: ""
      }
    },
    {
      “评论ID”: “R1SQONPI32TSA3”,
      “评论者姓名”: “达米安”,
      “审稿人链接”: "https://www.amazon.com/gp/profile/amzn1.account.AG7XUXY3DP5HLZMUXI5FRHGIUM2A/ref=cm_cr_arp_d_gw_btm?ie=UTF8",
      “评论链接”: "https://www.amazon.com/gp/customer-reviews/R1SQONPI32TSA3/ref=cm_cr_arp_d_rvw_ttl?ie=UTF8&ASIN=B09Z7KGTVW",
      “评论评级”: “3.0 颗星，最多 5 颗星”,
      “审核日期”: “1年2022月XNUMX日 - 已在美国亚马逊上发表”,
      “评论详情顶部”: [
        {
          “名称”: “风格”,
          “值”: “探索专业系统”
        }
      ],
      “评论标题”: “价格极其过高。舒适度极佳。显示效果很差。”,
      “评论文本”: “我最近购买了这款产品，是为了从第一代 Oculus Rift 和第一代 HTC Vive 进行升级”,
      “评论投票”: “386 人认为这很有帮助”,
      “评论已验证购买”: true,
      “评论评论数”: 0,
      “媒体”: {
        “图片”: [],
        “视频”: ""
      }
    },
    {
      “评论ID”: “R1P51LFI4UT2BH”,
      “评论者姓名”: “龟”,
      “审稿人链接”: "https://www.amazon.com/gp/profile/amzn1.account.AGAM4YMLO2I3H573MRATCQBVH64A/ref=cm_cr_arp_d_gw_btm?ie=UTF8",
      “评论链接”: "https://www.amazon.com/gp/customer-reviews/R1P51LFI4UT2BH/ref=cm_cr_arp_d_rvw_ttl?ie=UTF8&ASIN=B09Z7KGTVW",
      “评论评级”: “3.0 颗星，最多 5 颗星”,
      “审核日期”: “11年2023月XNUMX日 - 已在美国亚马逊上发表”,
      “评论详情顶部”: [
        {
          “名称”: “风格”,
          “值”: “探索专业系统”
        }
      ],
      “评论标题”: “省下你的钱”,
      “评论文本”: “更新评论 - 省钱买普通的 Quest 2。也许再等 3。Pro 有一些很棒的功能”,
      “评论投票”: “39 人认为这很有帮助”,
      “评论已验证购买”: true,
      “评论评论数”: 0,
      “媒体”: {
        “图片”: [],
        “视频”: ""
      }
    },
    {
      “评论ID”: “RR3IJVMY99Y92”,
      “评论者姓名”: “公元前”,
      “审稿人链接”: “https://www.amazon.com/gp/profile/amzn1.account.AHVFQVUULJHUYMXXEK2RVE4EZPLQ/ref=cm_cr_arp_d_gw_btm?ie=UTF8”,
      “评论链接”: "https://www.amazon.com/gp/customer-reviews/RR3IJVMY99Y92/ref=cm_cr_arp_d_rvw_ttl?ie=UTF8&ASIN=B09Z7KGTVW",
      “评论评级”: “4.0 颗星，最多 5 颗星”,
      “审核日期”: “19年2023月XNUMX日 - 已在美国亚马逊上发表”,
      “评论详情顶部”: [
        {
          “名称”: “风格”,
          “值”: “遮光器”
        }
      ],
      “评论标题”: “使用 Meta Quest Pro 全遮光器增强您的 VR 体验！”,
      “评论文本”: “我最近购买了 Meta Quest Pro Full Light Blocker，将我的 VR 游戏体验提升到了一个新的水平，我非常满意。”,
      “评论投票”: “一个人发现这很有帮助”,
      “评论已验证购买”: true,
      “评论评论数”: 0,
      “媒体”: {
        “图片”: [],
        “视频”: ""
      }
    },
    {
      “评论ID”: “R2BGDJLIQH5KFX”,
      “评论者姓名”: 《一个有意见的人》,
      “审稿人链接”: "https://www.amazon.com/gp/profile/amzn1.account.AFSMEKU6NSM3JBKWG5VQO44AW2VA/ref=cm_cr_arp_d_gw_btm?ie=UTF8",
      “评论链接”: "https://www.amazon.com/gp/customer-reviews/R2BGDJLIQH5KFX/ref=cm_cr_arp_d_rvw_ttl?ie=UTF8&ASIN=B09Z7KGTVW",
      “评论评级”: “4.0 颗星，最多 5 颗星”,
      “审核日期”: “20年2023月XNUMX日 - 已在美国亚马逊上发表”,
      “评论详情顶部”: [
        {
          “名称”: “风格”,
          “值”: “探索专业系统”
        }
      ],
      “评论标题”: “重大升级，但感觉并不重大”,
      “评论文本”: “我要说的第一件事是，尽管这是对 quest 2 的重大升级，但 Pro 并没有你想象的那么耀眼。”,
      “评论投票”: “18 人认为这很有帮助”,
      “评论已验证购买”: true,
      “评论评论数”: 0,
      “媒体”: {
        “图片”: [],
        “视频”: ""
      }
    },
    {
      “评论ID”: “RVRX0CNDU7TYK”,
      “评论者姓名”: “阿尔乔姆”,
      “审稿人链接”: "https://www.amazon.com/gp/profile/amzn1.account.AG4F7G5EVO6D3NRSRVIRRNUR4P5A/ref=cm_cr_arp_d_gw_btm?ie=UTF8",
      “评论链接”: "https://www.amazon.com/gp/customer-reviews/RVRX0CNDU7TYK/ref=cm_cr_arp_d_rvw_ttl?ie=UTF8&ASIN=B09Z7KGTVW",
      “评论评级”: “4.0 颗星，最多 5 颗星”,
      “审核日期”: “19年2023月XNUMX日 - 已在美国亚马逊上发表”,
      “评论详情顶部”: [
        {
          “名称”: “风格”,
          “值”: “探索专业系统”
        }
      ],
      “评论标题”: 「价格过高，但还不错」,
      “评论文本”: “更新：它还活着。我不知道为什么以及如何，但几天后它又复活了。四星，因为我认为它的价格过高。”,
      “评论投票”: “3 人认为这很有帮助”,
      “评论已验证购买”: true,
      “评论评论数”: 0,
      “媒体”: {
        “图片”: [],
        “视频”: ""
      }
    }
    ...
  ]
}

就是这样！ 您已成功执行代码来抓取亚马逊评论并将其保存到文件中。 您现在可以根据需要使用此数据进行分析或任何其他目的。

总结

在探索如何抓取亚马逊评论的过程中，我们发现了一个从亚马逊产品评论中提取见解的宝贵工具。使用 Crawlbase 借助库和 JavaScript，我们学会了如何轻松地收集和分析来自亚马逊的客户反馈。这些评论可以让我们了解市场趋势、产品改进领域以及竞争对手的洞见。通过了解如何抓取亚马逊评论，我们还搭建了代码环境，集成了 Crawlbase并开发了高效浏览亚马逊评论页面的代码，为我们节省了时间、精力和金钱。系统地存储这些数据，确保我们拥有可靠的记录，以便日后做出决策。

正如我们的结论，我们鼓励您探索网络抓取以进行数据驱动的决策。 无论您是从事商业、研究还是只是好奇，网络抓取都可以提供有价值的见解。 永远记住负责任地抓取亚马逊评论，尊重网站的服务条款，您将开启一个充满数据驱动可能性的世界。 拥抱网络抓取的潜力，让数据指引您的道路！

常见问题

可以抓取亚马逊评论吗？

在亚马逊上抓取评论是一个合法的灰色地带。 虽然在网站上抓取公开数据通常被认为是合法的，但有一些重要的警告。 亚马逊的服务条款明确禁止网络抓取。 为了保持在法律范围内，审查并遵守亚马逊的政策至关重要。 此外，避免过度抓取，这可能会破坏亚马逊的服务或违反有关的任何适用法律 数据隐私.

亚马逊还使用验证码挑战来验证访问该网站的用户是否是人类。 这些挑战旨在防止自动机器人和网络抓取工具淹没网站。 如果您在访问亚马逊时遇到验证码挑战，这是他们确保公平和安全的在线购物体验的安全措施的一部分。

使用有什么好处 Crawlbase 比其他抓取方法更好吗？

Crawlbase Crawling API 是一款专门为网页抓取而设计的工具，可以更可靠、更高效地抓取亚马逊评论。它可以处理与网页抓取相关的许多挑战，例如处理 CAPTCHA、 IP轮换以及会话管理。此外，它还提供专门的支持，确保您能够大规模抓取亚马逊评论，同时最大限度地降低被屏蔽的风险。虽然还有其他方法， Crawlbase 可以节省时间、精力和资源。

抓取亚马逊产品数据的最佳方法是什么？

从亚马逊产品页面抓取数据的最佳方法是使用 Crawlbase这就像拥有一位智能助手，帮助您从亚马逊网站快速、准确地获取您所需要的信息。 Crawlbase 让网页抓取变得简单，无需您花费大量时间和精力手动操作。这能让您轻松抓取亚马逊评论，轻松获取所需数据。

我可以抓取任何产品类别的亚马逊评论吗？

是的，您可以抓取大多数产品类别的亚马逊评论。 然而，亚马逊不同类别的布局可能略有不同。 您的抓取工具应该通过识别和处理特定于类别的元素来适应不同的产品页面。