如何使用 Postman 获取网站上的所有链接_如何获取网站上的所有视频链接

1. 打开 Postman 并创建一个新的请求。
2. 在 URL 输入框中输入要抓取的网站的 URL。
3. 选择 HTTP 方法为 "GET"。
4. 点击 "Send" 按钮发送请求。
5. 在响应内容中,可以看到网站上的所有链接。

// 设置要抓取的网站 URL
var url = "https://www.example.com";

// 发送 GET 请求
pm.sendRequest(url, function (err, response) {
    if (err) {
        console.log(err);
    } else {
        // 获取响应内容
        var html = response.text();

        // 使用正则表达式提取所有链接
        var linkRegex = /(https?:\/\/[^\s]+)/g;
        var links = html.match(linkRegex);

        // 将链接输出到控制台
        console.log(links);
    }
});

// 引入所需的库
const request = require('request');
const cheerio = require('cheerio');

// 设置要抓取的网站 URL
const url = 'https://www.example.com';

// 发送 GET 请求并解析 HTML
request(url, (error, response, html) => {
    if (!error && response.statusCode == 200) {
        const $ = cheerio.load(html);

        // 提取所有链接
        const links = $('a').map((i, link) => $(link).attr('href')).get();

        // 将链接输出到控制台
        console.log(links);
    }
});

// 引入所需的库
const request = require('request');
const cheerio = require('cheerio');

// 设置要抓取的网站 URL
const url = 'https://www.example.com';

// 发送 GET 请求并解析 HTML
request(url, (error, response, html) => {
    if (!error && response.statusCode == 200) {
        const $ = cheerio.load(html);

        // 提取所有视频链接
        const videoLinks = $('video').map((i, video) => $(video).attr('src')).get();

        // 将视频链接输出到控制台
        console.log(videoLinks);
    }
});