无法在新功能中打印某些项目

问题描述 投票:0回答:1

我在node创建了一个脚本,使用requestcheerio从它的登陆页面获取不同帖子的不同titleslinks然后将那些titleslinks传递到另一个函数中,这样我就可以从它的内页中提取那些titlelinks与用户的个人资料链接创建了我定义为proLink的帖子。

如何使用回调从另一个函数中打印那些titleslinksproLink

我到目前为止写的:

var request = require('request');
var cheerio = require('cheerio');

const url = 'https://stackoverflow.com/questions/tagged/web-scraping';

function getposts(callback){
  request(url, function (error,response, html) {
    if (!error && response.statusCode == 200){
      var $ = cheerio.load(html);
      $('.summary .question-hyperlink').each(function(){
        var items = $(this).text();
        var links = $(this).attr("href");
        return callback(items,links);
      });
    }
  });
}
getposts((item,link,callback)=>{
  request(link, function (error,response, html) {
    if (!error && response.statusCode == 200){
      var $ = cheerio.load(html);
      var proLink = $('.user-details > a').eq(0).attr("href");
      return callback(item,link,proLink);
    }
  });
});

再一次:我希望使用回调在另一个函数中打印三个itemlinkproLink

node.js web-scraping callback request cheerio
1个回答
0
投票

也许你可以试试这个:

var request = require('request');
var cheerio = require('cheerio');

const url = 'https://stackoverflow.com/questions/tagged/web-scraping';

function getposts(callback) {
  request(url, function(error, response, html) {
    if (!error && response.statusCode == 200) {
      var $ = cheerio.load(html);
      $('.summary .question-hyperlink').each(function() {
        var items = $(this).text();
        var links = $(this).attr('href');
        return callback(items, links);
      });
    }
  });
}

function fetch(callback) {
  getposts((item, link) => {
    request(`https://stackoverflow.com${link}`, function(
      error,
      response,
      html
    ) {
      if (error) {
        console.log(link, error.message);
        return;
      }

      if (!error && response.statusCode == 200) {
        var $ = cheerio.load(html);
        var proLink = $('.user-details > a')
          .eq(0)
          .attr('href');
        return callback(item, link, proLink);
      }
    });
  });
}

fetch((item, link, proLink) => console.log({ item, link, proLink }));
© www.soinside.com 2019 - 2024. All rights reserved.