Я новичок в Puppeteer и не совсем уверен, что я здесь делаю не так, но в DevTools я получаю правильный результат. Однако я хочу создать файл со значениями и продолжать получать undefined.

Я думаю, что это как-то связано со списками узлов и невозможностью их вернуть, но я не знаю, как это исправить.

Это работает в DevTools:

let arr2 = Array.from(document.querySelectorAll(
  "#data > div.data-wrapper > div > div > table > tbody  tr"))
.map(row => (
  {site:row.querySelector('td:nth- child(2)').innerText,
  pass:row.querySelector('td:nth- child(10)').innerText,
  user:row.querySelector('td:nth-child(9)').innerText
  }))
  //with a console.log()

Я также пробовал row.evaluate(()=>), который у меня не работал.

Вот мой код, который не работает:

(async () => {
  const browser = await puppeteer.launch({ headless: false });
  const page = await browser.newPage();
    await page.authenticate({ username: "username", password: "password" });
    await page.goto("https://website/.../all");
    await page.waitFor(120000); // beacuse It loads everything slowly and times out the default 30000

    console.log("started evalating");
    var data = await page.evaluate(() => {
      Array.from(
        document.querySelectorAll(
          "#data > div.data-wrapper > div > div > table > tbody  tr"
        )
      ).map(row => {
        return {
          site: row.querySelector("td:nth-child(2)").innerText,
          pass: row.querySelector("td:nth-child(10)").innerText,
          user: row.querySelector("td:nth-child(9)").innerText
        };
      });
    });
  console.log(data);
})();

//I want an array of objects but the result throws errors or comes back with [undefined,......]
0
Devonnnn 3 Ноя 2018 в 01:49

1 ответ

Лучший ответ

Функция страницы, переданная в page.evaluate() отсутствует return и поэтому не возвращает значения. В результате переменная data имеет вид undefined.

Обратите внимание на две дополнительные детали:

  1. Array.from() имеет встроенный map функция.

    Array.from(arrayLike, mapFn)     // good
    Array.from(arrayLike).map(mapFn) // bad
    
  2. Вам следует использовать let или const вместо По возможности, var.

    let data = ... // good
    var data = ... // bad
    

Вот версия вашего кода, которая должна работать правильно:

'use strict';

const puppeteer = require('puppeteer');

(async () => {
  const browser = await puppeteer.launch({
    headless: false,
  });

  const page = await browser.newPage();

  await page.authenticate({
    username: 'username',
    password: 'password',
  });

  await page.goto('https://website/.../all');

  await page.waitFor(120000);

  console.log('started evalating');

  let data = await page.evaluate(() => {
    return Array.from(
      document.querySelectorAll('#data > div.data-wrapper > div > div > table > tbody tr'),
      row => ({
        site: row.querySelector('td:nth-child(2)').innerText,
        pass: row.querySelector('td:nth-child(10)').innerText,
        user: row.querySelector('td:nth-child(9)').innerText,
      })
    );
  });

  console.log(data);
})();
3
Grant Miller 3 Ноя 2018 в 00:07