Puppeteer - NodeJS Scraping - Versionsgeschichte

134.3.86.14: /* Ordner erstellen und NodeJS Projekt starten */

2022-12-07T13:16:13Z

Ordner erstellen und NodeJS Projekt starten

2022-12-07T06:48:11Z

Quickstart

2022-10-17T10:57:43Z

Bilder und Screenshots

2022-10-17T10:54:41Z

Beispiel Skripte

2022-09-12T18:46:06Z

2022-09-12T18:23:03Z

Network Request Control

2022-09-12T18:08:59Z

Zertifikate und Puppeteer

2022-09-12T12:34:14Z

2022-08-23T16:43:25Z

2022-08-19T12:35:23Z

← Nächstältere Version		Version vom 7. Dezember 2022, 13:16 Uhr
Zeile 19:		Zeile 19:

	Installiert auch Chromium. Schau mal in die package.json		Installiert auch Chromium. Schau mal in die package.json
		+
		+	==== Zusätzliche Module ====
		+	Oft benötigt man zusäzliche Module z.b. zum csv Parsen oder Zugriff auf das Filesystem. Diese einfach mit npm installieren:
		+	npm install csv-parser
		+	npm install fs
		+	usw.
		+	Dann kann man sie im Skript einbinden wie Pupeteer.
		+	const csv = require('csv-parser');
		+	const fs = require('fs');
		+	const puppeteer = require("puppeteer");

	=== Grundstruktur ===		=== Grundstruktur ===

@@ Zeile 12: / Zeile 12: @@
 Voraussetzung: VisualStudioCode, NodeJS installiert
-Ordner erstellen und NodeJS Projekt starten
+=== Ordner erstellen und NodeJS Projekt starten ===
-Terminal
+'''Terminal'''
   npm init -y
   npm install puppeteer
@@ Zeile 20: / Zeile 20: @@
 Installiert auch Chromium. Schau mal in die package.json
 Als Basis kommt fast immer ein Konstrukt ähnlich dem folgenden zum Einsatz. Im Wesentlichen passiert folgendes:
@@ Zeile 35: / Zeile 36: @@
 </syntaxhighlight>
-Beispiel Screenshot von Seite anfertigen:
+=== Beispiel Screenshot von Seite anfertigen ===
 <syntaxhighlight lang="javascript">
 const puppeteer = require("puppeteer");
@@ Zeile 48: / Zeile 49: @@
 </syntaxhighlight>
-Starten mit
+'''Starten mit'''
   node index.js

@@ Zeile 254: / Zeile 254: @@
 === Bilder und Screenshots ===
 ==== Bilder aus DOM speichern und in pdf umwandeln ====
   https://stackoverflow.com/questions/59677228/convert-screenshot-to-pdf-in-puppeteer
@@ Zeile 313: / Zeile 323: @@
+}
 </syntaxhighlight>
 === Zertifikate und Puppeteer ===
   [[Puppeteer - Zertifikate handeln]]

@@ Zeile 253: / Zeile 253: @@
 </syntaxhighlight>
 === Zertifikate und Puppeteer ===
   [[Puppeteer - Zertifikate handeln]]

@@ Zeile 7: / Zeile 7: @@
   https://blog.risingstack.com/pdf-from-html-node-js-puppeteer/
   https://advancedweb.hu/how-to-speed-up-puppeteer-scraping-with-parallelization/
 == Quickstart ==
   https://www.youtube.com/watch?v=Sag-Hz9jJNg

← Nächstältere Version		Version vom 12. September 2022, 18:23 Uhr
Zeile 257:		Zeile 257:
	=== Network Request Control ===		=== Network Request Control ===
	https://github.com/puppeteer/puppeteer/blob/main/examples/block-images.js		https://github.com/puppeteer/puppeteer/blob/main/examples/block-images.js
		+	[[Puppeteer - RequestInterception]]

← Nächstältere Version		Version vom 12. September 2022, 18:08 Uhr
Zeile 254:		Zeile 254:
	=== Zertifikate und Puppeteer ===		=== Zertifikate und Puppeteer ===
	[[Puppeteer - Zertifikate handeln]]		[[Puppeteer - Zertifikate handeln]]
		+
		+	=== Network Request Control ===
		+	https://github.com/puppeteer/puppeteer/blob/main/examples/block-images.js

← Nächstältere Version		Version vom 12. September 2022, 12:34 Uhr
Zeile 251:		Zeile 251:

	</syntaxhighlight>		</syntaxhighlight>
		+
		+	=== Zertifikate und Puppeteer ===
		+	[[Puppeteer - Zertifikate handeln]]

@@ Zeile 1: / Zeile 1: @@
 == Links ==
   https://www.youtube.com/watch?v=CngYXf9aeg8&list=PLGreOtbNU07rDURvnQpDaT3XokxlranUQ
   https://blog.risingstack.com/pdf-from-html-node-js-puppeteer/