php - 如何使用 Goutte 在 laravel 5.2 中进行抓取？

Question

我是 Laravel 5.2 的新手，我想抓取一个网页。我开始知道可以使用 Goutte 来完成.并且不知道如何使用它。

我已经安装了 Laravel 和 Goutte，但是如何使用呢？如何设置Controller、路由和所有需要的东西？

Answer 1

我找到了答案。我只是将 url 添加到路由并创建了 Controller

Route::resource('scrape','WebScraperController@index');

WebScraperController 内部

<?php

  namespace App\Http\Controllers;

  use Illuminate\Http\Request;
  use Goutte\Client;
  use Symfony\Component\DomCrawler\Crawler;
  use App\Http\Requests;
  class WebScraperController extends Controller
  {
  public function index()
  {
  //  Create a new Goutte client instance
    $client = new Client();

 //  Hackery to allow HTTPS
    $guzzleclient = new \GuzzleHttp\Client([
        'timeout' => 60,
        'verify' => false,
    ]);

    // Create DOM from URL or file
    $html = file_get_html('https://www.facebook.com');

    // Find all images
    foreach ($html->find('img') as $element) {
        echo $element->src . '<br>';
    }

    // Find all links
    foreach ($html->find('a') as $element) {
        echo $element->href . '<br>';
    }
  }
}