GithubHelp home page GithubHelp logo

findbaiduyunurlsondilidili's Introduction

                                           ██░
                         █    ██░           ░██░
                         ░████░██████░        ███   ░█
               ░████████░   ░████░░████░        ███  ██
                        ░███░  █████░ ███░   ░█  ░██░ ██
          ░████████████████████░░░████░ ███░  ███  ░██░█
     ░█████████░     ░██████████████ ███  ███░  ██   ███░
   ░█████░                     ░░████████░ ░███░███  ░███
                          ░███░    ░████████░███████  ███
         ░███████████████░██████████░█████████░░████░ ███
                     ░██████████░███░    ░██████  ███  ██
                ░██████████████████████░     ░███░ ██  ██
        ░███████████████████████░█░  ░██████░   ██░ █░███
     ░█████░██████████████░    ██░█████████████░    ████░
   ░████  ░█████████░     ░█████░█████████████████░  ███ 
   ░█   ██████      ░███████░ ░█████████████████████    ███
      ░███░   ░███████████   ████████████████████████░███████░
     ███  ░██████████████  ████████████████████░█░█ ████████████████████████░
    ███ ██████ █████░ ██  ███████████████████░░███░████████░██░
   ██  ███  ░████░░  ██ ████████████████████░█████ ████ ██░█
  ██ ░██   ████░ ██ ██░████████████████████░█████░ ██████░█
 ░█░███   ████ ░██  ██  ██████████████████ ███████ ░ ███
 ██░█░  ░███  ██    ░██  █████████████████ ████████  ███
██ █   ████ ░██  ██  ███░  ░██████████████ ████████████░
██    ███░ ███  ███ █ ░████░   ░█░████████ ████████░███
█    ███  ██░░░████  █ ░██████████░█░█████   ░████░███░
    ███ ░███ █░████░ ░█  ██████   ░██░ ███░   ░███ ███
    ██ ░███ ██ ░█████ ░██   █████        █     ███░██░
   ░██ ███  ██  ██████████░    ░█████         ░██████
   ███░███  ██   ██░░████████░    ░█████░      ██████
   █░█████ ░██  ░ ███ ░██████████░   ░███████░   ░░░
   ███████ ███  █░ ████░  ░█████████░   ███████░
  ░███████ ███░ ░█  ██████░  ░█████████░  █  ████░
  █ ████░█ ░███  ██  ████████░  ██░███████     ████
    ░███ ██ ███   ██  █░████████ ░  ░███░███    ████
     ███  █ ████   ██ ░░ █████████    ████ ░█    ███░
     ███░ █ ░███░  ███    ░█████████   ░███      ████
     ░███ ░░ ████   ██░    ██████████   ████     ░███
      ███  █  ████  ░██    ██████████    ████     ██░
      ███      ███░  ███   ██ ████████   ░████    ██
       ██░      ███  ░███   █ ░█████░    ░████    █░
       ███       ███ ░██ █  █  █████░    ░████   ██
        ██       ░██  ██       █████░    █████   █░
        ██        ░██ ██      ░█████     ██ ██   █
                   ██ ██░     █████     ██░ █░
                    ██░██     ████     ░██  █
                    ░█ ██    ███░     ░██
                     █ ██   ███      ░██
                       ██  ░██      ███
                        █  ██      ███
                        █ ██░    ███░
                          ██   ░██░

UseScrapy

环境:python3、scrapy、css选择器、win10、exVim 介绍:使用了scrapy爬虫框架来爬取Dilidili,初步实现了将dilidili中动漫的百度云链接爬取下来,若给出的是bbs链接,就进入bbs爬取,最终爬取结果会保存在此目录中的DilidiliUrls.json文件中,目前还没检测链接可用性。

findbaiduyunurlsondilidili's People

Contributors

liarchgh avatar

Watchers

James Cloos avatar  avatar  avatar

Recommend Projects

  • React photo React

    A declarative, efficient, and flexible JavaScript library for building user interfaces.

  • Vue.js photo Vue.js

    🖖 Vue.js is a progressive, incrementally-adoptable JavaScript framework for building UI on the web.

  • Typescript photo Typescript

    TypeScript is a superset of JavaScript that compiles to clean JavaScript output.

  • TensorFlow photo TensorFlow

    An Open Source Machine Learning Framework for Everyone

  • Django photo Django

    The Web framework for perfectionists with deadlines.

  • D3 photo D3

    Bring data to life with SVG, Canvas and HTML. 📊📈🎉

Recommend Topics

  • javascript

    JavaScript (JS) is a lightweight interpreted programming language with first-class functions.

  • web

    Some thing interesting about web. New door for the world.

  • server

    A server is a program made to process requests and deliver data to clients.

  • Machine learning

    Machine learning is a way of modeling and interpreting data that allows a piece of software to respond intelligently.

  • Game

    Some thing interesting about game, make everyone happy.

Recommend Org

  • Facebook photo Facebook

    We are working to build community through open source technology. NB: members must have two-factor auth.

  • Microsoft photo Microsoft

    Open source projects and samples from Microsoft.

  • Google photo Google

    Google ❤️ Open Source for everyone.

  • D3 photo D3

    Data-Driven Documents codes.