归档 | 微笑看你

2018

05

24

BeautifulSoup相关

#获取直接子节点：contents、children #获取父节点：parent #获取兄弟节点：next_siblings、next_sibling、prev

2018-05-24 spider

beautifulSoup

24

超级鹰

使用验证平台超级鹰(https://www.chaojiying.com/)字母数字验证码code import time from io impor

2018-05-24 spider

code

22

selenium

from selenium import webdriver from selenium.common.exceptions import TimeoutExc

2018-05-22 spider

selenium

21

youyaoqi

创建一个有个youyaoqi项目项目自带文件 scrapy.cfg youyaoqi init.py items.py middlewares.py pip

2018-05-21 spider

cartoon

19

summary

选择器一个标签有多个类属性时，取到这个标签的时候，多个类属性之间用不用空格隔开，正常表示result = soup.select('.-live-layout

2018-05-19 spider

随机总结

15

kaisha密码

用来破解一些加密文件 import urllib from urllib import parse def str2url(s): #s = '9hF

2018-05-15 spider

urllib

14

Linux-vim-practice

practice1_fish#!/usr/bin/python3 """ 穷举法:穷尽所有可能直到找到正确答案 """ def main(): """分

2018-05-14 Linux

Linux-practice

12

movie

爬电影获取的是电影的种子，将这个链接发给迅雷，可以直接下载 import json import re import requests def parse_

2018-05-12 spider

movie

11

practice——jd

数据库字段创建 create database jddb default character set=utf8; use jddb; create tabl

2018-05-11 spider

sqlalchemy

11

novel

novel爬取到小说的具体内容，要进行滤除处理，完整的代码# -*- coding:UTF-8 -*- from bs4 import Beautifu

2018-05-11 spider

novel

09

shop_mo

蘑菇街agent_list.py import random def get_random_agent(): agent_list = [

2018-05-09 spider

agent

07

music_wy

# coding=utf-8 ''' 爬取wy音乐榜单 ''' # 导入需要使用的模块 import os import csv import time imp

2018-05-07 spider

music