505读书笔记03

2件事，1是爬了一些nba 图片，2是决定以前的笔记不再管了，只是搞好现在的。

杜兰特

读书笔记03

1. 据说有心理学研究发现，商业白领的性能力与其工作业绩相关。
2. 一个苏格兰人送给一个妇女一只口红，他说：反正我能把口红要回来。
3. 君子怕小人，活人怕死鬼，男人怕老婆。
4. 跑步时，当你的身体从有氧状态转变为无氧状态时，虽然肌肉和细胞急需大量氧气，可身体却是在没有足够氧气下运转了，这时候“跑步者的愉悦感”就出现了。
5. 残篇123：事物的本质喜欢隐藏起来。
6. 中国传统文化的实质是一种伦理型的文化。
7.《春秋》的大旨着重揭露人的用心，凡事苛求动机。
8. 朱熹：世上无如人欲险，几人到此误平生。
9. 拈毫一字几踌躇。
10. 1英里=1.609公里，1英尺=30.48厘米， 1英寸=2.54厘米
11. 说谎的人都希望搭上诚实的便车，也就是希望别人都诚实，自然也就不会有人疑心他是在说谎。

展开全文 >>

430zhiboba

尝试下载直播吧的图片 ，还需要改进

zhiboba

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
# -*- coding: utf-8 -*-
# author: fanchuangwater  Administrator
# time: 2018/4/29 21:15
# about:  尝试下载直播吧的图片
# 这个 版本还需要再改进。。。


import re
import time
import os
import requests
from bs4 import BeautifulSoup
from multiprocessing.dummy import Pool
from fake_useragent import UserAgent


u = UserAgent()
# url = 'https://tu.zhibo8.cc/home/album/40517/'
headers = {
    'User-Agent': u.random
}

start_url = 'https://tu.zhibo8.cc/zuqiu/all/3'


# 访问一个网页 ，返回 response
def ask_page(url):
    s = requests.Session()
    page = s.get(url, headers=headers)
    # print(page.status_code)
    # print(page.encoding)
    return page


# 找到网页中想要的链接，并返回
def get_link(url):

    page = ask_page(url)
    soup = BeautifulSoup(page.text, 'lxml')
    lis = soup.find_all(src=re.compile('imgcdn.zhibo8.cc'))

    print(len(lis))         # 17
    for l in lis[1: -6]:
        # print(l)
        # print(l.get('src'))
        u = 'https:' + l.get('src')[: -10] + l.get('src')[-4:]
        # print(u)

        yield u


# 下载图片
def download(url):
    print("正在下载：" + url)
    pic = ask_page(url).content  # 获取图片的内容
    fn = url.split('/')[-1]
    with open(fn, 'wb') as f:
        f.write(pic)


#
def feed(start_url):
    full_pages = []
    bo = ask_page(start_url)
    soup = BeautifulSoup(bo.text, 'lxml')
    ss = soup.find_all(href=re.compile(r'/home/album/'))
    sss = ss[: -11]

    for s in range(len(sss)):
        if s % 2 == 0:
            # print(s.get('href'))
            print(sss[s].get('href'))
            full_page = 'https://tu.zhibo8.cc' + sss[s].get('href')
            full_pages.append(full_page)

    return full_pages


# 多线程下载
if __name__ == '__main__':
    # os.makedirs('z2', exist_ok=True)
    os.chdir('z2')

    start = time.time()
    for url in feed(start_url):
        lse = get_link(url)

        pool = Pool(20)
        pool.map(download, lse)
        pool.close()
        pool.join()

    end = time.time()
    print("下载完成！下载一共消耗的时间是：" + str(end - start))



    # ask_page(url)
    # get_link(url)

    # feed(start_url)

展开全文 >>

rename_files_with_python

借鉴了别人的写法，稍微改下：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
 # -*- coding: utf-8 -*-
# author: fanchuangwater  Administrator
# time: 2018/4/21 20:28
# description: 批量重命名文件


import os

path_name = input("Your file path: ")


def rename_files(path_name):
    i = 0
    all_file = os.listdir(path_name)

    for a in all_file:
        print(a)

        old_file = os.path.join(path_name, a)
        print(old_file)

        b = str(i) + a[-4:]
        print(b)

        new_file = os.path.join(path_name, b)
        print(new_file)

        os.rename(old_file, new_file)
        print('***************')
        i = i + 1


rename_files(path_name)

展开全文 >>

tag:

    缺失模块。
    1、请确保node版本大于6.2
    2、在博客根目录（注意不是yilia根目录）执行以下命令：
    npm i hexo-generator-json-content --save

    3、在根目录_config.yml里添加配置： 

      jsonContent:
    meta: false
    pages: false
    posts:
      title: true
      date: true
      path: true
      text: false
      raw: false
      content: false
      slug: false
      updated: false
      comments: false
      link: false
      permalink: false
      excerpt: false
      categories: false
      tags: true