# 下载包
wget https://www.python.org/ftp/python/3.6.0/Python-3.6.0.tgz
# 解压
tar xf Python-3.6.0.tgz
# 配置安装信息
 ./configure --prefix=/usr/local/python3/
# 编译
make && make install
# 配置环境变量
新建文件
vim /etc/profile.d/python3.sh
export PATH=$PATH:/usr/local/python3/bin/
执行一下下面命令
export PATH=$PATH:/usr/local/python3/bin/
# 验证
python3
Python 3.6.0 (default, Feb  1 2017, 14:56:52)
[GCC 4.8.5 20150623 (Red Hat 4.8.5-11)] on linux
Type "help", "copyright", "credits" or "license" for more information.
>>>

1.eval
In [634]: def getmethod(x,char='just for test'):
  ...:  return eval('str.%s' % x)(char)
  ...:
In [635]: getmethod('upper')
Out[635]: 'JUST FOR TEST'
2、getattr
In [650]: def getmethod2(x, char='just for test'):
  ...:  return getattr(char, x)()
  ...:
In [651]: getmethod2('upper')
Out[651]: 'JUST FOR TEST'

import uuid
# uuid.uuid1 基于时间戳
uuid.uuid1([node[, clock_seq]])
node - 默认主机的硬件地址
clock_seq 默认随机14位序列号
# uuid.uuid3  基于名字的MD5散列值
通过计算名字和命名空间的MD5散列值得到，保证了同一命名空间中不同名字的唯一性，
和不同命名空间的唯一性，但同一命名空间的同一名字生成相同的uuid。
uuid.uuid3(namespace, name)
# uuid.uuid4 基于随机数
由伪随机数得到，有一定重复概率，可以计算得到
# uuid.uuid5() 基于名称的SHA-1散列值
使用 Secure Hash Algorithm 1 算法

         空格 用%20代替
         " 用%22代替
         # 用%23代替
        % 用%25代替
        &用%26代替
        ( 用%28代替
        ) 用%29代替
       + 用%2B代替
        , 用%2C代替
        / 用%2F代替
        : 用%3A代替
        ; 用%3B代替
       < 用%3C代替
       = 用%3D代替
       > 用%3E代替
       ? 用%3F代替
       @ 用%40代替
        \ 用%5C代替
        | 用%7C代替


%E6%B2%B3%E6%BA%90

python中关于url中特殊字符的编码和解码
原创瞌睡的猫猫 最后发布于2018-06-07 18:44:25 阅读数 5627  收藏
展开
编码

from urllib.parse import quote
text = quote(text, 'utf-8')
1
2
解码

from urllib.parse import unquote
text = unquote(text, 'utf-8')
1
2
假如url = “https://www.baidu.com"一个Ajax请求，url的字符”:”,”/”等需要转码才能传递
那么就需要编码，代码如下

from urllib.parse import quote
url = "https://www.baidu.com/"
url_encode = quote(url, 'utf-8')
print(url_encode)
1
2
3
4
反之，则为解码
我们在解析网页中可能需要把一些特定的url解码出来以便直观显示等
代码如下：

from urllib.parse import unquote
href= "https%3A%2F%2Fwww.baidu.com%2F"
url_encode = unquote(href, 'utf-8')
print(url_encode)
1
2
3
4
输出结果


Python2中,对url解码  可以这样做：
>>> print urllib.unquote("%E6%B5%8B%E8%AF%95abc")



python3取消unquote属性

可以这样做：

import urllib.parse

print(urllib.parse.unquote("%E6%B5%8B%E8%AF%95abc"))

# 下载包
wget https://www.python.org/ftp/python/3.6.0/Python-3.6.0.tgz
# 解压
tar xf Python-3.6.0.tgz
# 配置安装信息
 ./configure --prefix=/usr/local/python3/
# 编译
make && make install
# 配置环境变量
新建文件
vim /etc/profile.d/python3.sh
export PATH=$PATH:/usr/local/python3/bin/
执行一下下面命令
export PATH=$PATH:/usr/local/python3/bin/
# 验证
python3
Python 3.6.0 (default, Feb  1 2017, 14:56:52)
[GCC 4.8.5 20150623 (Red Hat 4.8.5-11)] on linux
Type "help", "copyright", "credits" or "license" for more information.
>>>

1.eval
In [634]: def getmethod(x,char='just for test'):
  ...:  return eval('str.%s' % x)(char)
  ...:
In [635]: getmethod('upper')
Out[635]: 'JUST FOR TEST'
2、getattr
In [650]: def getmethod2(x, char='just for test'):
  ...:  return getattr(char, x)()
  ...:
In [651]: getmethod2('upper')
Out[651]: 'JUST FOR TEST'

file_dir = "sss"
for root, dirs, files in os.walk(file_dir):
  print(root) #当前目录路径
  print(dirs) #当前路径下所有子目录
  print(files) #当前路径下所有非目录子文件
  for filename in files:
    file_path = os.path.join(file_dir,filename)
    print file_path

import uuid
# uuid.uuid1 基于时间戳
uuid.uuid1([node[, clock_seq]])
node - 默认主机的硬件地址
clock_seq 默认随机14位序列号
# uuid.uuid3  基于名字的MD5散列值
通过计算名字和命名空间的MD5散列值得到，保证了同一命名空间中不同名字的唯一性，
和不同命名空间的唯一性，但同一命名空间的同一名字生成相同的uuid。
uuid.uuid3(namespace, name)
# uuid.uuid4 基于随机数
由伪随机数得到，有一定重复概率，可以计算得到
# uuid.uuid5() 基于名称的SHA-1散列值
使用 Secure Hash Algorithm 1 算法

         空格 用%20代替
         " 用%22代替
         # 用%23代替
        % 用%25代替
        &用%26代替
        ( 用%28代替
        ) 用%29代替
       + 用%2B代替
        , 用%2C代替
        / 用%2F代替
        : 用%3A代替
        ; 用%3B代替
       < 用%3C代替
       = 用%3D代替
       > 用%3E代替
       ? 用%3F代替
       @ 用%40代替
        \ 用%5C代替
        | 用%7C代替


%E6%B2%B3%E6%BA%90

python中关于url中特殊字符的编码和解码
原创瞌睡的猫猫 最后发布于2018-06-07 18:44:25 阅读数 5627  收藏
展开
编码

from urllib.parse import quote
text = quote(text, 'utf-8')
1
2
解码

from urllib.parse import unquote
text = unquote(text, 'utf-8')
1
2
假如url = “https://www.baidu.com"一个Ajax请求，url的字符”:”,”/”等需要转码才能传递
那么就需要编码，代码如下

from urllib.parse import quote
url = "https://www.baidu.com/"
url_encode = quote(url, 'utf-8')
print(url_encode)
1
2
3
4
反之，则为解码
我们在解析网页中可能需要把一些特定的url解码出来以便直观显示等
代码如下：

from urllib.parse import unquote
href= "https%3A%2F%2Fwww.baidu.com%2F"
url_encode = unquote(href, 'utf-8')
print(url_encode)
1
2
3
4
输出结果

https://www.baidu.com/
————————————————
版权声明：本文为CSDN博主「瞌睡的猫猫」的原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接及本声明。
原文链接：https://blog.csdn.net/sinat_35886587/article/details/80613618




Python2中,对url解码  可以这样做：
>>> print urllib.unquote("%E6%B5%8B%E8%AF%95abc")





python3取消unquote属性

可以这样做：

import urllib.parse

print(urllib.parse.unquote("%E6%B5%8B%E8%AF%95abc"))

#map函数，对单个参数进行处理
L = list(range(10))
print(list(map(lambda x : x*x, L)))

#在Python 3里,reduce()函数已经被从全局名字空间里移除了,它现在被放置在fucntools模块里用的话要 先引入：对两个参数进行处理
from functools import reduce
print (reduce(lambda x,y: x-y, [1,2,3,4,5]))

#filter()函数：过滤函数，返回符合条件的新的列表
def is_odd(x):
    return x % 2 == 1
filter(is_odd, [1, 4, 6, 7, 9, 12, 17])

lambda x: x * 2

# python循环中不包含域的概念
func_lis = []
for i in range(4):
    def func(x):
        return x*i
    func_lis.append(func)
for f in func_lis:
    print(f(2))
# 6
# 6
# 6
# 6
loop在python中是没有域的概念的，flist在像列表中添加func的时候，并没有保存i的值，而是当执行f(2)的时候才去取，这时候循环已经结束，i的值是3，所以结果都是6

from functools import partial

def mod( n, m ):
  return n % m

mod_by_100 = partial( mod, 100 )

print mod( 100, 7 )  # 2
print mod_by_100( 7 )  # 2

# @classmethod 指定类方法
class Person(object):
    count = 0
    @classmethod
    def how_many(cls):
        return cls.count

class Person(object):
    def __init__(self, name, gender):
        self.name = name
        self.gender = gender

class Student(Person):
    def __init__(self, name, gender, score):
        super(Student, self).__init__(name, gender)
        self.score = score

isinstance("ss", (str,list) )

# 在函数外部时，获取函数名称
func.__name__

# 在函数内部时，获取函数名称
sys._getframe().f_code.co_name

# 在类内部时，获取类名称
self.__class__.name

# coding:utf-8
import inspect

def get__function_name():
    '''获取正在运行函数(或方法)名称'''
    return inspect.stack()[1][3]

def yoyo():
    print("函数名称：%s"%get__function_name())

class Yoyo():
    def yoyoketang(self):
        '''# 上海-悠悠 QQ群：588402570'''
        print("获取当前类名称.方法名：%s.%s" % (self.__class__.__name__, get__function_name()))

if __name__ == "__main__":
    yoyo()
    Yoyo().yoyoketang()

# 运行结果：
函数名称：yoyo
获取当前类名称.方法名：Yoyo.yoyoketang

x, y ,*z = list(range(0,10))

zip([[1,2],[2,3]])

json.loads()
json.dumps()

# Python默认采用字典来保存类的实例属性，但对于小类来说，会浪费内存空间
# 可以使用 __solts__ 来给定固定集合的属性分配空间，不采用字典，可以减少约50%的内存消耗

class MyClass(object):
    __solts__ = ['name', 'cert']
    def __init__(self, name=None, cert=None):
        self.name = name
        self.crt = cert

# 监测内存使用
https://github.com/ianozsvald/ipython_memory_usage

defaultdict
counter
deque
namedtuple
enum.Enum

# for .. else 语句 用于捕获for循环是正常结束还是break跳出
# else 在循环正常结束时调用，break跳出循环时不会调用。

test_num = 5
for n in range(0,10):
    if n == test_num:
        print('>>> 11')
        break
else:
    print('>>> 22')

# test_num = 5 时，break跳出循环 打印 11
# test_num = 20 时，循环解除，打印 22

函数缓存,将一个函数的返回值快速的缓存或取消缓存。
适用于 IO密集型的函数 频繁使用相同参数调用时，可以节省大量时间。

from functools import lru_cache

# maxsize 最多缓存最近多少个返回值
@lru_cache(maxsize=22)
def fib(n):
    if n < 2:
        return n
    return fib(n-1) + fib(n-2)
print([fib(n) for n in range(100)])

# 上下文管理器

# 方式1 with语句 例如 with open
# 方式2 使用类来做上下文管理器
# 方式3 基于生成器来实现

# with open 方式
with open('aa.csv', 'wb') as file_obj:
    file_obj.write(b'demo')


# Python 3.7.4
# 类方式
class File(object):

    def __init__(self, file_name, method):
        self.file_obj = open(file_name, method)

    def __enter__(self):
        return self.file_obj

    def __exit__(self, type, value, traceback):
        if value is not None:
            print(type)
            print(value)
        self.file_obj.close()
        return True

with File('a.csv', 'wb') as file_obj:
    file_obj.write(b'demo')

# 生成器方式
from contextlib import contextmanager
@contextmanager
def open_file(name, method):
    f = open(name, method)
    yield f
    f.close

由于os.system是没有返回值的，获取返回值有以下三种方式：
1.使用commands内置模块
import commands
resp = commands.getoutput("hostname")
2.使用os.popen获取返回值
resp = os.popen('ps -ef | grep sssss').readlines()
3.使用subprocess内置模块
from subprocess import Popen,PIPE
resp = Popen("ps -ef | grep sssss",shell=True,stdout=PIPE,stderr=PIPE).stdout.readlines()

# python3
>>> import time
>>> for x in range(10):
...     time.sleep(1)
...     print("Progress {:2.1%}".format(x / 10), end="\r")
# 下列三行信息输出在同一行
Progress 30.0%
Progress 50.0%
>>> ress 90.0%
# python2
import time
import sys
for x in range(5):
    time.sleep(1)
    msg = ">>>> %s\r"%str(x)
    sys.stdout.write(msg)
    sys.stdout.flush()

#! /bin/python
import sys
for arg in sys.argv:
    print arg

import md5
src = 'this is a md5 test.'
m1 = md5.new()
m1.update(src)
print m1.hexdigest()

# eval
def getmethod(x,char='just for test'):
    return eval('str.%s' % x)(char)
In [635]: getmethod('upper')
Out[635]: 'JUST FOR TEST'
# getattr
In [650]: def getmethod2(x, char='just for test'):...:
    return getattr(char, x)()...:
In [651]: getmethod2('upper')
Out[651]: 'JUST FOR TEST'
# 利用内置库operator
In [648]: def getmethod3(x, char='just for test'):...:
    return operator.methodcaller(x, char)(str)...:
In [649]: getmethod3('upper')
Out[649]: 'JUST FOR TEST'

# Python的美化打印 特别是打印 嵌套字典时非常好用
from prettyprinter import cpprint
cpprint(stats_info_data)

#map函数，对单个参数进行处理
L = list(range(10))
print(list(map(lambda x : x*x, L)))

#在Python 3里,reduce()函数已经被从全局名字空间里移除了,它现在被放置在fucntools模块里用的话要 先引入：对两个参数进行处理
from functools import reduce
print (reduce(lambda x,y: x-y, [1,2,3,4,5]))

#filter()函数：过滤函数，返回符合条件的新的列表
def is_odd(x):
    return x % 2 == 1
filter(is_odd, [1, 4, 6, 7, 9, 12, 17])

lambda x: x * 2

# python循环中不包含域的概念
func_lis = []
for i in range(4):
    def func(x):
        return x*i
    func_lis.append(func)
for f in func_lis:
    print(f(2))
# 6
# 6
# 6
# 6
loop在python中是没有域的概念的，flist在像列表中添加func的时候，并没有保存i的值，而是当执行f(2)的时候才去取，这时候循环已经结束，i的值是3，所以结果都是6

from functools import partial

def mod( n, m ):
  return n % m

mod_by_100 = partial( mod, 100 )

print mod( 100, 7 )  # 2
print mod_by_100( 7 )  # 2

# @classmethod 指定类方法
class Person(object):
    count = 0
    @classmethod
    def how_many(cls):
        return cls.count

class Person(object):
    def __init__(self, name, gender):
        self.name = name
        self.gender = gender

class Student(Person):
    def __init__(self, name, gender, score):
        super(Student, self).__init__(name, gender)
        self.score = score

isinstance("ss", (str,list) )

# 在函数外部时，获取函数名称
func.__name__

# 在函数内部时，获取函数名称
sys._getframe().f_code.co_name

# 在类内部时，获取类名称
self.__class__.name

# coding:utf-8
import inspect

def get__function_name():
    '''获取正在运行函数(或方法)名称'''
    return inspect.stack()[1][3]

def yoyo():
    print("函数名称：%s"%get__function_name())

class Yoyo():
    def yoyoketang(self):
        '''# 上海-悠悠 QQ群：588402570'''
        print("获取当前类名称.方法名：%s.%s" % (self.__class__.__name__, get__function_name()))

if __name__ == "__main__":
    yoyo()
    Yoyo().yoyoketang()

# 运行结果：
函数名称：yoyo
获取当前类名称.方法名：Yoyo.yoyoketang

x, y ,*z = list(range(0,10))

zip([[1,2],[2,3]])

json.loads()
json.dumps()

# Python默认采用字典来保存类的实例属性，但对于小类来说，会浪费内存空间
# 可以使用 __solts__ 来给定固定集合的属性分配空间，不采用字典，可以减少约50%的内存消耗

class MyClass(object):
    __solts__ = ['name', 'cert']
    def __init__(self, name=None, cert=None):
        self.name = name
        self.crt = cert

# 监测内存使用
https://github.com/ianozsvald/ipython_memory_usage

defaultdict
counter
deque
namedtuple
enum.Enum

# for .. else 语句 用于捕获for循环是正常结束还是break跳出
# else 在循环正常结束时调用，break跳出循环时不会调用。

test_num = 5
for n in range(0,10):
    if n == test_num:
        print('>>> 11')
        break
else:
    print('>>> 22')

# test_num = 5 时，break跳出循环 打印 11
# test_num = 20 时，循环解除，打印 22

函数缓存,将一个函数的返回值快速的缓存或取消缓存。
适用于 IO密集型的函数 频繁使用相同参数调用时，可以节省大量时间。

from functools import lru_cache

# maxsize 最多缓存最近多少个返回值
@lru_cache(maxsize=22)
def fib(n):
    if n < 2:
        return n
    return fib(n-1) + fib(n-2)
print([fib(n) for n in range(100)])

# 上下文管理器

# 方式1 with语句 例如 with open
# 方式2 使用类来做上下文管理器
# 方式3 基于生成器来实现

# with open 方式
with open('aa.csv', 'wb') as file_obj:
    file_obj.write(b'demo')


# Python 3.7.4
# 类方式
class File(object):

    def __init__(self, file_name, method):
        self.file_obj = open(file_name, method)

    def __enter__(self):
        return self.file_obj

    def __exit__(self, type, value, traceback):
        if value is not None:
            print(type)
            print(value)
        self.file_obj.close()
        return True

with File('a.csv', 'wb') as file_obj:
    file_obj.write(b'demo')

# 生成器方式
from contextlib import contextmanager
@contextmanager
def open_file(name, method):
    f = open(name, method)
    yield f
    f.close

def append(value, arr=[]):
    arr.append(value)
    return arr

print append(1)
print append(1)
print append(1)

# 返回结果
[1]
[1, 1]
[1, 1, 1]

gen = (i for i in range(5))
print (1 in gen)
print (1 in gen)

# 运行结果：
True
False

gen = (i for i in range(5))
arr = list(gen)  # 转成 list 或 tuple
print (1 in arr)
print (1 in arr)

# 运行结果：
True
True

import copy
def generate_info(mark, num=3, data=[]):
    # data2 = copy.deepcopy(data)
    data2 = data
    print(f'>> 标记信息 Mark: {mark} num:{num}')
    query_data = [{
        'mark': mark,
        'num': num,
    }]
    data2.extend(query_data)
    if num >= 1:
        num = num - 1
        data2 = generate_info(mark, num, copy.deepcopy(data2))
    return data2

for i in range(0, 2):
    tmp_data = generate_info(i, i)
    for tmp in tmp_data:
        print(tmp)
# 运行结果
>> 标记信息 Mark: 0 num:0
{'mark': 0, 'num': 0}
>> 标记信息 Mark: 1 num:1
>> 标记信息 Mark: 1 num:0
{'mark': 0, 'num': 0}
{'mark': 1, 'num': 1}
{'mark': 1, 'num': 0}

# !!! 异常点
i == 2时，返回值包含了 i==1 的值

import copy
# def generate_info(mark, num=3, data=[]):
def generate_info(mark, num=3, data=None):
    data2 = data if data is not None else []
    # data2 = copy.deepcopy(data)
    # data2 = data
    print(f'>> 标记信息 Mark: {mark} num:{num}')
    query_data = [{
        'mark': mark,
        'num': num,
    }]
    data2.extend(query_data)
    if num >= 1:
        num = num - 1
        data2 = generate_info(mark, num, copy.deepcopy(data2))
    return data2

for i in range(0, 2):
    tmp_data = generate_info(i, i)
    for tmp in tmp_data:
        print(tmp)

# 返回结果正常
>> 标记信息 Mark: 0 num:0
{'mark': 0, 'num': 0}
>> 标记信息 Mark: 1 num:1
>> 标记信息 Mark: 1 num:0
{'mark': 1, 'num': 1}
{'mark': 1, 'num': 0}

import copy
def generate_info(mark, num=3, data=[]):
    data2 = copy.deepcopy(data)
    # data2 = data
    print(f'>> 标记信息 Mark: {mark} num:{num}')
    query_data = [{
        'mark': mark,
        'num': num,
    }]
    data2.extend(query_data)
    if num >= 1:
        num = num - 1
        data2 = generate_info(mark, num, copy.deepcopy(data2))
    return data2

for i in range(0, 2):
    tmp_data = generate_info(i, i)
    for tmp in tmp_data:
        print(tmp)
# 返回结果正常
>> 标记信息 Mark: 0 num:0
{'mark': 0, 'num': 0}
>> 标记信息 Mark: 1 num:1
>> 标记信息 Mark: 1 num:0
{'mark': 1, 'num': 1}
{'mark': 1, 'num': 0}

# 1. 列表推导式中的对象泄露问题
[i for i in range(0, 10)]
i 对象会存在

# 2. 嵌套列表创建
li = [[]]*3
li[0].append(1)
# [[1], [1], [1]]
# 由于创建了三个指向同一个list的对象，而非三个对象

由于os.system是没有返回值的，获取返回值有以下三种方式：
1.使用commands内置模块
import commands
resp = commands.getoutput("hostname")
2.使用os.popen获取返回值
resp = os.popen('ps -ef | grep sssss').readlines()
3.使用subprocess内置模块
from subprocess import Popen,PIPE
resp = Popen("ps -ef | grep sssss",shell=True,stdout=PIPE,stderr=PIPE).stdout.readlines()

# python3
>>> import time
>>> for x in range(10):
...     time.sleep(1)
...     print("Progress {:2.1%}".format(x / 10), end="\r")
# 下列三行信息输出在同一行
Progress 30.0%
Progress 50.0%
>>> ress 90.0%
# python2
import time
import sys
for x in range(5):
    time.sleep(1)
    msg = ">>>> %s\r"%str(x)
    sys.stdout.write(msg)
    sys.stdout.flush()

#! /bin/python
import sys
for arg in sys.argv:
    print arg

import md5
src = 'this is a md5 test.'
m1 = md5.new()
m1.update(src)
print m1.hexdigest()

# eval
def getmethod(x,char='just for test'):
    return eval('str.%s' % x)(char)
In [635]: getmethod('upper')
Out[635]: 'JUST FOR TEST'
# getattr
In [650]: def getmethod2(x, char='just for test'):...:
    return getattr(char, x)()...:
In [651]: getmethod2('upper')
Out[651]: 'JUST FOR TEST'
# 利用内置库operator
In [648]: def getmethod3(x, char='just for test'):...:
    return operator.methodcaller(x, char)(str)...:
In [649]: getmethod3('upper')
Out[649]: 'JUST FOR TEST'

# Python的美化打印 特别是打印 嵌套字典时非常好用
from prettyprinter import cpprint
cpprint(stats_info_data)