編碼與解碼

1.字符編碼
編碼與解碼
ascii碼(不能直接寫字符,漢字從而引入了GBK碼)
GB2312 收錄了7445個漢字及字符;
GBK1.0 收錄了21886個漢字及字符;
GB18030 收錄了27484個漢字及字符;
unicode 國際標準但都需要倆個字節;
utf-8 是優化的國際化的統一標準,(是可變長的字符集)英文及其字符用1byte表示,而漢字要用3bite表示;

2 .代碼中的體現

res1='你好'
res2='hello'

print(res1.encode('utf-8') ,type(res1.encode('utf-8')))   # b'**\xe4\xbd\xa0**\xe5\xa5\xbd'  bytes類型
print(res2.encode('utf-8'))         # b'hello'

print(res1.encode('gbk'),type(res1.encode('gbk')))   # b'**\xc4\xe3**\xba\xc3'                bytes類型
print(res2.encode('gbk'))        # b'hello'

能夠發現英文在gbk與utf-8的編碼下是不發生變換的;而漢字在gbk的編碼下是2字節,而在utf-8的編碼下是3字節,類型是bytes類型

ret1=b'\xe4\xbd\xa0\xe5\xa5\xbd'
print(ret1.decode('utf-8'))
print(ret1.decode('gbk'))      #  會出現亂碼 浣犲ソ

能夠發現utf-8編碼下的bytes類型,由gbk解碼能夠解碼但出現了亂碼,因爲gbk每2個字節解碼一次

ret2=b'\xc4\xe3\xba\xc3'
print(ret2.decode('gbk'))     #  能夠解碼爲    你好

print(ret2.decode('utf-8'))
#  報錯的類型:  UnicodeDecodeError: 'utf-8' codec can't decode byte 0xc4 in position 0: invalid continuation byte
能夠發現utf-8編碼下的bytes類型,由gbk解碼能夠解碼但出現了亂碼,因爲gbk每2個字節解碼一次

3.實際中遇到的問題(模擬黏包問題)`

server端:

import socket

sk=socket.socket()
sk.bind(('127.0.0.1',8091))
sk.setsockopt(socket.SOL_SOCKET,socket.SO_REUSEADDR,1)

sk.listen()
conn,addre=sk.accept()

while True:
    cmd=input('>>>')
    if cmd=='Q':
        conn.send(cmd.encode('utf-8'))
        break
    conn.send(cmd.encode('utf-8'))
    res=conn.recv(1024)
    print(res.decode('utf-8'))
conn.close()

sk.close()

client端:


import socket
import subprocess

sk=socket.socket()

sk.connect(('127.0.0.1',8091))

while True:
    cmd=sk.recv(1024).decode('utf-8')
    if cmd=='Q':
        break
    res=subprocess.Popen(cmd,shell=True,stdout=subprocess.PIPE,stderr=subprocess.PIPE)  # stdout;stderr拿到的數據就是bytes類型
    stdout='stdout:'+res.stdout.read().**decode('gbk')**     # 這裏的解碼只能是gbk,因爲它的編碼形式就是gbk
    stderr = 'stderr:' + res.stderr.read()**.decode('gbk')**  
    sk.send(bytes(stdout,encoding='utf-8'))
    sk.send(bytes(stderr,encoding='utf-8'))

sk.close()

4.個注意的問題:
1.socket,send('數據類型只能是bytes,傳碼之前一定要編碼');
2.str+ bytes是不能拼接的,只有將bytes類型解碼成str才能拼接;

(能力有限,多多指教^-^)

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章