天下

记录修行的印记

Python中二进制数据处理模块struct使用

Python中二进制数据处理模块struct使用

Python中没有二进制类型,但是可以使用string字符串类型来存储二进制数据,然后使用struct模块来对二进制数据进行处理。下面将详细描述如何使用struct模块来处理二进制数据。
使用struct.pack把一个整数值打包成字符串,打开Python命令行,输入:
>>>import struct
>>> a =0x01020304
>>> str= struct.pack("I", a)
>>>repr(str)
"'\\x04\\x03\\x02\\x01'"
此时,str为一个字符串,字符串中的内容与整数a的二进制存储的内容相同。

使用struct.unpack把字符串解包成整数类型,如下:
>>> b =struct.unpack("I", str)
>>> b
(16909060,)
在解包之后,返回一个元组类型(tuple)的数据。
如果多个数据进行打包,可以在格式中指定打包的数据类型,然后数据通过参数传入:
>>> a ="hello"
>>> b ="world!"
>>> c =2
>>> d =45.123
>>> str= struct.pack("5s6sif", a, b, c, d)
等价于: struct.pack_into(“5s6sif”,str,  0, a, b, c, d)
>>> str
'helloworld!\x00\x02\x00\x00\x00\xf4}4B'
解包多个数据可以这样做:
>>>parts = struct.unpack("5s6sif", str)
等价于:  struct.unpack_from(“5s6sif”, str, 0)
>>>parts
('hello','world!', 2, 45.12300109863281)
从上可以看到浮点值在解包后与原来值不一样,这是因为浮点数的精度问题导致的。
struct模块中二进制格式化表示
Format C Type Python type Standard size 
x pad byte no value     
c char string of length 1
b signed char integer 1   
B unsigned char integer 1   
? _Bool bool 1 (1) 
h short integer 2   
H unsigned short integer 2   
i int integer 4   
I unsigned int integer 4   
l long integer 4   
L unsigned long integer 4   
q long long integer 8 (2) 
Q unsigned long long integer 8 (2) 
f float float 4 (3) 
d double float 8 (3) 
s char[] string     
p char[] string     
P void * integer




最后一个可以用来表示指针类型,占4个字节(32位),8个字节(64位)。
为了在与不同硬件结构之间交换数据,需要考虑字节序,如下:
字符
字节序
大小和对齐
@
本机字节序
本机,本机4字节对齐
=
本机字节序
标准,按原字节数对齐

小尾字节序
标准,按原字节数对齐

大尾字节序
标准,按原字节对齐
!
网络字节序(大尾)
标准,按原字节对齐

注:缺省的情况下,使用本机字节序(同@),可以通过上面的字符修改字节序。
计算格式字符串的大小函数:struct.calcsize(fmt)
>>>struct.calcsize("ihi")                       缺省为4字节对齐时,长度为12
12
>>>struct.calcsize("iih")                       当h在最后的时(此时不4字节对齐),长度为10
10
>>>struct.calcsize("@ihi")
12
>>>struct.calcsize("=ihi")
10
>>>struct.calcsize(">ihi")
10
>>>struct.calcsize("<ihi")
10
>>>struct.calcsize("!ihi")
10
注:二进制文件打开/读取的时候需要使用“rb”/“wb”模式以二进制方式打开/读取文件。
注:关于LE(little-endian)和BE(big-endian)区别:
LE—最符合人的思维的字节序,地址低位存储值的低位,地址高位存储值的高位。
BE—最直观的字节序,地址低位存储值的高位,地址高位存储值的低位。
例如:双字0X01020304在内存中存储方式,LE=0403 02 01,BE=01 02 03 04。

posted on 2013-03-24 18:27 天下 阅读(2709) 评论(0)  编辑 收藏 引用 所属分类: Python


只有注册用户登录后才能发表评论。
网站导航: 博客园   IT新闻   BlogJava   知识库   博问   管理


<2013年3月>
242526272812
3456789
10111213141516
17181920212223
24252627282930
31123456

导航

统计

常用链接

留言簿(4)

随笔分类(378)

随笔档案(329)

链接

最新随笔

搜索

最新评论