python FAQ 问答题汇总（一）

python FAQ 问答题集锦（一）

自己写了几个常用的python小函数，用于练习和日常使用：(Python版本：python2.7)

0、文件的编码：

很多初学python的朋友，经常遇到文件编码问题。处理不当，会出现乱码，严重的，会因为在文件内写入不同格式的编码python代码，造成python无法编译。

这里给出解决的方法：推荐大家使用utf-8编码，它不仅包含了西欧的字符集，还包含了亚洲等地区的字符集。

在python的.py文件的第一行，写入：#-*-coding:utf-8-*-

如：

#-*-coding:utf-8-*-# some python code here

这样，就解决了问题。

1、按照正则表达式，在指定的目录中查找匹配的文件列表

def seachFiles(folder, pattern):    '''    @param folder: 指定检索的目录    @param pattern: 指定检索匹配的正则表达式    '''    if not os.path.isdir(folder):        print 'Error:', folder, 'is not a valid folder.'        return None    else:        rs = []        prog = re.compile(pattern)        for tmp in os.walk(folder):            root = tmp[0]            fileNames = tmp[2]            for fileName in fileNames:                path = os.path.join(root, fileName).strip()                m = prog.match(path)                if m :                    rs.append(path)        return rs

2、对指定的文件，统计文件内容的行数

def countFileRows(path):     '''    @param path: 需要统计行数的文件名称    '''    if not os.path.isfile(path):        print 'Error:', path, 'is not a valid path.'        return None    else:        with open(path, 'r') as f:            return len(f.readlines())

3、对指定文件列表，按照正则表达式对文件列表中的每个文件的每一行进行匹配，把匹配的结果作为列表返回

def matchLines(files, pattern):    '''    @param files: 需要扫描的文件的列表[r'c:\hello.txt',r'c:\world.txt']    @param pattern: 需要匹配的正则表达式    '''    if files is None or 0 == len(files) or pattern is None:        print 'Error: please check args'    else:        lst = []        prog = re.compile(pattern)        for tmpFile in files:            if not os.path.isfile(tmpFile):                print 'Error:', tmpFile, 'is not a valid tmpFile'            else:                with open(tmpFile) as f:                    for tmpStr in f:                        line = tmpStr.strip()                        if line == '':                            continue                        else:                            m = prog.match(line)                            if m:                                lst.append(line)        return lst

? ?这里在给出一个精简版的代码，主要是利用python的列表解析功能：

def matchLinesListAnalysis(files, pattern):    lst = []    prog = re.compile(pattern)    for tmpFile in files:        lst += [line for line in open(tmpFile) if prog.match(line.strip())]    return lst

4、得到指定范围(_range)，指定个数(count)的具有重复元素的列表

def createRandomNumber(_range, count):    '''    @note: 得到指定范围(_range)，指定个数(count)的具有重复元素的列表    @param _range: 随机数的范围    @param count: 随机数的个数    '''    return [int(math.floor(random.random() * _range)) for x in range(count)]

5、输入一个具有重复元素的列表，生成一个字典。这个字典的key就是列表的元素，字典的value是该元素在列表中重复出现的次数

def countRepeat(lst):    '''    @note: 输入一个具有重复元素的列表，生成一个字典。 这个字典的key就是列表的元素，字典的value是该元素在列表中重复出现的次数    @param lst: 具有重复元素的列表     '''    if lst is None or 0 == len(lst):        print 'Error: args is None or empty.'        return None    else:        d = {}        for key in lst:            d[key] = d.get(key, 0) + 1        return d

6、python实现定时任务，APScheduler定时框架的简单示例

APScheduler的内容请参考：?http://packages.python.org/APScheduler/index.html

示例：间隔 1 秒钟，打印一句话

class SchedulerTest(object):    def __init__(self):        self.sched = Scheduler(daemonic=False)        print  self.sched    def start(self):        self.sched.add_cron_job(self.job, year='*', month='*', day='*', hour='*', minute='*', second='*/2', args=['hehe'])        self.sched.start()    def job(self, word):        print 'say ', word

7、文件列求和函数

描述：给定一个文件，文件的第一列输入数字。用python编写一个函数，将该列的所有数字求和

目的：练习文件操作，列表解析的操作

文件的内容如下：C:\Users\test\Desktop\new ?2.txt

1233.2 -10001236.55

?python的函数如下：

def calculateColumn(f):    return sum([float(x.strip()) for x in open(f) if x.strip() != ''])

8、数据查出记录，在该记录中进行数据筛选。（其实可以通过SQL的where子句中实现筛选）

[('tom', '12', 'm'), ('jack', '12', 'm'), ('lucy', '12', 'w'), ('mery', '13', 'w'), ('jack', '23', 'm')]

找出其中年纪12岁的，女性成员

代码如下：

    f = [('tom', '12', 'm'), ('jack', '12', 'm'), ('lucy', '12', 'w'), ('mery', '13', 'w'), ('jack', '23', 'm')]    print [x for x in f if x[1] == '12' and x[2] == 'w']

9、链接MySQL数据库

为了进行MySQL的数据库连接，插入数据，查询数据，需要进行一些前期的准备，主要是连接MySQL数据的lib的安装。

我使用的是?MySQLdb。下载地址：

http://sourceforge.net/projects/mysql-python/

或者：

http://www.codegood.com/

文档：

http://mysql-python.sourceforge.net/MySQLdb.html

我自己写了一个小例子

描述：创建一个数据库 testdb，创建一个表 user_info（建表语句见下例）.用MySQLdb插入数据，然后进行查询。

目的：配置文件的读取，MySQL数据的连接，数据的插入，数据的查询

表user_info的建表语句如下：

create database testdb;    use testdb;    create table user_info(        id bigint(20) auto_increment,        name varchar(30) not null,        sex varchar(1) not null,        email varchar(50),        primary key (id)    ) ENGINE=MyISAM AUTO_INCREMENT=1 DEFAULT CHARSET=gbk;

?python的代码如下：

class User(object):        def __init__(self, id, name, sex, email):        self.id = id        self.name = name        self.sex = sex        self.email = email        class MySQLTest(object):    '''    create database testdb;    use testdb;    create table user_info(        id bigint(20) auto_increment,        name varchar(30) not null,        sex varchar(1) not null,        email varchar(50),        primary key (id)    ) ENGINE=MyISAM AUTO_INCREMENT=1 DEFAULT CHARSET=gbk;    '''    def __init__(self, configFile):        self.config = ConfigParser.ConfigParser()        self.config.read(configFile)        self.section = 'mysql_connection_1'            def getConnection(self):        host = self.config.get(self.section, 'host')        user = self.config.get(self.section, 'user')        passwd = self.config.get(self.section, 'passwd')        db = self.config.get(self.section, 'db')        port = self.config.getint(self.section, 'port')# getint        charset = self.config.get(self.section, 'charset')        conn = MySQLdb.connect(host=host, user=user, passwd=passwd, db=db, port=port, charset=charset)        return conn        def createUsers(self, count):        conn = None        cursor = None        try:            conn = self.getConnection()            cursor = conn.cursor()            for i in range(count):                name = 'test-' + str(i)                sex = 'w' if i % 2 == 0 else 'm'                email = name + '@' + '163.com'                sql = "insert into user_info(name,sex,email) values('" + name + "','" + sex + "','" + email + "')"                cursor.execute(sql)        except Exception as e:            print e        finally:            if cursor:                cursor.close()            if conn :                conn.close()                    def getUserList(self):        lst = []        conn = None        cursor = None        try:            conn = self.getConnection()            cursor = conn.cursor()            cursor.execute('select * from user_info')            for tmp in cursor.fetchall():                row = dict(zip([d[0] for d in cursor.description], tmp))                user = User(row.get('id'), row.get('name'), row.get('sex'), row.get('email'))                lst.append(user)            return lst        except Exception as e:            print e            return None        finally:            if cursor :                cursor.close()            if conn:                conn.close()

配置文件如下：E:\python_workspace\learningPython\src\congfig.ini?

[mysql_connection_1]host=localhostuser=rootpasswd=rootdb=testdbport=3306charset=utf8

?运行如下：

if __name__ == '__main__':    mySQLTest = MySQLTest(r'E:\python_workspace\learningPython\src\congfig.ini')    #mySQLTest.createUsers(100)    userList = mySQLTest.getUserList()    for user in userList:        print user.id, user.name, user.sex, user.email

10、日期计算，是人们日常经常遇到的一个问题。人们生活中，到处可以看见日期的影子。比如，生日，“今天”，“昨天”，“明天”，“某日至某日，XXX计划干什么事情”... 等等。

所以这里给出了一个DateUtils的类，里面记述了一些使用的日期小函数。这里的DateUtils的默认日期格式： yyyy-MM-dd

python代码如下：

class DateUtils(object):    '''    Date的工具类           备注：本工具类，日期格式全部使用日期短格式：%Y-%m-%d           例如：2012-01-01    '''    DATE_SHORT_PATTERN = r'(\d{4})-(\d{2})-(\d{2})'    DATE_SHORT_FORMAT = '%Y-%m-%d'        def __init__(self):        pass        def getMondayAndSundayByDate(self, dateStr):              '''    @param dateStr: 输入的任意的天的字符串，如：2012-05-09        备注：得到输入的日期所在的周一和周日的日期元组，如： ('2012-05-07', '2012-05-13')        '''        monday = self.getMondayByDate(dateStr)        sunday = self.getSundayByDate(dateStr)        return (monday, sunday)            def getMondayByDate(self, dateStr):        '''        @param dateStr: 输入的任意的天的字符串，如：2012-05-09        备注：得到输入的日期所在的周一 结果：2012-05-07        '''                return self._getWeekdayByDate(dateStr, 0)    def getTuesdayByDate(self, dateStr):        '''        @param dateStr: 输入的任意的天的字符串，如：2012-05-09        备注：得到输入的日期所在的周二 结果：2012-05-08        '''        return self._getWeekdayByDate(dateStr, 1)    def getWednesdayByDate(self, dateStr):        '''        @param dateStr: 输入的任意的天的字符串，如：2012-05-09        备注：得到输入的日期所在的周三 结果：2012-05-09        '''        return self._getWeekdayByDate(dateStr, 2)    def getThursdayByDate(self, dateStr):        '''        @param dateStr: 输入的任意的天的字符串，如：2012-05-09        备注：得到输入的日期所在的周四 结果：2012-05-10        '''        return self._getWeekdayByDate(dateStr, 3)    def getFridayByDate(self, dateStr):        '''        @param dateStr: 输入的任意的天的字符串，如：2012-05-09        备注：得到输入的日期所在的周五 结果：2012-05-11        '''        return self._getWeekdayByDate(dateStr, 4)    def getSaturdayByDate(self, dateStr):        '''        @param dateStr: 输入的任意的天的字符串，如：2012-05-09        备注：得到输入的日期所在的周六 结果：2012-05-12        '''        return self._getWeekdayByDate(dateStr, 5)    def getSundayByDate(self, dateStr):        '''        @param dateStr: 输入的任意的天的字符串，如：2012-05-09        备注：得到输入的日期所在的周日 结果：2012-05-13        '''        return self._getWeekdayByDate(dateStr, 6)            def _getWeekdayByDate(self, dateStr, weekday):        '''        @param dateStr: 输入的任意的天的字符串，如：2012-05-09         @param weekday: 周几的数字，从 0 - 6，是周一至周日        备注：得到输入日期所在的周几的日期         '''        d = self.parseDate(dateStr)        if d.weekday() &gt; weekday:            while d.weekday() != weekday:                d -= datetime.timedelta(days=1)        elif d.weekday() &lt; weekday:            while d.weekday() != weekday:                d += datetime.timedelta(days=1)        return self.formartDate(d)            def getYestoday(self):        '''        得到昨天的日期        '''        return datetime.date.today() - datetime.timedelta(days=1)        def getToday(self):        '''        得到今天的日期        '''        return datetime.date.today()        def getTomorrow(self):        '''        得到明天的日期        '''        return datetime.date.today() + datetime.timedelta(days=1)        def getDateStrList(self, beginDate, endDate):        '''        得到两个日期之间的日期字符串列表（包含起始日期和结束日期）        '''        return [self.formartDate(x) for x in self.getDateList(beginDate, endDate)]        def getDateList(self, beginDate, endDate):        '''        得到两个日期之间的日期列表（包含起始日期和结束日期）        '''        begin = self.parseDate(beginDate)        end = self.parseDate(endDate)        if begin &gt; end:            print 'Error: beginDate is after endDate'            return None        else:            return [begin + datetime.timedelta(days=i) for i in range(self.getDays(beginDate, endDate) + 1)] # days +1 包括结束日期            def getDays(self, beginDate, endDate):        '''        得到两个日期之间的天数（包含起始日期，不包含结束日期）        '''        begin = self.parseDate(beginDate)        end = self.parseDate(endDate)        if begin &gt; end:            print 'Error: beginDate is after endDate'            return None        else:            return  (end - begin).days        def parseDate(self, dateStr):        '''        以日期的短格式，转换日期字符串为日期类型        '''        prog = re.compile(self.DATE_SHORT_PATTERN)        m = prog.match(dateStr)        if m:            return datetime.date(int(m.group(1)), int(m.group(2)), int(m.group(3)))        else:            print 'Error: can not match ' + self.DATE_SHORT_PATTERN            return None            def formartDate(self, date):        '''        以日期的短格式，格式化日期类型为字符串类型        '''        return date.strftime(self.DATE_SHORT_FORMAT)

11、python连接oracle

人们日常接触的数据库最多的莫过于mysql和Oracle了。现在这里介绍python连接oracle的方法，采用cx_Oracle模块

下载地址：

http://cx-oracle.sourceforge.net/

文档地址：

http://cx-oracle.sourceforge.net/html/index.html

我下载的源码包是：cx_Oracle-5.0.4.tar.gz

python setup.py build

python setup.py install

如果遇到问题，请参考本博客里面关于安装cx_Oracle报错问题的解决方案。

python连接Oracle，我这里创建了一个user_info的表，插入测试用数据

user_info的SQL：

    create table user_info(        id number(11),        user_key varchar2(30),        user_mobile number(11),        primary key(id)    );

?python的脚本：

#-*-coding:utf-8-*-import cx_Oracleimport osos.environ['NLS_LANG'] = 'SIMPLIFIED CHINESE_CHINA.UTF8'class User(object):    def __init__(self, id, user_key, user_mobile):        self.id = id        self.user_key = user_key        self.user_mobile = user_mobileclass OracleTest(object):    '''    create table user_info(        id number(11),        user_key varchar2(30),        user_mobile number(11),        primary key(id)    );    '''    def __init__(self, url):        self.url = url            def getConnection(self):        return cx_Oracle.connect(self.url)        def getUserList(self):         conn = None        cursor = None        try:            conn = self.getConnection()            cursor = conn.cursor()            sql = '''            select id,user_key,user_mobile from user_info            '''            cursor.execute(sql)            cursor.rowfactory = User            #print cursor.description            return [user for user in cursor]        except Exception as e:            print 'Error', e            return None        finally:            if cursor:                cursor.close()            if conn:                conn.close()if __name__ == '__main__':    url1 = 'test/test@192.168.0.1:1521/test'    oracleTest = OracleTest(url1)    for user in oracleTest.getUserList():        print user.id, user.user_key, user.user_mobile

12、?

13、

14、

15、

python FAQ 问答题汇总（一）

热点推荐