详解使用Python写一个向数据库填充数据的小工具

　　公司又要做一个新项目，是一个合作型项目，我们公司出web展示服务，合作伙伴线下提供展示数据。

　　而且本次项目是数据统计展示为主要功能，并没有研发对应的数据接入接口，所有展示数据源均来自数据库查询，

　　前置：当然是要先准备好测试方案和测试用例，在准备好这些后才能目标明确将要开发自动化小工具都要有哪些功能，避免走弯路

　　5）表中个字段数据是否有特殊来源asp源码怎么安装，如用户ID、厂商名称一类与业务有一定关联程度的字段，一定要确认好是可以随机生成的 还是 需要从指定表中获取字段

　　1）因为我将要写入的内容涉及到全国的省市名称和省市行政区域代码，所以先找开发要了一个他们使用的全国省市名称及代码对照json，然后处理成字典格式备用

　　之后每次使用的时候只需通过配置文件读取对应表的写入语句再拼装上要写入的内容就是一个完整的sql语句了

　　因为写入的内容大部分字段需要不重复，所以使用random模块，定义不同的方法生成各种类型随机数据，如随机身份证号 随机姓名 随机编码 随机ID 等等...

　　再生成写入数据的时候，就可以引用这个随机工具模块引用里面的方法取随机值，以保证写入数据的唯一性

　　因为我们将sql语句的头通过配置文件进行管理，那么就需要一个读取配置的模块或方法，因为我比较菜 所以为了看起来更加清晰 就用模块来进行管理了

　　因为我们在处理基础数据的时候就已经写好了sql写入语句头了，所以现在只要生成它后面的values值就可以了，这步就是生成他values值的步骤

　　创建一个列表，根据写入语句内字段的顺序生成对应字段的值并添加至创建的列表中。对应字段的内容如果是随机值，就使用之前准备好的随机模块，使用里面的方法生成随机值；如果是需要从其他表中获取的值，则通过封装好的qymysql的查找方法进行搜索并引用。

　　取值的过程会在语句写入之前一步完成，现在要先准备一个数据处理的模块，以便对取出的至进行统计。

　　可以先准备几个比较常用的，例如列表内同类值 列表内数值求和 字典合并等方法，如果后面再有更复杂的格式，再单独编写。

　　2） 在循环生成写入值的过程中，将需要统计或计算的值取出单独保存，在写入结束后再进行技术统计输出统计结果

　　这样一个表的数据就写入成功了，只需要调整写入条数就可以想写入多少条就写入多少条，还可以直接输出你关心的字段统计结果。

　　多个数据库表的话可以就是将以上的生产数据和写入数据的步骤复制，按照表名和字段稍作修改就可以了。

　　以上只是一个工作过程中仓促搞出的一个小东西，还有很多不足。抛转引玉，拿出来跟大家分享一下我的思路，希望能对大家有所帮助！

　　1.不要只管闷头写，写完一个表的时候就执行试一下，不只要看数据库写进去了 主要是看看要测试的平台能不能看到，之前因为开发忘了跟我说一个字段条件，我全都写完了也执行成功了，但就是上不去平台，最后不得不大改一遍

　　2.随时跟开发沟通确认任何一个不确定的问题，因为有的表可能会用不到，表内的某些字段没有用，表设计不明确的时候等等，这些时候都要跟他们确认好再继续动手写，防止无用功。

　　本篇文章给大家带来的内容是关于Python如何筛选序列中的元素 ，有一定的参考价值，有需要的朋友可以参考一下，希望对你有所帮助。1、需求序列中含有一些数据，我们需要提取其中的值或根据某些标准对序列做删减，2、解决方案要筛选序列中的数据，通常最简单的方法是使用列表推导式。例如：my...查看详情

　　对于英文文本分句比较简单，只要根据终结符.划分就好asp教程，中文文本分句看似很简单，但是实现时会遇到很多麻烦，尤其是处理社交媒体数据时，会遇到文本格式不规范等问题asp源码怎么运行。下面代码针对一段一段的短文本组成了文档分句import redef cut_sent(infile, outfile):...查看详情

　　前言这篇文章主要介绍了linux中如何使用python3获取ip地址,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下。一、不带参数#!/usr/bin/python # -*- coding: UTF-8 -*- import o...查看详情

　　Python 处理 JSON 数据时，dumps 函数是经常用到的，当 JSON 数据中有特殊类型时，往往是比较头疼的，因为经常会报这样一个错误。自定义编码类#!/usr/bin/env python# -*- coding:utf-8 -*-# Author: wxnacy(w...查看详情

　　如下所示：list=[1,2,3,4,5,6,7,8,9,0,11,0,13,14,15,16,17,18,19,20]#把list分为长度为5的4段for j in range(0,len(list),5): matrix.append(list[j:j+5])matrix=...查看详情

　　在pycharm使用过程中，对于每次新建的python文件的时候，关于代码编写者的一些个人信息快捷填写，使用模板的方式比较方便。方法如下：1.打开pycharm，选择File-Settings2.Editor –> File and Code Templates –>...查看详情

　　最近由于开发业务量陡增，脚本一个接一个，一天好几个，为了便于后期的维护和调优，我习惯在前面加一些跟脚本相关的信息，如业务需求、开发思路、实现过程、开发周期、时间等等，因此做一个模版是必不可少的了，方法如下：尽量做成世上最详细（没有之一）1、左上角File2、Settings3、E...查看详情

　　最近学习python，刚好学到了gui(tkinter)相关的知识，顺便一提，我学python用的是《programming python 4edition》这本书，在这里小小的推荐一下，感觉还不错。昨天在做一个简单的文本编辑器的时候,想要在窗口启动的时候就默认是最大化的，但是不...查看详情

　　今天分享一下django的账号密码登陆，前端发送ajax请求，将用户名和密码信息发送到后端处理，后端将前端发送过来的数据跟数据库进行过滤匹配，成功就跳转指定页面，否则就把相对应的错误信息返回，同时增加一个小功能，在规定时间内超过规定的登录次数，就锁住无法登陆，等下一个时间段再允许...查看详情

　　最近几天了解了一下人脸识别，应用场景可以是图片标注，商品图和广告图中有没有模特，有几个模特，模特的性别，年龄，颜值，表情等数据的挖掘。基础的识别用dlib来实现，dlib是一个机器学习的包，主要用C++写的，但是也有Python版本。其中最流行的一个功能是Facial Landm...查看详情