Python实现 多进程导入CSV数据到 MySQL Python

前段时间帮同事处理了一个把 CSV 数据导入到 MySQL 的需求。两个很大的 CSV 文件, 分别有 3GB、2100 万条记录和 7GB、3500 万条记录。对于这个量级的数据,用简单的单进程/单线程导入 会耗时很久,最终用了多进程的方...
标签: python

发布于  2024-3-2 12:51

python检查URL是否正常访问的小技巧 Python

今天,项目经理问我一个问题,问我这里有2000个URL要检查是否能正常打开,其实我是拒绝的,我知道因为要写代码了,正好学了点Python,一想,python处理起来容易,就选了python,开始把思路想好: 1.首先2000个URL。可以放...
标签: python

发布于  2024-3-2 12:51

python解析基于xml格式的日志文件 Python

大家中午好,由于过年一直还没回到状态,好久没分享一波小知识了,今天,继续给大家分享一波Python解析日志的小脚本。首先,同样的先看看日志是
标签: python

发布于  2024-3-2 12:51

Python中防止sql注入的方法详解 Python

前言大家应该都知道现在web漏洞之首莫过于sql了,不管使用哪种语言进行web后端开发,只要使用了关系型数据库,可能都会遇到sql注入攻击问题。那么
标签: python

发布于  2024-3-2 12:51

Python 数据结构之旋转链表 Python

题目描述:给定一个链表,旋转链表,使得每个节点向右移动k个位置,其中k是一个非负数样例:给出链表1->2->3->4->5->null和k=2;返回4->5
标签: python

发布于  2024-3-2 12:51

Python数据结构之翻转链表 Python

翻转一个链表 样例:给出一个链表1- 2- 3- null,这个翻转后的链表为3- 2- 1- null 一种比较简单的方法是用“摘除法”。就是先新建一个空节点,然后遍历整个链表,依次令遍历到的节点指向新建链表的头节点。 那样例来说,步骤是...
标签: python

发布于  2024-3-2 12:51

浅析python中SQLAlchemy排序的一个坑 Python

前言 SQLAlchemy是Python编程语言下的一款ORM框架,该框架建立在数据库API之上,使用关系对象映射进行数据库操作,简言之便是:将对象转换成SQL,然后使用数据API执行SQL并获取执行结果。最近在使用SQLAlchemy排序...
标签: python

发布于  2024-3-2 12:51

python函数的5种参数详解 Python

(1) 位置参数,调用函数时按位置传入参数 (2) 默认参数,即在函数定义时就给出参数的值,设置默认参数时要注意两点,一是必选参数在前,默认参数在后。二是把变化小的参数放在后面可作为默认参数。具有默认参数的函数被调用...
标签: python

发布于  2024-3-2 12:51

Python实现读取文件最后n行的方法 Python

本文实例讲述了Python实现读取文件最后n行的方法。分享给大家供大家参考,具体如下:# -*- coding:utf8-*-import osimport timeimport datetimeimport mathimp
标签: python

发布于  2024-3-2 12:51

Python基础教程之tcp socket编程详解及简单实例 Python

Python tcp socket编程详解初学脚本语言Python,测试可用的tcp通讯程序:服务器:#!/usr/bin/env python # -*- coding: utf-8 -*- import socket import threading
标签: python

发布于  2024-3-2 12:50