搜索结果
查询Tags标签： 读取，共有 1206条记录-
python读取 hive数据
import pandas as pd import re from impala.dbapi import connect from impala.util import as_pandas from impala.dbapi import connect import json,sys from datetime import datetimeconn=connect(host=127.0.0.1, port=21050, database=ods,timeout = 30) cursor=c…
2021/8/3 17:08:01 人评论 次浏览 -
python读取 hive数据
import pandas as pd import re from impala.dbapi import connect from impala.util import as_pandas from impala.dbapi import connect import json,sys from datetime import datetimeconn=connect(host=127.0.0.1, port=21050, database=ods,timeout = 30) cursor=c…
2021/8/3 17:08:01 人评论 次浏览 -
打开单一文件及文件夹的代码记录（C#版本）
在公司进行项目准备练习的过程中，涉及到了基础操作--读取文件。由于本人很久没弄过C#的文件读取了，因此基本操作存在手生的情况，所以还是针对打开单一文件及文件夹文件的方法进行简单汇总。首先要明白，读取文件和打开文件是两回事，因为读取文件是读取文件中的每一行数…
2021/8/2 11:06:11 人评论 次浏览 -
打开单一文件及文件夹的代码记录（C#版本）
在公司进行项目准备练习的过程中，涉及到了基础操作--读取文件。由于本人很久没弄过C#的文件读取了，因此基本操作存在手生的情况，所以还是针对打开单一文件及文件夹文件的方法进行简单汇总。首先要明白，读取文件和打开文件是两回事，因为读取文件是读取文件中的每一行数…
2021/8/2 11:06:11 人评论 次浏览 -
JDBC读取常见关系型数据库中大数据
需要对大量数据进行处理时，全部读取放入内存会导致内存溢出。针对这种处理大数据出现的常见问题，可以采用流式读取数据的方法。对于不同的关系型数据库，流式读取数据的方式略有不同，下面对常见的关系型数据库流式读取数据的方式做一点个人总结。 前提：使用JDBC方式读…
2021/8/1 19:39:37 人评论 次浏览 -
JDBC读取常见关系型数据库中大数据
需要对大量数据进行处理时，全部读取放入内存会导致内存溢出。针对这种处理大数据出现的常见问题，可以采用流式读取数据的方法。对于不同的关系型数据库，流式读取数据的方式略有不同，下面对常见的关系型数据库流式读取数据的方式做一点个人总结。 前提：使用JDBC方式读…
2021/8/1 19:39:37 人评论 次浏览 -
java对文本文件进行操作：读取、修改、添加、删除、重命名等
java对文本文件进行操作：读取、修改、添加、删除、重命名等Java IO 也称为IO流，IO = 流，它的核心就是对文件的操作，对于 字节 、字符类型的输入和输出流。 IO是指对数据流的输入和输出，也称为IO流，IO流主要分为两大类，字节流和字符流。字节流可以处理任何类型的数据…
2021/8/1 9:05:58 人评论 次浏览 -
java对文本文件进行操作：读取、修改、添加、删除、重命名等
java对文本文件进行操作：读取、修改、添加、删除、重命名等Java IO 也称为IO流，IO = 流，它的核心就是对文件的操作，对于 字节 、字符类型的输入和输出流。 IO是指对数据流的输入和输出，也称为IO流，IO流主要分为两大类，字节流和字符流。字节流可以处理任何类型的数据…
2021/8/1 9:05:58 人评论 次浏览 -
Pandas读取Mysql中的表
创建MySQL引擎 import pandas as pd from sqlalchemy import create_engine engine = create_engine(mysql+pymysql://ledao:ledao123@localhost/pandas_learn)以默认方式读取所有的列到DF中 with engine.connect() as conn, conn.begin():data = pd.read_sql_table(data_…
2021/8/1 2:05:57 人评论 次浏览 -
Pandas读取Mysql中的表
创建MySQL引擎 import pandas as pd from sqlalchemy import create_engine engine = create_engine(mysql+pymysql://ledao:ledao123@localhost/pandas_learn)以默认方式读取所有的列到DF中 with engine.connect() as conn, conn.begin():data = pd.read_sql_table(data_…
2021/8/1 2:05:57 人评论 次浏览 -
「深度学习一遍过」必修3：Pytorch数据读取——使用Dataloader读取Dataset
本专栏用于记录关于深度学习的笔记，不光方便自己复习与查阅，同时也希望能给您解决一些关于深度学习的相关问题，并提供一些微不足道的人工神经网络模型设计思路。专栏地址：「深度学习一遍过」必修篇目录 1 CreateDataset——生成训练集和测试集 1.1 思路 1.2 代码 1.3…
2021/7/31 23:06:54 人评论 次浏览 -
「深度学习一遍过」必修3：Pytorch数据读取——使用Dataloader读取Dataset
本专栏用于记录关于深度学习的笔记，不光方便自己复习与查阅，同时也希望能给您解决一些关于深度学习的相关问题，并提供一些微不足道的人工神经网络模型设计思路。专栏地址：「深度学习一遍过」必修篇目录 1 CreateDataset——生成训练集和测试集 1.1 思路 1.2 代码 1.3…
2021/7/31 23:06:54 人评论 次浏览 -
Python一些可能用的到的函数系列74 ftp读取
说明 偶然碰到一个case要读取ftp, 之前sftp用起来觉得还可以，ftp实在是… 总而言之python有个古老到自带的包可以读取，但是用起来十分不方便，记录一下以备哪天再偶尔用到吧… 内容 1 导包 import ftplib2 实例化对象 f = ftplib.FTP()3 填写主机、端口、用户、密码 f.c…
2021/7/31 1:06:07 人评论 次浏览 -
Python一些可能用的到的函数系列74 ftp读取
说明 偶然碰到一个case要读取ftp, 之前sftp用起来觉得还可以，ftp实在是… 总而言之python有个古老到自带的包可以读取，但是用起来十分不方便，记录一下以备哪天再偶尔用到吧… 内容 1 导包 import ftplib2 实例化对象 f = ftplib.FTP()3 填写主机、端口、用户、密码 f.c…
2021/7/31 1:06:07 人评论 次浏览 -
Java scanner 类的常用方法
java.util.Scanner类，这是一个用于扫描输入文本的新的实用程序。由可以结合使用正则表达式和从输入流中检索特定类型数据项的方法。这样，除了能使用正则表达式之外，Scanner类还可以任意地对字符串和基本类型(如int和double)的数据进行分析。借助于Scanner，可以针对任何…
2021/7/30 22:05:56 人评论 次浏览
