搜索结果
查询Tags标签： 数据处理，共有 121条记录-
「Python数据处理总结」数据冲突和样本的选取和处理
文章目录 内容介绍实际业务数据冲突样本的选择数据的共线性内容介绍 将日常工作中遇到的数数据冲突和样本源的方法进行总结，其中主要包括 实际业务数据冲突、样本选取问题、数据共线性 等思路，并且长期更新。 实际业务数据冲突 多业务数据源冲突是指来自多个或具有相同业…
2021/7/4 20:25:09 人评论 次浏览 -
redis实现在数据处理完成时删除数据
使用背景：如果存放在redis使用思路：在获取具体操作：1、构建一个redis工具类import redis.clients.jedis.Jedis; import java.util.Arrays;public class RedisUtils {static String scriptLoadId;static Jedis queueJedis;private int databaseNum;public RedisUtils(St…
2021/7/4 19:26:24 人评论 次浏览 -
10年Java开发经验，Java数据处理的常用技术
## 分布式系统特性与衡量标准透明性：使用分布式系统的用户并不关心系统是怎么实现的，也不关心读到的数据来自哪个节点，对用户而言，分布式系统的最高境界是用户根本感知不到这是一个分布式系统可扩展性：分布式系统的根本目标就是为了处理单个计算机无法处理的任务，当…
2021/7/4 14:24:29 人评论 次浏览 -
Oracle数据处理
Oracle数据库表清洗清洗，转换。Oracle语句获取中文英文字段注释： select * from user_col_comments where Table_Name=‘用户表’ order by column_name查看表结构 select * from user_tab_columns where table_name=‘表名’;给表加字段 alter table 表名 add 字段varc…
2021/6/9 19:23:56 人评论 次浏览 -
前端数据处理
目标：处理从api获取到的数据，使之格式统一。问题起因：对于需要的数组、对象数据因前后端执行任务前没有对关键字段进行商讨统一，造成前后端使用的关键字段不同，需要重构项目 解决： 简单数据处理对于数组数据可直接赋值；//伪代码let res = getData()//获取api数据le…
2021/6/2 18:51:05 人评论 次浏览 -
数据处理---批量截取图片部分内容
1.在利用批处理图片时，有时需要截取图片中的某一部分内容，如果用自带截屏软件，会造成后期处理时，图片的大小不一致，因此采用软件进行像素点的截取，可以利用光影魔术手里面自带的批处理这个工具。2.截取后，还可以按序列更改输出文件的名字。
2021/5/22 10:25:12 人评论 次浏览 -
NCL模式数据处理
NCL模式数据处理目录 wrfout文件处理和绘图文件处理基础文件处理进阶插值平滑MODIS数据介绍文件名 .shp数据介绍wrfout文件处理和绘图 文件处理基础 在不打开NCL的情况下，用ncl_filedump或者ncdump查看文件信息同时也可以用wrf_user_getvar查看变量信息，例如：hgt = wrf…
2021/5/2 10:28:59 人评论 次浏览 -
pandas | 使用pandas进行数据处理——Series篇
上周我们关于Python中科学计算库Numpy的介绍就结束了，今天我们开始介绍一个新的常用的计算工具库，它就是大名鼎鼎的Pandas。 Pandas的全称是Python Data Analysis Library，是一种基于Numpy的科学计算工具。它最大的特点就是可以像是操作数据库当中的表一样操作结构化的…
2021/4/30 18:27:37 人评论 次浏览 -
Pandas数据处理
Pandas数据处理：导⼊数据 导出数据 查看数据 数据选取 数据处理 数据分组和排序 数据合并# 在使用之前，需要导入pandas库 import pandas as pd导⼊数据：pd.DataFrame() # 自己创建数据框，用于练习pd.read_csv(filename) # 从CSV⽂件导⼊数据pd.read_table(filename) #…
2021/4/28 10:55:34 人评论 次浏览 -
数栈产品分享：基于StreamWorks构建实时大数据处理平台
数栈是云原生—站式数据中台PaaS，我们在github和gitee上有一个有趣的开源项目：FlinkX，FlinkX是一个基于Flink的批流统一的数据同步工具，既可以采集静态的数据，也可以采集实时变化的数据，是全域、异构、批流一体的数据同步引擎。大家喜欢的话请给我们点个star！star！…
2021/4/26 18:57:11 人评论 次浏览 -
数栈产品分享：基于StreamWorks构建实时大数据处理平台
数栈是云原生—站式数据中台PaaS，我们在github和gitee上有一个有趣的开源项目：FlinkX，FlinkX是一个基于Flink的批流统一的数据同步工具，既可以采集静态的数据，也可以采集实时变化的数据，是全域、异构、批流一体的数据同步引擎。大家喜欢的话请给我们点个star！star！…
2021/4/26 18:55:39 人评论 次浏览 -
DataConverter 是一款强大的数据处理和算法工具
网上的好东西，推荐一下（声明：不是本人的），工具超好使用。 地址： https://github.com/yinggegit/DataConverter 加密解密时，省下自己编程序验证了，再逆向分析中，轻松。感谢作者。
2021/4/19 20:28:47 人评论 次浏览 -
大数据处理新-分布式算法与优化
本书介绍计算机是一种机器，可以被指示执行一系列算术或逻辑运算，以执行特定的任务，如解决特定的问题。计算机程序是计算机执行的指令的集合。一个程序解决一个特定问题的基本方法被称为算法，这个问题可以由一系列定义明确、可由计算机实现的指令来确定。因此，算法可以…
2021/4/18 12:25:32 人评论 次浏览 -
B站疯传，一整套Python、网络爬虫、人工智能学习资料，白拿不谢，叫我老好人！
内容简介Python 是人工智能（机器学习）的首选编程语言，它拥有众多模块，能完成人工智能开发的所有环节，没有任何一种语言使用起来如此顺手。Python 人工智能的学习路线如下所示：1) 爬虫要学用 Python 如何爬取数据，要做数据分析、数据建模，起码要有数据，这些数据来…
2021/4/10 22:15:09 人评论 次浏览 -
SeaTable 开发者版可以运行 Python 了，开发自定义数据处理流程更方便
又填新功能了！从 1.8.0 版开始，SeaTable 开发者版加入了运行 Python 的能力（具体配置请查看使用手册），我们可以更方便地快速开发自定义数据处理流程了，让开发小应用变得更简单更有想象力。SeaTable 是一个支持图片、文件、长文本等丰富数据类型的新型协同表格和低代…
2021/3/23 14:11:32 人评论 次浏览
