一. 前言
为数据处理(提供数据清洗, 计算, 可视化输出等全栈式服务)提供GUI的操作方式是目前python数据处理的一个有趣的方向.
有了代码为什么还需要引入GUI呢? 很简单, 懒...., 并不是希望所有的操作都是基于代码层一步步推进的, 也希望可以通过鼠标简单点击即可完成.
尝试了不少的这些库/框架, 这些库有基于pyqt, 也有基于web的, 但是整体的使用体验都相对较差(各种错误频出).
D-Tale是相对在功能上完整的, 操作逻辑较为明晰, 基于web的框架.
make thing better and simpler.
Python数据可视化库概览
一. 前言
业精于勤, 荒于嬉, 行成于思, 毁于随.
-- 韩愈 < 进学解 >
PostgreSQL简单使用体验
前言
相比于MySQL, 同样作为开源的关系型数据库(RDBMS), PostgreSQL(ORDBMS)的知名度远低于前者(至少在国内是如此). 但是随着MySQL被甲骨文收购(引起开源社区和其他大型存在业务竞争公司的担忧), 以及大数据的兴起, 近年PostgreSQL颇有异军突起的迹象.
MySQL-递归-日期
本文作为MySQL使用指南的延申讨论
- 递归
- 行列转换
- 日期/时间处理相关函数
一. 递归
As mentioned previously, recursive common table expressions (CTEs) are frequently used for series generation and traversing hierarchical or tree-structured data.
MySQL命令行工具_mycli中文乱码解决
mycli
BlackLivesMatter
We value the diversity of our community. We strive to amplify the voices of the oppressed to eradicate racism and xenophobia. We ask our community to stand together in support of the Black community.
MyCLI is a command line interface for MySQL, MariaDB, and Percona with auto-completion and syntax highlighting.
- Source: https://github.com/dbcli/mycli
- Bug tracker: https://github.com/dbcli/mycli/issues
(注意, 可以直接输入密码)
mycli, 一款支持自动补全代码的命令工具, 支持ssh, 以及更多细节的优化, 如大量结果不会一次全部返回, 危险操作提示等.
MySQL_联合索引-分页检索
本文是作为MySQL使用指南一文的进一步细节延申和补充.
- 分页查询
- 联合索引
- 回表
(由于Typora的字数超过2万速度会明显下降, 4万字已经出现卡顿, 这里将更多内容拆出来讨论).
# 创建测试的表
drop table if exists test_w;
create table test_w (
id int UNSIGNED not null PRIMARY key auto_increment,
grade float UNSIGNED not null,
birth_date date not null,
s_name varCHAR(15) not null,
address varchar(16) not null
);
Pandas翻译系列-2.0版本前瞻
new features:
index完善对numpy数据类型的支持- 读取数据, 增加对
pyarrow数据类型的支持 - 优化读写(
Copy-on-Write)性能
What’s new in 2.0.0 (March XX, 2023)
These are the changes in pandas 2.0.0. See Release notes for a full changelog including other versions of pandas.
Pandas翻译系列-Indexing and selecting data
简化, 并不是逐句翻译, 只关注重点部分, 部分内容加入了自己的理解.
索引和数据选取.
The axis labeling information in pandas objects serves many purposes:
轴标签信息在pandas对象中有多个用途:
- Identifies data (i.e. provides metadata) using known indicators, important for analysis, visualization, and interactive console display.
- 数据的识别交互, 这非常重要在数据分析和可视化中.
- Enables automatic and explicit data alignment.
- 能够让数据可以显式自动对齐.
- Allows intuitive getting and setting of subsets of the data set.
- 能够直观明了的设置或者获取数据集中的子集.
In this section, we will focus on the final point: namely, how to slice, dice, and generally get and set subsets of pandas objects. The primary focus will be on Series and DataFrame as they have received more development attention in this area.
在这部分中, 将着重讨论最后一点, 如何对pandas的对象进行切片获取其中的部分数据(即读写操作). 这是pandas的开发优先关注的.
Pandas翻译系列-SettingWithCopyWarning - 视图 OR 副本
一. 问题的起源
在使用pandas进行处理数据时, 时不时会出现一个异常的警告(注意这不是错误)
C:\Users\Lian\AppData\Local\Temp/ipykernel_15272/2330773252.py:4: SettingWithCopyWarning:
A value is trying to be set on a copy of a slice from a DataFrame.
Try using .loc[row_indexer,col_indexer] = value instead
See the caveats in the documentation: https://pandas.pydata.org/pandas-docs/stable/user_guide/indexing.html#returning-a-view-versus-a-copy tmp['c'] = tmp['a'] + tmp['b']
