- 博客(9)
- 收藏
- 关注
RSS订阅原创 ETL数据库数据采集&订单数据采集
问题解决:增加目标数据库配置信息# 结果写出MySQL的数据库相关配置target_host = 'localhost'target_port = 3306target_user = 'root'target_password = 'mysql'target_data_db = "retail"csv文件目录拼接时,根路径没有末尾\方式一: 在配置文件中,将csv文件的根目录末尾添加一个/方式二: 在csv文件根目录和文件名拼接时使用os.path.join()连接01
2023-07-03 07:43:46
1141
原创 ETL工具模块的创建
我们有一个文件 1.txt 此时 1.txt这个文件就是数据, 文件的大小,名称, 位置, 类型…我们将一个数据表存储到数据仓库中, 数据表中所有的记录时数据, 字段的名称, 表名, 库名…这两个需求,都需要使用到os模块,所以我们就使用os模块封装一个file_util模块来方便我们调用相关功能.举例: 我们想获取person表中的一个数据记录, 必须知道数据库的名称,数据表的名称,以及记录的约束条件。在大数据场景下,元数据非常常见,对于不同的服务,元数据的内容也不相同,但是都是描述数据的数据。
2023-07-03 07:43:15
747
原创 ETL日志数据采集&商品数据采集
将结构化数据,保存到对象中,每一个对象就是一条数据记录,实例属性名就是列名,实例属性的值就是数据记录的值多个模型对象,就组成了一个数据集.
2023-07-03 07:42:48
1203
原创 ETL笔记1
ETL：Extract(抽取)、Transform(转换)、Load(加载)工具：软件->kettle代码：python1 . 本次课程首先核心重点是理解etl项目的业务和流程 2 . 其次是加强项目中一些核心代码的练习【代码的练习不是老师讲完你就能一次写出来，出错非常正常，出错才能进步！！！
2023-07-03 07:31:17
218
原创 学生管理系统(面向对象)V2.0
学习目标使用面向对象、字符串、列表、字典、文件等知识点来完成一个学生管理系统V2.0针对学生，该系统具有添加、修改、删除、查询所有学生、查询某个学生、保存信息、退出系统等操作。
2022-12-08 13:07:37
899
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人