数据入库第二章笔记

张开发
• 2026/4/14 12:25:31 • 15 分钟阅读

最新文章

推荐文章

相关文章

分享文章

数据入库第二章笔记
第一部分 关系数据库设计第一节 基础认知1. 数据加工对原始数据进行清洗、转换、整合使其符合数据库存储要求是数据入库的前置核心操作。2. 数据模型对现实世界数据特征的抽象是数据库设计的核心分为概念模型、逻辑模型、物理模型用于规范数据结构与关联关系。第二节 概念模型与E-R图设计1. 概念模型面向用户、反映现实世界事物及联系的数据模型核心是E-R图实体-联系图。2. E-R图构成实体矩形、属性椭圆形、联系菱形联系分为一对一、一对多、多对多三种类型。3. 设计实例梳理业务实体如学生、课程明确各实体属性定义实体间关联如学生与课程是多对多选课联系绘制完整E-R图。4. E-R图转关系模式将实体、联系转化为数据库表实体对应独立表属性对应字段联系通过外键实现表间关联。第二部分 数据库规范化1. 关系数据库范式理论核心是规范化通过范式规则减少数据冗余、避免插入/删除/更新异常常用范式- 第一范式1NF字段不可再分保证原子性- 第二范式2NF满足1NF且非主键字段完全依赖主键消除部分依赖- 第三范式3NF满足2NF且非主键字段间无依赖消除传递依赖。2. 规范化实例结合实际业务表依据范式理论拆分冗余表、调整字段依赖优化表结构提升数据存储效率与一致性。第三部分 数据入库实操1. 核心流程数据源提取→数据预处理清洗、转换、映射→入库前校验→数据导入→入库后核对→日志归档2. 入库方式- 手动导入少量临时数据操作简便- 脚本导入SQL/Python批量导入灵活高效- 工具导入ETL工具适配大批量、周期性数据。3. 常见问题解决- 乱码统一UTF-8编码- 入库失败核对字段类型、主键约束- 数据重复提前去重设置唯一主键- 数据错位修正字段映射关系。第四部分 商业实例与实训结合真实商业场景完成E-R图设计→关系模式转化→数据库规范化→数据入库全流程实操巩固理论与实操技能掌握企业级数据入库标准操作。章节核心总结先完成关系数据库设计与规范化夯实数据存储结构基础再执行数据入库实操遵循“先设计、先规范、再处理、后入库”原则保障数据规范、无冗余、准确入库。

更多文章