一.hadoop概述 1.1hadoop优势 1）高可靠性：Hadoop底层维护多个数据副本，即使Hadoop某个计算元素或存储出现故障，也不会导致数据的丢失。 2）高扩展性：在集群间分配任务数据，可方便扩展数以千计…

MyBatis基本工作原理 MyBatis是一个持久层框架，它封装了JDBC，并通过XML配置文件或注解定义SQL语句，使得开发人员可以直接编写SQL语句，而无需过多关心JDBC的底层细节。MyBatis通过映射器（Mapper）接口与XML配…

1 前言 MongoDB 是为快速开发互联网应用而设计的数据库系统。MongoDB 的设计目标是极简、灵活、作为 Web 应用栈的一部分。MongoDB 的数据模型是面向文档的，所谓文档是一种类似于json的结构。 官网教程：https://www.mongodb.com/docs/manual/ 2 安装部…

GitHub - kocor01/kcache: go 本地缓存解决方案，支持本地缓存过期、缓存过期自维护机制。 最近系统并发很高，单接口10W的 QPS，对 redis 压力很大，大量的热KEY导致 redis 分片CPU资源经常告警。计划用 go 本地缓存缓解 redis 的压…

1、背景介绍 具体Kettle操作步骤不做过多介绍，主要技术方案说明，Kettle8.2版本放在底部链接提取，本次采用Kettle实现源端：神通数据通用库、目标端：神通MPP增量数据同步，并在服务器端运行Job。 2、windows…

我一直在尝试从各种角度撰写关于Amazon Web Services（AWS）的信息和魅力。由于我喜欢技术历史，这次我总结了AWS服务发布的历史年表。 虽然AWS官方也通过“Whats New”发布了官方公告，但我一直希望能有一篇文章将公告日期、GA日期&…

1、用户模块 创建一个用户模块子应用，用来管理用户，和认证和授权。 1.1根目录创建apps， 为了使用方便，还需要再pycharm中设置一下资源路径，就可以自动提示 1.2注册子应用 1.3添加应用根目录到环境变量path python导…

目录 设计算法解决海量数据的 topK 问题如何统计不同电话号码的个数？题目描述解答思路与实现步骤注意点 如何在大量的数据中判断一个数是否存在？题目描述解决方案具体步骤优化与注意事项 如何从大量的 URL 中找出相同的 URL？题目描述解答思路…