MapReduce hdfs用于存储海量数据，mapreduce则用于处理数据，是一种分布式计算模型。MapReduce的思想：将任务切割为多个小任务进行并行计算（Map），然后将得到的局部结果进行汇总（Reduce）。 网络io的耗时远大于磁盘io。当计算程序和数据分别在不同机器上时，将计算程序移动到数据所在节点比移动
作者：APISIX社区 本文为大家介绍了如何借助 Apache APISIX 实现 Dubbo Service 的代理，通过引入 dubbo-proxy 插件便可为 Dubbo 框架的后端系统构建更简单更高效的流量链路。 背景 Apache Dubbo 是由阿里巴巴开源并捐赠给 Apache 的微服务开发框架，它提供了 RPC 通信与微服务治理两大
Apache Ignite Overview Apache Ignite is a distributed database for high‑performance applications with in‑memory speed. Important feature: - Mutil-tier storage - Distributed sql - Compute APIs - Machine learning - Continous queries
背景： idea 2021.1 + maven 3.8.5 安装项目依赖，出现报错：NoSuchMethodError: org.apache.maven.model.validation.DefaultModelValidator: method 'void <init>()' not found 解决方法：这是mavan版本过高，与idea不兼容导致的，使用maven 3.6.5
配置如下 主要修改如下 location / { try_files $uri $uri/ /index.php$uri?$query_string; } location ~ \.php(.*)$ { fastcgi_pass 127.0.0.1:9000; fastcgi_index index.php; fastcgi_split_path_info ^((?U).+\.php)(/?.+)
#控制台输出log4j.appender.stdout=org.apache.log4j.ConsoleAppenderlog4j.appender.stdout.Target=System.errlog4j.appender.stdout.layout=org.apache.log4j.PatternLayoutlog4j.appender.stdout.layout.ConversionPattern=%d{ABSOLUTE} %5p %c{1}:%L - %m%n#文件输出log4j.ap
（1）环境准备 需要用到hadoop、hbase、zookeeper （2）配置pom.xml文件 <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0
当今许多企业都有着技术架构的DataOps程度不够、二次开发成本高、迁移成本高、集群部署混乱等情况，团队在技术选型之后发现并不适合自己的需求，但是迁移成本和难度又比较大，甚至前团队还留下了不少坑，企业自有的开发能力又比较有限，导致后面的小伙伴上手难度高体验差。 俗话说“工具选
Tomcat个人使用总结 本文写与2022.5.24,tomcat最新版本为tomcat10,由于tomcat10中将包名javax替换为了jakarta,通用性不强,暂时使用tomcat9, tomcat需要搭配java来使用,这里我选用java的长期支持版本java8 tomcat9下载地址 https://downloads.apache.org/tomcat/tomcat-9/ java8
word press官网提供的系统要求是 PHP7.4+和MySQL5.6+，推荐Apache服务器或者Nginx服务器 由于我使用了Nginx作为的trojan的代理工具，所以为了避免冲突，我用的Apache服务器。 1.安装Apache服务器 命令安装Apache yum install httpd 如果你不是root用户，那就加个sudo提下权限再安装。 安
安装准备： hadoop3.2.2, flink1.15.0 在成功安装hadoop3.2.2的基础上，采用YARN模式安装Flink1.15。 1.在/etc/profile文件中追加配置： export HADOOP_CONF_DIR=$HADOOP_HOME/etc/hadoop 2.修改hadoop相关配置： 在conf文件夹中hadoop-env.sh文件中，添加配置： export HADOOP_CONF_DIR
1、安装hadoop 2、安装hive 3、安装mysql 4、下载：https://dlcdn.apache.org/incubator/linkis/release-1.1.0/apache-linkis-1.1.0-incubating-bin.tar.gz 5、解压：tar -xzvf apache-linkis-1.1.0-incubating-bin.tar.gz -C /opt/module 6、移动：mv /opt/module/apache-linkis-1.1.
目录一、Apache Pig概述二、Apache Pig架构1）架构图2）Apache Pig组件1、Parser（解析器）2、Optimizer（优化器）3、Compiler（编译器）4、Execution engine（执行引擎）三、Apache Pig安装1）下载Apache Pig2）配置环境变量3）修改配置四、Apache Pig执行模式1）本地模式2）Tez 本地模式3）Spark 本地模式4）MapRe
Hadoop的发展史 Google 爬取全球的网站，然后计算页面的PageRank 要解决网站的问题： a：这些网站怎么存放 b：这些网站应该怎么计算 发布了三篇论文 a：GFS(Google File System) b：MapReduce(数据计算方法) c：BigTable：HBase Hadoop三大开源发行版本：Apache、Cloudera、Hortonworks。A
1.基本介绍 Apache Skywalking是一款APM工具（ Application Performance Management,应用性能管理） 2.安装部署 官网地址：http://skywalking.apache.org/ 下载：http://skywalking.apache.org/downloads/ 启动： 访问：默认是8080端口 3.应用集成 skywalking数据收集端口： Http默
2022年5月28日（周六）上午10:00-12:00，开源机器学习数据库 OpenMLDB 第三期 Meetup 将以线上直播的形式展开。 活动背景 OpenMLDB v0.5.0 在近期正式发布，性能、成本、灵活 再攀高峰！此次 Meetup 将为大家介绍 OpenMLDB v0.5.0版本的新功能，并邀请来自 DolphinScheduler 的技术大咖一起
环境准备 目标环境是ubuntu 20，其实是windows下的子系统wsl里安装的。需要安装 pyspark 3.2.1 openjdk 15 注意pyspark 3.2.1 对应的最高版本jdk为openjdk15。安装也比较简单。 pyspark通过pip安装 pip3 install pyspark openjdk: sudo add-apt-repository ppa:openjdk-r/ppa sud
1.去官网下载你需要的maven包 https://maven.apache.org/download.cgi 2.在home目录下依次执行下列命令 mkdir maven chmod 777 maven 解压缩文件 tar zxvf apache-maven-3.3.9-bin.tar.gz 3.配置maven环境 vim /etc/profile 文件添加以下内容 # maven env
Zookeeper的介绍 ZooKeeper主要服务于分布式系统，可以用ZooKeeper来做：统一配置管理、统一命名服务、分布式锁、集群管理。 使用分布式系统就无法避免对节点管理的问题(需要实时感知节点的状态、对节点进行统一管理等等)，而由于这些问题处理起来可能相对麻烦和提高了系统的复杂性，Zoo
Node Express server listening on http://localhost:4200 SSR rendering exceeded timeout 2000, fallbacking to CSR for / SSR rendering exceeded timeout 2000, fallbacking to CSR for /xyz SSR rendering exceeded timeout 2000, fallbacking to CSR for /p/xyz Render
说明：向阿里云桶上传图片的时候报错 com.aliyun.oss.OSSException: The difference between the request time and the current time is too large.[ErrorCode]: RequestTimeTooSkewed[RequestId]:[HostId]: ****[ResponseError]:<?xml version="1.0" encoding="UTF-8"
Apache HTTPD 支持一个文件拥有多个后缀，并为不同后缀执行不同的指令。比如，如下配置文件： AddType text/html .html AddLanguage zh-CN .cn 其给.html后缀增加了media-type，值为text/html；给.cn后缀增加了语言，值为zh-CN。此时，如果用户请求文件index.cn.html，他将返回一个中文的html页面
错误信息如下： 点击查看代码 17-May-2022 15:57:07.913 SEVERE [main] org.apache.catalina.startup.HostConfig.deployWAR Error deploying web application archive [/opt/tomcat9/webapps/ROOT.war] java.lang.IllegalStateException: Error starting child
Apache OFBiz是一个非常著名的电子商务平台，是一个非常著名的开源项目，提供了创建基于最新J2EE/XML规范和技术标准，构建大中型企业级、跨平台、跨数据库、跨应用服务器的多层、分布式电子商务类WEB应用系统的框架。 OFBiz最主要的特点是OFBiz提供了一整套的开发基于Java的web应用程序
前言 因为工作需要，久违的从自己的有道云笔记中去寻找压测相关的内容，翻开之后发现还不错，温故一遍后顺便整理出来分享给大家。 题外话，工作8年多，有道云笔记不知不觉都6G多了，扫一眼下来尽是云烟过往，竟然还能发现Struts的东西，令人甚为感怀，挺好奇你们的云笔记长什么样子。 话说，我如果一
