五柳-先生
五柳-先生

DataX 介绍


DataX实现跨平台的、跨数据库、不同系统之间的批量数据同步。

当我们需要从各种异构数据源之间完成数据同步的时候，是否需要开发很多工具完成？答案是不用，因为你有DataX。DataX独有的Reader/Writer插件体系，你只需要增加一种DataX的插件，便可以无缝对接其他数据源。

DataX目前支持的数据源

类型 Reader Writer
RDBMS 关系型数据库 MysqlReader MysqlWriter
  OracleReader OracleWriter
  SqlServerReader PostgresqlWriter
  PostgresqlReader SqlServerWriter
  DrdsReader DrdsWriter
阿里云数仓数据存储 ODPSReader ODPSWriter
    ADSWriter
NoSQL数据存储 OTSReader OTSWriter
  HBaseReader(0.94) HBaseWriter(即将推出)
  MongoDBReader MongoDBWriter
无结构化数据存储 TxtFileReader TxtFileWriter
  HdfsReader HdfsWriter
  OssReader OssWriter
    OCSWriter

DataX采用Framework + plugin架构构建，Framework处理了缓冲，流控，并发，上下文加载等高速数据交换的大部分技术问题，提供了简单的接口与插件交互，插件仅需实现对数据处理系统的访问。目前已经支持数据源见上面表格，详情请看：DataX数据源指南

DataX作业运行

DataXJob，即一个DataX作业，用户完成指定两个数据源之间的数据传输。数据传输过程在单进程内完成，全内存操作，不读写磁盘。

DataX框架内部会将作业切分成多Task，并调度组合在TaskGroup中运行。每一个Task数据流向即Reader—>Channel—>Writer。

用户可以指定作业并发度完成Task并发执行控制。

DataX目前阿里的应用情况

支持阿里所有离线数据传输的业务，每天运行超过2w个作业，每天接近200T左右数据量传输

https://github.com/alibaba/DataX/wiki/DataX-Introduction

你可能感兴趣的:(ETL-阿里-Datax)

  • 最新阿里四面面试真题46道：面试技巧+核心问题+面试心得 风平浪静如码
    前言做技术的有一种资历，叫做通过了阿里的面试。这些阿里Java相关问题，都是之前通过不断优秀人才的铺垫总结的，先自己弄懂了再去阿里面试，不然就是去丢脸，被虐。希望对大家帮助，祝面试成功，有个更好的职业规划。一，阿里常见技术面1、微信红包怎么实现。2、海量数据分析。3、测试职位问的线程安全和非线程安全。4、HTTP2.0、thrift。5、面试电话沟通可能先让自我介绍。6、分布式事务一致性。7、ni
  • 深入理解汇编语言子程序设计与系统调用 网安spinage 汇编语言开发语言汇编算法
    本文将全面解析汇编语言中子程序设计的核心技术以及系统调用的实现方法，涵盖参数传递的多种方式、堆栈管理、API调用等关键知识点，并提供实际案例演示。一、子程序设计：参数传递的艺术1.寄存器传参：高效简洁.386.modelflat,stdcalloptioncasemap:none.dataxdd5;定义变量ydd6sumdd?.code;函数定义：addxy1addxy1procpushebpmo
  • 大数据之路：阿里巴巴大数据实践——大数据领域建模综述
    为什么需要数据建模核心痛点数据冗余：不同业务重复存储相同数据（如用户基础信息），导致存储成本激增。计算资源浪费：未经聚合的明细数据直接参与计算（如全表扫描），消耗大量CPU/内存资源。数据一致性缺失：同一指标在不同业务线的口径差异（如“活跃用户”定义不同），引发决策冲突。开发效率低下：每次分析需重新编写复杂逻辑，无法复用已有模型。数据建模核心价值性能提升：分层设计（ODS→DWD→DWS→ADS）
  • Spring AI Alibaba 快速入门指南（适合初学者） 会飞的架狗师 AIspring人工智能java
    如果你是刚接触AI开发或Spring框架的初学者，不用担心，本指南会用简单易懂的语言带你一步步了解并使用SpringAIAlibaba。一、什么是SpringAIAlibaba（小白也能懂）简单来说，SpringAIAlibaba就是一个“工具包”，它把阿里巴巴的AI技术（比如通义千问大模型、向量数据库等）和大家常用的Spring框架“打包”到了一起。**打个比方：**就像你想做蛋糕（开发AI应用
  • 是他 天思静默
    第一次见他打球的时候，是在阿里地委党校的球场，那个时候，还不认识他，但觉得自己不会想要抬头主动去看他。想起那个时候，他中场休息，伸手递给我一块菠萝味口香糖，那天风沙比较大，天气比较冷，但大太阳还是在的，我抬头眯着眼睛，从阳光的狭缝里，很不情愿懒洋洋地接过他递给我的口香糖，很不耐烦…在这之前，我只知道他的名字。我是一个爱好篮球的女孩，初次坐飞机来到离家五千多公里外的高寒缺氧但美丽的西藏，并没有带着心
  • 阿里云服务器怎么选？2023年哪款最好最具性价比 阿里云最新优惠和活动汇总
    在选购阿里云服务器的时候，云服务器能稳定运行我们的程序或应用，费用也不贵，对我们来说就是最好最具性价比的云服务器，结合阿里云官方的最新活动，小编为个人用户和企业用户整理了几款2023年值得重点考虑的活动云服务器，活动价格很低，实用性也很强。一、个人和企业用户一般会买什么配置的阿里云服务器很多个人站长的小型网站一般选用的是1核2G内存和2核4G内存的服务器为多，基本上抗住访问无压力。而企业用户则需要
  • 阿里云个人用户可优惠购买的云服务器配置及价格汇总（最新版） 阿里云最新优惠和活动汇总
    阿里云活动中的云服务器分为新用户专享和企业新用户专享，其实新用户专享主要就是针对阿里云个人用户的，活动中的一些入门级云服务器就是主要为个人用户准备的，尤其是1核2G、2核4G这些配置，下面是阿里云个人用户可优惠购买云服务器配置及价格汇总。目前阿里云活动中可购买的云服务器时长为1个月、2个月、3个月、6个月和1年，不同活动中的云服务器购买时长有所不同，下面是个人用户可个人用户可优惠购买的月付和年付云
  • 阿里云企业新用户与个人新用户首次购买云服务器配置推荐 阿里云最新优惠和活动汇总
    2023年阿里云活动中的云服务器实例规格以通用算力型u1、计算型c7、通用型g7、内存型r7等为主，但是阿里云将各活动中的云服务器可选带宽统一调整成为了1-5M可选，也就是说在活动中购买云服务器最大只能选5M带宽了，活动时长也由以往的1-3年改为现在的1年为主，根据目前的活动信息，小编决定为大家推荐两款值得企业新用户与个人新用户首次购买时选择的阿里云服务器。阿里云个人新用户首次购买云服务器推荐推荐
  • 2025年云服务器怎么选？云服务器性价比指南 telunxiaosu1 服务器运维阿里云华为云京东云
    写作初衷：作为一个购买多年云服务器经历的爱好者，最喜欢看各厂商的优惠活动，反复比较各厂商的优惠，找到最具性价比的那一款。我就像一个互联网的猹，在京东云、阿里云、腾讯云的官网里反复对比、反复横跳，但不得不说，这个过程还是比较累的，尤其是网上的众多活动叠加，新客专享，生怕自己被背刺。所以，写下这篇文章，制成excel汇总表，供大家参考，包括了京东云、阿里云、腾讯云、华为云4大厂商（别的小厂怕跑路hhh
  • 八大国产 AI 模型全景对比：阿里 Qwen、百度文心、腾讯混元、字节豆包、华为盘古、DeepSeek、Kimi、MiniMax 的技术解析与选型指南 charles666666 人工智能百度交互语言模型transformer产品经理
    “在国产AI模型百花齐放的今天，企业技术决策者稍有不慎，就可能陷入性能与成本的双重困境。如何穿越技术迷雾，找到真正适配业务场景的那把钥匙？”一、开篇引言当技术选型决定企业AI落地成败，你还在凭感觉决策吗？当前国产AI模型市场，模型同质化现象严重，各厂商宣传资料中充满夸张的性能指标，但真正落地到企业实际业务场景中，却常常出现适配性不佳、部署成本不可控等问题。企业急需一份基于真实数据与场景验证的深度解
  • datax数据抽取csv到mysql
    datax数据抽取执行pythondatax.py-rstreamreader-wstreamwriter命令得到job的json模板![在这里插入图片描述](https://img-blog.csdnimg.cn/893860a55d5f40778a5010c76bc8c81f.png?x-oss-process=image/watermark,type_d3F5LXplbmhlaQ,shado
  • Spring框架深度解析
    我是廖志伟，一名Java开发工程师、《Java项目实战——深入理解大型互联网企业通用技术》（基础篇）、（进阶篇）、（架构篇）、《解密程序员的思维密码——沟通、演讲、思考的实践》作者、清华大学出版社签约作家、Java领域优质创作者、CSDN博客专家、阿里云专家博主、51CTO专家博主、产品软文专业写手、技术文章评审老师、技术类问卷调查设计师、幕后大佬社区创始人、开源项目贡献者。拥有多年一线研发和团队
  • Spring框架核心技术解析
    我是廖志伟，一名Java开发工程师、《Java项目实战——深入理解大型互联网企业通用技术》（基础篇）、（进阶篇）、（架构篇）、《解密程序员的思维密码——沟通、演讲、思考的实践》作者、清华大学出版社签约作家、Java领域优质创作者、CSDN博客专家、阿里云专家博主、51CTO专家博主、产品软文专业写手、技术文章评审老师、技术类问卷调查设计师、幕后大佬社区创始人、开源项目贡献者。拥有多年一线研发和团队
  • 并发编程与MyBatis精髓 AIHacksCash Java场景面试宝典ConcurrencyJavaDatabaseFramework
    我是廖志伟，一名Java开发工程师、《Java项目实战——深入理解大型互联网企业通用技术》（基础篇）、（进阶篇）、（架构篇）清华大学出版社签约作家、Java领域优质创作者、CSDN博客专家、阿里云专家博主、51CTO专家博主、产品软文专业写手、技术文章评审老师、技术类问卷调查设计师、幕后大佬社区创始人、开源项目贡献者。拥有多年一线研发和团队管理经验，研究过主流框架的底层源码(Spring、Spri
  • ShardingSphere核心技术解析 AIHacksCash Java场景面试宝典ShardingSphereDistributedDatabaseDatabaseSharding
    我是廖志伟，一名Java开发工程师、《Java项目实战——深入理解大型互联网企业通用技术》（基础篇）、（进阶篇）、（架构篇）清华大学出版社签约作家、Java领域优质创作者、CSDN博客专家、阿里云专家博主、51CTO专家博主、产品软文专业写手、技术文章评审老师、技术类问卷调查设计师、幕后大佬社区创始人、开源项目贡献者。拥有多年一线研发和团队管理经验，研究过主流框架的底层源码(Spring、Spri
  • 阿里云通用型实例云服务器收费标准及最新活动价格参考 阿里云最新优惠和活动汇总
    通用型实例云服务器是很多企业级用户在购买阿里云服务器时比较喜欢选择实例规格，因为通用型实例云服务器的CPU与内存配比大多都是1：4，内存资源要高于cpu资源，这种搭配多适用于中小型数据库系统、缓存、搜索集群等场景，也适用于与网站应用等场景。通用型阿里云服务器图.png阿里云服务器通用型实例规格有哪些？目前属于通用型实例云服务器的实例规格有:通用型实例规格族g8a通用型实例规格族g8i通用平衡增强型
  • ShardingSphere架构解析 AIHacksCash Java场景面试宝典ShardingSphereDistributedDatabaseDatabaseSharding
    我是廖志伟，一名Java开发工程师、《Java项目实战——深入理解大型互联网企业通用技术》（基础篇）、（进阶篇）、（架构篇）清华大学出版社签约作家、Java领域优质创作者、CSDN博客专家、阿里云专家博主、51CTO专家博主、产品软文专业写手、技术文章评审老师、技术类问卷调查设计师、幕后大佬社区创始人、开源项目贡献者。拥有多年一线研发和团队管理经验，研究过主流框架的底层源码(Spring、Spri
  • 智能家居平台服务端安装教程——东方仙盟部署 未来之窗软件服务 过去未来疑难破阵录githublinux运维仙盟创梦IDE东方仙盟智能家居
    1.准备工作登录阿里云服务器：使用SSH工具（如ssh命令）登录到你的阿里云Linux服务器。确保服务器已安装并能正常运行，且网络连接正常。更新系统软件包：执行以下命令更新系统软件包到最新版本。bashsudoaptupdatesudoaptupgrade-y2.安装依赖HomeAssistant是基于Python的应用，需要安装Python及其相关依赖。bashsudoaptinstall-yp
  • 钉钉改变的不仅仅是工作 药药妖
    经历转型，经历未知，拾遗初心。互联网公司都习惯使用钉钉，作为阿里巴巴在2017年推出的一款主打工作方式的产品，科技媒体、知乎等平台褒贬不一的评价，2017年火及一时，而且还在各大互联网公司奉为企业内部、商务沟通必备的移动办公平台。而自己却是第一次使用，但是感触颇深。也想跟大家分享一下。而钉钉中让我感触最深的是“每日”“每周”“双月”“年计划”等日报计划，第一次听到这个任务型的日常规划，是从一个做I
  • 带你见识八个靠谱的宝妈互联网兼职，总有一个适合你 氧惠佣金真的高
    在当今社会，越来越多的宝妈选择利用业余时间做兼职赚钱，以增加收入、提升技能。那么有什么兼职可以补贴家用呢?下面，我们将为你分享8个适合宝妈在家做的兼职副业，希望能够帮助到大家。一，闲鱼卖货闲鱼作为阿里巴巴旗下的二手交易平台，为卖家提供了广阔的市场空间。你可以在闲鱼上出售闲置物品，或是从事代购、批发等业务。只需简单注册账号，上传商品信息，便可轻松开启电商之旅。在闲鱼卖货，不仅能够获得额外收入，还能结
  • 阿里云账户新老用户查询指南及优惠策略详解 阿里云最新优惠和活动汇总
    阿里云经常推出各种优惠活动，其中不少优惠仅限新用户享受，那么，如何判断自己的阿里云账户是新用户还是老用户？新老用户之间又有何区别？下面小编根据自己的经验为您详细解答这些问题，并提供一些针对老用户的优惠策略。一、阿里云用户分类及定义在阿里云的用户体系中，主要存在以下几种用户类型：新用户、企业新用户、产品新用户和老用户。了解这些用户类型的定义，有助于我们更好地判断自己的用户身份。新用户新用户是指在阿里
  • 大模型【进阶】（四）QWen模型架构的解读 ReinaXue 人工智能transformer语言模型迁移学习AudioLM语音识别神经网络
    一、Qwen大模型的背景Qwen（通义千问）是阿里巴巴云开发的大型语言模型（LLM）和多模态模型系列，旨在提供强大的自然语言理解、文本生成、图像理解、音频处理及工具使用能力。Qwen系列包括Qwen、Qwen1.5、Qwen2、Qwen2.5和Qwen3等版本，涵盖了从小型（0.5B参数）到超大型（480B参数）的模型规模，支持多语言（119种语言）和多模态任务（文本、图像、音频、视频）。本文将重
  • 今天凌晨，字节开源 Coze，如何白嫖？ Python自动化办公社区 开源开源
    大家好，这里是程序员晚枫。最近AI圈放的大招太多了，文章都更新不过来了。本周刚熬夜写完了：开源Qwen3-Coder是顶级AI阳谋，阿里的野心藏不住了，今天凌晨：Coze又开源了！开源地址：https://github.com/coze-dev一、Coze开源，对字节的战略意义本次开源了一系列项目，其中两个比较重要的仓库：CozeStudio一站式AIAgent开发工具-ttps://github
  • 【企业管理】企业商业模式 flyair_China 大数据人工智能
    一、商业模式画布对比1.2B行业（企业服务）客户细分：企业用户（如制造商、批发商），按规模、行业细分。价值主张：提升效率、降低成本、供应链优化（如ERP系统、SaaS服务）。渠道通路：直销团队、行业展会、线上平台（如阿里巴巴B2B）。客户关系：长期合约、专属客户经理、定制化服务。收入来源：订阅费、交易佣金、增值服务（如供应链金融）。核心资源：技术专利、行业数据、专业人才。关键业务：系统集成、数据服
  • 高省邀请码是多少?高省新人没有邀请口令怎么办? 高省_飞智666600
    高省公司简介大家好，我是【高省】依然导师，咱们高省是一个可省钱佣金高，能赚钱有收益的平台，百度有几百万篇报道，也期待你的加入。依然导师高省邀请码：111111，送2皇冠会员，送万元推广大礼包。高省创始团队从2015年1月公司成立起就涉足电商导购领域。2015年7月，总计获A轮融资2400万，投资方为亚洲最大风投机构高瓴资本，其投资案例包括阿里、腾讯、京东等。高省现有员工300余名，公司的核心岗位，
  • CentOS-Stream-9 CentOS9 配置国内yum源-阿里云源
    yum配置文件路径centos.repocentos.repo配置文件是CentOS系统中用于配置yum软件仓库（repository）的文件。这个文件定义了yum从哪些URL地址获取软件包。/etc/yum.repos.d/centos.repocentos-addons.repocentos-addons.repo配置文件是CentOS系统中用于配置额外软件仓库（repository）的yum
  • ubuntu国内镜像源手动配置 鬼才血脉 ubuntulinux运维
    备份当前源列表打开终端，执行以下命令备份当前的源列表：sudocp/etc/apt/sources.list/etc/apt/sources.list.backup编辑源列表文件使用文本编辑器编辑/etc/apt/sources.list文件，例如使用nano：sudovim/etc/apt/sources.list添加或修改镜像源将文件中的内容替换为适合的国内镜像源地址。例如，使用阿里云的镜像源
  • Kubeadm 快速搭建 k8s 集群&&安装可视化管理界面 头发莫的了呀 Kuberneteskubernetesdocker运维
    文章目录1.实验准备2.安装docker3.配置阿里云K8Srepo源（三个节点）4.安装kubeadm，kubelet，kubectl（三个节点）5.部署kubernetesMaster节点（master节点上执行）6.k8s-node节点加入master节点（两个node执行）7.安装Pod网络插件（CNI插件，master节点）8.master节点安装可视化管理界面dashboard1.实验
  • 2024年Go实战(三)-数组array、切片slice语法详解，入职阿里啦 2401_84910869 程序员go学习面试
    网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。需要这份系统化的资料的朋友，可以添加戳这里获取一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！1.1数组定义语法：vara[len]inte.
  • 马云都辞职追梦了, 我们也应该辞职吗 0qingda
    前不久，马云宣布辞职：一年之后，也就是2019年9月10日，将不再担任阿里巴巴集团董事局主席，具体是为了什么呢，据说为了梦想，为了圆自己的教师梦。国内外震惊。有钱就是任性。我们有这么大魄力吗？没有，但是很好，从此以后我们跟马云会有一个共同点，辞职。今天遇到一个老朋友，前不久处于裸辞的状态。一见面的第一句话是有工作介绍给我吗？单双不论，能越快上岗越好。我没有太多的过问他的处境，他不说我也懂。还记得当
  • web前段跨域nginx代理配置 刘正强 nginxcmsWeb
    nginx代理配置可参考server部分 server {         listen       80;         server_name  localhost;
  • spring学习笔记 caoyong spring
    一、概述     a>、核心技术 : IOC与AOP b>、开发为什么需要面向接口而不是实现     接口降低一个组件与整个系统的藕合程度，当该组件不满足系统需求时，可以很容易的将该组件从系统中替换掉，而不会对整个系统产生大的影响 c>、面向接口编口编程的难点在于如何对接口进行初始化,(使用工厂设计模式)
  • Eclipse打开workspace提示工作空间不可用 0624chenhong eclipse
    做项目的时候，难免会用到整个团队的代码，或者上一任同事创建的workspace， 1.电脑切换账号后，Eclipse打开时，会提示Eclipse对应的目录锁定，无法访问，根据提示，找到对应目录，G:\eclipse\configuration\org.eclipse.osgi\.manager，其中文件.fileTableLock提示被锁定。 解决办法，删掉.fileTableLock文件，重
  • Javascript 面向对面写法的必要性？ 一炮送你回车库 JavaScript
    现在Javascript面向对象的方式来写页面很流行，什么纯javascript的mvc框架都出来了：ember 这是javascript层的mvc框架哦,不是j2ee的mvc框架   我想说的是，javascript本来就不是一门面向对象的语言，用它写出来的面向对象的程序，本身就有些别扭，很多人提到js的面向对象首先提的是：复用性。那么我请问你写的js里有多少是可以复用的，用fu
  • js array对象的迭代方法 换个号韩国红果果 array
    1.forEach 该方法接受一个函数作为参数， 对数组中的每个元素 使用该函数  return 语句失效 function square(num) { print(num, num * num); } var nums = [1,2,3,4,5,6,7,8,9,10]; nums.forEach(square); 2.every 该方法接受一个返回值为布尔类型
  • 对Hibernate缓存机制的理解 归来朝歌 session一级缓存对象持久化
    在hibernate中session一级缓存机制中，有这么一种情况： 问题描述：我需要new一个对象，对它的几个字段赋值，但是有一些属性并没有进行赋值，然后调用 session.save()方法，在提交事务后，会出现这样的情况： 1：在数据库中有默认属性的字段的值为空 2：既然是持久化对象，为什么在最后对象拿不到默认属性的值？ 通过调试后解决方案如下： 对于问题一，如你在数据库里设置了
  • WebService调用错误合集 darkranger webservice
     Java.Lang.NoClassDefFoundError: Org/Apache/Commons/Discovery/Tools/DiscoverSingleton 调用接口出错， 一个简单的WebService import org.apache.axis.client.Call;import org.apache.axis.client.Service; 首先必不可
  • JSP和Servlet的中文乱码处理 aijuans Java Web
    JSP和Servlet的中文乱码处理 前几天学习了JSP和Servlet中有关中文乱码的一些问题，写成了博客，今天进行更新一下。应该是可以解决日常的乱码问题了。现在作以下总结希望对需要的人有所帮助。我也是刚学，所以有不足之处希望谅解。 一、表单提交时出现乱码： 在进行表单提交的时候，经常提交一些中文，自然就避免不了出现中文乱码的情况，对于表单来说有两种提交方式：get和post提交方式。所以
  • 面试经典六问 atongyeye 工作面试
    题记：因为我不善沟通，所以在面试中经常碰壁，看了网上太多面试宝典，基本上不太靠谱。只好自己总结，并试着根据最近工作情况完成个人答案。以备不时之需。 以下是人事了解应聘者情况的最典型的六个问题： 1 简单自我介绍 关于这个问题，主要为了弄清两件事，一是了解应聘者的背景，二是应聘者将这些背景信息组织成合适语言的能力。 我的回答：(针对技术面试回答，如果是人事面试，可以就掌
  • contentResolver.query()参数详解 百合不是茶 androidquery()详解
    收藏csdn的博客,介绍的比较详细,新手值得一看 1.获取联系人姓名 一个简单的例子，这个函数获取设备上所有的联系人ID和联系人NAME。 [java]  view plain copy   public void fetchAllContacts() {      
  • ora-00054:resource busy and acquire with nowait specified解决方法 bijian1013 oracle数据库killnowait
            当某个数据库用户在数据库中插入、更新、删除一个表的数据，或者增加一个表的主键时或者表的索引时，常常会出现ora-00054:resource busy and acquire with nowait specified这样的错误。主要是因为有事务正在执行（或者事务已经被锁），所有导致执行不成功。 1.下面的语句
  • web 开发乱码 征客丶 springWeb
    以下前端都是 utf-8 字符集编码 一、后台接收 1.1、 get 请求乱码 get 请求中，请求参数在请求头中； 乱码解决方法： a、通过在web 服务器中配置编码格式：tomcat 中，在 Connector 中添加URIEncoding="UTF-8"； 1.2、post 请求乱码 post 请求中，请求参数分两部份， 1.2.1、url？参数，
  • 【Spark十六】： Spark SQL第二部分数据源和注册表的几种方式 bit1129 spark
    Spark SQL数据源和表的Schema case class apply schema parquet json JSON数据源 准备源数据 {"name":"Jack", "age": 12, "addr":{"city":"beijing&
  • JVM学习之:调优总结 -Xms -Xmx -Xmn -Xss BlueSkator -Xss-Xmn-Xms-Xmx
      堆大小设置JVM 中最大堆大小有三方面限制：相关操作系统的数据模型（32-bt还是64-bit）限制；系统的可用虚拟内存限制；系统的可用物理内存限制。32位系统下，一般限制在1.5G~2G；64为操作系统对内存无限制。我在Windows Server 2003 系统，3.5G物理内存，JDK5.0下测试，最大可设置为1478m。典型设置： java -Xmx355
  • jqGrid 各种参数 详解(转帖) BreakingBad jqGrid
      jqGrid 各种参数 详解 分类：  源代码分享  个人随笔请勿参考  解决开发问题 2012-05-09 20:29   84282人阅读   评论(22)   收藏   举报 jquery 服务器 parameters function ajax string  
  • 读《研磨设计模式》-代码笔记-代理模式-Proxy bylijinnan java设计模式
    声明： 本文只为方便我个人查阅和理解，详细的分析以及源代码请移步 原作者的博客http://chjavach.iteye.com/ import java.lang.reflect.InvocationHandler; import java.lang.reflect.Method; import java.lang.reflect.Proxy; /* * 下面
  • 应用升级iOS8中遇到的一些问题 chenhbc ios8升级iOS8
    1、很奇怪的问题，登录界面，有一个判断，如果不存在某个值，则跳转到设置界面，ios8之前的系统都可以正常跳转，iOS8中代码已经执行到下一个界面了，但界面并没有跳转过去，而且这个值如果设置过的话，也是可以正常跳转过去的，这个问题纠结了两天多，之前的判断我是在 -(void)viewWillAppear:(BOOL)animated  中写的，最终的解决办法是把判断写在 -(void
  • 工作流与自组织的关系？ comsci 设计模式工作
      目前的工作流系统中的节点及其相互之间的连接是事先根据管理的实际需要而绘制好的，这种固定的模式在实际的运用中会受到很多限制，特别是节点之间的依存关系是固定的，节点的处理不考虑到流程整体的运行情况，细节和整体间的关系是脱节的，那么我们提出一个新的观点，一个流程是否可以通过节点的自组织运动来自动生成呢？这种流程有什么实际意义呢？   这里有篇论文，摘要是：“针对网格中的服务
  • Oracle11.2新特性之INSERT提示IGNORE_ROW_ON_DUPKEY_INDEX daizj oracle
    insert提示IGNORE_ROW_ON_DUPKEY_INDEX 转自：http://space.itpub.net/18922393/viewspace-752123 在 insert into tablea ...select * from tableb中，如果存在唯一约束，会导致整个insert操作失败。使用IGNORE_ROW_ON_DUPKEY_INDEX提示，会忽略唯一
  • 二叉树:堆 dieslrae 二叉树
        这里说的堆其实是一个完全二叉树,每个节点都不小于自己的子节点,不要跟jvm的堆搞混了.由于是完全二叉树,可以用数组来构建.用数组构建树的规则很简单:     一个节点的父节点下标为: (当前下标 - 1)/2     一个节点的左节点下标为: 当前下标 * 2 + 1   &
  • C语言学习八结构体 dcj3sjt126com c
    为什么需要结构体，看代码 # include <stdio.h> struct Student //定义一个学生类型，里面有age, score, sex, 然后可以定义这个类型的变量 { int age; float score; char sex; } int main(void) { struct Student st = {80, 66.6,
  • centos安装golang dcj3sjt126com centos
    #在国内镜像下载二进制包 wget -c  http://www.golangtc.com/static/go/go1.4.1.linux-amd64.tar.gz tar -C /usr/local -xzf go1.4.1.linux-amd64.tar.gz   #把golang的bin目录加入全局环境变量 cat >>/etc/profile<
  • 10.性能优化-监控-MySQL慢查询 frank1234 性能优化MySQL慢查询
    1.记录慢查询配置 show variables where variable_name like 'slow%' ; --查看默认日志路径 查询结果：--不用的机器可能不同 slow_query_log_file=/var/lib/mysql/centos-slow.log 修改mysqld配置文件：/usr /my.cnf[一般在/etc/my.cnf，本机在/user/my.cn
  • Java父类取得子类类名 happyqing javathis父类子类类名
      在继承关系中，不管父类还是子类，这些类里面的this都代表了最终new出来的那个类的实例对象，所以在父类中你可以用this获取到子类的信息！   package com.urthinker.module.test; import org.junit.Test; abstract class BaseDao<T> { public void
  • Spring3.2新注解@ControllerAdvice jinnianshilongnian @Controller
    @ControllerAdvice，是spring3.2提供的新注解，从名字上可以看出大体意思是控制器增强。让我们先看看@ControllerAdvice的实现：   @Target(ElementType.TYPE) @Retention(RetentionPolicy.RUNTIME) @Documented @Component public @interface Co
  • Java spring mvc多数据源配置 liuxihope spring
    转自：http://www.itpub.net/thread-1906608-1-1.html 1、首先配置两个数据库 <bean id="dataSourceA" class="org.apache.commons.dbcp.BasicDataSource" destroy-method="close&quo
  • 第12章 Ajax（下） onestopweb Ajax
    index.html <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd"> <html xmlns="http://www.w3.org/
  • BW / Universe Mappings blueoxygen BO
      BW Element OLAP Universe Element Cube  Dimension Class Charateristic A class with dimension and detail objects (Detail objects for key and desription) Hi
  • Java开发熟手该当心的11个错误 tomcat_oracle java多线程工作单元测试
    #1、不在属性文件或XML文件中外化配置属性。比如，没有把批处理使用的线程数设置成可在属性文件中配置。你的批处理程序无论在DEV环境中，还是UAT（用户验收 测试）环境中，都可以顺畅无阻地运行，但是一旦部署在PROD 上，把它作为多线程程序处理更大的数据集时，就会抛出IOException，原因可能是JDBC驱动版本不同，也可能是#2中讨论的问题。如果线程数目 可以在属性文件中配置，那么使它成为
  • 推行国产操作系统的优劣 yananay windowslinux国产操作系统
    最近刮起了一股风，就是去“国外货”。从应用程序开始，到基础的系统，数据库，现在已经刮到操作系统了。原因就是“棱镜计划”，使我们终于认识到了国外货的危害，开始重视起了信息安全。操作系统是计算机的灵魂。既然是灵魂，为了信息安全，那我们就自然要使用和推行国货。可是，一味地推行，是否就一定正确呢？ 先说说信息安全。其实从很早以来大家就在讨论信息安全。很多年以前，就据传某世界级的网络设备制造商生产的交
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他