rory0114
rory0114

零基础学nlp【2】 注意力机制(Neural machine translation by jointly learning to align and translate)

零基础学nlp【2】 注意力机制

论文：.Bahdanau D, Cho K, Bengio Y. Neural machine translation by jointly learning to align and translate[J]. arXiv preprint arXiv:1409.0473, 2014

主要内容

在使用encoder-decoder用于机器翻译的任务中，作者在在encoder和decoder上做了某些结构的修改：1）在encoder上使用了双向的循环门控单元，使得encoder得到的每个输入的隐变量同时包含前后部分的信息 2）decoder中在每次解码过程中利用引入注意力机制的变量代替了原先的固定的变量，输入解码器中。通过这样的改变（主要是引入了注意力机制），使得建立的模型在对长句的翻译效果得到了巨大的提升。
零基础学nlp【2】 注意力机制(Neural machine translation by jointly learning to align and translate)_第1张图片零基础学nlp【2】 注意力机制(Neural machine translation by jointly learning to align and translate)_第2张图片
如图左边为包含了注意力机制的decoder结构，右图为普通的encoder-decoder模型，可以看出注意力机制是将encoder中的隐变量通过权重比的设置集合成一个C用来代替之前的用最后一个输入得到的隐变量C，即对于不同的输出，C的值从原先的不会变变成了可变的。

细节

  1. encoder中使用了双向循环神经网络单元，即encoder中的隐变量
    在这里插入图片描述
  2. 注意力机制具体生成方法：
    零基础学nlp【2】 注意力机制(Neural machine translation by jointly learning to align and translate)_第3张图片
    可以看出每一个c(i)的生成就是所有的encoder中的隐变量的加权，加权的权重由模型a(s,h)即e决定，第二个式子多做了一步归一化。那么公式中的a(s,h)究竟是个什么样的模型呢？
    文章中设定了a(s,h)是一个神经网络，它的训练是和整个模型的训练同时完成的，因为使用了注意力机制的编码c作为decoder的输入量，在反向传播中a(s,h)的参数也因此得到了更新。

结果

论文的结果如下图
零基础学nlp【2】 注意力机制(Neural machine translation by jointly learning to align and translate)_第4张图片

零基础学nlp【2】 注意力机制(Neural machine translation by jointly learning to align and translate)_第5张图片

要点

  • 注意力机制的训练方式是和整个系统一起训练的
  • 编码c在encoder-decoder模型中在每一个decoder中都重复的作为输入

你可能感兴趣的:(零基础学nlp,nlp,注意力机制)

  • 你好，2020年 瑄瑄妍妍的妈咪
    早上好，今天是2020年的第一天，也就是元旦，新年新的一天开始了。新的开始，重新规划未来的一年。从今天开始，用了一个新的记账软件，之前的随手记软件，也没有删除，只是重新下载了一个别的软件，开始一个新的记账旅程，对于理财开支，有个新的规划。通过小红书视频软件，学习了不少育儿知识，和各种不同的美食，以后动手制作，给宝宝做健康美味的营养餐。学习方面，继续学英语吧！虽然是抽出时间学的，进度也比较慢，但是积
  • 漫步，跳出藩篱 张巧金沙
    最近的教学，倍感不爽。一为这国庆之假，把这课上得支离破碎的。放假前，上了四天课，但我却只上了三天，9月30日，我工作室在搞活动，全天的活动，课当然未能上。10月8日学生回校，上了两天课，学生又放回家了。就觉得学生刚有点状态，又回去逍遥去了。感觉吧，教学内容也不敢大胆甩开膀子去教学，所以呀，这教学内容还真上不走，而且学生学下来效果特差。这不，国庆放假前的一个周，测试了两次，均为第一单元，是自考试以来
  • Pandas：数据科学的超级瑞士军刀 科技林总 DeepSeek学AI人工智能
    **——从零基础到高效分析的进化指南**###**一、Pandas诞生：数据革命的救世主****2010年前的数据分析噩梦**：```python#传统Python处理表格数据data=[]forrowincsv_file:ifrow[3]>100androw[2]=="China":data.append(float(row[5])#代码冗长易错！```**核心痛点**：-Excel处理百万行崩
  • 学C++的五大惊人好处
    为什么要学c++学c++有什么用学习c++的好处有1.中考可以加分2.高考可能直接录取3.就业广且工资高4.在未来30--50年c++一定是一个很受欢迎的职业5.c++成功的例子deepsick等AI智能C++语言兼备编程效率和编译运行效率的语言C++语言是C语言功能增强版,在c语言的基础上添加了面向对象编程和泛型编程的支持既继承了C语言高效，简洁，快速和可移植的传统,又具备类似Java、Go等其
  • 用 Python 开发小游戏：零基础也能做出《贪吃蛇》
    本文专为零基础学习者打造，详细介绍如何用Python开发经典小游戏《贪吃蛇》。无需复杂编程知识，从环境搭建到代码编写、功能实现，逐步讲解核心逻辑与操作。涵盖Pygame库的基础运用、游戏界面设计、蛇的移动与食物生成规则等，让新手能按步骤完成开发，同时融入SEO优化要点，帮助读者轻松入门Python游戏开发，体验从0到1做出游戏的乐趣。一、为什么选择用Python开发《贪吃蛇》对于零基础学习者来说，
  • 大数据技术笔记—spring入门 卿卿老祖
    篇一spring介绍spring.io官网快速开始Aop面向切面编程，可以任何位置，并且可以细致到方法上连接框架与框架Spring就是IOCAOP思想有效的组织中间层对象一般都是切入service层spring组成前后端分离已学方式，前后台未分离：Spring的远程通信：明日更新创建第一个spring项目来源：科多大数据
  • 《数字时代的学与教》第三模块共读心得 恭昌
    第三模块的主题是教法学法，主要用十一讲来阐述，分别是：同侪教学法、创造学习的新状态、讨论对话还是合作、解锁“拼图法”、把握合作学习五要素、TBL团队合作学习法、游戏式小组合作学习法、差异化教学法、从学科课堂开始的“创客教育”、探究式学习法及搭建“教学脚手架”。难度适中，同伴互助，学到知识，成就感强。教师要创造学生学习的新状态，让学生养成矫正性学习的新状态，即认识错误到自我改正错误，形成新的正确认识
  • 山月记｜知者行之始，行者知之成 嘉清月
    （郑重声明:文章系原创首发，文责自负）近日在看中岛敦的中短篇小说集《山月记》。看完短篇小说《山月记》之后，是《名人传》。讲纪昌学射的寓言故事，不过这并不是今天的主角，令我心生感慨的是《悟净出世》与《悟净叹异》。对，就是沙悟净，提起沙悟净，我的刻板印象立即出现:憨厚老实的和尚。不过《悟净出世》的悟净并非如此。作者中岛敦，借悟净其人，向世人讲述他关于自我意义的探寻。悟净出世悟净悟不出自我的意义，觉得自
  • 不必羡慕别人所拥有的 墨苒清逸
    别人有的东西未必就要羡慕才能得到，别人有的东西我们都能有。上课的时候，旁边的同学说:“哇，同桌侧颜好美啊！”其实，我觉得，这没必要去羡慕别人的，当然，有些东西是我们拼尽全力也得不到。别人有着五官我们也有，我们都是人，都是从娘胎出来的，虽然不是同一个娘胎，但是某些方面不需要学，因为，人，本就是独一无二。或者说人的气质，气质决定性格。走在街上，一个美丽的女子透露着高冷的气息，也类似于性格吧，有着可爱，
  • 2020-02-22 牵手觉醒
    100天自我成长穿越故事分享第44天幸福之家～～学梅幸福之家～～家风：幸福人生，由我做主幸福之家～～家规：每天一份看见，三条感恩使命：自我觉醒，引领家族，利人利己愿景：国泰民安，宜室宜家，举案齐眉，父慈女孝，其乐融融身份：我是一位智慧的母亲，是一位传递爱与温暖的心理教练。朋友昨天晚上和家人闹别扭，到今早还是闹的不可开交，朋友的孩子从昨晚就怕的给我打电话，可奈何爱人值班，我不能前往。今天我去到朋友家
  • 给教师的建议——4 芦荣新
    给教师的建议第四个建议——把基础知识保持在学生的记忆里。在作者学校工作的30年，发现了在他看来是一个重要的秘密--也可以说是一条特殊的教育学规律:到了中年级和高年级，就出现学业落后、成绩不良的现象，这主要是因为学生在小学的时候，没有把那些好像是知识的“地基”的基础知识牢固地保持在记忆里，达到牢记终身的程度。不妨设想一下，我们盖一幢漂亮的楼房，可是把墙基打在很不牢固的混凝土上，灰浆不断地剥离，砖头也
  • 2019.11.3 崔菲菲日志 崔菲菲
    今天周末，早上到校，先打扫卫生，然后和老师们在外面接学1.电脑赶紧发图片，把图片做了发了2.把庞老师要的PPT找出来发给庞老师3.周天有几个学生来交教材费，因为许老师和庞老师去分校了，所以我收的教材费4.上午到时间去各个班级里给学生们签到5孙老师的签到表满了，重新打了签到表6.下午上班把王静老师99元试学的学生名单整理出来，打印好签到表7.下午和庞老师去崇文校区，看了看新校区的装修风格8.庞老师咱
  • 零基础学习性能测试第八章：高并发-redis缓存架构介绍 试着 性能测试缓存学习redis性能测试零基础
    目录一、Redis在高并发中的核心价值二、Redis核心架构模式▶1.缓存穿透防御架构▶2.热点数据多级缓存三、Redis集群高可用方案▶1.RedisCluster分片架构▶2.读写分离方案四、Redis性能压测实战▶1.基准测试工具▶2.关键性能指标五、典型瓶颈分析与优化案例1：缓存雪崩案例2：热Key阻塞六、电商秒杀实战架构七、必须掌握的进阶技巧八、学习路径与工具推荐以下是为零基础学习者设计
  • 零基础21天学习网络技术，目标：比别人多懂一点，饭碗更牢固一点 孤独的汤姆 渗透测试网络安全干货分享学习php服务器
    零基础21天学习网络技术，目标：比别人多懂一点，饭碗更牢固一点。我们也不要定太远大的目标但我们可以定一个小目标网络基础小目标：比别人多懂一点核心理念：不求精通，但要实用！21天速成计划第一周：网络常识篇(7天)目标：能听懂技术对话，不再一脸懵Day1-2：网络设备认知交换机-就是"智能插线板"，连接同一网络的设备路由器-就是"网络导航员"，连接不同网络防火墙-就是"网络保安"，控制进出流量实用技能
  • 神奇的平静 漫步的小马驹
    我们七组色香味俱全的特色菜百家宴我们七组的仙女们仙女们在舞动上图是今晚上海nlp课堂的晚会照片。熟悉的场地，熟悉的伙伴们。只是，我从画面里，跑到了画面外。决定不去二阶的时候，我以为在这样的时刻，我会有很多情绪：郁闷、遗憾、羡慕、纠结……没想到，这一刻真的来临的时候，我心里是满满的喜悦、平静。其实，在读到惠安的时，我内心有些小波动：惠安和我工作类似，她也面临突击检查，她因为领导的理解、同事的护援而得
  • 零基础21天学习网络技术，目标：比别人多懂一点，饭碗更牢固一点
    零基础21天学习网络技术，目标：比别人多懂一点，饭碗更牢固一点。我们也不要定太远大的目标但我们可以定一个小目标网络基础小目标：比别人多懂一点核心理念：不求精通，但要实用！21天速成计划第一周：网络常识篇(7天)目标：能听懂技术对话，不再一脸懵Day1-2：网络设备认知交换机-就是"智能插线板"，连接同一网络的设备路由器-就是"网络导航员"，连接不同网络防火墙-就是"网络保安"，控制进出流量实用技能
  • 少说多学是一种成长 槿梦空间
    一直以来总喜欢把自己心里所有的事情，跟亲近的人毫无保留的分享，小时候不是个爱说话的人，长大的这几年也不知道怎么了，每次跟亲近的人聊天，只要打开话匣子我感觉就收不回来了，一直以来对人都太过真诚，总觉得人与人之间交流最重要的就是真诚，自然也就觉得没什么不能说的，开始也觉得没什么，越到后来你就会发现有时候有些事情，还是不说的好，因为就算是你比较亲近的人，也许也并不能理解，说出来反而有一种莫名的尴尬，也许
  • 学思录（二） 琴韵无声
    今天听了余映潮老师的讲座和两节课，收获颇丰，启发也非常的大，也为以后的语文阅读教学指引了方向。初中语文教材是一个完整的体系，要用全局观念去看待每一篇课文。这是我以前很少注意到的，拿到一本教材并没有把它放到整个统编初中语文教材中去看它，充其量也是开始上哪个单元之前，把单元导读带领学生们看一下，也就算是整体把握了。要利用课程资源设计学生的课中实践活动，设计板块式教学，避免零敲碎打。杜绝“碎问”式降低教
  • 从零到大厂：硬件程序员的硬核修炼手册——2025版面试笔试全攻略 small_wh1te_coder c面试嵌入式面试职场和发展c算法嵌入式硬件汇编linux
    从零到大厂：嵌入式程序员的硬核修炼手册——2025版面试笔试全攻略第一章：C语言的内功心法——从“会用”到“精通”的蜕变引子：C语言，嵌入式江湖的“独孤九剑”兄弟，你是不是觉得C语言都学烂了？指针、数组、结构体，这些东西张口就来。但为啥一到大厂面试，或者遇到稍微复杂点的嵌入式项目，就感觉力不从心，甚至有点懵圈？原因很简单：你可能只是“会用”C语言，离“精通”C语言，特别是“精通”嵌入式领域所需的C
  • 从0到1学PHP（二）：PHP 基本语法：构建代码的基石 奔跑吧邓邓子 项目攻略php开发语言基本语法
    目录一、PHP标记与注释1.1PHP的起始和结束标记1.2单行注释和多行注释二、变量与数据类型2.1变量的定义、命名规则和使用方法2.2数据类型详解2.3数据类型的转换三、运算符与表达式3.1各类运算符的使用3.2表达式的组成和运算规则一、PHP标记与注释1.1PHP的起始和结束标记在PHP编程中，起始标记是极为重要的基础概念。当PHP解析器处理文件时，一旦识别到结束标记，标记之外的内容会被忽略。
  • 姐弟俩 碉堡
    我是一个妈妈，两个孩子的妈妈姐姐从小生活的条件都还算可以，不管是作为爸爸妈妈的我们还是一直待在她身边照顾她的爷爷奶奶从不曾让她缺过啥，这个现象到现在一直没被破局！姐姐4岁的时候应她的要求给她‘买’了个弟弟。弟弟现在3岁了，她一直都是很疼爱，很照顾！弟弟饿了会用温水冲奶粉，要知道她自己和喝奶粉都是用凉水的！弟弟学说话，学爬行，学下床，姐姐是功不可没！可就从来新房姐姐上小学开始，她就变了！老是提意见说
  • 配音怎么学，能赚钱吗？ 配音新手圈
    配音也分很多方面，可以从最基础的先练习。像如果大学生的话时间比较多可以随时练习。在读的时候可以把硬腭隆起来的声音抛出去舌根稍微收一点。在录音前也可以吃几片苹果，避免录音时发出口水声。很多干货技巧很多可以自己搜索练习。这种兼职网上还是很多的。1、配音新手圈这是一个公众号配音新手圈里面每天更新配音任务，都是适合没有基础的人去做的，每天都有任务。适合新入门的小白练手，也是一个从业余到专业的过度期接单的平
  • 2021-10-18晨间日记 飞翔_8019
    今天是什么日子起床：5:45就寝：22:30天气：晴天心情：好纪念日：九月十三叫我起床的不是闹钟是梦想年度目标及关键点：年收入十万本月重要成果：投资理财学习今日三只青蛙/番茄钟1.晨间日记2.读书3.复盘成功日志-记录三五件有收获的事务1.今天早上铃声还没有响起的时候就醒了，说明生物钟起了作用。已经能够形成早上五点起床的习惯了，继续坚持，不能再睡懒觉了。财务检视交电费30元人际的投入无开卷有益-学
  • 2019-01-02 邻家阿太
    姓名：戴学亮公司：海南蔚蓝时代实业有限公司组别：第420期利他3组【日精进打卡第155天】【知～学习】《六项精进》《大学》【经典名句分享】自律成就一切【行～实践】一、修身：（对自己个人）早睡早起，锻炼身体二、齐家：（对家庭和家人）和家人一起共进晚餐三、建功：（对工作）日工作基本完成｛积善｝：发愿从2018年7月29日起至终生内完成至少每天日行一善【省～觉悟】这条路不行，那就另寻他路。学会变通【感谢
  • 从0到1学PHP（一）：PHP 基础入门：开启后端开发之旅
    目录一、PHP简介与发展历程1.1PHP定义与特点1.2在后端开发中的地位1.3发展阶段及重要版本更新二、PHP开发环境搭建2.1Windows系统下搭建步骤2.2Mac系统下搭建方法及常用工具2.3适合初学者的集成开发环境三、第一个PHP程序3.1编写"HelloWorld"程序3.2程序基本结构和执行过程3.3PHP代码的嵌入方式（在HTML中）一、PHP简介与发展历程1.1PHP定义与特点P
  • 搬新家开启新生活 paris_bba2
    过了一年重新归来这片让我心灵休憩的地方，让自己的心态变平缓。当儿子歇斯底里的吼叫出他什么都不行，我的心好痛！让我怎么拯救你我的孩子，一句句学渣刺痛我的心，你们对我不要报希望了，你们不要关注我了，跟注意力课程老师跟我说的一样，丢了两万多的希望一下子破碎了，他的注意力，听课效率是有所提高，可现在17节课那些老师把所有问题都归结于我们家长给他压力大，我们拿他跟妹妹比，这些话他以前从来没说过，或者儿子也希
  • 干饭人不懂稻花香 湘妹夏小莫
    今天的这篇文章，是第一张植物名片。用我自己的话来介绍一种与我们的生活息息相关的植物：水稻。成熟的稻谷01再认识水稻我们南方人每天的主要食物，就是大米和米制品，可以说是一天不吃米就心慌。然而，对于这种奉献种子给我们做粮食的植物，我们又了解多少呢？网络词典里是这样解释的：水稻，一年生禾本科植物，单子叶，性喜高温、多湿、短日照。成熟时约1米高。叶子细长，花非常小，大部分自花授粉并结种子，称为稻穗。考古学
  • 零基础学习性能测试第六章：性能难点-Jmeter实现海量用户压测
    目录一、海量压测核心挑战与解决思路二、分布式压测集群搭建（百倍性能提升）1.架构设计2.实战步骤三、百万级用户参数化方案1.Redis预生成测试数据2.JMeter分段读取（避免内存溢出）3.CSV分片策略四、高并发优化配置模板1.`jmeter.properties`关键修改2.线程组配置技巧五、结果收集与监控方案1.轻量级结果存储2.实时监控看板六、海量压测实战案例：双11级流量模拟测试目标：
  • 从零开始构建深度学习环境：基于Pytorch、CUDA与cuDNN的虚拟环境搭建与实践（适合初学者） 荣华富贵8 程序员的知识储备2程序员的知识储备3深度学习pytorch人工智能
    摘要：深度学习正在引领人工智能技术的革新，而对于初学者来说，正确搭建深度学习环境是迈向AI研究与应用的第一步。本文将为读者提供一套详尽的教程，指导如何在本地环境中搭建Pytorch、CUDA与cuDNN，以及如何利用Anaconda和PyCharm进行高效开发。内容涵盖从环境配置、常见错误修正，到基础的深度学习模型构建及训练。我们旨在为深度学习零基础的入门者提供一个全面且易于理解的“保姆级”教程，
  • 基于AlexNet架构的卷积神经网络模型用于对胸部X光图像进行二分类（例如，诊断肺炎）
    1.肺炎正常的胸部X线片描绘了清晰的肺部，图像中没有任何异常混浊的区域。正常的胸部X线片1.1细菌性肺炎临床表现细菌性肺炎通常由细菌引起，如肺炎链球菌、流感嗜血杆菌、肺炎克雷伯菌等。患者可能出现高热、寒战、咳嗽、咳痰（痰液可能呈脓性）、胸痛、呼吸困难等症状。影像学特征局灶性肺叶实变细菌性肺炎在影像学上常表现为肺叶或肺段的局灶性实变，即某一区域的肺组织因炎症而失去气体交换功能，呈现为高密度影。胸腔积
  • JAVA中的Enum 周凡杨 javaenum枚举
    Enum是计算机编程语言中的一种数据类型---枚举类型。 在实际问题中，有些变量的取值被限定在一个有限的范围内。     例如，一个星期内只有七天 我们通常这样实现上面的定义： public String monday; public String tuesday; public String wensday; public String thursday
  • 赶集网mysql开发36条军规 Bill_chen mysql业务架构设计mysql调优mysql性能优化
    (一)核心军规 (1)不在数据库做运算    cpu计算务必移至业务层； (2)控制单表数据量    int型不超过1000w，含char则不超过500w；    合理分表；    限制单库表数量在300以内； (3)控制列数量    字段少而精，字段数建议在20以内
  • Shell test命令 daizj shell字符串test数字文件比较
    Shell test命令 Shell中的 test 命令用于检查某个条件是否成立，它可以进行数值、字符和文件三个方面的测试。 数值测试 参数 说明 -eq 等于则为真 -ne 不等于则为真 -gt 大于则为真 -ge 大于等于则为真 -lt 小于则为真 -le 小于等于则为真 实例演示： num1=100 num2=100if test $[num1]
  • XFire框架实现WebService(二) 周凡杨 javawebservice
       有了XFire框架实现WebService(一)，就可以继续开发WebService的简单应用。 Webservice的服务端(WEB工程)： 两个java bean类： Course.java    package cn.com.bean; public class Course {     private
  • 重绘之画图板 朱辉辉33 画图板
           上次博客讲的五子棋重绘比较简单，因为只要在重写系统重绘方法paint（）时加入棋盘和棋子的绘制。这次我想说说画图板的重绘。        画图板重绘难在需要重绘的类型很多，比如说里面有矩形，园，直线之类的，所以我们要想办法将里面的图形加入一个队列中，这样在重绘时就
  • Java的IO流 西蜀石兰 java
    刚学Java的IO流时，被各种inputStream流弄的很迷糊，看老罗视频时说想象成插在文件上的一根管道，当初听时觉得自己很明白，可到自己用时，有不知道怎么代码了。。。 每当遇到这种问题时，我习惯性的从头开始理逻辑，会问自己一些很简单的问题，把这些简单的问题想明白了，再看代码时才不会迷糊。 IO流作用是什么？ 答：实现对文件的读写，这里的文件是广义的； Java如何实现程序到文件
  • No matching PlatformTransactionManager bean found for qualifier 'add' - neither 林鹤霄
    java.lang.IllegalStateException: No matching PlatformTransactionManager bean found for qualifier 'add' - neither qualifier match nor bean name match!   网上找了好多的资料没能解决，后来发现：项目中使用的是xml配置的方式配置事务，但是
  • Row size too large (> 8126). Changing some columns to TEXT or BLOB aigo column
    原文：http://stackoverflow.com/questions/15585602/change-limit-for-mysql-row-size-too-large   异常信息： Row size too large (> 8126). Changing some columns to TEXT or BLOB or using ROW_FORMAT=DYNAM
  • JS 格式化时间 alxw4616 JavaScript
    /** * 格式化时间 2013/6/13 by 半仙 [email protected] * 需要 pad 函数 * 接收可用的时间值. * 返回替换时间占位符后的字符串 * * 时间占位符:年 Y 月 M 日 D 小时 h 分 m 秒 s 重复次数表示占位数 * 如 YYYY 4占4位 YY 占2位<p></p> * MM DD hh mm
  • 队列中数据的移除问题 百合不是茶 队列移除
         队列的移除一般都是使用的remov();都可以移除的,但是在昨天做线程移除的时候出现了点问题,没有将遍历出来的全部移除,  代码如下;      // package com.Thread0715.com; import java.util.ArrayList; public class Threa
  • Runnable接口使用实例 bijian1013 javathreadRunnablejava多线程
    Runnable接口 a.       该接口只有一个方法：public void run(); b.       实现该接口的类必须覆盖该run方法 c.       实现了Runnable接口的类并不具有任何天
  • oracle里的extend详解 bijian1013 oracle数据库extend
    扩展已知的数组空间，例： DECLARE TYPE CourseList IS TABLE OF VARCHAR2(10); courses CourseList; BEGIN -- 初始化数组元素，大小为3 courses := CourseList('Biol 4412 ', 'Psyc 3112 ', 'Anth 3001 '); --
  • 【httpclient】httpclient发送表单POST请求 bit1129 httpclient
    浏览器Form Post请求 浏览器可以通过提交表单的方式向服务器发起POST请求，这种形式的POST请求不同于一般的POST请求 1. 一般的POST请求，将请求数据放置于请求体中，服务器端以二进制流的方式读取数据，HttpServletRequest.getInputStream()。这种方式的请求可以处理任意数据形式的POST请求，比如请求数据是字符串或者是二进制数据 2. Form
  • 【Hive十三】Hive读写Avro格式的数据 bit1129 hive
     1. 原始数据 hive> select * from word; OK 1 MSN 10 QQ 100 Gtalk 1000 Skype      2. 创建avro格式的数据表   hive> CREATE TABLE avro_table(age INT, name STRING)STORE
  • nginx+lua+redis自动识别封解禁频繁访问IP ronin47
    在站点遇到攻击且无明显攻击特征，造成站点访问慢，nginx不断返回502等错误时，可利用nginx+lua+redis实现在指定的时间段 内，若单IP的请求量达到指定的数量后对该IP进行封禁，nginx返回403禁止访问。利用redis的expire命令设置封禁IP的过期时间达到在 指定的封禁时间后实行自动解封的目的。 一、安装环境： CentOS x64 release 6.4(Fin
  • java-二叉树的遍历-先序、中序、后序（递归和非递归）、层次遍历 bylijinnan java
    import java.util.LinkedList; import java.util.List; import java.util.Stack; public class BinTreeTraverse { //private int[] array={ 1, 2, 3, 4, 5, 6, 7, 8, 9 }; private int[] array={ 10,6,
  • Spring源码学习-XML 配置方式的IoC容器启动过程分析 bylijinnan javaspringIOC
    以FileSystemXmlApplicationContext为例，把Spring IoC容器的初始化流程走一遍： ApplicationContext context = new FileSystemXmlApplicationContext ("C:/Users/ZARA/workspace/HelloSpring/src/Beans.xml&q
  • [科研与项目]民营企业请慎重参与军事科技工程 comsci 企业
         军事科研工程和项目 并非要用最先进，最时髦的技术，而是要做到“万无一失”    而民营科技企业在搞科技创新工程的时候，往往考虑的是技术的先进性，而对先进技术带来的风险考虑得不够，在今天提倡军民融合发展的大环境下，这种“万无一失”和“时髦性”的矛盾会日益凸显。。。。。。所以请大家在参与任何重大的军事和政府项目之前，对
  • spring 定时器-两种方式 cuityang springquartz定时器
    方式一： 间隔一定时间 运行 <bean id="updateSessionIdTask" class="com.yang.iprms.common.UpdateSessionTask" autowire="byName" /> <bean id="updateSessionIdSchedule
  • 简述一下关于BroadView站点的相关设计 damoqiongqiu view
    终于弄上线了，累趴，戳这里http://www.broadview.com.cn   简述一下相关的技术点   前端：jQuery+BootStrap3.2+HandleBars，全站Ajax（貌似对SEO的影响很大啊！怎么破？），用Grunt对全部JS做了压缩处理，对部分JS和CSS做了合并（模块间存在很多依赖，全部合并比较繁琐，待完善）。   后端：U
  • 运维 PHP问题汇总 dcj3sjt126com windows2003
    1、Dede(织梦)发表文章时,内容自动添加关键字显示空白页 解决方法： 后台>系统>系统基本参数>核心设置>关键字替换（是/否），这里选择“是”。 后台>系统>系统基本参数>其他选项>自动提取关键字，这里选择“是”。   2、解决PHP168超级管理员上传图片提示你的空间不足 网站是用PHP168做的，反映使用管理员在后台无法
  • mac 下 安装php扩展 - mcrypt dcj3sjt126com PHP
    MCrypt是一个功能强大的加密算法扩展库，它包括有22种算法，phpMyAdmin依赖这个PHP扩展，具体如下： 下载并解压libmcrypt-2.5.8.tar.gz。 在终端执行如下命令： tar zxvf libmcrypt-2.5.8.tar.gz cd libmcrypt-2.5.8/ ./configure --disable-posix-threads --
  • MongoDB更新文档 [四] eksliang mongodbMongodb更新文档
    MongoDB更新文档 转载请出自出处：http://eksliang.iteye.com/blog/2174104 MongoDB对文档的CURD，前面的博客简单介绍了，但是对文档更新篇幅比较大，所以这里单独拿出来。 语法结构如下： db.collection.update( criteria, objNew, upsert, multi) 参数含义 参数   
  • Linux下的解压，移除，复制，查看tomcat命令 y806839048 tomcat
    重复myeclipse生成webservice有问题删除以前的，干净 1、先切换到：cd usr/local/tomcat5/logs 2、tail -f catalina.out 3、这样运行时就可以实时查看运行日志了 Ctrl+c 是退出tail命令。 有问题不明的先注掉   cp /opt/tomcat-6.0.44/webapps/g
  • Spring之使用事务缘由(3-XML实现) ihuning spring
      用事务通知声明式地管理事务   事务管理是一种横切关注点。为了在 Spring 2.x 中启用声明式事务管理，可以通过 tx Schema 中定义的 <tx:advice> 元素声明事务通知，为此必须事先将这个 Schema 定义添加到 <beans> 根元素中去。声明了事务通知后，就需要将它与切入点关联起来。由于事务通知是在 <aop:
  • GCD使用经验与技巧浅谈 啸笑天 GC
    前言 GCD(Grand Central Dispatch)可以说是Mac、iOS开发中的一大“利器”，本文就总结一些有关使用GCD的经验与技巧。 dispatch_once_t必须是全局或static变量 这一条算是“老生常谈”了，但我认为还是有必要强调一次，毕竟非全局或非static的dispatch_once_t变量在使用时会导致非常不好排查的bug，正确的如下： 1
  • linux（Ubuntu）下常用命令备忘录1 macroli linux工作ubuntu
    在使用下面的命令是可以通过--help来获取更多的信息1,查询当前目录文件列表：ls ls命令默认状态下将按首字母升序列出你当前文件夹下面的所有内容，但这样直接运行所得到的信息也是比较少的，通常它可以结合以下这些参数运行以查询更多的信息：  ls / 显示/.下的所有文件和目录  ls -l 给出文件或者文件夹的详细信息 ls -a 显示所有文件，包括隐藏文
  • nodejs同步操作mysql qiaolevip 学习永无止境每天进步一点点mysqlnodejs
    // db-util.js var mysql = require('mysql'); var pool = mysql.createPool({ connectionLimit : 10, host: 'localhost', user: 'root', password: '', database: 'test', port: 3306 });
  • 一起学Hive系列文章 superlxw1234 hiveHive入门
      [一起学Hive]系列文章 目录贴，入门Hive，持续更新中。   [一起学Hive]之一—Hive概述，Hive是什么 [一起学Hive]之二—Hive函数大全-完整版 [一起学Hive]之三—Hive中的数据库(Database)和表(Table) [一起学Hive]之四-Hive的安装配置 [一起学Hive]之五-Hive的视图和分区 [一起学Hive
  • Spring开发利器：Spring Tool Suite 3.7.0 发布 wiselyman spring
    Spring Tool Suite(简称STS)是基于Eclipse，专门针对Spring开发者提供大量的便捷功能的优秀开发工具。   在3.7.0版本主要做了如下的更新：   将eclipse版本更新至Eclipse Mars 4.5 GA Spring Boot(JavaEE开发的颠覆者集大成者，推荐大家学习)的配置语言YAML编辑器的支持(包含自动提示，
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他