从凌开始学GIS
从凌开始学GIS

MODIS数据下载、拼接、转tif

modis数据的优势在于时间序列长，产品种类多。
modis数据下载下来是hdf格式，且一份数据由很多瓦片数据组成，需要进行拼接、投影，转tif等操作
MODIS数据下载、拼接、转tif_第1张图片

刚开始研究了好久使用MRT来对modis的hdf文件进行批量拼接，投影以及转tif，后面偶然在网上发现原来官网上可以直接完成这些操作。

modis数据下载链接为https://ladsweb.modaps.eosdis.nasa.gov/search/（科学上网）
其中账号注册推荐使用谷歌邮箱

目录

  • 一、数据下载
  • 二、数据预处理

一、数据下载

1、产品检索
首先输入关键词来检索数据，选择自己需要的数据
MODIS数据下载、拼接、转tif_第2张图片
点击产品后面的感叹号可以查看数据信息
MODIS数据下载、拼接、转tif_第3张图片

2、时间选择
选择自己需要的时间范围，可以选择单个日期，也可以选择时间范围

MODIS数据下载、拼接、转tif_第4张图片

3、区域选择
可以按照国家选择，按照图幅先择，也可以自定义区域

按照图幅选择的话，modis中国区域行列号如下
MODIS数据下载、拼接、转tif_第5张图片
4、文件检索
这步骤容易出错，注意看自己的网络是不是用了别的代理服务器，需要改成自动检测设置，全选文件
MODIS数据下载、拼接、转tif_第6张图片
也可能出现这种情况，是因为文件太多了，可以改短时间区间，或者减小区域，多次选择下载
MODIS数据下载、拼接、转tif_第7张图片

二、数据预处理

这一步操作是精华

进入该界面，不要直接点击订购，点击Apply Post-Processing，进行预处理
MODIS数据下载、拼接、转tif_第8张图片

进来后界面如下，先选择第一个
MODIS数据下载、拼接、转tif_第9张图片

往下滑选择自己需要的产品
MODIS数据下载、拼接、转tif_第10张图片
Geo是对数据进行分组，不用管，直接点击Mosaic进行瓦片拼接，注意下面打勾
MODIS数据下载、拼接、转tif_第11张图片

Peformat是把数据转换成tif格式，直接打勾
MODIS数据下载、拼接、转tif_第12张图片

Reproject是数据重投影，选择自己需要的坐标，不会的话直接选最后一个地理坐标
MODIS数据下载、拼接、转tif_第13张图片
Control是一些参数文件，需要的话就勾上，然后就可以点击订购了
MODIS数据下载、拼接、转tif_第14张图片

点击继续
MODIS数据下载、拼接、转tif_第15张图片
然后在这里点击订购的产品
MODIS数据下载、拼接、转tif_第16张图片
我们订购的数据为处理好的数据，需要处理时间，大概第二天就可以下载了
MODIS数据下载、拼接、转tif_第17张图片

为了方便演示，我选择了一些没有经过处理的数据来下载，点击下面链接
MODIS数据下载、拼接、转tif_第18张图片
全选后下载
MODIS数据下载、拼接、转tif_第19张图片
有idm的话可以全选后右键使用idm下载
MODIS数据下载、拼接、转tif_第20张图片
没有的话也可以直接使用浏览器下载
MODIS数据下载、拼接、转tif_第21张图片

你可能感兴趣的:(modis,图像处理)

  • Python Gradio：实现交互式图像编辑 PythonAI编程架构实战家 Python编程之道python开发语言ai
    PythonGradio：实现交互式图像编辑关键词：Python,Gradio,交互式图像编辑,计算机视觉,深度学习,图像处理,Web应用摘要：本文将深入探讨如何使用Python的Gradio库构建交互式图像编辑应用。我们将从基础概念开始，逐步介绍Gradio的核心功能，并通过实际代码示例展示如何实现各种图像处理功能。文章将涵盖图像滤镜应用、对象检测、风格迁移等高级功能，同时提供完整的项目实战案例
  • 如何学好图像处理——从小白到大神？ chentengkui 图像处理
    如何学好图像处理——从小白到大神？标签：图像处理学习方法2016-02-2617:4818439人阅读评论(25)收藏举报分类：学习方法与方法论（13）版权声明：本文为博主原创文章，未经博主允许不得转载。什么是数字图像处理？历史、以及它所研究的内容。说起图像处理，你会想到什么？你是否真的了解这个领域所研究的内容。纵向来说，数字图像处理研究的历史相当悠久；横向来说，数字图像处理研究的话题相当广泛。数
  • 多通道 ISP（双 ISP）并行处理机制解析：架构演进、资源调度与实战配置路径 观熵 影像技术全景图谱：架构调优与实战接口隔离原则架构影像Camera
    多通道ISP（双ISP）并行处理机制解析：架构演进、资源调度与实战配置路径关键词：双ISP、并行图像处理、多Sensor管线、分布式调度、ISP平衡调度、帧同步、多路输入、SoC图像架构摘要：随着智能手机多摄系统的普及，传统单通道ISP架构已无法满足同时驱动多颗高分辨率摄像头、并发处理视频与拍照任务的性能需求。为此，各大SoC厂商纷纷引入“双ISP”或“多通道ISP”设计，用于提升吞吐能力、降低延
  • Halcon试用与许可指南：2022年7月版 我就是夏迎春
    本文还有配套的精品资源，点击获取简介：本文件提供了Halcon软件的试用证书和许可证相关资料的集合，为潜在用户提供免费体验Halcon各项功能的途径，包括图像处理、形状匹配、OCR和条形码读取等。用户可以通过试用版全面了解软件功能，评估是否符合项目需求，并指导如何正确管理和优化许可证使用，以符合预算和需求。1.Halcon软件概述在当今高度自动化的工业时代，机器视觉系统发挥着至关重要的作用。Hal
  • 专业图片背景移除工具 开开心心_Every ocr语音识别人工智能excelsymfony启发式算法宽度优先
    软件介绍本文介绍一款具有智能抠图功能的图像处理工具，帮助用户快速完成图片背景分离操作。软件特性这款抠图工具提供绿色汉化版本，无需安装即可直接运行，操作界面简洁直观。使用方法用户只需将需要处理的图片文件拖拽至软件界面，系统即可自动识别并完成抠图操作，无需复杂设置。离线功能该工具支持离线使用模式，用户无需连接互联网即可完成图片抠图处理，保障隐私安全。这款工具还有许多功能，我就不一一介绍啦。以下为软件获
  • 《零基础入门AI：OpenCV图像预处理进一步学习》 竹子_23 OpenCV入门opencv人工智能学习
    本文全面讲解OpenCV图像预处理的七大核心技术（插值方法、边缘填充、图像矫正（透视变换）、图像掩膜、ROI切割、图像添加水印、图像噪点消除），每个知识点都配有详细解释和实用代码示例，帮助初学者建立系统的图像处理知识体系。一、插值方法：图像缩放的核心技术插值是在图像缩放或旋转时估算新像素值的方法，不同方法在速度和质量上有显著差异。1.最近邻插值原理：直接取最邻近像素的值特点：速度最快，但会产生锯齿
  • OpenCV基础02_图像预处理 白槿_cha 计算机视觉基础opencv人工智能计算机视觉笔记
    图像预处理在计算机视觉和图像处理领域，图像预处理是一个重要的步骤，它能够提高后续处理（如特征提取、目标检测等）的准确性和效率。OpenCV提供了许多图像预处理的函数和方法，一些常见的图像预处理操作：图像色彩空间转换图像大小调整图像仿射变换图像翻转图像裁剪图像二值化处理图像去噪边缘检测图像平滑处理图像形态学一、图像翻转cv2.flip是OpenCV库中的一个函数，用于翻转图像。翻转可以是水平翻转、垂
  • 小白学视觉 | 在OpenCV中进行图像预处理 双木的木 深度学习拓展阅读人工智能机器学习深度学习opencv计算机视觉图像处理ai
    本文来源公众号“小白学视觉”，仅用于学术分享，侵权删，干货满满。原文链接：在OpenCV中进行图像预处理今天，我们进一步深入，并处理在图像处理中常用的形态学操作。形态学操作用于提取区域、边缘、形状等。什么是形态学操作？形态学操作是在二值图像上进行的。二值图像可能包含许多不完美之处。特别是由一些简单的阈值操作产生的二值图像（如果你对阈值不熟悉，现在不用担心）可能包含许多噪声和畸变。OpenCV库中提
  • 机器视觉Halcon
    介绍Halcon是由德国MVTecSoftwareGmbH公司开发的一款机器视觉软件，广泛应用于工业检测、医学成像、机器人引导、三维视觉等领域。它提供强大的图像处理和分析功能，支持快速开发高效的机器视觉应用。_____________________________________________________________________________Halcon主要特点1.强大的图像处理
  • 显卡什么牌子的好？质量好性价比高 ？显卡品牌最好排名前十名？ 日常购物小技巧
    今天我们就来说下：显卡什么牌子的好？质量好性价比高？显卡品牌最好排名前十名？大家好！我是花桃平台最大团队&联合创始人大同导师。相较于其它返利app，花桃佣金更高，模式更好，终端用户不流失！在如今的信息时代中，电脑已成为人们日常生活中必不可少的电子设备之一。而显卡作为电脑的核心零部件之一，是保障电脑图像处理、游戏运行等方面必不可少的硬件设备。在市场上，显卡品牌数不胜数，那么显卡什么牌子好呢？这是一个
  • LabVIEW图像处理与OCR综合实践 咸鱼cc
    本文还有配套的精品资源，点击获取简介：本压缩包“图像VI.zip”提供了与图像处理和OCR技术相关的LabVIEW子VI，涵盖了从摄像头获取图像到OCR处理的全套功能。LabVIEW是美国国家仪器公司开发的图形化编程工具，适用于数据采集、测量和控制应用。该课程将指导学生如何使用LabVIEW的“VisionAcquisition”库进行图像采集，并通过相关子VI实现连续或单帧图像的获取。同时，讲解
  • 图像处理全栈指南：从传统算法到深度学习，再到FPGA移植 阿牛的药铺 图像算法区图像处理算法深度学习
    图像处理全栈指南：从传统算法到深度学习，再到FPGA移植一、引言：图像处理是光学类产品的“大脑”光学类产品（可见光摄像头、红外热成像、光谱仪）的核心价值，在于将光信号转化为可理解的图像信息。而图像处理算法，就是解读这些信息的“大脑”——从传统的边缘检测到深度学习的目标识别，从实时降噪到高维光谱分割，每一步都决定了产品的性能（如分辨率、帧率、功耗）。对于算法移植工程师（科研助理1）岗位而言，需要掌握
  • opencv-day2-图像预处理1 谢眠 OpenCVopencv计算机视觉
    图像预处理在计算机视觉和图像处理领域，图像预处理能够提高后续处理（如特征提取、目标检测等）的准确性和效率。常见的图像预处理操作：图像色彩空间转换图像大小调整图像仿射变换图像翻转图像裁剪图像二值化处理图像去噪边缘检测图像平滑处理图像形态学图像翻转cv2.flip是OpenCV库中的一个函数，用于翻转图像。翻转可以是水平翻转、垂直翻转或同时水平和垂直翻转。这个函数接受两个参数：要翻转的图像和一个指定翻
  • OpenCV学习探秘之二 ：数字图像的矩阵原理，OpenCV图像类与常用函数接口说明，及其常见操作核心技术详解 牵牛老人 opencv专栏opencv学习矩阵
    一、图像处理基础概念1.1数字图像的矩阵如下图，这是我们看到的Lena的头像，但是计算机看来，这副图像只是一堆亮度各异的点。一副尺寸为M×N的图像可以用一个M×N的矩阵来表示，矩阵元素的值表示这个位置上的像素的亮度，一般来说像素值越大表示该点越亮。一般来说，灰度图用2维矩阵表示；彩色（多通道）图像用3维矩阵（M×N×3）表示。对于图像显示来说，目前大部分设备都是用无符号8位整数（类型为CV_8U）
  • 轻松实现图片去色的实用工具
    本文还有配套的精品资源，点击获取简介：图片去色工具是一款专注于将彩色图片转换为黑白图片的软件，通过灰度化处理来增添艺术感或特殊效果。该工具采用简单步骤，支持批量处理，易于操作，且兼容多种图片格式及操作系统。本篇文章深入探讨了图片颜色模型、灰度图像生成、批量处理功能和软件的版本特点，以及使用说明和艺术效果的创造，为读者提供全面的去色工具应用指导。1.图片颜色模型（RGB模型）在数字图像处理中，颜色模
  • OpenCV图像预处理
    图像预处理在计算机视觉和图像处理领域，图像预处理是一个重要的步骤，它能够提高后续处理（如特征提取、目标检测等）的准确性和效率。OpenCV提供了许多图像预处理的函数和方法，以下是一些常见的图像预处理操作：图像色彩空间转换图像大小调整图像仿射变换图像翻转图像裁剪图像二值化处理图像去噪边缘检测图像平滑处理图像形态学图像翻转cv2.flip是OpenCV库中的一个函数，用于翻转图像。翻转可以是水平翻转、
  • Day 17: 常见的聚类算法
    聚类算法聚类算法是一种无监督学习技术，用于将数据集中的相似对象分组到不同的类别（称为“簇”）中，而不需要预先定义的标签。其核心目标是：同一簇内的数据点尽可能相似（高内聚性），不同簇之间的数据点尽可能不同（高分离性）。聚类广泛应用于数据挖掘、模式识别、图像处理等领域，如客户细分、文档分类或异常检测。聚类算法的基本原理聚类依赖于相似度度量（如欧氏距离）来评估数据点之间的接近程度。假设数据集包含nnn个
  • 前端性能新纪元：Rust + WebAssembly 如何在浏览器中实现10倍性能提升（以视频处理为例） 码力无边-OEC 前端rustwasmwebjavascript
    前端性能新纪元：Rust+WebAssembly如何在浏览器中实现10倍性能提升（以视频处理为例）JavaScript，作为Web开发的基石，是动态的、灵活的，但在性能上，它也存在着天生的“软肋”。对于那些计算密集型任务——如实时图像处理、视频编辑、3D渲染、复杂数据分析——纯JavaScript的执行效率往往会成为瓶颈，导致页面卡顿，用户体验直线下降。多年来，我们一直在寻找突破这层性能天花板的方
  • 基于Matlab苹果质量检测及分级系统
    欢迎大家点赞、收藏、关注、评论啦，由于篇幅有限，只展示了部分核心代码。文章目录一项目简介二、功能三、系统四.总结一项目简介  一、项目背景与意义随着现代农业的快速发展和消费者对食品品质要求的提高，苹果作为重要的水果品种，其质量检测与分级显得尤为重要。传统的苹果质量检测与分级方法依赖于人工操作，存在效率低下、主观性强、一致性差等问题。因此，本项目旨在利用Matlab编程环境，结合先进的图像处理技术和
  • MATLAB水果分级系统水果识别 清风明月来几时 图像算法处理matlab开发语言
    MATLAB草莓识别系统是一个基于MATLAB的图像处理系统，用于识别和分类草莓图像。该系统可以帮助农业领域的研究人员和农民快速准确地识别草莓品种和成熟度，从而帮助决策种植、采摘和销售的工作。系统的主要功能包括：1.图像预处理：对草莓图像进行去噪、增强和标准化等预处理工作，以提高后续的图像分析和识别效果。2.特征提取：从预处理后的图像中提取代表草莓特征的信息，例如颜色、形状、纹理等。3.分类器训练
  • 基于Matlab图像处理的水果分级系统 7zcode 图像处理开发matlab图像处理人工智能
    本研究提出了一种基于图像处理技术的果实质量评估方法，旨在通过分析水果的颜色、形态特征和缺陷情况，自动化地对水果进行分级。通过使用MATLAB中的图像处理工具箱，首先将水果图像转换为HSV色彩空间，并提取色度信息，以计算水果的红色比率。随后，采用灰度转换、滤波和二值化处理来提取形态特征，并使用形态学操作评估水果的圆度和其他形状指标。此外，利用边缘检测技术分析水果表面的缺陷，进一步结合颜色和缺陷率来实
  • 【OpenCV-Python】——图像处理基础&读写及显示图像&读写及播放视频&灰度图/彩色图/图像通道操作、运算 柯宝最帅 OpenCV学习pythonopencv图像处理
    目录前言：1、读并显示图像、写图像2、读并播放视频、写视频3、操作灰度图和彩色图、图像通道操作、运算总结：前言：在Python中，OpenCV使用NumPy数组存储图像，Numpy是使用Python进行数组计算的软件包，提供强大的N维数组对象，支持复杂的广播功能（数组运算），集成了C/C++和Fortran代码工具，支持线性代数、傅里叶变换和随机数等特性，还可作为通用数据的高效多维容器，如在Ope
  • 图像处理——基于opencv和python（一）
    一、实验环境配置1.1Python安装官网：https://www.python.org/downloads/下载任意3.6以上版本，如下载最新版本注意软件安装位置，注意勾选把路径，添加到系统变量。其它按推荐方式下一步。检查Python编译器是否正常安装。在CMD命令行中输入python,能够进入交互环境。或者在VSCode/Pycharm集成开发环境(IDE)能否检索到编译器。Writingto
  • opencv 裂缝_OpenCV——形态学 weixin_39738755 opencv裂缝
    前言继续学习图像里面的形态学知识——结构元、腐蚀、膨胀、开运算、闭运算、击中/不击中变换。以及部分基本形态学算法，包括边界提取、空洞填充、连通分量的提取、凸壳、细化、粗化、骨架、裁剪、形态学重建。其实就是对冈萨雷斯的《数字图像处理》中第9章节《形态学处理》的简要理解。如果你认为腐蚀是减小白色区域，膨胀是扩充白色区域，请务必看本博客，注意不同结构元的结果。参考博客：`OpenCV`官方的形态学运算文
  • python数字图像处理、色彩空间类型转换_Python+OpenCV图像处理—— 色彩空间转换... weixin_39653311 python数字图像处理色彩空间类型转换
    一、色彩空间的转换代码如下：#色彩空间转换importcv2ascvdefcolor_space_demo(img):gray=cv.cvtColor(img,cv.COLOR_BGR2GRAY)#RGB转换为GRAY这里的GRAY是单通道的cv.imshow("gray",gray)hsv=cv.cvtColor(img,cv.COLOR_BGR2HSV)#RGB转换为HSVcv.imshow(
  • python图片处理入门 PyHaVolask pythonpillow图像处理
    内容基于Pillow库，涵盖从环境配置到高级合成、滤镜、绘制与验证码生成等各方面操作摘要本文系统地介绍了如何使用Python中最常用的图像处理库Pillow（PIL的升级版）进行从基础操作到高级合成和绘制的全方位图像处理，内容包括：环境配置与基本概念打开、查看、读取、保存与格式转换图像混合、遮罩与通道分离缩放、裁剪、旋转与镜像过滤器与数学合成（加减、乘除、反相等）亮度、色彩与对比度增强绘制基本图形
  • Python常用医疗AI库以及案例解析（场景化进阶版） Allen_Lyb pythonpython人工智能开发语言健康医疗
    框架应用拓扑图用例MONAISimpleITKBiopythonscanpyPyTorchscikit-learnLLaVA-MedTransformersFHIRFastAPIFlowerPySyft医学图像处理生物信息学模型训练多模态分析数据交换隐私保护部署应用医学图像处理
  • 深度盘点：那些超实用的 Mac 下载网站 fukai7722 macos
    在Mac的使用过程中，丰富多样的软件能极大地提升我们的工作效率与娱乐体验。但从哪里获取可靠、安全且丰富的Mac软件呢？今天就给大家推荐并盘点一些实用的Mac下载网站。Mac青桔Macqj.com青桔堪称Mac用户的宝藏平台。它的资源库极为丰富，无论是日常办公所需的办公套件，还是进行创意工作的图像处理、视频剪辑软件，亦或是休闲娱乐的各类游戏，在这里都能找到。其优势在于，更新速度比较快。同时，网站的界
  • opencv学习（图像处理）
    目录1.图像的截取2.颜色通道的提取3.图像边界填充4.数值计算（OpenCV图像数组的算术运算与OpenCV内置加法函数）5.图像融合（两个图像只有shape值相同才能融合）6.图像阈值（通过设定一个或多个阈值，将图像中的像素值划分为不同的类别（通常是黑白两个类别），从而简化图像信息，突出感兴趣的区域。）7.图像平滑（模糊，主动降低图像清晰度，目的是去除噪声、弱化细节）（1）均值滤波（2）方框滤
  • Camera图像处理原理及实例分析-重要图像概念 xw面朝大海 图像处理
    Camera图像处理原理及实例分析做为拍照手机的核心模块之一，camerasensor效果的调整，涉及到众多的参数，如果对基本的光学原理及sensor软/硬件对图像处理的原理能有深入的理解和把握的话，对我们的工作将会起到事半功倍的效果。否则，缺乏了理论的指导，只能是凭感觉和经验去碰，往往无法准确的把握问题的关键，不能掌握sensor调试的核心技术，无法根本的解决问题。1.1色彩感应及校正1.1.1
  • 插入表主键冲突做更新 a-john
    有以下场景： 用户下了一个订单，订单内的内容较多，且来自多表，首次下单的时候，内容可能会不全（部分内容不是必须，出现有些表根本就没有没有该订单的值）。在以后更改订单时，有些内容会更改，有些内容会新增。 问题： 如果在sql语句中执行update操作，在没有数据的表中会出错。如果在逻辑代码中先做查询，查询结果有做更新，没有做插入，这样会将代码复杂化。 解决： mysql中提供了一个sql语
  • Android xml资源文件中@、@android:type、@*、？、@+含义和区别 Cb123456 @+@?@*
    一.@代表引用资源 1.引用自定义资源。格式：@[package:]type/name android：text="@string/hello"   2.引用系统资源。格式：@android:type/name     android:textColor="@android:color/opaque_red"
  • 数据结构的基本介绍 天子之骄 数据结构散列表树、图线性结构价格标签
    数据结构的基本介绍 数据结构就是数据的组织形式，用一种提前设计好的框架去存取数据，以便更方便，高效的对数据进行增删查改。正确选择合适的数据结构，对软件程序的高效执行的影响作用不亚于算法的设计。此外，在计算机系统中数据结构的作用也是非同小可。例如常常在编程语言中听到的栈，堆等，就是经典的数据结构。   经典的数据结构大致如下：   一：线性数据结构 (1)：列表 a
  • 通过二维码开放平台的API快速生成二维码 一炮送你回车库 api
     现在很多网站都有通过扫二维码用手机连接的功能，联图网(http://www.liantu.com/pingtai/)的二维码开放平台开放了一个生成二维码图片的Api,挺方便使用的。闲着无聊，写了个前台快速生成二维码的方法。        html代码如下:(二维码将生成在这div下) ? 1  &nbs
  • ImageIO读取一张图片改变大小 3213213333332132 javaIOimageBufferedImage
    package com.demo; import java.awt.image.BufferedImage; import java.io.File; import java.io.IOException; import javax.imageio.ImageIO; /** * @Description 读取一张图片改变大小 * @author FuJianyon
  • myeclipse集成svn（一针见血） 7454103 eclipseSVNMyEclipse
                                     &n
  • 装箱与拆箱----autoboxing和unboxing darkranger J2SE
    4.2　自动装箱和拆箱 基本数据(Primitive)类型的自动装箱(autoboxing)、拆箱(unboxing)是自J2SE 5.0开始提供的功能。虽然为您打包基本数据类型提供了方便，但提供方便的同时表示隐藏了细节，建议在能够区分基本数据类型与对象的差别时再使用。 4.2.1　autoboxing和unboxing 在Java中，所有要处理的东西几乎都是对象(Object)
  • ajax传统的方式制作ajax aijuans Ajax
    //这是前台的代码 <%@ page language="java" import="java.util.*" pageEncoding="UTF-8"%> <% String path = request.getContextPath(); String basePath = request.getScheme()+
  • 只用jre的eclipse是怎么编译java源文件的？ avords javaeclipsejdktomcat
    eclipse只需要jre就可以运行开发java程序了，也能自动 编译java源代码，但是jre不是java的运行环境么，难道jre中也带有编译工具？ 还是eclipse自己实现的？谁能给解释一下呢问题补充：假设系统中没有安装jdk or jre，只在eclipse的目录中有一个jre，那么eclipse会采用该jre，问题是eclipse照样可以编译java源文件，为什么呢？ &nb
  • 前端模块化 bee1314 模块化
    背景： 前端JavaScript模块化，其实已经不是什么新鲜事了。但是很多的项目还没有真正的使用起来，还处于刀耕火种的野蛮生长阶段。   JavaScript一直缺乏有效的包管理机制，造成了大量的全局变量，大量的方法冲突。我们多么渴望有天能像Java（import），Python (import)，Ruby(require)那样写代码。在没有包管理机制的年代，我们是怎么避免所
  • 处理百万级以上的数据处理 bijian1013 oraclesql数据库大数据查询
    一.处理百万级以上的数据提高查询速度的方法：        1.应尽量避免在 where 子句中使用!=或<>操作符，否则将引擎放弃使用索引而进行全表扫描。         2.对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 o
  • mac 卸载 java 1.7 或更高版本 征客丶 javaOS
    卸载 java 1.7 或更高 sudo rm -rf /Library/Internet\ Plug-Ins/JavaAppletPlugin.plugin 成功执行此命令后，还可以执行 java 与 javac 命令 sudo rm -rf /Library/PreferencePanes/JavaControlPanel.prefPane 成功执行此命令后，还可以执行 java
  • 【Spark六十一】Spark Streaming结合Flume、Kafka进行日志分析 bit1129 Stream
    第一步，Flume和Kakfa对接，Flume抓取日志，写到Kafka中 第二部，Spark Streaming读取Kafka中的数据，进行实时分析   本文首先使用Kakfa自带的消息处理（脚本）来获取消息，走通Flume和Kafka的对接 1. Flume配置 1. 下载Flume和Kafka集成的插件，下载地址：https://github.com/beyondj2ee/f
  • Erlang vs TNSDL bookjovi erlang
          TNSDL是Nokia内部用于开发电信交换软件的私有语言，是在SDL语言的基础上加以修改而成，TNSDL需翻译成C语言得以编译执行，TNSDL语言中实现了异步并行的特点，当然要完整实现异步并行还需要运行时动态库的支持，异步并行类似于Erlang的process（轻量级进程），TNSDL中则称之为hand，Erlang是基于vm(beam)开发，
  • 非常希望有一个预防疲劳的java软件, 预防过劳死和眼睛疲劳,大家一起努力搞一个 ljy325 企业应用
    　非常希望有一个预防疲劳的java软件，我看新闻和网站，国防科技大学的科学家累死了，太疲劳，老是加班，不休息，经常吃药，吃药根本就没用，根本原因是疲劳过度。我以前做java,那会公司垃圾，老想赶快学习到东西跳槽离开，搞得超负荷，不明理。深圳做软件开发经常累死人，总有不明理的人，有个软件提醒限制很好，可以挽救很多人的生命。 相关新闻： （1）IT行业成五大疾病重灾区：过劳死平均37.9岁
  • 读《研磨设计模式》-代码笔记-原型模式 bylijinnan java设计模式
    声明： 本文只为方便我个人查阅和理解，详细的分析以及源代码请移步 原作者的博客http://chjavach.iteye.com/ /** * Effective Java 建议使用copy constructor or copy factory来代替clone()方法： * 1.public Product copy(Product p){} * 2.publi
  • 配置管理---svn工具之权限配置 chenyu19891124 SVN
    今天花了大半天的功夫，终于弄懂svn权限配置。下面是今天收获的战绩。 安装完svn后就是在svn中建立版本库，比如我本地的是版本库路径是C:\Repositories\pepos。pepos是我的版本库。在pepos的目录结构 pepos    component    webapps 在conf里面的auth里赋予的权限配置为 [groups]
  • 浅谈程序员的数学修养 comsci 设计模式编程算法面试招聘
                                     浅谈程序员的数学修养
  • 批量执行 bulk collect与forall用法 daizj oraclesqlbulk collectforall
    BULK COLLECT 子句会批量检索结果，即一次性将结果集绑定到一个集合变量中，并从SQL引擎发送到PL/SQL引擎。通常可以在SELECT INTO、 FETCH INTO以及RETURNING INTO子句中使用BULK COLLECT。本文将逐一描述BULK COLLECT在这几种情形下的用法。     有关FORALL语句的用法请参考：批量SQL之 F
  • Linux下使用rsync最快速删除海量文件的方法 dongwei_6688 OS
    1、先安装rsync：yum install rsync 2、建立一个空的文件夹：mkdir /tmp/test 3、用rsync删除目标目录：rsync --delete-before -a -H -v --progress --stats /tmp/test/ log/这样我们要删除的log目录就会被清空了，删除的速度会非常快。rsync实际上用的是替换原理，处理数十万个文件也是秒删。
  • Yii CModel中rules验证规格 dcj3sjt126com rulesyiivalidate
    Yii cValidator主要用法分析：  yii验证rulesit 分类： Yii yii的rules验证 cValidator主要属性 attributes ,builtInValidators,enableClientValidation,message,on,safe,skipOnError  
  • 基于vagrant的redis主从实验 dcj3sjt126com vagrant
    平台: Mac 工具: Vagrant 系统: Centos6.5 实验目的: Redis主从   实现思路 制作一个基于sentos6.5, 已经安装好reids的box, 添加一个脚本配置从机, 然后作为后面主机从机的基础box   制作sentos6.5+redis的box   mkdir vagrant_redis cd vagrant_
  • Memcached(二)、Centos安装Memcached服务器 frank1234 centosmemcached
    一、安装gcc rpm和yum安装memcached服务器连接没有找到，所以我使用的是make的方式安装，由于make依赖于gcc，所以要先安装gcc 开始安装，命令如下，[color=red][b]顺序一定不能出错[/b][/color]： 建议可以先切换到root用户，不然可能会遇到权限问题：su root 输入密码...... rpm -ivh kernel-head
  • Remove Duplicates from Sorted List hcx2013 remove
    Given a sorted linked list, delete all duplicates such that each element appear only once. For example,Given 1->1->2, return 1->2.Given 1->1->2->3->3, return&
  • Spring4新特性——JSR310日期时间API的支持 jinnianshilongnian spring4
    Spring4新特性——泛型限定式依赖注入 Spring4新特性——核心容器的其他改进 Spring4新特性——Web开发的增强 Spring4新特性——集成Bean Validation 1.1(JSR-349)到SpringMVC  Spring4新特性——Groovy Bean定义DSL Spring4新特性——更好的Java泛型操作API  Spring4新
  • 浅谈enum与单例设计模式 247687009 java单例
    在JDK1.5之前的单例实现方式有两种(懒汉式和饿汉式并无设计上的区别故看做一种)，两者同是私有构 造器，导出静态成员变量，以便调用者访问。 第一种 package singleton; public class Singleton { //导出全局成员 public final static Singleton INSTANCE = new S
  • 使用switch条件语句需要注意的几点 openwrt cbreakswitch
    1. 当满足条件的case中没有break，程序将依次执行其后的每种条件（包括default）直到遇到break跳出 int main() { int n = 1; switch(n) { case 1: printf("--1--\n"); default: printf("defa
  • 配置Spring Mybatis JUnit测试环境的应用上下文 schnell18 springmybatisJUnit
    Spring-test模块中的应用上下文和web及spring boot的有很大差异。主要试下来差异有： 单元测试的app context不支持从外部properties文件注入属性 @Value注解不能解析带通配符的路径字符串 解决第一个问题可以配置一个PropertyPlaceholderConfigurer的bean。 第二个问题的具体实例是：    
  • Java 定时任务总结一 tuoni javaspringtimerquartztimertask
     Java定时任务总结  一.从技术上分类大概分为以下三种方式：  1.Java自带的java.util.Timer类，这个类允许你调度一个java.util.TimerTask任务;   说明：    java.util.Timer定时器，实际上是个线程，定时执行TimerTask类 &
  • 一种防止用户生成内容站点出现商业广告以及非法有害等垃圾信息的方法 yangshangchuan rank相似度计算文本相似度词袋模型余弦相似度
    本文描述了一种在ITEYE博客频道上面出现的新型的商业广告形式及其应对方法，对于其他的用户生成内容站点类型也具有同样的适用性。   最近在ITEYE博客频道上面出现了一种新型的商业广告形式，方法如下：     1、注册多个账号（一般10个以上）。     2、从多个账号中选择一个账号，发表1-2篇博文
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他