java关于大批量处理文件框架选择的问题

问题描述

java关于大批量处理文件框架选择的问题

项目要做关于对仗的业务,可能会大批量操作远程ftp上的文件,
请问有没有好一点的框架组合能处理这些
spring batch + quartz?
hadoop?
storm?
这些技术都没怎么用过 求建议 谢谢 新人 勿喷

时间: 2025-01-30 16:22:32

java关于大批量处理文件框架选择的问题的相关文章

使用Java如何在创建文件时,选择要创建文件的编码(注意:不是文件中内容的编码)

问题描述 使用Java如何在创建文件时,选择要创建文件的编码(注意:不是文件中内容的编码)有没有除JavacoreAPI外,其他的实现?谢谢 解决方案 解决方案二:创建空文件是没有编码的,写入的时候指定编码其它实现不知道,JAVA的类可以用InputStreamReader(InputStreamin,Charsetcs)创建使用给定字符集的InputStreamReader.OutputStreamWriter(OutputStreamout,Charsetcs)创建使用给定字符集的Outpu

Java EE开发四大常用框架

对Java EE中常用的四个框架做一下系统的归纳 Struts     Struts是一个基于Sun Java EE平台的MVC框架,主要是采用Servlet和JSP技术来实现的.     Struts框架可分为以下四个主要部分,其中三个就和MVC模式紧密相关:     1.模型 (Model),本质上来说在Struts中Model是一个Action类(这个会在后面详细讨论),开发者通过其实现商业逻辑,同时用户请求通过控制器(Controller)向Action的转发过程是基于由struts-c

Java 动态生成 PDF 文件

每片文章前来首小诗:   今日夕阳伴薄雾,印着雪墙笑开颜.我心仿佛出窗前,浮在半腰望西天.  --泥沙砖瓦浆木匠 需求: 项目里面有需要java动态生成 PDF 文件,提供下载.今天我找了下有关了,系统得学习了解下. 开源的 iText 库使得 PDF 的创建变得轻松易行.下面介绍下   方案: -----------------------  iText V5.X.X 版 ----------------------- 第一步学习: 了解下: com.itextpdf.text.Documen

ftp服务器-java如何实现数据文件的自动采集?新手请教

问题描述 java如何实现数据文件的自动采集?新手请教 根据指定的目录,从FTP服务器将不定时推送的新文件采集到对应的数据库中,并且不会重复采集.文件基本是用YYYYMMDDHH格式的文件名区分,提供一下程序或者思路参考学习下 解决方案 首先,分析你要采集的信息是什么,对应设计你的数据库: 其次,编写文件内容处理的代码,解析文件的内容,生成解析后的数据,使用jdbc或者ORM框架完成数据入库: 最后,使用FTP连接工具如FTPClient,定时从服务器指定目录下载文件,循环调用文件解析模块,并记

Java写一个加密文件或者文件夹的软件

问题描述 Java写一个加密文件或者文件夹的软件 求大神指导思路,Java或者C#开发都可以,如何做到选择一个文件或者文件夹加密之后 ,再点击文件或者文件夹,会指向到软件,只有输入密码之后这种指向才会消失. 求大神教!!!!!!!!!!!!!!!!!!!!!!!! 解决方案 这个用Java和C#来做估计不太合适,我只能给你提供思路,思路一,HookAPI的CreateProcess和ShellExecute这类打开文件的API函数,然后获得 打开的文件路径,然后判定这个文件是否在你的加密数据库中

浅析Java基于Socket的文件传输案例_java

本文实例介绍了Java基于Socket的文件传输案例,分享给大家供大家参考,具体内容如下 1.Java代码 package com.wf.demo.socket.socketfile; import java.net.*; import java.io.*; /** * 2.socket的Util辅助类 * * @author willson * */ public class ClientSocket { private String ip; private int port; private

服务器-BS系统 java web打印word文件或者word文件流

问题描述 BS系统 java web打印word文件或者word文件流 BS系统.在服务器存有多个word文件.要求在页面点击打印直接打印. 用户点击打印能够选择打印那些文件,并且能够控制份数. (PS:文件是用户上传的,无法写死) 解决方案 客户端安装word,然后下载打印,否则没办法做到精确.浏览器有自己的打印设置.

ORM框架选择问题

问题描述 我司有一套C/S系统,现在想用java开发一套web系统出来(后台数据库用原来的),现在对ORM框架选择上有点头痛,情况如下:由于后能数据库不变用原来的,问题是由于后能经过了多个人架构,主键风格各异,1.每个表有一个id自增量作为主键,但在一对多的主子表关系中,子表的关联字段有的是用主表的id,有的是用一个人工自定义主键,如销售单明细表中的关联字段是销售单主表的销售单号,有些规范的用的是销售单主表的id,2.再比方我有员工档案表用到了部门信息表,在后台设计时可能设计成nDeptId(部

Java基于Socket的文件传输实现方法_java

本文实例讲述了Java基于Socket的文件传输实现方法.分享给大家供大家参考,具体如下: 1. Java代码如下: package sterning; import java.io.BufferedInputStream; import java.io.DataInputStream; import java.io.DataOutputStream; import java.io.File; import java.io.FileInputStream; import java.net.Ser