Redian新闻
>
菜鸟请问怎么搭这么个系统 (转载)
avatar
菜鸟请问怎么搭这么个系统 (转载)# PDA - 掌中宝
b*r
1
【 以下文字转载自 Programming 讨论区 】
发信人: bullogger (黯然销魂饭), 信区: Programming
标 题: 菜鸟请问怎么搭这么个系统
发信站: BBS 未名空间站 (Wed Nov 11 16:45:47 2015, 美东)
我有一个程序,能处理一次实验中采集的数据(一般是几十到几百个数据文件,一共是
上G),生成的结果是1个200M左右的图像文件。组里的人采到了数据,都是在本地处理
,然后把原始文件和结果文件上传到远程FTP server A上。
我现在想在局域网建个linux server B,使得组里的人采到原始数据后,直接上传到远
程FTP A上,然后server B把原始数据从A上下载下来,运行数据处理程序,生成结果文
件,上传到FTP,给上传者发一封信通知,然后把原始文件删掉(因为本地空间有限)。
我以为这个就是写个python脚本(我不会linux脚本,python也是菜鸟)检测程序检测
ftp变化,然后下载处理。但是我需要保证一次实验的所有数据都上传完了再执行,这
样的话脚本怎么知道上传完毕了呢?
还有个办法就是在server B上建个web服务器,用户上传完以后,登陆这个网页,在对
话框里输入ftp路径,点击“处理”,然后B就下载处理这组数据。这样的缺点是自动化
程度不够,用户得等ftp上传结束后手动开始处理,不过也可以接受。请问怎样快速搭
这么个server呢?
多谢
avatar
y*n
2
0mq
avatar
d*3
3
你先把问题描述清楚,你这个描述太混乱了。。。
avatar
L*y
4
https://www.freelancer.com/

【 以下文字转载自 Programming 讨论区 】
发信人: bullogger (黯然销魂饭), 信区: Programming
标 题: 菜鸟请问怎么搭这么个系统
发信站: BBS 未名空间站 (Wed Nov 11 16:45:47 2015, 美东)
我有一个程序,能处理一次实验中采集的数据(一般是几十到几百个数据文件,一共是
上G),生成的结果是1个200M左右的图像文件。组里的人采到了数据,都是在本地处理
,然后把原始文件和结果文件上传到远程FTP server A上。
我现在想在局域网建个linux server B,使得组里的人采到原始数据后,直接上传到远
程FTP A上,然后server B把原始数据从A上下载下来,运行数据处理程序,生成结果文
件,上传到FTP,给上传者发一封信通知,然后把原始文件删掉(因为本地空间有限)。
我以为这个就是写个python脚本(我不会linux脚本,python也是菜鸟)检测程序检测
ftp变化,然后下载处理。但是我需要保证一次实验的所有数据都上传完了再执行,这
样的话脚本怎么知道上传完毕了呢?
还有个办法就是在server B上建个web服务器,用户上传完以后,登陆这个网页,在对
话框里输入ftp路径,点击“处理”,然后B就下载处理这组数据。这样的缺点是自动化
程度不够,用户得等ftp上传结束后手动开始处理,不过也可以接受。请问怎样快速搭
这么个server呢?
多谢

【在 b*******r 的大作中提到】
: 【 以下文字转载自 Programming 讨论区 】
: 发信人: bullogger (黯然销魂饭), 信区: Programming
: 标 题: 菜鸟请问怎么搭这么个系统
: 发信站: BBS 未名空间站 (Wed Nov 11 16:45:47 2015, 美东)
: 我有一个程序,能处理一次实验中采集的数据(一般是几十到几百个数据文件,一共是
: 上G),生成的结果是1个200M左右的图像文件。组里的人采到了数据,都是在本地处理
: ,然后把原始文件和结果文件上传到远程FTP server A上。
: 我现在想在局域网建个linux server B,使得组里的人采到原始数据后,直接上传到远
: 程FTP A上,然后server B把原始数据从A上下载下来,运行数据处理程序,生成结果文
: 件,上传到FTP,给上传者发一封信通知,然后把原始文件删掉(因为本地空间有限)。

avatar
L*y
5
让他们打包好以后上载.只上载一个压缩文件.

【 以下文字转载自 Programming 讨论区 】
发信人: bullogger (黯然销魂饭), 信区: Programming
标 题: 菜鸟请问怎么搭这么个系统
发信站: BBS 未名空间站 (Wed Nov 11 16:45:47 2015, 美东)
我有一个程序,能处理一次实验中采集的数据(一般是几十到几百个数据文件,一共是
上G),生成的结果是1个200M左右的图像文件。组里的人采到了数据,都是在本地处理
,然后把原始文件和结果文件上传到远程FTP server A上。
我现在想在局域网建个linux server B,使得组里的人采到原始数据后,直接上传到远
程FTP A上,然后server B把原始数据从A上下载下来,运行数据处理程序,生成结果文
件,上传到FTP,给上传者发一封信通知,然后把原始文件删掉(因为本地空间有限)。
我以为这个就是写个python脚本(我不会linux脚本,python也是菜鸟)检测程序检测
ftp变化,然后下载处理。但是我需要保证一次实验的所有数据都上传完了再执行,这
样的话脚本怎么知道上传完毕了呢?
还有个办法就是在server B上建个web服务器,用户上传完以后,登陆这个网页,在对
话框里输入ftp路径,点击“处理”,然后B就下载处理这组数据。这样的缺点是自动化
程度不够,用户得等ftp上传结束后手动开始处理,不过也可以接受。请问怎样快速搭
这么个server呢?
多谢

【在 b*******r 的大作中提到】
: 【 以下文字转载自 Programming 讨论区 】
: 发信人: bullogger (黯然销魂饭), 信区: Programming
: 标 题: 菜鸟请问怎么搭这么个系统
: 发信站: BBS 未名空间站 (Wed Nov 11 16:45:47 2015, 美东)
: 我有一个程序,能处理一次实验中采集的数据(一般是几十到几百个数据文件,一共是
: 上G),生成的结果是1个200M左右的图像文件。组里的人采到了数据,都是在本地处理
: ,然后把原始文件和结果文件上传到远程FTP server A上。
: 我现在想在局域网建个linux server B,使得组里的人采到原始数据后,直接上传到远
: 程FTP A上,然后server B把原始数据从A上下载下来,运行数据处理程序,生成结果文
: 件,上传到FTP,给上传者发一封信通知,然后把原始文件删掉(因为本地空间有限)。

avatar
r*i
7
写个程序监控FTP server的log。http://www.linuxorz.com/2014/08/vsftpd-enable-logging-and-standard-xferlog-format/

)。

【在 b*******r 的大作中提到】
: 【 以下文字转载自 Programming 讨论区 】
: 发信人: bullogger (黯然销魂饭), 信区: Programming
: 标 题: 菜鸟请问怎么搭这么个系统
: 发信站: BBS 未名空间站 (Wed Nov 11 16:45:47 2015, 美东)
: 我有一个程序,能处理一次实验中采集的数据(一般是几十到几百个数据文件,一共是
: 上G),生成的结果是1个200M左右的图像文件。组里的人采到了数据,都是在本地处理
: ,然后把原始文件和结果文件上传到远程FTP server A上。
: 我现在想在局域网建个linux server B,使得组里的人采到原始数据后,直接上传到远
: 程FTP A上,然后server B把原始数据从A上下载下来,运行数据处理程序,生成结果文
: 件,上传到FTP,给上传者发一封信通知,然后把原始文件删掉(因为本地空间有限)。

相关阅读
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。