作者thinkgod49 (不随便的人)
看板Soft_Job
标题[请益] 自动更新且备份网页
时间Wed Oct 26 06:52:48 2016
个人工作室目前预计进行一种类似网路虚拟游戏币选择权、宝物的小笔买卖生意
该交易方式全部都藉由网页上的讨论区执行
类似8591
但今天只要是买卖方刊登商品,不论成交或删除下架等,该讨论区完全不会留下任何资料
,所以即便可能讨论区前後2小时文章完全一样不变,其中却早已成交了数十笔交易,假如
要设计一款可以人不用在电脑前,只要有人刊登新的文章,就可以自动进入该文章且储存
那篇文章的网页内容的软体。
(最好可以在背景程式下作业,让电脑可以同时做别的事)
请问假如程设底子是零,想做到以上这样内容的软体会不会很困难?
是想藉机让自己碰触一些这类的领域却又不知如何下手
还请神人大大指点迷津,该研究那一方面的开发程式
另外想请问这样的软件,若请人设计,报价大约在多少范畴才会不失礼数?
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 115.43.34.201
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Soft_Job/M.1477435970.A.D39.html
1F:→ ripple0129: 初学要研究的话我会说去看python requests api,这种 10/26 09:02
2F:→ ripple0129: 程度的程式估计几千就会有人接了。 10/26 09:02
3F:→ MOONY135: 网路爬虫可以做到 10/26 10:47
4F:→ MOONY135: 每一分钟扫一下 之前做过PTT GAMESALE版的爬虫 10/26 10:49
5F:→ MOONY135: 我大概12hr写完初版 又多花20hr写完整 10/26 10:50
6F:推 s860134: python 找程式码凑一凑不用多少时间 10/26 12:19
7F:推 amge1524: 说真的 加入哩哩拉拉小细节 至少5000up 10/26 13:06
8F:→ amge1524: 如果要弄的很好其实到万也有可能 10/26 13:08
9F:推 ckvir: 每分钟扫 那每分钟中间交易的不就没抓到 10/26 13:53
10F:→ GoalBased: 说几千的快点接阿0.0 10/26 14:10
11F:→ pooznn: 爬的太频繁 有些网站也会踢吧 10/26 14:37
12F:推 vi000246: 如果讨论区没有防范爬虫 写起来很快 10/26 14:47
13F:推 gmoz: 感觉浅在要求很多 应该要破万 10/26 17:09
14F:推 ns1234: 阿就爬虫阿..如果目标网站会挡频率过高的 换IP或多机器 10/26 21:30
15F:→ ns1234: 跑 10/26 21:30
16F:推 ripple0129: 没潜在需求真的几千能搞定啦,但遇到各种block棘手的 10/26 21:33
17F:→ ripple0129: 话自然加价了 10/26 21:33
18F:→ manaup: 很简单 大概一千二就可以了 XD (但找我决对不接的 科科 10/26 22:47
19F:→ viper9709: 原来这样只要几千块@@ 10/26 23:31
20F:→ ripple0129: 设定每几秒一个request看网页有没有多新文章或旧文章 10/26 23:40
21F:→ ripple0129: 有没有update过,有就进去存档,这样的需求几千不意外 10/26 23:40
22F:→ ripple0129: 吧。就怕上面说的隐藏的需求或block出现自然价格就不 10/26 23:40
23F:→ ripple0129: 一样了。 10/26 23:40
24F:→ brucetu: 我感觉估几千的都没估UI制作耗时 10/27 00:41
25F:→ brucetu: 只有算到资料存下来没估後续怎麽有效浏览 10/27 00:41
26F:→ ripple0129: 其实我只想到log没去想UI XD不过同篇文章同log也不难 10/27 00:49
27F:→ ripple0129: 读啦,要更好浏览的UI自然一分钱一分货了 10/27 00:49
30F:推 YahooTaiwan: 这几千块谁要接阿,现在流行乱报价吗 10/27 09:53
31F:推 snaketsai: 单纯只爬完资料,吐json之类的序列化结果 10/27 10:19
32F:→ snaketsai: 不负责後续blocking、其他UI视觉化等等的话 10/27 10:20
33F:→ snaketsai: 或许可以找缺钱的学生写看看 10/27 10:20
34F:→ snaketsai: 上述python的话用scrapy或urllib+美丽汤兜一下凑活用 10/27 10:23
35F:→ TSW: 这种的不用想UI吧,直接爬HTML+CSS下来 10/27 12:14
36F:推 ChungLi5566: Chrome装自动重整的插件 设定每10秒重整 10/27 12:47
37F:→ ChungLi5566: 然後再把萤幕画面录制下来 选我选我 10/27 12:48
38F:推 Kazimir: 如果只是要把网页爬来当然容易,可是我没有看到你之後打 11/12 19:14
39F:→ Kazimir: 算怎麽运用资料? 11/12 19:14
40F:→ Kazimir: 你要人工看的话几千块ok吧 11/12 19:14