V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  golmic  ›  全部回复第 2 页 / 共 31 页
回复总数  606
1  2  3  4  5  6  7  8  9  10 ... 31  
2018-09-10 16:56:42 +08:00
回复了 qsbaq 创建的主题 Linux shell curl 如何循环抓取 html 里的 meta refresh 跳转地址?
curl 拿到 html,正则匹配 url,再 curl 跟进
2018-09-09 09:01:55 +08:00
回复了 HenrikC 创建的主题 分享发现 各位朋友用思维导图么?如果用的话,推荐一个呗。
mindnode 最好看,好像只有 macOS 和 iOS
2018-09-07 16:45:07 +08:00
回复了 logonod 创建的主题 分享创造 用秒传做了一个百度云文件分享的插件
很大一个问题就是太长了。没具体看,不知道你现在的方案需不需要服务器。如果 PanLian 技术上没法压缩长度的话,完全可以采用短链映射的方式,感觉 6 位,(26+10)^6 就足够玩一段时间了,起码好看多了。
2018-09-07 11:44:33 +08:00
回复了 yesterdaysun 创建的主题 问与答 求问一个关于爬虫数据库的问题
maxcompute 可以详细了解一下,一方面是解决大规模的数据储存,另一方面支持 HiveQL 做数据分析,关于 HiveQL 你可以简单理解为 SQL,再就是方便进行导入导出。还可以配置任务流实现每天数据任务自动化。
2018-09-07 10:18:06 +08:00
回复了 ilaipi 创建的主题 macOS 大家现在是怎么解决 mac 上复制经常出问题的?
有时候也会遇到这个问题,感觉像是用了 粘贴板 工具的问题,但是不知道问题出在哪个软件。比如我在用 Alfred、popclip
@MissDaisy 我倒是有个交流 Python 做数据相关的技术交流群,不过应该都是在应用中遇到问题针对性讨论,不一定会对你男朋友有帮助。
2018-09-06 17:29:27 +08:00
回复了 yesterdaysun 创建的主题 问与答 求问一个关于爬虫数据库的问题
单说大规模插入慢,可以用 HBase ;单说做数据分析的查询慢,尝试导入到 Hive 中去做查询;单说提供搜索服务,PB 量级以下 ElasticSearch 就能支撑的很好。
2018-09-06 16:29:29 +08:00
回复了 yesterdaysun 创建的主题 问与答 求问一个关于爬虫数据库的问题
大规模抓取、储存是很大一部分内容。单说楼主提到的查询慢的问题,也要具体一下是搜索什么。精确查找还是模糊搜索,直接搜商品 title 还是商品 id。查询的需求是什么,是提供后端搜索服务还是别的。

如果不针对特定问题的话,感觉并没有什么通用的解决方案。
2018-09-03 12:25:43 +08:00
回复了 PanJiaChen 创建的主题 GitHub 石锤 github 买 star 行为
@lmmortal 斗鱼弹幕整天都是,竹鼠 3 元一只,十元三只。可以笑一笑
2018-09-03 11:06:01 +08:00
回复了 Pzdmultiverse 创建的主题 问与答 有了解 open Hub 的同学没~
你这文不对题。
2018-09-01 22:19:38 +08:00
回复了 dingyaguang117 创建的主题 问与答 域名解析服务商是如何判断域名所有权的?
@also24 不太懂您最后一句括号里面的,也就是说如果出现了我的域名被别人账号解析的情况,那比如是 dnspod,那我需要从域名注册商那先换一个解析商,自己解析一下 txt 记录,然后再换回 dnspod 验证所有权?会不会在注册商那换回 dnspod 时 txt 记录就不生效了。
关键问题是:如果发生了这种情况,除了换解析商,我是域名所有者,我怎么操作验证呢?
哎,用了这么久竟然没触发。今天早上来了发现自动更新了~ 很感谢楼主这样的行为~
2018-08-30 18:39:58 +08:00
回复了 longr923 创建的主题 问与答 非常奇怪,一个一模一样的网站。
2018-08-29 18:13:05 +08:00
回复了 wutongke 创建的主题 Android 分享一个北京地区的个税计算器,可以计算税改后的个税
思路清奇,哪怕非要 apk,难道不是用 github releases ?竟然把 apk 用 git 管理
2018-08-29 12:15:24 +08:00
回复了 WilliamKyle 创建的主题 宽带症候群 北京联通出口炸了?
看公司群里各楼层都在报故障,哈哈,看来不是公司的锅。联通整个炸了
2018-08-29 08:44:48 +08:00
回复了 YrlixJoe 创建的主题 macOS Mac OS 终端无法定位到当前文件夹
@YrlixJoe 与其专门下载 iterm2,不如用我提到的另外两个方案
1  2  3  4  5  6  7  8  9  10 ... 31  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2542 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 34ms · UTC 15:17 · PVG 23:17 · LAX 07:17 · JFK 10:17
Developed with CodeLauncher
♥ Do have faith in what you're doing.