10G 一点也不多，给出一些方法
1.这里倒着读取日志，每次读取 10 万行，先搜索符合最后一天的日志（具体搜索算法可以用 bm 或者 kmp 反正数据量不大）记录一下尾部行号，然后接着往上读直到符合要求为止
2.bash 法，用 cat | xarg | unique | grep ""或 awk 这类
3.mysql 直接 loadfile ，建好索引，用 where 语句查询
4.mmap 读取大文件用 re2 写个 regex 匹配一下就好（内存可能会不够）
5.bozo 读取法（最神奇的算法），随机进行读取，然后记录一下，总有一天会完全读取完成的

觉得最省事的就是载入到 mysql 里面，如果你是嵌入式环境当我没说
@visaxin spark 是处理实时流量，这个场景犯不上用那么大的家伙

@momobei 跟你们老板讲 VOSS 不行最差也用个依云嘛，像 Fillico 、 bling 什么的我也不挑剔，如果换了不需要发工资了

那 Evaluation 基本上没啥功能，实在觉得还是太多了，就用那个 bash mail 连个界面都没有

目前用过 360 的 atlas 还行，还有一个就是 mycat 看了测试报告也还不错

建议用 shadowsocks ，成熟稳定

@xp0729 上次去申请的时候，我说去旅游，然后带着我一个兄弟一起过去，那个老黑看我那个兄弟当过兵以为过去要危害乡里，我说根本就不是，我们说那个十年签证事情，他就说你们是不是去了就不想回来，然后就 dennied 了

@JackBlack2006 美国不让随便在大街上盘道警察也不行，除非你犯法了！哪怕你是非法移民没有举报你你在大街上也没事

@Kv_se7en 至于打黑工我觉不用担心，国内先接几个稳定的外包，过去不需要吃苦给老墨去抢洗车的工作

我特别喜欢这种感觉，总喜欢那种仗义的感觉，帮兄弟出头，大家一起完成目标这种情况下钱已经不是那么重要了，反正有一天你会不在的

求换成 VOSS ，每个月我 3k 块钱就来干活了

外星人敢死队，目前觉得程序狗最好的了，基本上可以装一个完整的个人工作站

如果是同样是 mssql 就看订阅，如果不是或者数据源都不统一，数据去向也不知道，可以用 ETL 神器 kettle

这很简单每天实行工作时间是 24 小时工作制度，你不来就算旷工了，你还好意思抗议！！

bloomfilter 只是个算法.......

我去香港的时候，过那个罗湖那边，那个海关就说，不叫你不要进去，我看很多提着大箱子的，有一个人那么高的里面装着各种东西，没被抽检到也没啥事情，你可以去深圳坐飞机走嘛

@Lydian 我一直以为海尔是两个不穿短裤的小男孩啊，没想到是乌鸦啊！小妹妹，叔叔家天台有金鱼要不要看看啊！

@ichanne 一个商务带一百个技术？这个是去搬砖啊？

带宽不够啊