Ruby China
  • 社区
  • 招聘
  • Wiki
  • 酷站
  • Gems
  • 注册
  • 登录
Iceskysl
@iceskysl
高级会员
第 540 位会员 / 2011-12-22

极客学院
北京
24 篇帖子 / 120 条回帖
1 关注者
0 正在关注
28 收藏
Focus on Android, Iphone, Web2.0, Business, Architecture, Agile, Technic and beyond…
GitHub Public Repos
  • worklogs 26

    This is a worklogs plugin for Redmine

  • material_design_zh 19

    Material Design ( http://www.google.com/design/spec/material-design/introduction.html )

  • address_books 2

    This is a address book plugin for Redmine

  • android-training-cours... 1

    Google Android官方培训课程中文版

  • GO-ZhihuDaily 1

    知乎日报 Web 版(Go 实现)

  • help 0

    极客学院帮助中心

  • bootstrap 0

    The most popular HTML, CSS, and JavaScript framework for developing responsive, mobile first proj...

  • tensorflow-zh 0

    协同翻译: 谷歌全新开源人工智能系统TensorFlow官方文档,官网地址: http://tensorflow.org/

  • goplus 0

    GoPlus - The Go+ language for data science

  • jupyterhub 0

    Multi-user server for Jupyter notebooks

More on GitHub
  • 概况
  • 话题
  • 回帖
  • 收藏
  • 正在关注
  • 关注者
  • ShopQi 上线内测,中国版 shopify at 2012年02月08日

    关注一把~

  • @ 自动匹配用户名功能上线 at 2012年02月03日

    赞~

  • 有木摄影爱好者推荐个入门单反 at 2012年02月02日

    #23 楼 @jean 好吧 +1

  • 有木摄影爱好者推荐个入门单反 at 2012年02月02日

    #20 楼 @nowazhu 好吧,我认真考虑~

  • 有木摄影爱好者推荐个入门单反 at 2012年02月02日

    #19 楼 @Zernel 肯定的~

  • 询问 rails 的性能 at 2012年02月02日

    呵呵,放心吧,没啥问题~

  • 有木摄影爱好者推荐个入门单反 at 2012年01月31日

    #11 楼 @ichord 好多人说:没事别买单反,用的机会很少~

  • 有木摄影爱好者推荐个入门单反 at 2012年01月31日

    #9 楼 @hujoy 偶第一次用别人的单反拍的也全是黑乎乎的~

  • 有木摄影爱好者推荐个入门单反 at 2012年01月31日

    #5 楼 @ery 偶的手机也装了 1000 多张~ 懒得挑选了都~~

  • 有木摄影爱好者推荐个入门单反 at 2012年01月31日

    #2 楼 @lgn21st 前车~刚就在看 Nikon D3100 和 Nikon D5000~

  • 有木摄影爱好者推荐个入门单反 at 2012年01月31日

    #3 楼 @metal 我去,这个道理杠杠的~

  • 有木摄影爱好者推荐个入门单反 at 2012年01月31日

    #1 楼 @metal 专家出现,多谢~

  • 邀三五个技术牛人,组成 “天使投技” 团队 at 2012年01月30日

    q_.._p

  • NodeJS 适合用来做什么? at 2012年01月29日

    #7 楼 @ashchan 现在在哪家公司?

  • rvm 安装 1.9.3 的错误信息 (已解决) at 2012年01月19日

    gcc

  • 想要得几个新功能 at 2012年01月19日

    #1 楼 @lainuo 正解~

  • 想要得几个新功能 at 2012年01月19日

    #2 楼 @huacnlee 你得意思是在 Dropbox 或者 115 之类得传后,过来贴链接?

  • ruby-china 的代码这么慢? at 2012年01月19日

    #23 楼 @huacnlee #19 楼 @ashchan 找到慢得原因了~ 还是内存得问题,用 unicon 得时候启多了进程数导致得~ 减少到系统可分配得进程数内就各项指标正常了~

  • CentOS + Nginx 部署时出现奇怪问题 at 2012年01月18日

    看 nginx 的 error log~

  • (已解决) 每天 500w 条 log 如何入 mysql 库比较靠谱 at 2012年01月17日

    #24 楼 @ashchan
    原因是我在清洗数据的时候用到了 ruby 的 array 中 include?方法,而这个方法是直接遍历。。如下图

    详细的我在 blog 大致纪录了下: http://www.iceskysl.com/?p=1106

  • (已解决) 每天 500w 条 log 如何入 mysql 库比较靠谱 at 2012年01月17日

    找到原因了~ 彻底解决了~~~

  • (已解决) 每天 500w 条 log 如何入 mysql 库比较靠谱 at 2012年01月16日

    #19 楼 @Lucifer #20 楼 @camel 了然~多谢~

  • (已解决) 每天 500w 条 log 如何入 mysql 库比较靠谱 at 2012年01月16日

    #18 楼 @ashchan 了解,目前的思路就这样了~

  • (已解决) 每天 500w 条 log 如何入 mysql 库比较靠谱 at 2012年01月15日

    正在 Benchmark~

  • (已解决) 每天 500w 条 log 如何入 mysql 库比较靠谱 at 2012年01月15日

    #12 楼 @lanwen 还是没解决掉本质问题~

  • 求推荐个好用的图表生成组件 at 2012年01月15日

    highcharts

  • (已解决) 每天 500w 条 log 如何入 mysql 库比较靠谱 at 2012年01月14日

    #8 楼 @xds2000 还没到分析那块,现在再数据导入这个环节~infobright 这个有了解,多谢~~

  • (已解决) 每天 500w 条 log 如何入 mysql 库比较靠谱 at 2012年01月14日

    #4 楼 @vincent 哦,sql 导入的速度还不错,但是准备 sql 的过程比较慢,过程是这样的:

    1. 准备 sql 文件 sqlFileName = RAILS_ROOT + "/log/insert.sql." + LOG_POSTFIX_FOR_YESTERDAY sqlfile = File.open(sqlFileName, "w")

    2. 打开日志文件 File.open("../log/apps.log.#{LOG_POSTFIX_FOR_YESTERDAY}").each do |line|

    3.提取需要的数据 id, apk_id, ip, client_id, channel_id, uniquely_code ,track = line.split(" : ")[1].split(",")

    1. 生成 sql 串 sqlInsert = "INSERT logs_downloads.....balalaalala

    2. 写到 sql 文件里 sqlfile.puts( sqlInsert )

    3. 调 mysql 直接导入 sql

    里面还有一些数据的清洗和排重工作~

    每天的日志文件差不多 500w 行,解析生成 sql 的过程不理想(其中没用数据库操作)~ 难道是我磁盘性能很糟糕~~

  • (已解决) 每天 500w 条 log 如何入 mysql 库比较靠谱 at 2012年01月14日

    #3 楼 @bony 感觉这个是单台性能最佳以后再横向扩展,现在我个人觉得单台性能还比较糟糕,横向解决不了根本问题~

  • 上一页
  • 1
  • 2
  • 3
  • 4
  • 下一页
关于 / RubyConf / Ruby 镜像 / RubyGems 镜像 / 活跃会员 / 组织 / API / 贡献者
由众多爱好者共同维护的 Ruby 中文社区,本站使用 Homeland 构建,并采用 Docker 部署。
服务器由 赞助 CDN 由 赞助
iOS 客户端 / Android 客户端 简体中文 / English