nameofhsw (joseph)

怎么实现 unicode 编码，比如想要获取字符串"map"对应的编码内容"map"

nameofhsw — Mon, 31 May 2021 15:05:36 +0800

在站长之家用网页转，是能转出来，用代码怎么实现？

有什么轻量级的并发框架推荐吗？

nameofhsw — Sat, 26 Mar 2016 11:36:11 +0800

要做个 http 网页爬虫工具，因此想找个轻量级的并发框架参考学习，目前我知道的 rainbows 和 celluloid，但由于 ruby 属于半吊子，所以想多听听大家的意见。虽然自己写了一个多线程同步处理的小东西，但是感觉太垃圾了。另外搭车同问下，为啥有时候 http 请求发出去之后，整个线程就挂起没响应了呢？使用的 Net::HTTP 的，设置了访问超时什么的都没用。直接整个线程就停滞了

如何用 socket 发送 16 进制数数组

nameofhsw — Tue, 22 Mar 2016 14:16:32 +0800

一个简单的 TCPclient 程序，但是想要发送的数据是 16 进制数组成的数组，而不是字符串。写了个程序，但是发出去的内容打印出来是 “48\n49\n50\n” 变成了长度是 9 的字符串了。我希望是对方能收到 3 个字节的 hex 数据 0x30,0x31,0x32 请问有哪位知道怎么写才对嘛？

require 'pp'
require 'socket'

hostname = '192.168.81.137'
port = 65101

s = TCPSocket.open(hostname,port)

str = "30 31 32"
arr_str = str.split(" ")
arr_hex = []
arr_str.each do|str|
    arr_hex.push(str.hex)
end
p arr_hex
s.puts(arr_hex)
s.close

关于 SWIG 怎么加载 C 函数的问题

nameofhsw — Thu, 17 Mar 2016 11:40:42 +0800

在自定义的 C 函数里面使用了 memset,strcpy 这些函数，然后 make 的时候提示错误： ‘memset’was not declared in this scope

在自定义的 C 文件里面有添加对应的头文件，extconf.rb 内容如下：

# Loads mkmf which is used to make makefiles for Ruby extensions
require 'mkmf'

# The destination
dir_config 'sdsapi'

$libs = append_library $libs,'stdc++'

# Do the work
create_makefile 'sdsapi'

有哪位知道问题所在吗？

http 网页内容抓取的编码问题

nameofhsw — Wed, 22 Jul 2015 15:21:43 +0800

同一个程序，在打印网页的 body 内容的时候，中文字段用 puts 都可以显示出来，用 pp 却显示成两种编码。这是因为什么？已其中 key words 的部分内容为例： ruby2.1.5 环境下 pp 的显示结果:\xE5\xBC\x80\xE5\x8F\x91\xE8\x80\x85 这是 ASCII-8BIT 的编码吧 ruby1.8.7 环境下 pp 的显示结果:\345\274\200\345\217\221\350\200\205 puts 都能显示成中文:“开发者”

#!/usr/bin/env ruby

require "net/http"
require "pp"
require "uri"

custom_h = {}
agent = "Mozilla/5.0 (Windows NT 6.1; WOW64; rv:31.0) Gecko/20100101 Firefox/31.0"
custom_h["User-Agent"] = agent

uri  = URI("http://www.cnblogs.com")
pp uri
pp uri.host
pp uri.port
path = uri.path.empty? ? "/" : uri.path
pp path

http = Net::HTTP.new(uri.host, uri.port)
resq,data = http.get(path, custom_h)
headers = {}
resq.each {|key, val| headers[key] = val}
pp resq.body

想用 epoll 做个高并发爬虫,有好的开源代码推荐学习下吗？

nameofhsw — Mon, 29 Jun 2015 17:05:25 +0800

想利用 eventmachine 做一个 http 的高并发爬虫程序，但是没有太多头绪所以想看看大家有没有开源的软件可以推荐我学习一下。

或者简单的如下是否可行：

def http_oper(rul)
   f = Fiber . current
   http = EventMachine :: HttpRequest . new ( url , : connect_timeout = > 10 , : inactivity_timeout = > 20 ) . get 
   http . callback { f . resume ( http ) }
   http . errback    { f . resume ( http ) }

   Fiber . yield

   if http . error
     p [ : HTTP_ERROR , http . error ]
   end

   http 
end

EM.run {
       while 1
           url = get_url        ## 一个获取目标url的接口，具体实现没写
           Fiber .new{
                  data = http_oper(url)
           }.resume 
       end
       EM.stop
}

Ruby 内存的一些问题

nameofhsw — Fri, 05 Jun 2015 11:39:25 +0800

最近在程序中由于需要对大字符串数据进行多种操作，倒是机器内存一直紧张，所以想请教下面几个问题，来研究下怎么解决

1.在程序中，某一个字符串对象在被传值到其他函数或者赋值给另一个变量的时候，会不会产生分配多个内存给多个对象譬如：

def use（arg ）
      Z = arg         #Z是不是新的对象？占据的内存地址不等于arg的？
end

X = "123456"     #系统新建了一个string对象，占据一部分内存
Y = X                 #对象Y应该是等同X的吧？应该使用的是同一块内存

2.有没有办法在 ruby 使用过程中分析哪些变量使用了多少内存？以及什么时候已经自动释放？ 3.ruby 中全局变量和局部变量使用的内存区域是一样吗？

对于多进程或者多线程 Logger 类是否是安全的？

nameofhsw — Wed, 13 May 2015 10:49:04 +0800

在使用 Logger 类进行日志管理的时候，多进程以及多线程运行情况下，创建多个日志类对同一个日志文件进行操作，是否是安全的？如果是，那么是通过什么实现的呢？文件锁？如果不是，哪有没有安全的日志类，或者通过自行增加 mutex 来解决吗？在网上查了很多 Logger 相关的资料，但是没发现有用的，所以求助下各位，感谢！

写一个 “判断没有包含某个字符串的正则 “遇到的问题

nameofhsw — Tue, 28 Apr 2015 16:07:26 +0800

ine1 = "se.inc on line 329.</li>"
expect_value = "^(?!.*(mysql)).*$"                         
reg = Regexp.new(expect_value,true)

if line1 && line1 =~ reg
  puts "match true"
end

如上，这个程序目前为止是成功的。当 line1 中不包含 mysql 的时候，正确输出了”match true“ 那么问题来了，如果 line1 所包含的字符串存在多行，即包含了回车换行符之后，每次只匹配第一行就结束了。我知道是回车换行导致的问题，但是怎么想都没写对有效的正则表达式，有哪位能帮忙下吗？感谢！

Ruby 如何使用 C 扩展多线程

nameofhsw — Mon, 18 Aug 2014 14:13:55 +0800

想使用 C 写一个线程池，然后再在 ruby 程序中使用这个线程池来实现多线程。有相关的开源库或者指点下，如何让 C 创建的线程能够调用 ruby 的程序吗？具体的过程中： C 只负责线程管理，线程具体所作的事情由 ruby 来实现。所以就存在一个问题，C 创建线程的函数 pthread_create 是通过传递函数指针来设定线程运行程序的，ruby 的代码如何传给这个函数呢？好像没有函数指针的说法