Twemproxy 滞后强制重新启动

Question

我们在应用程序服务器上运行一个PHP堆栈，该应用程序在本地使用twemproxy（通过套接字），以连接到缓存层的多个上游memcached服务器（EC2小型实例）。

每隔一段时间，我就会从我们的应用程序监视器收到警报，页面加载时间需要> 5 秒。发生这种情况时，立即的解决方法是在每个应用程序服务器上重新启动 twemproxy 服务，这很麻烦。

我现在唯一的修复程序是一个每分钟运行一次并重新启动服务的 crontab，但您可以想象每分钟几秒钟什么都不会写入，这不是一个理想的永久解决方案。

以前有人遇到过这种情况吗？如果是这样，解决方法是什么？我尝试切换到 AWS Elasticache，但它的性能与我们当前的 twemproxy 解决方案不同。

这是我的 twemproxy 配置。

default:
  auto_eject_hosts: true
  distribution: ketama
  hash: fnv1a_64
  listen: /var/run/nutcracker/nutcracker.sock 0666
  server_failure_limit: 1
  server_retry_timeout: 600000 # 600sec, 10m
  timeout: 100
  servers:
    - vcache-1:11211:1
    - vcache-2:11211:1

这是 php 层的连接配置：

# Note: We are using HA / twemproxy (nutcracker) / memcached proxy
# So this isn't a default memcache(d) port
# Each webapp will host the cache proxy, which allows us to connect via socket
#   which should be faster, as no tcp overhead
# Hash has been manually override from default jenkins to FNV1A_64, which directly aligns with proxy
port: 0
<?php echo Hobis_Api_Cache::TYPE_VOLATILE; ?>:
  options:
    - <?php echo Memcached::OPT_HASH; ?>: <?php echo Memcached::HASH_FNV1A_64; ?><?php echo PHP_EOL; ?>
    - <?php echo Memcached::OPT_SERIALIZER; ?>: <?php echo Memcached::SERIALIZER_IGBINARY; ?><?php echo PHP_EOL; ?>
  servers:
    - /var/run/nutcracker/nutcracker.sock

我们正在运行 0.4.1 twemproxy 和 1.4.25 memcached。

谢谢。

Answer 1

打开

/过时的套接字连接的数量可能是问题所在

Answer 2

我最终在本地主机上从 unix 套接字切换到 tcp 端口，它似乎已经解决了重启问题。但是，由于与 tcp 相关的开销，我确实注意到进行切换的响应时间有所增加。不接受这个答案，希望有人在路上发布一个关于插座的更权威的答案......