修改均价系统到redis集群模式
This commit is contained in:
@@ -1,21 +1,21 @@
|
||||
import datetime
|
||||
import json
|
||||
import multiprocessing
|
||||
import time
|
||||
import redis
|
||||
import config
|
||||
import sell_price
|
||||
import fangjia
|
||||
import datetime
|
||||
import pytz
|
||||
import os
|
||||
import time
|
||||
|
||||
import pytz
|
||||
|
||||
import config
|
||||
import fangjia
|
||||
import sell_price
|
||||
|
||||
QUEUE = "calc_cmd"
|
||||
redis_pool = redis.ConnectionPool(host=config.get_redis_host(), port=6379, db=config.get_redis_db())
|
||||
logger = fangjia.get_logger("CalcCmdReceiver")
|
||||
|
||||
|
||||
def worker():
|
||||
client = redis.Redis(connection_pool=redis_pool)
|
||||
client = fangjia.get_default_redis_connection()
|
||||
while True:
|
||||
try:
|
||||
cmd = client.lpop(QUEUE)
|
||||
|
||||
@@ -3,9 +3,6 @@ import json
|
||||
import sys
|
||||
import time
|
||||
from datetime import date
|
||||
|
||||
import redis
|
||||
|
||||
import config
|
||||
import fangjia
|
||||
|
||||
@@ -21,8 +18,7 @@ class CJsonEncoder(json.JSONEncoder):
|
||||
|
||||
|
||||
QUEUE = "calc_cmd"
|
||||
redisPool = redis.ConnectionPool(host=config.get_redis_host(), port=6379, db=config.get_redis_db())
|
||||
client = redis.Redis(connection_pool=redisPool)
|
||||
client = fangjia.get_default_redis_connection()
|
||||
logger = fangjia.get_logger("CalcCmdSender")
|
||||
|
||||
|
||||
|
||||
@@ -1,18 +1,15 @@
|
||||
import json
|
||||
import multiprocessing
|
||||
import time
|
||||
import redis
|
||||
import config
|
||||
|
||||
import fangjia
|
||||
|
||||
QUEUE = "calc_cmd"
|
||||
redis_pool = redis.ConnectionPool(host=config.get_redis_host(), port=6379, db=config.get_redis_db())
|
||||
|
||||
logger = fangjia.get_logger("CalcSpeedMonitor")
|
||||
|
||||
|
||||
def monitor(pname):
|
||||
client = redis.Redis(connection_pool=redis_pool)
|
||||
client = fangjia.get_default_redis_connection()
|
||||
while True:
|
||||
pre_counter = client.llen(QUEUE)
|
||||
time.sleep(60)
|
||||
|
||||
@@ -2,18 +2,16 @@ import json
|
||||
import multiprocessing
|
||||
import os
|
||||
import time
|
||||
import redis
|
||||
import config
|
||||
import fangjia
|
||||
import rent_price.district_map0413 as rentPrice
|
||||
|
||||
QUEUE = config.get_rent_calc_cmd_queue_name()
|
||||
redis_pool = redis.ConnectionPool(host=config.get_redis_host(), port=6379, db=config.get_rent_redis_db())
|
||||
logger = fangjia.get_logger("RentCalcCmdReceiver")
|
||||
|
||||
|
||||
def worker():
|
||||
client = redis.Redis(connection_pool=redis_pool)
|
||||
client = fangjia.get_default_redis_connection()
|
||||
while True:
|
||||
try:
|
||||
cmd = client.lpop(QUEUE)
|
||||
|
||||
@@ -4,9 +4,6 @@ import json
|
||||
import sys
|
||||
import time
|
||||
from datetime import date
|
||||
|
||||
import redis
|
||||
|
||||
import config
|
||||
import fangjia
|
||||
|
||||
@@ -51,8 +48,7 @@ class CJsonEncoder(json.JSONEncoder):
|
||||
|
||||
|
||||
QUEUE = config.get_rent_calc_cmd_queue_name()
|
||||
redisPool = redis.ConnectionPool(host=config.get_redis_host(), port=6379, db=config.get_rent_redis_db())
|
||||
client = redis.Redis(connection_pool=redisPool)
|
||||
client = fangjia.get_default_redis_connection()
|
||||
logger = fangjia.get_logger("RentCalcCmdSender")
|
||||
|
||||
|
||||
|
||||
@@ -1,18 +1,16 @@
|
||||
import json
|
||||
import multiprocessing
|
||||
import time
|
||||
import redis
|
||||
import config
|
||||
import fangjia
|
||||
|
||||
QUEUE = config.get_rent_calc_cmd_queue_name()
|
||||
redis_pool = redis.ConnectionPool(host=config.get_redis_host(), port=6379, db=config.get_rent_redis_db())
|
||||
|
||||
logger = fangjia.get_logger("RentCalcSpeedMonitor")
|
||||
|
||||
|
||||
def monitor(pname):
|
||||
client = redis.Redis(connection_pool=redis_pool)
|
||||
client = fangjia.get_default_redis_connection()
|
||||
while True:
|
||||
pre_counter = client.llen(QUEUE)
|
||||
time.sleep(60)
|
||||
|
||||
@@ -9,6 +9,7 @@ import requests
|
||||
import json
|
||||
import pickle
|
||||
import redis
|
||||
from rediscluster import StrictRedisCluster
|
||||
from fangjia import mongoClients as mongoClients
|
||||
from fangjia import ElasticsearchClient as es
|
||||
from fangjia.cachedObjectWrapper import CachedObjectWrapper
|
||||
@@ -526,6 +527,20 @@ def rent_find_disanganf_price(query, fields=None):
|
||||
raise Exception("yang ben cha xun shi bai1")
|
||||
|
||||
|
||||
def get_default_redis_connection():
|
||||
redis_nodes = [
|
||||
{'host': '192.168.0.79', 'port': 6379},
|
||||
{'host': '192.168.0.79', 'port': 6380},
|
||||
{'host': '192.168.0.79', 'port': 6381},
|
||||
{'host': '192.168.0.81', 'port': 6382},
|
||||
{'host': '192.168.0.81', 'port': 6383},
|
||||
{'host': '192.168.0.81', 'port': 6384}
|
||||
]
|
||||
redis_connection = StrictRedisCluster(startup_nodes=redis_nodes)
|
||||
return redis_connection
|
||||
|
||||
|
||||
|
||||
|
||||
|
||||
|
||||
|
||||
@@ -20,9 +20,7 @@ class CJsonEncoder(json.JSONEncoder):
|
||||
|
||||
|
||||
QUEUE = "calc_cmd"
|
||||
#redisPool = redis.ConnectionPool(host=config.get_redis_host(), port=6379, db=config.get_redis_db())
|
||||
redisPool = redis.ConnectionPool(host=config.get_redis_host(), port=6379, db=2)
|
||||
client = redis.Redis(connection_pool=redisPool)
|
||||
client = fangjia.get_default_redis_connection()
|
||||
logger = fangjia.get_logger("CalcCmdSender")
|
||||
|
||||
|
||||
|
||||
Reference in New Issue
Block a user