ing
This commit is contained in:
parent
4c55033eae
commit
d4664c368e
112
influxdb/influxdb.go
Normal file
112
influxdb/influxdb.go
Normal file
|
@ -0,0 +1,112 @@
|
||||||
|
package influxdb
|
||||||
|
|
||||||
|
import (
|
||||||
|
"git.loafle.net/commons/logging-go"
|
||||||
|
occe "git.loafle.net/overflow/commons-go/config/external"
|
||||||
|
"github.com/influxdata/influxdb/client/v2"
|
||||||
|
)
|
||||||
|
|
||||||
|
var (
|
||||||
|
clients map[string]client.Client
|
||||||
|
batchPoints map[string]client.BatchPoints
|
||||||
|
)
|
||||||
|
|
||||||
|
func InitPackage(config *occe.InfluxDB) {
|
||||||
|
if nil == config {
|
||||||
|
return
|
||||||
|
}
|
||||||
|
|
||||||
|
if nil != config.ClientConfigs && 0 < len(config.ClientConfigs) {
|
||||||
|
clients = make(map[string]client.Client)
|
||||||
|
for n, c := range config.ClientConfigs {
|
||||||
|
switch c.ClientType {
|
||||||
|
case "http":
|
||||||
|
hc := client.HTTPConfig{
|
||||||
|
Addr: c.Address,
|
||||||
|
Username: c.Username,
|
||||||
|
Password: c.Password,
|
||||||
|
UserAgent: c.UserAgent,
|
||||||
|
Timeout: c.Timeout,
|
||||||
|
}
|
||||||
|
clnt, err := client.NewHTTPClient(hc)
|
||||||
|
if nil != err {
|
||||||
|
logging.Logger().Errorf("%v", err)
|
||||||
|
return
|
||||||
|
}
|
||||||
|
clients[n] = clnt
|
||||||
|
case "udp":
|
||||||
|
uc := client.UDPConfig{
|
||||||
|
Addr: c.Address,
|
||||||
|
PayloadSize: c.PayloadSize,
|
||||||
|
}
|
||||||
|
clnt, err := client.NewUDPClient(uc)
|
||||||
|
if nil != err {
|
||||||
|
logging.Logger().Errorf("%v", err)
|
||||||
|
return
|
||||||
|
}
|
||||||
|
clients[n] = clnt
|
||||||
|
default:
|
||||||
|
logging.Logger().Errorf("Not Supported InfluxDB Client Type[%s]", c.ClientType)
|
||||||
|
return
|
||||||
|
}
|
||||||
|
}
|
||||||
|
}
|
||||||
|
|
||||||
|
if nil != config.BatchPointsConfigs && 0 < len(config.BatchPointsConfigs) {
|
||||||
|
batchPoints = make(map[string]client.BatchPoints)
|
||||||
|
for n, c := range config.BatchPointsConfigs {
|
||||||
|
bc := client.BatchPointsConfig{
|
||||||
|
Precision: c.Precision,
|
||||||
|
Database: c.Database,
|
||||||
|
RetentionPolicy: c.RetentionPolicy,
|
||||||
|
WriteConsistency: c.WriteConsistency,
|
||||||
|
}
|
||||||
|
bp, err := client.NewBatchPoints(bc)
|
||||||
|
if nil != err {
|
||||||
|
logging.Logger().Errorf("%v", err)
|
||||||
|
return
|
||||||
|
}
|
||||||
|
batchPoints[n] = bp
|
||||||
|
}
|
||||||
|
}
|
||||||
|
}
|
||||||
|
|
||||||
|
func StartPackage(config *occe.InfluxDB) {
|
||||||
|
if nil == config {
|
||||||
|
return
|
||||||
|
}
|
||||||
|
|
||||||
|
}
|
||||||
|
|
||||||
|
func StopPackage(config *occe.InfluxDB) {
|
||||||
|
if nil == config {
|
||||||
|
return
|
||||||
|
}
|
||||||
|
|
||||||
|
}
|
||||||
|
|
||||||
|
func DestroyPackage(config *occe.InfluxDB) {
|
||||||
|
if nil == config {
|
||||||
|
return
|
||||||
|
}
|
||||||
|
|
||||||
|
for _, c := range clients {
|
||||||
|
if err := c.Close(); nil != err {
|
||||||
|
logging.Logger().Errorf("%v", err)
|
||||||
|
}
|
||||||
|
}
|
||||||
|
}
|
||||||
|
|
||||||
|
func ClientFor(name string) client.Client {
|
||||||
|
if nil == clients {
|
||||||
|
return nil
|
||||||
|
}
|
||||||
|
return clients[name]
|
||||||
|
}
|
||||||
|
|
||||||
|
func BatchPointsFor(name string) client.BatchPoints {
|
||||||
|
if nil == batchPoints {
|
||||||
|
return nil
|
||||||
|
}
|
||||||
|
return batchPoints[name]
|
||||||
|
}
|
|
@ -10,8 +10,8 @@ import (
|
||||||
)
|
)
|
||||||
|
|
||||||
var (
|
var (
|
||||||
kafkaWriters map[string]*kafka.Writer
|
writers map[string]*kafka.Writer
|
||||||
kafkaReaders map[string]*kafka.Reader
|
readers map[string]*kafka.Reader
|
||||||
)
|
)
|
||||||
|
|
||||||
func InitPackage(config *occe.Kafka) {
|
func InitPackage(config *occe.Kafka) {
|
||||||
|
@ -20,7 +20,7 @@ func InitPackage(config *occe.Kafka) {
|
||||||
}
|
}
|
||||||
|
|
||||||
if nil != config.Producers && 0 < len(config.Producers) {
|
if nil != config.Producers && 0 < len(config.Producers) {
|
||||||
kafkaWriters = make(map[string]*kafka.Writer)
|
writers = make(map[string]*kafka.Writer)
|
||||||
for n, c := range config.Producers {
|
for n, c := range config.Producers {
|
||||||
wc := kafka.WriterConfig{
|
wc := kafka.WriterConfig{
|
||||||
Brokers: c.Brokers,
|
Brokers: c.Brokers,
|
||||||
|
@ -36,12 +36,12 @@ func InitPackage(config *occe.Kafka) {
|
||||||
RequiredAcks: c.RequiredAcks,
|
RequiredAcks: c.RequiredAcks,
|
||||||
Async: c.Async,
|
Async: c.Async,
|
||||||
}
|
}
|
||||||
kafkaWriters[n] = kafka.NewWriter(wc)
|
writers[n] = kafka.NewWriter(wc)
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
|
|
||||||
if nil != config.Consumers && 0 < len(config.Consumers) {
|
if nil != config.Consumers && 0 < len(config.Consumers) {
|
||||||
kafkaReaders = make(map[string]*kafka.Reader)
|
readers = make(map[string]*kafka.Reader)
|
||||||
for n, c := range config.Consumers {
|
for n, c := range config.Consumers {
|
||||||
rc := kafka.ReaderConfig{
|
rc := kafka.ReaderConfig{
|
||||||
Brokers: c.Brokers,
|
Brokers: c.Brokers,
|
||||||
|
@ -58,7 +58,7 @@ func InitPackage(config *occe.Kafka) {
|
||||||
RebalanceTimeout: c.RebalanceTimeout,
|
RebalanceTimeout: c.RebalanceTimeout,
|
||||||
RetentionTime: c.RetentionTime,
|
RetentionTime: c.RetentionTime,
|
||||||
}
|
}
|
||||||
kafkaReaders[n] = kafka.NewReader(rc)
|
readers[n] = kafka.NewReader(rc)
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
|
@ -82,13 +82,13 @@ func DestroyPackage(config *occe.Kafka) {
|
||||||
return
|
return
|
||||||
}
|
}
|
||||||
|
|
||||||
for _, w := range kafkaWriters {
|
for _, w := range writers {
|
||||||
if err := w.Close(); nil != err {
|
if err := w.Close(); nil != err {
|
||||||
logging.Logger().Errorf("%v", err)
|
logging.Logger().Errorf("%v", err)
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
|
|
||||||
for _, r := range kafkaReaders {
|
for _, r := range readers {
|
||||||
if err := r.Close(); nil != err {
|
if err := r.Close(); nil != err {
|
||||||
logging.Logger().Errorf("%v", err)
|
logging.Logger().Errorf("%v", err)
|
||||||
}
|
}
|
||||||
|
@ -96,25 +96,25 @@ func DestroyPackage(config *occe.Kafka) {
|
||||||
}
|
}
|
||||||
|
|
||||||
func Writer(name string) *kafka.Writer {
|
func Writer(name string) *kafka.Writer {
|
||||||
if nil == kafkaWriters {
|
if nil == writers {
|
||||||
return nil
|
return nil
|
||||||
}
|
}
|
||||||
return kafkaWriters[name]
|
return writers[name]
|
||||||
}
|
}
|
||||||
|
|
||||||
func Reader(name string) *kafka.Reader {
|
func Reader(name string) *kafka.Reader {
|
||||||
if nil == kafkaReaders {
|
if nil == readers {
|
||||||
return nil
|
return nil
|
||||||
}
|
}
|
||||||
return kafkaReaders[name]
|
return readers[name]
|
||||||
}
|
}
|
||||||
|
|
||||||
func Write(name string, key []byte, value []byte) error {
|
func Write(name string, key []byte, value []byte) error {
|
||||||
if nil == kafkaWriters {
|
if nil == writers {
|
||||||
return fmt.Errorf("Kafka client is not valid")
|
return fmt.Errorf("Kafka client is not valid")
|
||||||
}
|
}
|
||||||
|
|
||||||
w, ok := kafkaWriters[name]
|
w, ok := writers[name]
|
||||||
if !ok {
|
if !ok {
|
||||||
return fmt.Errorf("Kafka client is not valid")
|
return fmt.Errorf("Kafka client is not valid")
|
||||||
}
|
}
|
||||||
|
|
Loading…
Reference in New Issue
Block a user