Find Jobs
Hire Freelancers

Build a data merging system - python + celery + redis + mongodb

₹600-1500 INR

Κλειστή
Αναρτήθηκε 12 μήνες πριν

₹600-1500 INR

Πληρωμή κατά την παράδοση
I am looking for a skilled Python developer to build a database update system using RabbitMQ and MongoDB. The purpose of the system is to update our database on demand to ensure that it is always up to date. The objective to merge candidate application data from three data sources - linkedin jobs, naukri and naukri rms. Each job will have a unique job_id and all the applicants from each data source will be tagged to one unique job_id. [login to view URL] 1- A service will capture the data from each data source and upsert into each collection. eg. linkedin_jobs, naukri, naukri_rms. Since this service can run any number of times, the operation will always be upsert so that duplicates are removed 2. Stage 2- Upon completion of the upsert, there will be a collection called merged_data that will merge data from all three collections for a given job_id. This script will be based on a logic that we will provide. At the end of each upsert into stage1, the system will start a script to update the merged_data. Your job will be to build and test these python+flask+celery+redis+mongodb scripts locally and then deploy and test them on AWS EC2. Ideal Skills and Experience: - Strong proficiency in Python programming - Experience with Celery and RabbitMQ/ Redis and MongoDB - Ability to design and implement an efficient and scalable system for small databases - Familiarity with database optimization techniques Frequency of Updates: - The updates will be on demand, so the system should be able to handle updates as soon as they are requested. Size of Database: - The database being updated is small (less than 1GB), so the system should be optimized for efficient updates of smaller databases.
Ταυτότητα εργασίας: 36684826

Σχετικά με την εργασία

2 προτάσεις
Απομακρυσμένη Εργασία
Ενεργός/ή 10 μήνες πριν

Ψάχνεις τρόπο για να κερδίσεις μερικά χρήματα;

Πλεονεκτήματα πλειοδοσίας στο Freelancer

Καθόρισε τον προϋπολογισμό σου και το χρονοδιάγραμμα
Πληρώσου για τη δουλειά σου
Περίγραψε την πρόταση σου
Η εγγραφή και η πλειοδοσία σε εργασίες είναι δωρεάν
2 freelancers δίνουν μια μέση προσφορά ₹1.040 INR για αυτή τη δουλειά
Avatar Χρήστη
i can deliver you this..............Connect to me in chats.................................................
₹1.080 INR σε 7 ημέρες
4,8 (21 αξιολογήσεις)
3,9
3,9
Avatar Χρήστη
I understand that you are looking for a skilled Python developer to build a database update system using Celery and RabbitMQ. With my extensive experience in Python, Redis, MongoDB and Celery, I believe I am the perfect fit for this project. With my extensive experience in Python, Redis, MongoDB and Celery, I am confident that I can create an efficient system that can handle small database updates on demand. Additionally, I have a strong background in web development which will be necessary to carry out this project effectively. I would be more than happy to discuss any technical requirements or other aspects of the project that you wish to discuss further if you contact me directly. Thank you for considering me for this position!
₹1.000 INR σε 3 ημέρες
0,0 (0 αξιολογήσεις)
0,0
0,0

Σχετικά με τον πελάτη

Σημαία της INDIA
Mumbai, India
5,0
50
Επαληθευμένη μέθοδος πληρωμής
Μέλος από Αυγ 18, 2013

Επαλήθευση Πελάτη

Ευχαριστούμε! Σου έχουμε στείλει ένα email με ένα σύνδεσμο για να διεκδικήσεις τη δωρεάν πίστωση σου.
Κάτι πήγε στραβά κατά την προσπάθεια αποστολής του email σου. Παρακαλούμε δοκίμασε ξανά.
Εγγεγραμμένοι Χρήστες Συνολικές Αναρτημένες Δουλειές
Freelancer ® is a registered Trademark of Freelancer Technology Pty Limited (ACN 142 189 759)
Copyright © 2024 Freelancer Technology Pty Limited (ACN 142 189 759)
Φόρτωση προεπισκόπησης
Δόθηκε πρόσβαση για Geolocation.
Η σύνδεση σου έχει λήξει και τώρα έχεις αποσυνδεθεί. Παρακαλούμε συνδέσου ξανά.