Closed

Procesar millones de datos de mongodb y generar un txt

Tenemos una consola que obtiene registros desde mongodb , cada registro tiene un peso entre 5k a 20kb, y el maximo de registros es de 1.5 millones, una vez que lo tenemos en memoria, procesamos estos registos con algunass condiciones de "contains", "remove", comando de cadenas, y finalmente lo escribimos en un archivo txt. Este proceso actualmente demora 5 horas, y necesitamos reducirlo a 1 hora, la tecnologia que utilizamos es: c#, .net framework 4.5,mongodb 3.4. Necesitamos una solucion con personas que hayan tenido experiencias de gran procesamiento de datos, abstenerse personas que no tengan esta experiencia.

Taidot: Cassandra, Tietokannan hallinto, Elasticsearch, NoSQL Couch & Mongo, SQL

Näytä lisää: base de datos en txt, usar archivo txt como base de datos, base de datos texto plano, como insertar datos en mysql desde un archivo txt, datos txt, guardar datos en txt php, guardar datos de formulario html en txt, leer varios valores de un archivo de texto en php, Diseño gráfico, HTML, PHP, Web Hosting, Diseño de sitio web Hola necesito clonar una web que tenemos en un dominio y hacer , tenemos una página con eventos y necesitamos crear un plugin para que los usuarios de Wordpress se puedan suscribir., voz y datos, procesar datos, Igualmente que Microsoft ha asociado el nombre Active Directory a su repositorio de datos, Novell (Netware y Suse) y Linux (sus , freelancer web y conectar base datos trafico movil, necesito una web que sea minimalista funcional y con integracion de agencias y ejecutivos que contenga crm y multipublicacion po, mi proyecto es una pagina web que tiene suscriptores gratis y pagos ya tengo una pagina, hacer una base de datos de mayoristas dedicados a la comercialización de artículos para decoración y decoración navidad, hacer una base de datos de mayoristas dedicados a la comercializacin de artculos para decoracin y decoracin navidad, experto en php y base de datos freelance, crear una aplicacion que maneje una base datos

Tietoa työnantajasta:
( 0 arvostelua ) Lima, Peru

Projektin tunnus: #16677645

13 freelanceria on tarjonnut keskimäärin %project_bid_stats_avg_sub_26% %project_currencyDetails_sign_sub_27% tähän työhön

AzzkaNoor

Hello there. I have seen your job posting. I will like to ask some questions. Please come over the chat so we can discuss things. Some intro about me. I am an enthusiastic developer/implementer who does not stop until Lisää

$1250 USD 20 päivässä
(1 arvostelu)
4.5
$1250 USD 20 päivässä
(1 arvostelu)
4.4
$1250 USD 20 päivässä
(4 arvostelua)
4.5
WilliamArispe

Tengo experiencia con PostgreSQL integrado con otras bases de datos. Puedo implementar para ti utilizar el PostgreSQL como un medio de leer el MongoDB y generar el txt con solo herramientas nativas de PostgreSQL. Podem Lisää

$1388 USD 5 päivässä
(5 arvostelua)
4.1
deytps86

Muy buen requisito de ajuste del rendimiento. Solo pregunta si es posible cambiar el método de carga a otro idioma para hacerlo más rápido.

$1400 USD 7 päivässä
(2 arvostelua)
3.6
FerriSoft1

Saludos, somos compañia de Software y Microsoft Registered Partners, me gustaría hacer algunas pruebas usando paralelismo. No necesito el awarding del proyecto, me encantan este tipo de desafios que ademas son cuant Lisää

$1111 USD 10 päivässä
(4 arvostelua)
2.7
rockstardev1017

Hola Tengo una rica experiencia en Mongodb. También estoy familiarizado con hadoop y reducir mapa Por favor póngase en contacto conmigo. Thaks Nikorel

$833 USD 10 päivässä
(1 arvostelu)
1.0
$1250 USD 20 päivässä
(0 arvostelua)
0.0
soltecke

Regards, We are dedicated to the development of automated systems and statistical analysis for small and medium enterprises (SMEs). We develop tools in different environments. Such as: 1- VBA Excel 2- Pyth Lisää

$944 USD 8 päivässä
(0 arvostelua)
0.0
darwinalvarado

Buen día, hace poco tuve un proceso contable, la de obtener un Balance General con datos desde el 2009 al 2017, con mas de 2,3 millones de registros, no se si conozca algo de Contabilidad, pero los procesos deben ejecu Lisää

$1250 USD 10 päivässä
(0 arvostelua)
0.0
eltonrenanalves

Hola, soy un desarrollador profesional de Java desde 2012 cuando terminé mi maestría en Análisis de Programas en Brasil. Lo siento, acabo de mudarme a España pero aún necesito aprender a escribir en español, pero puedo Lisää

$1111 USD 10 päivässä
(0 arvostelua)
0.0
jcruzm

Hola, soy un desarrollador experto en .NET y me interesa este proyecto ya que tengo experiencia optimizando procesos de larga duración con gran cantidad de datos. Me gustaría platicar en mas detalles acerca del proceso Lisää

$1000 USD 10 päivässä
(0 arvostelua)
0.0
DigitalNave

Tengo amplia experiencia en tratamientos de grandes volumenes de datos, trabaje en dos de las Telcos mas importantes de Argentina realizando preprocesamiento de archivos rating, procesando y enriqueciendo archivos de c Lisää

$888 USD 7 päivässä
(0 arvostelua)
0.0