Como usar o mongoimport para importar csv

Tentando importar um CSV com informações de contato:

Name,Address,City,State,ZIP  
Jane Doe,123 Main St,Whereverville,CA,90210  
John Doe,555 Broadway Ave,New York,NY,10010 

A execução disso não parece adicionar nenhum documento ao banco de dados:

$ mongoimport -d mydb -c things --type csv --file locations.csv --headerline

Trace diz imported 1 objects, mas iniciar o shell Mongo e executar db.things.find()não mostra novos documentos.

o que estou perdendo?

Seu exemplo funcionou para mim com o MongoDB 1.6.3 e 1.7.3. O exemplo abaixo foi para 1.7.3. Você está usando uma versão mais antiga do MongoDB?

$ cat > locations.csv
Name,Address,City,State,ZIP
Jane Doe,123 Main St,Whereverville,CA,90210
John Doe,555 Broadway Ave,New York,NY,10010
 ctrl-d
$ mongoimport -d mydb -c things --type csv --file locations.csv --headerline
connected to: 127.0.0.1
imported 3 objects
$ mongo
MongoDB shell version: 1.7.3
connecting to: test
> use mydb
switched to db mydb
> db.things.find()
{ "_id" : ObjectId("4d32a36ed63d057130c08fca"), "Name" : "Jane Doe", "Address" : "123 Main St", "City" : "Whereverville", "State" : "CA", "ZIP" : 90210 }
{ "_id" : ObjectId("4d32a36ed63d057130c08fcb"), "Name" : "John Doe", "Address" : "555 Broadway Ave", "City" : "New York", "State" : "NY", "ZIP" : 10010 }

Fiquei perplexo com um problema semelhante em que o mongoimport não me deu um erro, mas relataria a importação de 0 registros. Eu salvei meu arquivo que não funcionava usando a versão OSX Excel para Mac 2011 usando o padrão "Salvar como ..." "xls como csv" sem especificar o formato "Windows Comma Separated (.csv)" especificamente. Depois de pesquisar neste site e tentar o formato "Salvar como novamente usando o Windows separado por vírgula (.csv)", o mongoimport funcionou bem. Acho que o mongoimport espera um caractere de nova linha em cada linha e a exportação csv padrão do Mac Excel 2011 não forneceu isso caractere no final de cada linha.

Precisamos executar o seguinte comando:

mongoimport --host=127.0.0.1 -d database_name -c collection_name --type csv --file csv_location --headerline

-d é o nome do banco de dados

-c é o nome da coleção

--headerline Se estiver usando --type csv ou --type tsv, use a primeira linha como nomes de campo. Caso contrário, o mongoimport importará a primeira linha como um documento distinto.

Para mais informações: mongoimport

você provavelmente precisará se autenticar se estiver trabalhando em ambientes de produção. Você pode usar algo assim para se autenticar no banco de dados correto com credenciais apropriadas.

mongoimport -d db_name -c collection_name --type csv --file filename.csv --headerline --host hostname:portnumber --authenticationDatabase admin --username 'iamauser' --password 'pwd123'

Verifique se você tem uma linha em branco no final do arquivo, caso contrário, a última linha será ignorada em algumas versões do mongoimport

Eu uso isso no shell mongoimport

mongoimport --db db_name --collection collection_name --type csv --file C:\\Your_file_path\target_file.csv --headerline

tipo pode escolher csv / tsv / json Mas apenas csv / tsv pode usar --headerline

Você pode ler mais sobre o documento oficial .

Robert Stewart já respondeu sobre como importar com mongoimport.

Estou sugerindo uma maneira fácil de importar CSV de forma elegante com o 3T MongoChef Tool (versão 3.2+). Pode ajudar alguém no futuro.

1. Você só precisa selecionar a coleção
2. Selecionar arquivo para importar
3. Você também pode desmarcar os dados que serão importados. Também existem muitas opções.
4. Coleção importada

Veja como importar vídeo

Primeiro você deve sair do mongoshell e depois executar o mongoimportcomando da seguinte maneira:

Manojs-MacBook-Air:bin Aditya$ mongoimport -d marketdata -c minibars 
--type csv 
--headerline
--file '/Users/Aditya/Downloads/mstf.csv'

2017-05-13T20:00:41.989+0800    connected to: localhost
2017-05-13T20:00:44.123+0800    imported 97609 documents
Manojs-MacBook-Air:bin Aditya$

As respostas de Robert Stewart são ótimas.

Gostaria de acrescentar que você também pode digitar seus campos com --columHaveTypes e --fields como este:

mongoimport -d myDb -c myCollection --type csv --file myCsv.csv 
  --columnsHaveTypes --fields "label.string(),code.string(),aBoolean.boolean()"

(Cuidado para não haver espaço após a vírgula entre seus campos)

Para outros tipos, consulte o documento aqui: https://docs.mongodb.com/manual/reference/program/mongoimport/#cmdoption-mongoimport-columnshavetypes

Para a versão 3.4, use a seguinte sintaxe:

mongoimport -u "username" -p "password" -d "test" -c "collections" --type csv --file myCsv.csv --headerline

Depois de 3 dias, finalmente consegui fazer isso sozinho. Obrigado a todos os usuários que me apoiaram.

Quando estava tentando importar o arquivo CSV, estava recebendo um erro. O que eu fiz. Primeiro, alterei os nomes das colunas da linha de cabeçalho em maiúscula e removi "-" e adicionei "_", se necessário. Em seguida, digite o comando abaixo para importar o CSV para o mongo

$ mongoimport --db=database_name --collection=collection_name --type=csv --file=file_name.csv --headerline  

C: \ wamp \ mongodb \ bin> mongoexport --db proj_mmm - ofertas de coleção --csv --fieldFile offerings_fields.txt --out offerings.csv

Basta usar isso depois de executar o mongoimport

Retornará o número de objetos importados

use db
db.collectionname.find().count()

retornará o número de objetos.

usar :

mongoimport -d 'database_name' -c 'collection_name' --type csv --headerline --file filepath/file_name.csv

mongoimport -d test -c test --type csv --file SampleCSVFile_119kb.csv --headerline

verificar dados de coleta: -

var collections = db.getCollectionNames();

for(var i = 0; i< collections.length; i++)
{    
   print('Collection: ' + collections[i]);
   // print the name of each collection
   
   db.getCollection(collections[i]).find().forEach(printjson);
   
   //and then print the json of each of its elements
}

1]We can save xsl as .csv file
2] Got to MongoDB bin pathon cmd - > cd D:\Arkay\soft\MongoDB\bin
3] Run below command
> mongoimport.exe -d dbname -c collectionname --type csv --file "D:\Arkay\test.csv" --headerline
4] Verify on Mongo side using below coomand.
>db.collectioname.find().pretty().limit(1)

Estranhamente ninguém mencionou a --uribandeira:

mongoimport --uri connectionString -c questions --type csv --file questions.csv --headerline 

Compartilhamento para futuros leitores:

No nosso caso, precisamos adicionar o hostparâmetro para fazê-lo funcionar

mongoimport -h mongodb://someMongoDBhostUrl:somePORTrunningMongoDB/someDB -d someDB -c someCollection -u someUserName -p somePassword --file someCSVFile.csv --type csv --headerline --host=127.0.0.1

Meu requisito era importar a instância .csv (with no headline)remota MongoDB. Para o mongoimport v3.0.7comando abaixo funcionou para mim:

mongoimport -h <host>:<port> -u <db-user> -p <db-password>  -d <database-name> -c <collection-name> --file <csv file location> --fields <name of the columns(comma seperated) in csv> --type csv

Por exemplo:

mongoimport -h 1234.mlab.com:61486 -u arpitaggarwal -p password  -d my-database -c employees --file employees.csv --fields name,email --type csv

Abaixo está a captura de tela de como fica após a importação:

onde namee emailsão as colunas no .csvarquivo.

Dado .csvarquivo que tenho que possui apenas uma coluna sem cabeçalho , o comando abaixo funcionou para mim:

mongoimport -h <mongodb-host>:<mongodb-port> -u <username> -p <password> -d <mongodb-database-name> -c <collection-name> --file file.csv --fields <field-name> --type csv

onde nome do campo se refere ao nome do cabeçalho da coluna no .csvarquivo.

Certifique-se de copiar o arquivo .csv para / usr / local / bin ou qualquer outra pasta em que o mondodb esteja