onleesbare csv-files

Kijk hier voor datalog programma's en handleidingen.
Plaats reactie
Gebruikersavatar
brugje
junior lid
Berichten: 5
Lid geworden op: 29 dec 2013, 15:39
Installatie Land: Nederland

onleesbare csv-files

Bericht door brugje »

Weet iemand hoe ik een csv-file door sunnylog weggeschreven weer naar leesbare csv kan krijgen.
De file geeft nu alles in vreemde tekens
敳㵰഻਍敖獲潩千ㅖ呼潯䕓䱼湩扥敲歡⁳剃䰯籆敄楬業整⁲敳業
Heb diverse import mogelijkheden geprobeert in excel maar kan niet vinden wat ik zoek.
De csv files van de SMA rechtstreeks gedownload zijn wel goed maar de csv-files door sunnylog bewerkt geven dus die tekens.
Blijkt dat al mijn dagfiles van de afgelopen jaren zo zijn. Ben bezig om een ander programma werkend te krijgen en had daar ook mijn historie graag in gehad willen hebben. Elke suggestie is welkom.
Groet Jan

Gebruikersavatar
janus
Site Admin
Site Admin
Berichten: 13159
Lid geworden op: 04 mar 2009, 22:39
Installatie Land: Ander
Locatie: Ten zuiden van antwerpen
Sponsor ons: Afbeelding
Contacteer:

Re: onleesbare csv-files

Bericht door janus »

misschien een log hier even bij plaatsen?
.
Mijn wens is: "Dat ook in de toekomst de zon voor iedereen gratis op mag komen."

Gelieve geen technische vragen via pb Klik voor Uitleg

Gebruikersavatar
brugje
junior lid
Berichten: 5
Lid geworden op: 29 dec 2013, 15:39
Installatie Land: Nederland

Re: onleesbare csv-files

Bericht door brugje »

Hierbij 2 csv files.

Deze is rechtstreeks uit Sunny explorer en is goed
Annema-20200118.csv
Deze is door Sunnylog gedownload en opgeslagen en bevat de rare tekens.
Annema-20200116.csv
Hoop dat jullie een oplossing hebben.

jan
Je hebt niet voldoende permissies om de bijlagen van dit bericht te bekijken.

Gebruikersavatar
baggins
junior lid
Berichten: 7
Lid geworden op: 18 aug 2015, 16:59
Installatie Land: Maak keuze

Re: onleesbare csv-files

Bericht door baggins »

Als je die file opent moet je de character set veranderen naar bv UTF-8.
Als je de standaard UTF-16 gebruikt dan krijg je die gekke codes.

Gebruikersavatar
brugje
junior lid
Berichten: 5
Lid geworden op: 29 dec 2013, 15:39
Installatie Land: Nederland

Re: onleesbare csv-files

Bericht door brugje »

Dat werkt dus niet.

Gebruikersavatar
janus
Site Admin
Site Admin
Berichten: 13159
Lid geworden op: 04 mar 2009, 22:39
Installatie Land: Ander
Locatie: Ten zuiden van antwerpen
Sponsor ons: Afbeelding
Contacteer:

Re: onleesbare csv-files

Bericht door janus »

Hier wel hoor, je file is perfect leesbaar, ik gebruik Libre office
Annema-20200116.csv
Je hebt niet voldoende permissies om de bijlagen van dit bericht te bekijken.
.
Mijn wens is: "Dat ook in de toekomst de zon voor iedereen gratis op mag komen."

Gelieve geen technische vragen via pb Klik voor Uitleg

Gebruikersavatar
SBF
Senior lid
Berichten: 236
Lid geworden op: 28 jun 2013, 14:29
Installatie Land: België
Contacteer:

Re: onleesbare csv-files

Bericht door SBF »

Het volstaat om de BOM (Byte Order Mark) te verwijderen.
Bijv met een scriptje of een HEX editor de 2 eerste bytes (FF FE) verwijderen.
Als er veel files zijn kan je wel even bezig zijn, dan kan het beter met een scriptje (of in Linux)
Annema-20200116_utf8.csv
Je hebt niet voldoende permissies om de bijlagen van dit bericht te bekijken.
Afbeelding
Yet another tool to read power production of SMA® solar/battery inverters
Nu op GitHub

Gebruikersavatar
baggins
junior lid
Berichten: 7
Lid geworden op: 18 aug 2015, 16:59
Installatie Land: Maak keuze

Re: onleesbare csv-files

Bericht door baggins »

Ik gebruik ook Libre Office en daar werkt het zonder problemen.
In Linux kun je de file ook gewoon openen met een text editor.

Ik heb nu in een virtuele W10 machine ook eens geprobeerd met Excel en daar lukt het inderdaad niet. Ook met Notepad of Wordpad niet...

Gebruikersavatar
brugje
junior lid
Berichten: 5
Lid geworden op: 29 dec 2013, 15:39
Installatie Land: Nederland

Re: onleesbare csv-files

Bericht door brugje »

Libre office onder windows 10 geinstalleerd maar geeft hetzelfde resultaat.
Welke instellingen moet ik maken om het in te lezen.
Welke tekenset ik ook selecteer het blijft "japans"
Heeft iemand een uitgebreide uitleg om dit in libre office klaar te krijgen.
Gebruik geen linux dus dat zal geen optie zijn.
BOM verwijderen zegt me niks dus weet niet hoe dit moet.
Het bestand van SBF is wat ik zoek maar hoe heb je dat klaar gekregen.

Alvast bedankt voor het vele meedenken.

Jan

Gebruikersavatar
janus
Site Admin
Site Admin
Berichten: 13159
Lid geworden op: 04 mar 2009, 22:39
Installatie Land: Ander
Locatie: Ten zuiden van antwerpen
Sponsor ons: Afbeelding
Contacteer:

Re: onleesbare csv-files

Bericht door janus »

ik klik gewoon op het bestand, (openen met libre office) libre office opent en vraagt hoe het bestand geopend moet worden, ik kies dan voor tekenset UTF-8 en klik ok

Anders toch verstandig worden en met Linux gaan werken ;-)
.
Mijn wens is: "Dat ook in de toekomst de zon voor iedereen gratis op mag komen."

Gelieve geen technische vragen via pb Klik voor Uitleg

Gebruikersavatar
baggins
junior lid
Berichten: 7
Lid geworden op: 18 aug 2015, 16:59
Installatie Land: Maak keuze

Re: onleesbare csv-files

Bericht door baggins »

Ik heb het nu ook eens geprobeerd met Libre Office in W10 en het lukt wel degelijk.
  • Rechts klikken en 'Openen met' kiezen.
    Kies Libre Calc.
    Verander code naar utf-8
    Separator: punt-komma

Gebruikersavatar
SBF
Senior lid
Berichten: 236
Lid geworden op: 28 jun 2013, 14:29
Installatie Land: België
Contacteer:

Re: onleesbare csv-files

Bericht door SBF »

brugje schreef:
21 mar 2020, 13:16
BOM verwijderen zegt me niks dus weet niet hoe dit moet.
Het bestand van SBF is wat ik zoek maar hoe heb je dat klaar gekregen.
One-liner in Powershell (Powershell ISE):

Code: Selecteer alles

[System.IO.File]::WriteAllBytes("Annema-20200116_utf8.csv", $arr[2..(($arr=[System.IO.File]::ReadAllBytes("Annema-20200116.csv")).length-1)])
File Annema-20200116.csv wordt ingelezen als byte array en hiervan wordt vanaf 3e byte alles weggeschreven naar nieuwe file (Annema-20200116_utf8.csv)
Je zal wel het volledige path naar de file moeten opgeven.
Afbeelding
Yet another tool to read power production of SMA® solar/battery inverters
Nu op GitHub

Gebruikersavatar
brugje
junior lid
Berichten: 5
Lid geworden op: 29 dec 2013, 15:39
Installatie Land: Nederland

Re: onleesbare csv-files

Bericht door brugje »

Het is gelukt. Met libreoffice kan ik de bestanden nu laden, met een macro aanpassen en weer opslaan. Het zal nog wel even een werkje zijn om meer dan 3000 files te verwerken maar dankzij de macro gaat dit nu vrij snel. Bestand openen en weer opslaan. Allemaal hartelijk dank voor het meedenken. nu kan ik al mijn data overbrengen naar een programma zonder flash. Vele jaren plezier van Sunnylog gehad maar helaas geen actief programma meer en alleen grafieken onder flash. Wat is nu jullie voorkeur voor een logging programma welke actief wordt ondersteunt?? Ik zelf zit te denken aan Jsunnyreport. Nogmaals bedankt voor het meedenken en het vinden van een oplossing.
Groet Jan

Plaats reactie