Add struct definition to yaffs_nameval header

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs direct: Fix opening of a directory.

If opening a directory using yaffs_open(), Yaffs Direct was checking
that the file was being opened with O_RDONLY.

In fact those flags should actually be ignored and it should be treated
as if opened O_RDONLY.

Therefore override flags if opening a directory.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Changes to test scripts

These just clean up a few things.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Fix yaffs_endian.h for Linux

Yaffs loff_t is kept as loff_t and converted into Y_LOFF_T when
when exported for Yaffs Direct.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Changes to enable Linux 4.8 compilation

timothy-tests: Fix paths for wrongly failing tests

All pass now.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

timothy-tests: Change mountpoint names to match test framework

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Get timothy quick tests building cleanly.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

More compilation clean up

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Compilation clean up

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Chean up nand test script

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs2: Yaffs endian support

Allow the forcing of endians so that Yaffs can be used on mixed endian
machines, or a flash image can be extracted and used elsewhere.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Change checkpoint object to using a bitfield

This is done to support changing to support endian
manipulation.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Add ability to hide lost_n_found directory

Some people don't want it showing up in the directory structure.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Split qsort from the main Yaffs Direct base

Use the system qsort if available. If not, then add in the
optional qsort.c

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Write object headers with stored file extents

Previously file object headers were being written with file extents
rather than stored extents.

This could lead to situations where the data in the cache was not yet
written to flash but had been accounted for in the object header file
size.

Under power fail this could cause zero-filled blobs at the end of a file.

This change tracks the stored file size and only write object headers
reflecting the extents of the file that has actually been stored to flash,
thus avoiding the holes.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs_vfs_multi.c: Some cleanups

Remove some build time strings so that the binary deos not change
every time the code is compiled.

Add some support for kernel changes

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Change enums to u32 for stored fields

enum sizes are not fixed, so it is better to specify an actual sized
storage element.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Add usr mode flags

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Further extensions for VxWorks wrapper

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Some changes to get VxWorks wrapper working

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs: Remove unnecessary variable from checkpooint reading

No point in tracking ok if we're also going to break.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs: Keep checkpt rd/wr buffers

Continual malloc/free on some systemcs can cause fragmentation. Better
to just allocate the buffers once and hold unto them.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs: Remove unused variable

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs direct: Fix wrong condition for O_CREAT | O_EXCL

Thanks Chris for pointing this out.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs: Clean up defeated conditional.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs: Add handling for . and .. at end of path

yaffs_opendir("/nand/x/./") or yaffs_opendir("/nand/x/../") were
not working, but yaffs_opendir("/nand/x/.") and yaffs_opendir("/nand/x/..")
were.

Make them all work.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Add some more basic tests

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs: Fix yaffs_readdir when dereferencing a symlink

If the directory is a symlink then follow the symlink.

eg
yaffs_mount("/nand/");
yaffs_symlink("x", "/nand/sym");
yaffs_mkdir("/nand/x",0666);

After that:

yaffs_opendir("/nand/sym/") works, but opendir("/nand/sym") fails because the
symlink itself is found. Fix by dereferencing the symlink in yaffs_opendir().

Thanks to Trent Lillehaugen for finding that.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Fix directory look up.

Thanks to Trent Lillehaugen for new algorithm:

Let's say I have two yaffs partitions: "/" and "/foo".
If I call, yaffs_mkdir("/foobar", 0), yaffsfs_FindDevice will match the path
with the "/foo" partition.  I would expect it to match "/" instead.
It will also match "/fo/o/bar" with "/foo", again I think it should match
with "/".

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs: fix missing checkpooint on yaffs remount

For yaffs file system, the mode of reading or writing is restricted at
four pointer where are mnt->mnt_flags,mnt->mnt_sb->s_flags,mtd->flags
and dev->read_only,the first three is used handle file and file
system(eg,remount) operation, and last one(dev->read_only) almost is used
handle checkpoint of yaffs2. However, in current code, the dev->read_only
only can be changed at first time when the yaffs2 file system is mounted,
later it can't be changed again(eg,mount -o remount), the result is that
the checkpoint's saving operation always can't succeed if you set readonly
mode for yaffs2 file system when it is mounted at the first time.

To fix this issue, we implement yaffs_remount_fs() which allows the
rootfs to be remounted as r/w.

Also fix one missing argument in yaffs_flush_whole_cache() call.

Signed-off-by: Wenlin Kang <wenlin.kang@windriver.com>

Fix vfs calls to yaffs_flush_file

Add extra argument.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs-direct: Basic tests. Add lpthread flag for background gc support

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Remove unused WinCE Makefile

THis was for copying the yaffs direct files needed for WinCE.

This is no longer needed since we can just copy the files from
yaffs2/direct/*.[ch]

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs direct: Add some missing reldev functions

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Test tweaks

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Some yaffsfs cleanups for WinCE

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Yaffs: Change cache policy

When the cache is full and a new cache entry is needed, then space has
to be made. This is sometimes termed push out.

Until now, the push out involved finding the least recently used cache
entry then pushing out all entries in the same file.

This had the unintended consequence of making "bursty" writes and forcing
extra reads under some conditions.

Since the same code path was being used for fsync() and flushing, this
also meant that flushing a file caused the file to be thrown out of the
cache. That is not a very useful thing to do.

These changes are twofold:

1. Only push out the LRU cache entry, rather than the whole file. This
makes for a "smoother" push out. It also saves some reads.

2. Flushing a file no longer invalidates the file in cache, it just writes
dirty cache entries. This makes better use of the cache.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Update to support Linux 3.14/3.15

Thanks to Andre Renaud for doing some of this.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs direct: Expose background garbage collection

Expose background garbage collection and add a demo
pthread implementation of background gc.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs: Clean up bitfield types

It happens that the C spec says compilers can choose whether to treat
int bitfields as signed or unsigned.

In some cases, int was being used and signed was expected. The IAR
ARM compiler in particular treats int bitfields as unsigned.

Clean up these plus a few other bitfield usages to make the size and
type explicit.

Thanks to ChungKang Hu for identifying this issue.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs-direct: Add reldir and reldev interfaces

These interfaces allow far more flexibility in the way Yaffs Direct
is hooked up to an RTOS VFS.

The "normal" interface requires a fully, qualified path, which is
a pain to achieve in some RTOSs.

The new interfaces allow calls to be done with paths relative to a
directory or to a device. This tends to make some RTOS integration
cleaner.

Example
 yaffs_open("/mountpoint-name/dir/file",...);
now has two alternatives:
 yaffs_open_reldir(root_dir,"dir/file",...);
or
 yaffs_open_reldev(dev, "dir/file",...);

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Merge branch 'master' of ssh://aleph1.co.uk/home/aleph1/git/yaffs2

yaffs-direct: Fix object leak caused by defered free

The change to dtest.c adds a test case that was leaking objects.
The change to yaffsfs.c fixes this.

This leak was triggered by sequences of the following form:

yaffs_open(file_name, ...); /* create obj */
...
yaffs_unlink(file_name);
yaffs_close(file_name);

When the file was closed, obj->my_inode was not NULL when yaffs_del_obj() is
called, therefore the object was not released properly.

The fix "unstitches" the object before the call to yaffs_del_obj(), so that
obj->my_inode is NULL and the object freeing is done correctly.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Apply fixes in cisco patch to yaffs_vfs_single

Cisco patched the multi version. This manually drags the fixes to the
single version too.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Use IS_ERR to validate return value from get_mtd_device()

Testing has shown that is needed.

Return from yaffs_internal_read_super if kmalloc fail

Return if either, or both, of dev and context failed to
kmalloc(). kfree() handles NULL as argument so utilise that to
simplify code.

Change the object type if it turns out to be wrong during a scan

This might result in some files ending up in lost but at least we
can get the file system to mount.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Remove block number check from summary verification

The summary already has other verification. This one is not needed.

The check caused summaries to be ignored if they were not on the
numbered block. This caused problems when a summary was embedded in an
image and the image is written to a flash with bad blocks.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Merge branch 'master' of ssh://aleph1.co.uk/home/aleph1/git/yaffs2

Add some extra debugging to yaffs_vfs_multi.c

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Add some yaffs debug functions for inspecting run-time state.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Initialise device properly when doing a format.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Change tracing for bad block checking

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Handle inband tags flag better

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Add automatic detection for inband tags and bad block marking supression

Inband tags is now selected automatically if there is insufficient space
in oob for the tags.

Also add a development feature that supresses bad block marking during development.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Clean up parameters being passed to mtd

Some nand implementations are fussy about the parameters being passed in.

If the ptr or length of data or oob is zero, then clear out the whole
parameter pair.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Split out low level init code for making low level tests

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs direct: Add some basic testing for yaffs_readdir_fd etc

Testing the fd-oriented functions for directory access.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffsfs: Clean up example configurations.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Add new functions to read directories with an fd.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffsfs: Add commenting for OS glue interface

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Merge branch 'master' of ssh://aleph1.co.uk/home/aleph1/git/yaffs2

yaffs-direct: Refactor nand simulator driver look-up.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs-direct: Remove obsolete files

Remove files no longer used with new device model.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Fix file permissions for nand sim backing file

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Add back temporarily disabled ECC in nand driver

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Merge branch 'master' of ssh://aleph1.co.uk/home/aleph1/git/yaffs2

Some clean ups.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Add nand driver that works with a nand simulator

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs linux: Fix chunk alignment for inband tags

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Merge branch 'master' of ssh://aleph1.co.uk/home/aleph1/git/yaffs2

yaffs linux: Fix compilation for Linux 3.6, 3.7, 3.8

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs linux: Rationalise and fix compilation for Linux 3.4 and 3.5

Some major clean up to get rid of as many prototypes as possible.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

have added the new rename tests to quick_tests
Signed-off-by: Timothy Manning <tfhmanning@gmail.com>

have added some of the new tests
Signed-off-by: Timothy Manning <tfhmanning@gmail.com>

fixed up all the quick tests
Signed-off-by: Timothy Manning <tfhmanning@gmail.com>

working on the quick tests
Signed-off-by: Timothy Manning <tfhmanning@gmail.com>

direct: Fix definition of yaffs_get_file_size function

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs direct: Fix renaming file over directory or directory over file

It was possible to rename a directory over a file or a file over a
directory. This is no longer allowed.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs fixed the headers of the timothy_tests makefiles and checked that the other tests were still working.
Signed-off-by: Timothy Manning <tfhmanning@gmail.com>

yaffs all timothy_tests makefiles are working. threading test is broken.
Signed-off-by: Timothy Manning <tfhmanning@gmail.com>

yaffs got the make files to work for timothy_tests/quick_tests
Signed-off-by: Timothy Manning <tfhmanning@gmail.com>

yaffs Moving timothy_tests and updating the makefiles to work with the new test-framework
Signed-off-by: Timothy Manning <tfhmanning@gmail.com>

Merge branch 'master' of ssh://aleph1.co.uk/home/aleph1/git/yaffs2

Fix broken comment

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Sort out Linux kernel building with new driver model.

TODO yaffs_mtdif_single is just a copy of yaffs_mtdif_multi.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs direct: Fix bug where handle reinitialisation was damaging dsc lists

This was a pretty obscure bug that only shows up if mounting a second mount
point while a directory search context was in use (ie a directory open for reading).

Thanks to Ed for finding this.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Add a brief README describing how to import core code into Yaffs Direct

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Remove misnamed test

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Fix M18 driver for 64-bit systems

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Add both regular nor and m18 tests to test harness

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Add more test scripts

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Add yaffs driver for regular NOR on simulator

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Merge branch 'driver-refactoring' into new-driver-refactoring

yaffs u-boot: Fix erase for inband tags.

Yaffs u-boot with inband tags was not working properly. Fixed.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs u-boot:  Add new ycheck command, fix return types and modify filesize

ycheck filename [DIR|REG] checks if the file exists and is of the correct type
All functions now return a value that can be tested by $?
filesize env vaiable is now set by a read

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffs: Fix issue with look-up off null names

Null names can happen if object headers are lost. The object gets named
"objnnn" where nnn is the object id.

We could therefore get the names, but the look-up was not working properly.

This fixes the issue so long as short names are enabled.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

yaffsfs: Add yaffs_format function

Allows the formatting of a yaffs device

Signed-off-by: Charles Manning <cdhmanning@gmail.com>

Set up a test framework.

This lays out a common test framework structure that should make it simpler to extend tests in the
future.

Signed-off-by: Charles Manning <cdhmanning@gmail.com>